Владислав Щ. , Senior, Data аналитик

Разработка внутреннего продукта - интеграционной шины данных и конвертера на базе Azure для передачи фактов и справочников из ERP в прогнозные системы.

1. Построение системы контроля качества данных на базе отчетов Power BI.
2. Разработка (семантическая модель и визуал), тестирование и деплой отчетов Power BI.
3. Построение архитектуры Power BI сервера (политика УЗ, хранение отчетов, мониторинг, алерты, расписания)
4. Работа с источниками данных и пайплайнами, построение Data Lineage для каждого передаваемого в целевую систему интерфейса.
5. Документирование процессов.

Разработка и внедрение интеграционных потоков между системой управления бизнес-процессами заказчика на базе Elma 365 и внутренними и внешними системами.

1. Изучение legacy кода заказчика, проектирование интеграционных потоков, описание схем потоков и ТЗ, согласование с заказчиком.
2. Разработка внутренних интеграционных потоков на базе Apache NiFi и Apache Kafka (в составе продукта Arenadata Streaming).
3. Разработка внешних интеграционных потоков на базе Apache NiFi и RabbitMQ.
4. Взаимодействие с разработчиками Elma 365 в составе проектной команды и стейкхолдерами внутренних систем заказчика.
5. Reverse Engineering процедур Oracle и приложений APEX/Oracle Forms.

Проектирование витрин данных для миграции из Oracle в Greenplum. Построение новой системы инженерии данных на базе Airflow-dbt-Clickhouse.

1. Аналитика данных, создание выгрузок и отчетов по запросу бизнес-пользователей.
2. Доработка ETL пайплайнов и визуальных форм отчетности (в т.ч. регламентированной нормативно, на уровне Министерства Здравоохранения).
3. Проведение подготовительных работ для миграции DWH из Oracle в Greenplum - анализ источников, процедур Oracle, проектирование новых витрин и стейджей (включая рефакторинг и оптимизацию), написание постановок разработчикам и документирование новых объектов.
4. Ведение документации по ранее не описанным объектам (ETL пайплайны, витрины, визуал).
5. Перевод ETL пайплайнов и витрин на новую платформу данных - создание DAG в Airflow, моделей dbt, DML для Data marts в Clickhouse.

Единоличное построение хранилища данных и системы аналитики и управленческой отчетности для среднего предприятия.

1. Работа с бизнес-заказчиком, выяснение, уточнение, согласование бизнес-требований к системе аналитики и отчетности.
2. Проектирование целевой архитектуры системы с учетом бизнес, функциональных и финансовых требований, развертывание систем в рамках согласованного контура.
3. Взаимодействие со стейкхолдерами систем-источников данных, написание ТЗ на разработку API.
4. Проектирование схемы данных.
5. Разработка DDL/DML, ETL скриптов, дашбордов в BI системе.
6. Мониторинг работоспособности систем, управление учетной политикой.
7. Доработки по требованию, ведение календарного плана проекта.