Григорий И. , Middle, Data инженер

Григорий И.

Россия, Москва

2 530 ₽/час404 800 ₽/мес. без НДС

Data инженер
Middle

Опыт работы:: От 3 до 6 лет
Языки:: Английский — B1
ПисьменныйРазговорный

Навыки

Apache Spark

Scala

Python

Apache AirFlow

GreenPlum

Git

Apache Hadoop

Apache Kafka

Delta Lake

СУБД

PySpark

Clickhouse

HDFS

Yarn

apache hive

AWS S3

ETL/ELT

DWH

Data Lake

Agile

Big Data

DataLens

Atlassian Confluence

Java

Kubernetes

DBT

Technology:

SQL

Database:

PostgreSQL

MySQL

Applications:

Docker

Формат работы

Удалённо

Описание о специалисте

Писал много дагов Apache Airflow, настраивал ETL/ELT, настраивал логику работы с технологией. Разрабатывал сложные модули для кластеризации и обработки банковских данных - данных субъектов из разных источников, DWH; решал задачи связанные с DDS, с обработкой сырых данных.

NDA

Описание задачи/проекта

Финансовый сектор

Позиция на проекте

Data Engineer

Ответственность

Писал много дагов Apache Airflow, настраивал ETL/ELT, настраивал логику работы с технологией.
Разрабатывал сложные модули для кластеризации и обработки банковских данных - данных субъектов из разных источников, DWH; решал задачи связанные с DDS, с обработкой сырых данных.
Занимался оптимизацией Apache Spark jobs. Занимался написанием тестов, генерацией данных.
Принимал участие в доработке проектов CDC. Разрабатывал пайплайны отчётности.
Разрабатывал витрины данных Data Marts (Nested Structures, SQL) в команде с Data Analytics: биллинги, метрики по отчётам субъектов банков, исторические витрины, фичи.
Настраивал мониторинг и дашборды производительности проектов в Grafana.
Решал задачи в GreenPlum, PostgreSQL (сложные SQL запросы, миграция данных).

Технологии и инструменты

Apache AirFlow, Apache Hadoop, Apache Kafka, Apache Spark, Bitbucket, Clickhouse, DBT, Delta Lake, Docker, Git, GreenPlum, HDFS, PostgreSQL, Python, Scala, SQL

Период работы/продолжительность

Декабрь 2023 - Январь 2026

Бакалавр

Название учебного заведения/курса

Воронежский государственный технический университет

Специальность

09.03.02 "Информационные системы и технологии"; профиль "Информационные системы и технологии цифровизации"

Аналогичные специалисты

Андрей К.

Россия, Краснодар

2 530 ₽/час без НДС

Data инженер
Middle

Навыки: Разработка и поддержка хранилищ данных:● Проектирование и внедрение архитектуры данных.● Оптимизация процессов обработки данных для снижения времени отклика и повышения производительности.● Миграция legacy-решений на современные инструменты (например,

Россия, Москва

2 530 ₽/час без НДС

Data инженер
Middle

Интересно развиваться в сфере Big Data . Могу работать как самостоятельная единица в команде. Обладаю навыком обработки и аналитики больших объемов информации. Внимание к деталям, аналитические способности, ориентация на результат, обучаемость.REST API Postgre

Россия, Москва

2 875 ₽/час без НДС

Data инженер
Middle

Data engineer с опытом работы в e-commerce, ритейле и финтехе. Специализируюсь на разработке и оптимизации ETL/ELT-пайплайнов. Умею строить надёжные, масштабируемые потоки данных с встроенным Data Quality-контролем. В работе ценю понятную архитектуру, автомати

Даниэль К.

Россия, Москва

2 875 ₽/час без НДС

Data инженер
Middle+

Data Engineer с 4 годами 8 месяцами опыта в построении ETL/ELT-пайплайнов и DWH.Ускорил Spark-пайплайн с 35 до 6 минут на источнике 50 млн строк и участвовал в миграции DWH объёмом более 15 ТБ без простоя пользователей.Работаю с PySpark, Airflow, Kafka, Iceber

Алишер У.

Россия, Москва

2 875 ₽/час без НДС

Data инженер
Middle+

Data Engineer с 3,5 годами общего опыта, из которых последние 1,5+ года работает непосредственно в Data Engineering. Сильная сторона — архитектура хранения и моделирование данных: участвовал в проектировании Data Lake на Hadoop, строил многослойные DWH и витри

Базы данных

Максим Щ.

Россия, Москва

2 875 ₽/час без НДС

Data инженер
Middle

Data Engineer с 4 годами опыта в построении и оптимизации data-платформ. Разрабатывал batch и streaming ETL/ELT-пайплайны на Python, PySpark и Apache Spark, автоматизировал процессы в Apache Airflow и работал с CDC через Debezium + Kafka.Имею опыт проектирован

Не нашли, кого искали?

Оставьте заявку и, наша команда в кратчайшие сроки подберёт необходимого специалиста за вас!

Помните, что заключение договора и оплата услуг происходит после того, как вы выбрали специалиста.

Request Poster