Data Engineer (Airflow)

Хочете розвивати IT-продукт, яким користуються всі українці?

Впливати на архітектуру з величезним навантаженням?

Шукаємо Data Engineer з Python/Airflow у відому компанію.

ТОП-умови, бенефіти, страхування, проект про який буде приємно розповідати.

Responsibilities

–  Проєктування, оптимізація та підтримка кластера Apache Airflow і Python-коду для оркестрації даних
-Розробка логіки та підтримка ETL-процесів (збір, трансформація, завантаження даних)
– Проєктування інтеграційної взаємодії між системами, створення сервісів для інтеграції та обміну даними
– Оптимізація продуктивності процесів обробки даних, виявлення та усунення вузьких місць
– Співпраця з аналітиками та розробниками для забезпечення якісної доставки даних

Requirements

–  Apache Airflow: створення DAG’ів, налаштування операторів, моніторинг та оптимізація продуктивності
– Досвід роботи з Python ( акцент на бекенд та інтеграційні рішення) від 3х років
– Bash, Docker, DBT, GitLab CI/CD (автоматизація процесів, деплой, оптимізація пайплайнів)
– MS SQL Server та PostgreSQL (написання складних SQL-запитів, оптимізація, створення процедур і функцій)

Буде плюсом:
– Досвід роботи з Apache Spark (розподілена обробка великих масивів даних)
– Знання інструментів Big Data або хмарних платформ (AWS/GCP/Azure)
– Розуміння принципів DataOps і CI/CD

We offer

• Високонавантажені системи з реальними викликами масштабування
• Сучасний стек та свобода технологічних рішень
• Можливість впливати на архітектуру продуктів, якими користуються мільйони
Професійно:
• Менторство від сеньйорів з досвідом enterprise-рішень
• Компенсація додаткових витрат, пов’язаних з робочими завданнями, здійснюються до внутрішніх політик компаній
• Медичне страхування та страхування життя
• Корпоративні знижки від партнерів Nova
• Підтримка ментального здоровʼя. Можливість безоплатних консультацій з корпоративним психологом
• Соціальна відповідальність та волонтерський рух «Свої для своїх»
• Клуби за інтересами: біговий, шаховий та інші ініціативи для натхнення
• Соціальні відпустки та компенсації відповідно до КЗпП України