Data Platform Engineer в продуктову компанію

Міжнародна продуктова компанія відкриває позицію Data Platform Engineer для віддаленої співпраці. Це глобальна незалежна медіа-організація з головним офісом у Великій Британії та командою понад 1200 спеціалістів по всьому світу. Протягом 50 років компанія збирає та обробляє ринкові дані, формуючи цінову аналітику й огляди товарних ринків, якими користуються клієнти у 140 країнах світу.
 

Основні обов’язки:

• Розробка та підтримка надійних пайплайнів для завантаження даних із різних джерел (реляційні БД, API, файли CSV/JSON/Parquet) у Data Warehouse та Data Lake.
• Оптимізація зберігання структурованих і напівструктурованих даних із використанням сервісів AWS.
• Автоматизація CI/CD для пайплайнів (AWS CloudFormation).
• Реалізація тестування якості даних та обробка edge-case сценаріїв.
• Моніторинг, усунення збоїв і підтримка стабільної роботи платформи.
• Документація архітектури та трансформацій даних для масштабування у майбутньому.
   

Вимоги:

• Впевнене володіння AWS (Glue, Lambda, Athena, Redshift).
• Розуміння IAM-ролей та принципу найменших прав доступу.
• Досвід з Apache Spark та Python (особливо у поєднанні з AWS Glue).
• Сильні навички SQL для запитів, перевірки та оптимізації.
• Досвід роботи з IaC (бажано AWS CloudFormation).
• Практика створення пайплайнів з оркестраторами (Airflow, Step Functions).
• Навички роботи з фреймворками для тестування якості даних.
• Вміння розбивати складні задачі на зрозумілі та виконувані етапи.
   

Пропонують:

• Медичне страхування.
• 25 робочих днів оплачуваної відпустки.
• Лікарняні дні.
• Бюджет на придбання техніки для роботи.
• Можливість співпраці в міжнародній команді з експертами з України та Великої Британії.