Data Engineer

Проєкт передбачає забезпечення цілісності, доступності, безпеки та безперервності функціонування СУБД на базі PostgreSQL, а також розроблення регламентів резервного копіювання, відновлення та контролю продуктивності.

Обов'язки

• Проєктування та розвиток структури баз даних (OLTP/OLAP)
• Розробка та підтримка процесів ETL/ELT (автоматизація завантаження, очищення та трансформації даних)
• Побудова та оптимізація вітрин даних (data marts) для аналітичних потреб
• Інтеграція даних із зовнішніх джерел (API, файли, сторонні системи)
• Забезпечення цілісності, консистентності та актуальності даних
• Підготовка контрольних звітів та перевірок якості даних
• Оптимізація продуктивності запитів та структури зберігання даних

• Співпраця з аналітиками та BI-дизайнерами

   

Вимоги

• Досвід розробки та супроводу баз даних
• Впевнене володіння SQL
• Розуміння принципів побудови сховищ даних (Data Warehouse)
• Досвід реалізації ETL-процесів
• Розуміння моделей даних (star schema, snowflake schema)
• Досвід інтеграції даних з різних джерел
• Уважність до якості даних та логіки обробки
• Досвід роботи з PostgreSQL/MySQL/MS SQL/Oracle (або аналогами)
• Досвід роботи з інструментами ETL (Airflow, dbt, Pentaho, Talend або подібні)
• Базові знання Python або іншої мови для обробки даних
• Досвід роботи з великими обсягами даних
• Розуміння вимог аналітичної та управлінської звітності