Data Engineer

Вітаю! Шукаємо досвідченого інженера з даних для розробки та підтримки інфраструктури даних у проєкті віртуальної електростанції, метою якого є оптимізація енергоспоживання та розподіл ресурсів.
 

Обов’язки

• Проєктувати та розробляти надійні ETL-процеси для обробки великих обсягів даних.
• Створювати й підтримувати сховища даних для ефективного зберігання часових рядів.
• Інтегруватися з різними джерелами даних енергетичної інфраструктури.
• Розробляти та оптимізувати потоки даних для ML-моделей.
• Забезпечувати якість і узгодженість даних.
• Розробляти та підтримувати систему моніторингу даних.
   

Вимоги

• Досвід роботи на позиції Data Engineer від 4 років.
• Впевнене володіння Python:
  • Pandas, NumPy для маніпуляції даними
  • PySpark для обробки великих даних
  • Airflow/Luigi для оркестрації потоків даних
• Досвід роботи з AWS.
• Глибоке розуміння SQL і досвід роботи з базами даних.
• Досвід використання інструментів:
  • Git для версіонування коду
  • Docker/Kubernetes для контейнеризації та оркестрації
  • Terraform/CloudFormation для інфраструктури як коду
  • Grafana/Kibana для візуалізації та моніторингу

Ми пропонуємо

• Роботу над інноваційним проєктом у динамічній сфері.
• Можливості професійного розвитку й навчання.
• Гнучкий графік роботи.
• Конкурентну заробітну плату.