Data Engineer / Defence AI Center A1

Defence AI Center A1 — центр впровадження штучного інтелекту, створений при Міноборони для надання українській армії переваги на полі бою за рахунок AI-технологій.

Ваша основна місія:

Data Engineer в Defense AI Center A1 —це архітектор, який відповідає за повний цикл роботи з даними. Ви створюватимете надійні, безпечні та масштабовані data pipelines, що збирають та обробляють колосальні масиви інформації з різноманітних джерел. Ваша робота перетворює розрізнені сирі дані на фундаментальну базу, без якої неможливе навчання передових AI-моделей.

 

У фокусі роботи:

– проєктування, розробка та оптимізація ETL-пайплайнів для обробки структурованих, напівструктурованих та неструктурованих даних;

– забезпечення якості даних через автоматизовані процеси очищення, валідації та трансформації;

– проєктування та підтримка сховищ даних на платформах Snowflake, Redshift, BigQuery або Azure Synapse;

– інтеграція пайплайнів із хмарними середовищами (AWS, GCP, Azure) та CI/CD-процесами DevOps;

– постачання чистих, версіонованих датасетів для Feature Stores та ML-пайплайнів у тісній співпраці з data scientists та ML-інженерами;

– моніторинг і усунення збоїв у пайплайнах за допомогою Grafana, CloudWatch або Datadog;

– адаптація до динамічних пріоритетів у швидкозмінному стартап-середовищі.

Від вас очікуємо:

– 2+ роки досвіду на позиції Data Engineer із фокусом на ETL, data warehousing та pipeline development;

– впевнене знання Python та/або Scala для обробки даних;

– досвід роботи з ETL-інструментами: Apache NiFi, Airflow, dbt або Talend;

– експертні навички SQL для роботи з великими наборами даних та оптимізації запитів;

– практичний досвід із платформами сховищ даних (Snowflake, Redshift, BigQuery, Azure Synapse, Databricks);

– знання хмарних сервісів для даних (AWS Glue, Azure Data Factory, GCP Dataflow);

– досвід роботи з фреймворками трансформації даних: Pandas або PySpark.

Буде плюсом:

– досвід роботи з розподіленими системами (Apache Spark, Apache Iceberg, Kafka, Flink);
– досвід роботи з Trino;

– практичний досвід інтеграції даних в AI/ML-проєктах, зокрема з Feature Stores та реєстрами моделей;

– знання практик MLOps та data governance (версіонування, безпека, приватність даних).

Ми пропонуємо:

– роботу з передовими хмарними технологіями та AI/ML-екосистемою;

- роботу в середовищі Defense AI Center A1 — на перетині інновацій, досліджень та реального впровадження;

- команду однодумців із культурою відкритості, швидких рішень та взаємної підтримки;

- бронювання працівників за умови актуального військового обліку.

Готові до виклику?

Якщо ви готові посилювати обороноздатність країни через технології — долучайтеся до нас.