Data Engineer
Генерал Черешня — українська defence-tech компанія, що розробляє та серійно виробляє сучасні безпілотні літальні апарати, включно з FPV-дронами та дронами-перехоплювачами для протидії повітряним загрозам. Всі наші вироби створюються спільно з військовими та за їх запитом.
Зараз ми в пошуках Data Engineer, який/яка буде будувати хмарну data-інфраструктуру з нуля і брати повну відповідальність за надійність та якість даних. Ти будеш проектувати та розгортати платформу на Microsoft Azure, розробляти ETL-пайплайни і забезпечувати безперервну роботу аналітичної команди під час активної фази трансформації бізнесу.
Основні обов'язки на посаді:
• Проєктування та розгортання хмарної інфраструктури в Microsoft Azure (Azure SQL Database /
Storage / Key Vault / VNet)
• Проєктування та розвиток структури баз даних
• Забезпечення консистентності даних під час переносу та верифікація результатів
• Перенесення та рефакторинг існуючих ETL-процесів
• Побудова нових пайплайнів для завантаження даних з ERP в DWH
• Моніторинг, логування та алертинг для забезпечення цілісності, консистентності та актуальності
даних
• Адміністрування бази даних: безпека, резервне копіювання, права доступу
• Документування архітектури, схем і процесів
Необхідні навички та кваліфікація:
• Досвід роботи з Azure SQL, Storage, Key Vault, розуміння IAM / networking
• Azure Data Factory — глибоке розуміння ETL / ELT, Data Warehouse design, Star / Snowflake
schemas
• Впевнений рівень T-SQL: Window functions, оптимізація запитів, data modeling
• Python для міграції, обробки та трансформації даних. Pandas / PySpark (буде плюсом),
побудова data pipelines, робота з API (XML-RPC / REST)
• Досвід роботи з BigQuery або аналогами, великими обсягами даних
Буде плюсом:
• PostgreSQL
• Досвід налаштування CI/CD для data-пайплайнів
• Розуміння принципів data vault або medallion architecture
• Базові знання dbt для трансформацій
• Досвід роботи з Power BI або іншими BI-інструментами на рівні підключення до джерел