Big Data Engineer
Міжнародна IT-компанія у пошуку Big Data Engineer. Формат - повністю віддалено.
Це ІТ-компанія, яка допомагає бізнесам по всьому світу створювати інноваційні програмні продукти. Заснована у 2002 році, сьогодні об’єднує 2000+ професіоналів у 41 країні, розробляючи рішення для провідних компаній, включаючи Fortune 500.
Довгостроковий проєкт швейцарської медіа-компанії, що працює з ними 5 років. Її портфоліо включає близько 140 компаній у сфері друкованих та цифрових медіа, радіо, спортивних медіа, технологій, а також провідні онлайн-майданчики для продажу автомобілів, нерухомості та вакансій.
Ви будете займатися:
- Розробкою та оптимізацією масштабованих data pipelines у Palantir Foundry, забезпечуючи цілісність даних і ефективність процесів.
- Перетворенням бізнес-вимог на надійні рішення, використовуючи хмарні технології та передові практики Data Engineering.
- Створенням та підтримка ETL/ELT-процесів для збору, обробки та інтеграції даних з урахуванням вимог безпеки та governance.
- Оптимізацією продуктивності дата-пайплайнів, виявлення вузьких місць і зниження затримок під час обробки даних.
- Дослідженням нових технологій і впровадження інноваційних підходів у процеси роботи з даними.
Необхідний досвід:
- Python,
- PySpark,
- розмовна англійська.