Lead Data Architecht / Data Modeler (AWS) (Python) (offline)

WE NEED A HERO:
- someone who has played a role at a Lead /arch level and has been involved with dealing with data at scale in PROD;
- who is able to analyze, assess, document, and design scalable and sustainable data architecture and data transformation processes within a large analytics pipeline;
- who will review the implementation of improvements to the data architecture, providing feedback and guidance to product developers, data scientists, and product owners;
- is comfortable collaborating with various teams/regions in driving facilitating data design, identifying architectural risks, and developing and refining data models and architecture frameworks.
REQUIRED SKILLS:
- Production experience with Spark at scale;
- Building data pipelines, CICD pipelines, and fit for purpose data stores;
- Dimensional Data Modeling;
- Building data pipelines that process more than 1TB both in streaming and batch mode;
- Working with data consumption patterns;
- Working with automated build and continuous integration systems.
TECHNOLOGIES:
- Microservices development in two of these languages: Python, Java, Scala;
- Big Data Technologies: Apache Spark, Hadoop;
- Relational Databases: Postgres, MySQL;
- NoSQL: MongoDB, DynamoDB;
- Data-warehousing products: Snowflake or Redshift;
- Cloud technologies: AWS (Terraform, S3, EMR, EC2, Glue, Athena);
- Orchestration: Apache Airflow and MLFlow.
NICE TO HAVE:
- KubeFlow;
- Spark on Kubernetes.

About Plarium Kharkiv

Команда NIX — це 25 років історії, сотні великих та маленьких традицій і 2000 класних IT-спеціалістів, із якими приємно як працювати, так і відпочивати.
Ми вважаємо, що окрім прибутку робота має приносити й задоволення — тому наші офіси затишні та комфортні, а вечірки — легендарні.
Ми впевнені, що в IT треба завжди дивитися вперед — тому наші експерти відвідують провідні конференції світу, проводять власну NIXMultiConf у Харкові, вивчають англійську в офісі, а серед клієнтів мають репутацію «хлопців, що знайдуть рішення будь-якої проблеми».
Ми віримо, що треба піклуватись один про одного, тому розробили програму медицинської та юридичної підтримки для кожного в NIX.
Ми знаємо, що в нас класно, і думаємо, тобі теж сподобається!

Company website:
https://www.nixsolutions.com