03.04.2023
Москва
Data Engineer
Data Engineer в крупный российский банк.
Задачи:
✔️ Участие в разработке ядра Data-платформы.
✔️ Разработка и оптимизация процессов выгрузки данных.
✔️ Настройка инфраструктуры.
✔️ Ревью кода.
Технологический стек:
✔️ SQL и различные РСУБД и NoSQL (PosgreSQL, Oracle, Hive, ClickHouse, Greenplum).
✔️ Big Data (Hadoop-стек).
✔️ ЯП Python (плюс Pandas, NumPy).
✔️ ETL-инструменты (Apache NiFI, Flink, SAS, собственные разработки).
✔️ Git, Docker, Kubernetes.
Требования:
✔️ Знание языков программирования: Python.
✔️ Знание основ ООП, теории алгоритмов, структур данных.
✔️ Знание SQL.
✔️ Опыт написания процессов загрузки данных (ETL).