Архитектор аналитических платформ

Архитектор аналитических платформ в крупную телекоммуникационную компанию.

Задачи:

✔️ Анализировать и искать оптимальные решения для требований заказчиков.
✔️ Анализировать, исследовать, пилотировать и выбирать программные продукты.
✔️ Выявлять и решать проблемы эксплуатации приложений, обеспечивать их непрерывную работу и масштабирование.
✔️ Документировать и поддерживать в актуальном состоянии описания архитектуры информационных систем.
✔️ Контролировать соответствия итоговой архитектуры принципам и паттернам.
✔️ Прорабатывать и согласовывать спецификации интеграций.
✔️ Разрабатывать и согласовывать AV.
✔️ Разрабатывать и согласовывать метрики мониторинга приложений, логирования, health-checks.
✔️ Разрабатывать и согласовывать проектную документацию (техническое задание, проектное решение, бизнес процесс, спецификация, схемы потоков данных, модель данных, модель безопасности и т.д. ).
✔️ Создавать и вести необходимую документацию.

Требования:

✔️ Наличие навыков в ETL-инструментах.
✔️ Иметь опыт создания потоков загрузки данных, автоматизации решений по доставке данных.
✔️ Опыт использования партиций.
✔️ Знание PL/SQL синтаксиса (написание процедур, пакетов, функций).
✔️ Работа с таблицами больших объемов (> 1млрд записей).
✔️ Опыт использования хинтов.
✔️ Создание джобов, цепочек, программ, очередей.
✔️ Знание Apex.
✔️ Знание архитектуры Teradata и в целом особенностей MPP-систем.
✔️ Использование FastLoad, MultiLoad, FastExport и утилит TPTLoad.
✔️ Опыт работы с HDFS, Hive.
✔️ Умение организовать процесс загрузки, обработки и доставки обработанных данных, опыт работы с Spark & Spark Streaming, Docker.
✔️ Понимание форматов хранения данных.