Инженер данных

О позиции

Мы создаём и развиваем витрины данных для сервисов блока Управление благосостоянием, помогая клиентам управлять финансами. В команде будет возможность работать над финансовыми сервисами, улучшать их качество и масштабируемость.

Основные обязанности

• Разработка потоков данных и витрин на Hadoop.
• Проектирование, разработка и поддержка ETL/ELT‑процессов.
• Написание трансформаций на Spark и SQL.
• Реализация потоковой обработки с использованием Kafka и Flink.
• Проектирование физической модели витрин и интеграция внешних API.
• Настройка мониторинга доступности и актуальности витрин, оперативное устранение инцидентов.
• Версионирование кода пайплайнов в Git, настройка CI/CD‑пайплайнов.

Требования к кандидату

• Опыт реализации систем обработки данных и хранилищ данных.
• Понимание структур хранения данных SQL и NoSQL, проектирование баз данных и ETL‑потоков.
• Знание хотя бы одного стека обработки данных (Hadoop‑экосистема, Teradata, GreenPlum, Oracle, Microsoft, SAP HANA, Qlik и др.).
• Уверенные знания SQL, опыт работы с ETL‑инструментами и Kafka.
• Желание развиваться в системном и бизнес‑анализе, дата‑инженерии и data science.
• Опыт подготовки технического задания и презентации результатов бизнес‑заказчику.

Необходимые навыки

• Hadoop
• Spark
• SQL
• Kafka
• Flink
• Git
• CI/CD
• ETL‑инструменты
• NoSQL
• Teradata
• GreenPlum
• Oracle
• Microsoft SQL Server
• SAP HANA
• Qlik

Что мы предлагаем

• Гибридный формат работы (офис в Москве, метро Кутузовская).
• Льготные ипотечные условия кредитования.
• Подписка Прайм для совместного использования.
• Скидки на продукты партнеров (Okko, Сбер Маркет, Мега Маркет, Самокат, Еаптека).
• ДМС с первого дня и скидки на страхование для близких.
• Корпоративная пенсионная программа, детский отдых и подарки.
• Обучение за счет компании, онлайн‑курсы, доступ к библиотеке, тренинги и возможность получения новых квалификаций.