Data Engineer

О компании: Крупнейший в России инфраструктурный холдинг, объединяющий активы в области экспортной логистики и торговли зерном. Компания развивает собственную сеть элеваторов, владеет глубоководными морскими зерновыми терминалами и логистической инфраструктурой.

О проекте: Разработка хранилища данных и разработка BI, как в управляющей компании, так и в дочерних предприятиях. В команде офиса данных сейчас работают 16 специалистов. Текущий этап проекта - становление: сбор и консолидация данных.

Причина появление вакансии: сильный рост бизнеса и появление новых направлений, приводящие к расширению штата.

Обязанности:

• Разработка компонентов целевого корпоративного хранилища данных (PostgreSQL, Greenplum)
• Загрузка данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы) в единое хранилище
• Автоматизация data-pipelines, ETL процессов на SQL/Python
• Создание SQL витрин и процедур
• Автоматизация проверок качества данных
• Подготовка витрин данных
• Формирование системы контроля и мониторинга целостности и качества данных
• Подготовка и поддержание в актуальном состоянии каталога метаданных
• Codereview

Требования:

• Понимание принципов проектирования архитектуры хранилищ данных DWH (Datavault/Inmon/Kimball)
• Опыт проектирования и разработки хранилищ данных от 2 лет.
• Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 1 года
• Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MSSQL, Oracle, Teradata, Postgres - преимущество) от 3 лет
• Автономность, навыки самостоятельного поиска технических решений
• Технический английский

Желательно:

• Git, CI/CD
• Опыт работы по Agile
• Kafka, Clickhouse, Greenplum
• Linux

Условия:

• Соблюдение трудового кодекса РФ – оформление только в штат компании!
• Удаленная работа в пределах РФ или гибрид/офис в Москве 
• Работа в аккредитованной ИТ-компании
• Годовой бонус выплачивается 1 раз в год в зависимости от результатов работы (3-4 оклада)
• Индексация зарплат в ИТ-отделе 2 раза в год
• ДМС со стоматологией с первого рабочего дня
• Оплата питания в офисе в Москве
• Частичное финансирование фитнеса в Москве
• Обучение за счет компании включается в индивидуальный план развития – в учебных центрах по выбору сотрудника.
• Возможность карьерного развития в стабильно растущем и крупнейшем экспортере России
• Современный стек и возможность строить платформу «с нуля»
• Много новых задач, где можно поучаствовать в формировании архитектуры и реализации по Agile, возможность профессионального развития!