Data engineer (удаленно)
Агентство / HR ресурс Lion recruitment ( lion-r.ru )
Опыт работы от 3 до 5 летот 150 000 до 200 000 ₽
Обязанности:
· Преобразование данных из различных форматов (xml, json) к табличному виду с помощью Python;
· Автоматизация загрузок с помощью Python и не только;
· Загрузка/загрузка информации в базы данных;
· Поиск ошибок и аномалий в данных (SQL, Python), автоматизация проверок качества данных;
· Подготовка агрегированных витрин данных (SQL, Python);
· Подготовка требований к формату и составу файлов для поставщиков данных;
· Подготовка и поддержание в актуальном состоянии описания загружаемых данных.
· Загрузка данных из различных источников (FTP, API, сайты);
Требования:
· Релевантный опыт от 2 лет
· Знание SQL;
· Знание Python
- библиотеки для работы с данными – pandas, lxml, json
- библиотеки для работы с API - requests
· Понимание базовых концепций CS: Сети, веб, виртуализация
· Интерес к работе с данными
· Знание английского языка для чтения технической литературы;
Будет плюсом:
· Знание Azure
· Databricks
· SnowFlake
· PySpark/Spark
· Docker
· Английский язык
· Высшее физико-математическое/техническое образование;
Условия:
· Молодой талантливый коллектив
· Отсутствие жесткой иерархии по должностям
· Командировки по России и международные (США, Европа и др.)
· Комфортный современный офис м. Таганская
· Возможен удаленный график
· Возможность карьерного и профессионального роста в широком диапазоне.
· ДМС
· Курсы английского языка