⚠︎ Архивная вакансия
Эта вакансия была перемещена в архив. Возможно она уже не актуальна и рекрутер больше не принимает отклики на эту вакансию. Вы можете
найти актуальные похожие вакансии
Инженер Hadoop
Прямой работодатель МегаФон ( megafon.ru )
Россия
Миддл • Сеньор
5 января 2024
Удаленная работа
Опыт работы от 3 до 5 летот 300 000 ₽
Опыт работы от 3 до 5 летот 300 000 ₽
Короткая ссылка: gkjb.ru/hcbO
Описание вакансии
Чем предстоит заниматься
- Поддерживать, развивать и мониторить существующие Hadoop кластера (у нас их несколько)
- Автоматизировать процедуры развертывания/обслуживания кластера
- Анализировать и устранять проблемы производительности различных компонент Hadoop кластера
- Планировать горизонтальный и вертикальный роста кластера
- Развивать инфраструктуру хранилища, экспериментировать с новыми системами сбора, хранения и анализа данных
- Помогать аналитикам и разработчикам в их ежедневной работе с Hadoop
Что для этого нужно
- Практические навыки администрирования Hadoop (Hive, HDFS, YARN, Kerberos + Sentry)Cloudera, Hortonworks, Apache Hadoop
- Глубокие знания Linux
- Любовь к автоматизации задач на скриптовых языках (shell/awk/sed, python)
- Опыт работы с системами мониторинга (Zabbix)
- Приветствуется знание Spark, Airflow, Kafka и инструментов аналитики