Ведущий разработчик Hadoop

НЛМК-ИТ — обеспечивает потребности предприятий Группы НЛМК в развитии информационных технологий. В спектр услуг входят: реализация ИТ-проектов, поддержка и развитие бизнес-приложений, ИТ-инфраструктуры и систем связи. Численность сотрудников ИТ превышает 800 человек.

Чем предстоит заниматься:

• Проектировать и развивать масштабируемое DWH на PostgreSQL, Cloudera и Clickhouse для сложных аналитических задач;

• Реализовывать и оптимизировать процессы интеграции, загрузки и трансформации больших объемов данных(Airflow/SQL);

• Внедрять лучшие практики моделирования, обработки и анализа данных;

• Обеспечивать высокую доступность и качество данных, автоматизировать мониторинг и контроль целостности;

• Менторить команду, делиться экспертизой по современным технологиям Data Engineering.

Для нас важно:

• Глубокие знания архитектуры и практический опыт построения хранилищ данных на PostgreSQL, знание Cloudera и Clickhouse будет плюсом;
• Отличное владение SQL и опыт оптимизации запросов для обработки больших объёмов данных;
• Умение проектировать и поддерживать ETL/ELT-процессы с использованием Python и Airflow;
• Опыт работы с системами контроля версий (Git), CI/CD, Linux и инструментами мониторинга;
• Экспертиза в моделировании данных, аналитическом дизайне DWH и оптимизации хранения;
• Способность быстро осваивать новые технологии и делиться опытом с командой.

Работа в группе НЛМК - это:

• ДМС, включая стоматологию;
• Страхование жизни и страховка для путешественников;
• Корпоративная мобильная связь;
• Система скидок для сотрудников НЛМК ИТ;
• Частичная компенсация питания в корпоративных столовых;
• Возможность обучения за счет работодателя;
• Активная корпоративная жизнь;
• Поддержка от компании в жизненно важных событиях;
• Бесплатный доступ к электронной библиотеке.