Откликнуться

Архитектор решений Hadoop

Предприятие: Москва, НЛМК-Информационные технологии
Опыт работы: От 3 до 6 лет
График: Полный день, Полная занятость

Откликнуться

Группа НЛМК крупнейший в России и один из самых эффективных в мире производителей стальной продукции. Производственные активы в России, Европе, Азии и США. Мы создаем совершенную сталь для ключевых отраслей: от строительства до ветроэнергетики. Разрабатываем новые технологии и внедряем передовые цифровые решения. Заботимся о сотрудниках и создаем возможности для их развития и самореализации. Создаем настоящее будущее.

Для нас важно:

Анализ и участие в подготовке ФТТ.
Проектирование архитектуры решений, физических моделей данных с
учетом особенностей платформ, включая принципы построения слоев STG/ODS/DDS/DM, а также перемещения данных между ними.
Подготовка сайзинга необходимой инфраструктуры.
Проектирование интеграции данных между различными системами.

Чем предстоит заниматься:

Корпоративные хранилища данных:
Опыт построения DWH, DLРазработка процедур загрузки данных из различных источников, автоматизация и контроль ETL\ELT процессов: Apache Airflow, Apache NiFi
Знание языков программирования (на выбор): Python (основные пакеты Numpy, Pandas, SCiPy и др), SQL, Java Scala, C++;
Знание фреймворков потоковой обработки данных: Kafka Streaming and Connect, Flink, Spark Streaming;
Навыки разработки приложений с использованием инструментария экосистемы Hadoop: HDFS, YARN, Hbase, Hive, Spark, Kafka, Sentry, Airflow, Ranger, Impala и т.п.
Опыт работы с реляционными системами управления базами данных (SQL): MSSQL, Oracle, PostgreSQL, MySQL
Опыт работы с системами управления базами данных (NoSQL): Clickhouse, Cassandra, ScyllaDB, MongoDB, Redis, Владение git.

Работа в группе НЛМК-это:

Работа в международной сталелитейной компании с активами в России, США и странах Европы, с развитыми корпоративными ценностями и стандартами;
Оформление по ТК РФ, ежегодная индексация заработной платы, прозрачная система премирования;
Высокие стандарты безопасности труда и культуры производства;
Корпоративные льготы: корпоративная сотовая связь, летние путёвки для детей, новогодние детские подарки, программы лояльности от партнеров, корпоративная дотация на питание, материальная поддержка сотрудников в различных жизненных ситуациях;
График Работы: 5/2, удаленный формат работы
Программы заботы о здоровье: (ДМС, страхование от НС и профессиональных заболеваний, диспансеризация, вакцинация).
Возможность принять участие в интересных и сложных проектах с лучшими специалистами индустрии.