Java Data Engineer

Мы в поисках Java Data Engineer на проект одного из крупнейших банков страны по созданию централизованного хранилища данных, объем которого уже превышает 10 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход компании к данным и к применению AI.

Твои задачи:

• Разрабатывать и внедрять ETL процессs
• Оптимизировать производительность ETL процессов
• Разрабатывать и настраивать алгоритмы валидации данных, проверки технического качества данных
• Участвовать в сложных интеграционных проектах по развитию DWH на Hadoop

Что мы ждем от тебя:

• Опыт работы на проектах с DWH
• Опыт работы с экосистемой Hadoop (HDFS, Hive, Spark, HBase)
• Хорошее знание SQL
• Опыт программирования Java
• Опыт работы с Unix shell, разработки скриптов bash/Perl/Python
• Опыт работы с реляционными СУБД (Oracle, MS SQL и т.п.)
• Желателен опыт работы с промышленными ETL-инструментами (Informatica, ODI)

Что мы обеспечим:

• Сессии профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
• ДМС (поликлиническое обслуживание, вызов врача на дом, услуги скорой помощи, экстренная госпитализация, вакцинация от гриппа, базовые услуги стоматологических клиник и психологическая поддержка, оформление международного страхового полиса) и скидку на покупку ДМС для ближайших членов семьи
• Технику для комфортной работы
• Обучение и участие в конференциях за счет компании, повышение квалификации в корпоративном университете Лиги