Инженер данных

В аккредитованную ИТ компанию «Коулмэн Тех» в данный момент ведем подбор на вакансию "Инженер данных". Наши партнёры – крупные FMCG компании. Чем предстоит заниматься: Проектировать и собирать витрины данных по разработанному ТЗ; Проектировать, разрабатывать и поддерживать ETL-процессы для загрузки данных из/в Data Lake; Писать документацию - комментировать код; Проводить кросс-ревью кода; Работать с data-аналитиками для создания новых и оптимизации существующих витрин. Мы ожидаем: Опыт на позиции Data Engineer от 1,5 лет; Разработка и поддержка ETL-пайплайнов; Оптимизация производительности запросов (партиционирование, индексы, кеширование); Участие в Data Governance; Понимание основных операций СУБД и принципов DWH; Понимание принципов ETL; Опыт работы с Hadoop технологиями (Spark, Hive и тд); Опыт работы с Azure/Yandex облачными платформами; Опыт разработки и поддержки DAGs в Apache Airflow; Уверенное владение SQL, Python, pySpark; Опыт работы с базами данных PostgreSQL и ClickHouse; Опыт работы с Trino; Опыт работы с инструментами обеспечения качества данных (Great Expectations); Условия, которые мы предлагаем: Официальное трудоустройство по ТК РФ на контрактной основе; Работа в команде профессионалов в крупнейшей международной FMCG компании с развитыми корпоративными ценностями и стандартами; Для работы выдаём корпоративный ноутбук; График работы: 5/2, 9:00 – 18:00 (мск); Формат работы: удаленно (с территории РФ). Подавая заявку на эту вакансию, вы даёте согласие на обработку ваших персональных данных для целей рассмотрения кандидатуры и оформления трудоустройства (в соответствии с ФЗ-152 «О персональных данных»). Обработка данных осуществляется исключительно в рамках заявленной цели и с соблюдением требований законодательства.