Аналитик качества данных/Data Quality Analyst

IEK GROUP – один из ведущих производителей на рынке электротехнического оборудования. Мы разрабатывает и производим инновационные решения для энергетики, промышленности и инфраструктуры. В рамках цифровой трансформации бизнеса мы расширяем команду и ищем Аналитика качества данных. Вам предстоит работать в отделе Управления данными офиса Данных компании IEK. Отдел - 9 человек с прямым подчинением CDO. 2 daily в неделю по 30 минут + полчаса на работу с тасктрекером. Удаленка, любые часовые пояса. Ваша главная задача — гарантировать, что данные, поступающие из различных систем-источников (CRM, ERP и др.) в хранилище, остаются точными, полными и пригодными для принятия стратегических решений. Вы будете выстраивать процессы кросс-проверок, профилировать сырые данные и внедрять стандарты качества, которые помогут бизнесу доверять каждой цифре в отчетах. Чем предстоит заниматься: Профилирование и мониторинг: использование инструментов для обнаружения дефектов, аномалий и несоответствий в данных Очистка и валидация: приведение данных в порядок для сохранения их целостности и проверка на соответствие бизнес-правилам Анализ систем-источников: аудит данных в первичных системах (CRM, ERP, логи) перед их загрузкой в DWH, чтобы минимизировать попадание «грязных» данных в хранилище. Кросс-проверки (Reconciliation): проведение сверки данных между системами-источниками и DWH. Выявление изменений на системах - источниках. Взаимодействие с бизнес-владельцами: сбор и формализация требований к качеству данных от владельцев бизнес-процессов, помощь в интерпретации правил валидации. Анализ первопричин (Root Cause Analysis): отслеживание того, как ошибки распространяются от систем-источников до конечных витрин данных Отчетность и управление (Governance): разработка метрик и отчетов для контроля «здоровья» данных. Коллаборация: работа с дата-инженерами и стюардами данных для определения стандартов загрузки. Наши ожидания: Опыт работы в роли аналитика данных, инженера данных или аналитика качества данных Опыт построения систем мониторинга качества данных с нуля или масштабирования существующих процессов DQ (Data Quality) Успешное участие в миграции данных, настройке ETL/ELT процессов с фокусом на валидацию данных на входе и выходе Успешный опыт профилирования данных (SQL-анализ) в DWH (Snowflake, ClickHouse, Greenplum). Hard Skills: SQL: продвинутый уровень (знание оконных функций, оптимизация запросов, написание сложных аналитических запросов для профилирования данных) Понимание DWH, ETL/ELT. Инструменты DQ: опыт работы с фреймворками (Great Expectations [python]) или коммерческими платформами (Data Quality в DWH, Collibra, OMD) Инженерия данных: понимание архитектуры (Airflow, SSIS) Навыки написания тестов Аналитика: умение проводить профилирование данных (выявление аномалий, дублей, нулевых значений, статистических выбросов) Скриптинг: Python (pandas, pyspark) для автоматизации проверок качества и написания скриптов очистки данных Методологии: знание подходов к оценке качества данных по методологии (точность, полнота, целостность, своевременность). Опыт настройки алертингов (мониторинг аномалий, свежести данных, полноты). Soft skills: Скептицизм и критическое мышление: «Доверяй, но проверяй» Склонность подвергать сомнению входные данные и готовность аргументированно доказывать необходимость исправления ошибок Структурное мышление: cпособность формализовать требования к качеству данных в виде кода и чек-листов Коммуникабельность: умение мягко, но настойчиво доносить до владельцев данных (бизнес-юнитов) и разработчиков необходимость исправления корневых причин проблем, не ограничиваясь «закрытием инцидента» Стрессоустойчивость: умение быстро локализовать проблему Документирование: педантичность в ведении документации (Data Catalog, Data Lineage, реестр инцидентов) Мы предлагаем Удаленный график работы Достойный уровень дохода (зависит от профессиональных компетенций) Расширенный социальный пакет: ДМС, дополнительные отпускные дни, оплата больничного листа, материальная помощь в критических ситуациях, бесплатные оздоровительные/спортивные мероприятия Правительственные льготы – мы аккредитованная IT-компания Комфортная, доброжелательная рабочая атмосфера Корпоративные традиции и праздники, коллективные мотивационные программы