Data Engineer (PostgreSQL / Airflow / dbt)

О компании

EvApps - IT-компания, разрабатывающая сложные цифровые продукты для бизнеса и госсектора. Работаем с российскими и зарубежными клиентами, развиваем направление IT-аутстаффинга с 2019 года. Обладатели золота Tagline Awards и участники лидирующих позиций Рейтинга Рунета.

Ищем Data Engineer на проект заказчика, связанный с построением и развитием хранилища данных для управленческой отчётности.

О проекте

Данные из SAP BPC и 1С собираются в PostgreSQL, где необходимо выстроить качественные слои хранения, историчность данных и витрины для управленческой отчётности.

На данных работают Power BI и AI-агенты, поэтому одна из ключевых задач проекта - обеспечить корректность и прозрачность данных: справочников, иерархий, исторических изменений и связей между источниками.

Задачи

• Разрабатывать и поддерживать хранилище данных на PostgreSQL.
• Строить ETL/ELT-процессы с использованием Airflow и dbt.
• Формировать слои данных и витрины под управленческую отчётность.
• Работать с данными план/факт, периметрами отчётности и корректировками задним числом.
• Проектировать и поддерживать иерархические справочники.
• Реализовывать историчность данных, в том числе подходы SCD Type 2.
• Создавать и поддерживать таблицы соответствия кодов и сущностей между различными источниками.
• Выполнять сквозную сверку данных: от исходных систем до конечных витрин.
• Находить причины расхождений в данных и объяснять их бизнес-пользователям.
• Повышать качество и достоверность данных, используемых в Power BI и AI-инструментах.
• Работать непосредственно с кодом, SQL и пайплайнами, а не только заниматься архитектурой решений.

Требования

• Уверенный практический опыт работы с PostgreSQL.
• Опыт работы с Apache Airflow в реальных production-проектах.
• Практический опыт использования dbt - именно в промышленной разработке, а не только в рамках курсов или учебных проектов.
• Опыт построения хранилищ и витрин для управленческой или финансовой отчётности.
• Понимание особенностей данных план/факт, изменения периметров и ретроспективных корректировок.
• Практический опыт работы с иерархическими справочниками.
• Понимание и опыт применения SCD2.
• Опыт организации соответствий между кодами и справочниками различных систем-источников.
• Умение сверять витрины с первичными источниками и находить причины расхождений.
• Способность понятно объяснять бизнесу, почему показатели в разных системах могут отличаться.
• Готовность самостоятельно разрабатывать и дорабатывать решение руками.

Будет преимуществом

• Глубокий опыт использования dbt в промышленной эксплуатации.
• Опыт интеграции и обработки данных из 1С.
• Опыт работы с данными из SAP / SAP BPC.
• Опыт построения DWH для финансовой или управленческой отчётности.
• Опыт подготовки данных для Power BI.
• Опыт проектов, где качество мастер-данных напрямую влияет на BI, ML или AI-сервисы.

Что важно в этой роли

Нам нужен не только архитектор, который может предложить концепцию решения, а специалист, который способен самостоятельно погружаться в данные, писать SQL/dbt-модели, разбираться в пайплайнах и доводить данные до корректного результата.

Особенно ценим умение не просто обнаружить расхождение в отчётности, а разобраться в его причине и объяснить её понятным языком команде и бизнесу.

Что мы предлагаем

• Работа в формате аутстаффа в сильной продуктовой команде заказчика.
• Удалённый формат работы.
• Официальное оформление по ТК РФ.
• Участие в реальном проекте с большим объёмом данных и задачами, влияющими на качество управленческой отчётности.
• IT-ипотека и отсрочка от армии для подходящих под условия сотрудников.
• Частичная компенсация спорта.
• Внутренние онлайн-мероприятия, корпоративные чаты и обмен экспертизой с коллегами.
• При работе на проекте вы остаетесь частью команды EvApps, а не просто «ресурсом на проекте».