Data Engineer

О нас:

Мы в «АйДи Инжиниринг» создаём цифровые продукты для сложных инженерных задач. В нашей команде ценят профессионализм, инициативу и стремление делать качественный продукт. Сейчас мы ищем дата-инженера, который поможет нам развивать инфраструктуру данных.

Обязанности:

• Аудит и развитие: Принять текущую инфраструктуру данных, провести ревизию существующих пайплайнов и архитектуры хранилища.
• Интеграция: Проектирование и разработка надежных ETL/ELT-процессов (Airflow, Python) для сбора данных из распределенных веб-сервисов и продуктовых баз.
• Хранилище: Проектирование архитектуры слоев в Greenplum (Data Warehouse). Оптимизация тяжелых SQL-запросов.
• Бизнес-ценность: Сборка витрин данных и визуализация бизнес-метрик в дашбордах (Apache Superset) в плотной связке с внутренними заказчиками.
• Надежность: Настройка алертинга и мониторинга пайплайнов, чтобы данные обновлялись бесперебойно.
• Наш стек: Python, SQL, Apache Airflow, Greenplum, Apache Superset, Docker (Linux).

• Уверенный Data Engineer (от 3 лет), который не боится работать full-stack: от извлечения данных по API до настройки дашборда.
• Отличное знание Python и SQL.
• Опыт работы с Greenplum (или ClickHouse/PostgreSQL на больших объемах) и Airflow.
• Продуктовое мышление: вы понимаете, что ценность данных - в ответах на вопросы бизнеса, а не в самом факте их хранения.
• Умение работать автономно и брать на себя ответственность за технические решения.

• Место работы: г. Санкт - Петербург
• Участие в проекте с высокой степенью ответственности и возможностью влиять на архитектуру
• Современный технологический стек и поддержку профессионального роста
• ДМС, страхование жизни и выезда за рубеж, корпоративные скидки, кафетерий льгот (на выбор)
• Годовая премия по результатам работы
• Благодаря инновационному подходу к работе и использованию самых продвинутых технологий, компания получила статус аккредитованной ИТ-компании
• Здоровая рабочая атмосфера, комфортные условия труда (чай, кофе, фрукты, пинг-понг, кикер, занятия йогой в офисе, участие в спортивных мероприятиях)
• Пятидневная рабочая неделя, гибкое начало рабочего дня с 8.00 до 10.00
• Работа в офисе в Санкт-Петербурге