Data Engineer

Aston - аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом.

Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика.

Заказчик - крупнейший коммерческий банк страны, лидер по объему активов и цифровому развитию. Активно продвигает мобильные сервисы, ценит скорость, гибкость и неформальный подход внутри команд. Многократно отмечен престижными наградами, в том числе «Bank of the Year in Russia 2019» (The Banker) и «Best Mortgage Bank in CEE» (Global Finance).

Почему это будет интересно?

• возможность повышения квалификации на проекте одного из лидеров рынка;
• современный технический стек.

Чем предстоит заниматься?

• интегрировать источники данных по голосовым и текстовым коммуникациям клиентов со специалистами обслуживания и поддержки;
• реализовать пакетные и потоковые сервисы обработки данных для оценки качества коммуникаций;
• эффективно взаимодействовать в составе команды со специалистами по анализу данных и специалистами по развитию инфраструктуры.

Чего мы ждем от специалиста?

• опыт работы в роли Data Engineer от 4-х лет;
• опыт анализа данных;
• высокий уровень знаний языка программирования Python;
• опыт работы в среде JupyterLab/JupyterHub;
• опыт реализации промышленных отказоустойчивых сервисов на Python - сервисы пакетной загрузки и трансформации данных (ETL) на платформах Apache Airflow, Argo Workflows; веб-сервисы на основе библиотеки FastAPI;
• понимание принципов микросервисной архитектуры;
• понимание принципов распределенных вычислений и обработки данных;
• понимание принципов потоковой обработки данных;
• хорошие знания платформы Apache Spark - опыт использования библиотеки Pyspark;
• знание и опыт использования платформы потоковой обработки данных Apache Kafka; - чтение и запись потока данных Apache Kafka с помощью библиотек aiokafka, confluent-kafka, kafka-python, разработка потоковых приложений Apache Spark Structured Streaming;
• опыт асинхронного программного взаимодействия с веб-сервисами по REST API с использованием библиотек - aiohttp, httpx;
• отличные знания SQL - создание сложных запросов с использованием табличных выражений (CTE) и оконных функций;
• хорошие знания и опыт использования реляционных баз данных Oracle, PostgreSQL;
• понимание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных - parquet, orc;
• хорошие знания и опыт использования хранилищ больших данных - Hadoop/HDFS, S3, форматы таблиц Hive, Iceberg;
• проактивный подход к работе - способность и желание искать и предлагать методы и варианты решения задач;
• общий позитивный настрой и активная жизненная позиция;
• умение и желание работать в команде, делиться опытом с коллегами и учиться новым практикам;
• открытость в коммуникации трудностей, препятствующих решению задач.

Что мы предлагаем?

• Хорошая зарплата:уровень обсуждается индивидуально, есть доплаты за менторство и профактивности.

• Развитие:долгосрочные проекты от российских заказчиков, возможность менять направления, прозрачная система Performance Review.

• Комфорт и свобода:релокейт между офисами, выбор формата работы (удалённо, офис, гибрид), адаптация для новых сотрудников.

• Обучение:доступ к корпоративному порталу, митапам, конференциям (и как гость, и как спикер).

• Социальный пакет:ДМС со стоматологией, частичная компенсация спорта, бесплатный английский, оплачиваемый отпуск и больничные.

• Корпоративная жизнь:тимбилдинги, детские праздники, внутренние мероприятия.

Наши офисы:

• Москва (ул. Вильгельма Пика, 11, БЦ «Ботаника», 13 эт., оф. 1310),

• Санкт-Петербург (Владимирский проспект, д. 23, 8 этаж),

• Казань (Н. Ершова, 76/1),

• Самара (IT парк Монте Роза).

Откликайтесь, если вы готовы расти и развиваться вместе с командой ASTON! Наш рекрутер свяжется с вами, чтобы обсудить детали.