Data Engineer

Привет!

Мы компания Techno Diasoft - аккредитованная IT компания, созданная в 2008 году.

Специализируемся на разработке высоконагруженных FinTech проектах, создании умных устройств, голосовых ассистентов, а также разработке инновационных решений в области биометрии и искусственного интеллекта. Флагманским продуктом компании является автоматизированная банковская система xBank.

Мы постоянно растем: присоединяются новые таланты, появляются инновационные проекты, и нас выбирают ведущие банки, финансовые компании и инновационные предприятия. В настоящее время в компании работает более 300 сотрудников.

О проекте и задачах:

Сейчас мы в поиске Data Engineer, который присоединится к одному из наших актуальных проектов.

Основной стек: Hadoop + spark.

Вспомогательный стек: Bitbucket, Nexus, sberTrack(аналог Atlassian Confluence).

Требования:

• Уверенные знания SQL, типы Join’ов, оконные функции.
• Понимание архитектуры Hadoop
• Умение работать с git: создавать бранчи, делать pull request’ы
• Умение работать с ssh: создавать ключи, подключаться к хосту по ssh, уверенное владение командной строкой linux

Будет плюсом:

• Опыт Scala/PySpark
• Понимание архитектуры Spark
• Опыт работы в Jupyter
• Знание Oozie
• Умение профилировать источники данных
• Понимание федерации кластеров.
• Опыт построения витрин содержащих ТБ данных

Мы заботимся о наших сотрудниках и предлагаем:

• Оформление по трудовому договору
• Офисный формат работы
• Простой и быстрый процесс собеседований
• Медицинское страхование с первого дня работы, включая стоматологию
• Предоставление необходимой техники для работы
• Дополнительные выплаты и поддержка от нас в важные моменты вашей жизни
• Корпоративные скидки у наших партнеров (включая фитнес, изучение иностранных языков, курсы от ЯндексПрактикум и многое другое)
• Корпоративная библиотека с доступом к книгам от Литрес