Go-разработчик в команду разработки OneDWH

VK • Russian: C1 • Gaming • Media & Entertainment • Python • Java • ETL/ELT • 1 day ago
Apply now
Similar jobs
621,325open jobs
30,416companies
85,488added this week
Browse all
Salary
≈ $20k – $52k per year (Estimated)
Location
Remote/Hybrid (Moscow, Russia)
Employment
Full-Time
Overview
Company
Impact
Profile match

VK

VK is a Russian internet group built around VKontakte, the social network launched in 2006 that became the most used site in the country. The group also owns Odnoklassniki, the Mail.ru email and portal services, the VK Video platform, the VK Play games store and the RuStore application marketplace created after Western app stores withdrew from Russia. Headquartered in Moscow with a large engineering presence in Saint Petersburg where the network was founded, it also runs a cloud division, an advertising platform and the Marusia voice assistant, making it the closest thing the Russian market has to a full consumer internet stack.
vk.com • HQ: Moscow, Russia • Cloud Computing • Advertising • Gaming • Media & Entertainment • Internet Services • Online Communication • Online Forums & Communities • 201-500 employees • Est. 2006

Мы - команда разработки OneDWH, единого DWH для всей компании. Он приходит на смену разрозненным решениям, которые команды строили каждая под себя: вместо множества обособленных хранилищ - одно общее. Данные живут в кластерах YTsaurus. В зоне ответственности команды - несколько доменов:

  • Data Catalog - каталог, в котором поставщики данных публикуют метаинформацию о своих таблицах и зависимостях между ними. Благодаря этому можно проследить всю цепочку - от сырых логов до готовых витрин
  • ETL-фреймворк - таблицы и работающие с ними процессы (YQL, Python и Spark) описаны декларативно в отдельном репозитории. У фреймворка собственный оркестратор и движок динамического распределения ETL между кластерами - это сокращает time-to-market поставок и оптимизирует потребление ресурсов. Также мы обеспечиваем доступность критичных данных даже при даунтайме одного из кластеров YTsaurus
  • Data Quality (DQ) - следим за соблюдением сроков поставок критичных данных и уведомляем пользователей об их срывах. Развиваем проверки качества данных

Задачи

  • Развивать платформу DWH как продукт
  • Делать удобные инструменты для дата-инженеров: поиск данных, заведение и сопровождение ETL
  • Делать удобные инструменты для аналитиков, которые работают с данными в OneDWH
  • Работать с графами зависимостей ETL-процессов: планирование выполнения, динамическое распределение по кластерам, оптимизация
  • Строить отказоустойчивые решения для критичных данных

Требования

  • Опыт разработки сервисов на Go
  • Уверенное владение PostgreSQL
  • Опыт работы с Kafka
  • Хорошее знание алгоритмов и структур данных, особенно графовых

Будет плюсом

  • Знакомство с Java, Python, Spark или YTsaurus
  • Опыт в области DWH, ETL или дата-инженерии
  • Опыт работы с Airflow
  • Опыт работы с CI, CD-пайплайнами в GitLab или другой системе
  • Желание тесно работать с дата-инженерами и аналитиками: вникать в их задачи и делать продукты, которые упрощают им жизнь
Free account
Stop reading job ads. Get the ones that fit.
One free account turns this page into a shortlist built around your stack, your level and your pay.
Match on every job. Stack, seniority, pay and location, scored against your profile.
621,325 open roles. Read straight off company career pages, refreshed every day.
Unlimited applications. Every one you send is tracked in one place, on-site or on a company board.
3 tailored CVs a month. Rewritten for the exact job you are applying to. Included free.
Create a free account Continue with Google
Free forever. No card. Under a minute.

Your match

How well do you fit this role?
Two answers are enough for a real match. No account needed.
Check my fit
Answers stay in this browser until you create an account.

Recommended for you based on this role

Similar stack
Same company
Moscow
$173k – $260k per year • In office • Full-Time • 8+ years exp • Bachelor's Degree • Atlanta • Washington • San Francisco
Python
Java
SQL
Databases
Snowflake
AI/ML
Spark
AI Agents
Agentforce
DevOps
SLI/SLO/SLA
Analytics
Dimensional Modeling
Management
Slack
Agile
Apply
≈ $43k – $65k per year (Estimated) • In office • Internship • Bachelor's Degree • Atlanta
Python
SQL
Analytics
Power BI
Apply
≈ $160k – $294k per year (Estimated) • In office • Full-Time • 10+ years exp • Bachelor's Degree • United States
Java
Databases
Apache Kafka
DevOps
Splunk
GCP
Azure
CI/CD
Docker
Kubernetes
Management
Agile
Scrum
Apply
≈ $121k – $236k per year (Estimated) • In office • Full-Time • Bachelor's Degree • Bentonville
SQL
Analytics
ETL/ELT
Management
Agile
Apply
≈ $143k – $279k per year (Estimated) • In office • Full-Time • 7+ years exp • Bachelor's Degree • United States
Python
Java
C++
AI/ML
Reinforcement Learning
DevOps
Platform Engineering
Apply
≈ $25k – $49k per year (Estimated) • Remote/Hybrid • Full-Time • Moscow
Python
SQL
DevOps
Git
Analytics
Superset
Apply
≈ $35k – $69k per year (Estimated) • Remote/Hybrid • Full-Time • 5+ years exp • Moscow
Java
Java
Spring Boot
Gradle
Databases
PostgreSQL
DevOps
GitLab CI
Grafana
Apply
≈ $20k – $50k per year (Estimated) • In office • Full-Time • Moscow
Python
SQL
AI/ML
Pandas
Analytics
Superset
Management
Telegram
Apply
≈ $14k – $35k per year (Estimated) • In office • Full-Time • Moscow
Management
Google Sheets
Apply
≈ $13k – $32k per year (Estimated) • Remote • Full-Time • Moscow
Apply
≈ $14k – $31k per year (Estimated) • Remote • 4+ years exp • Moscow
Go
SQL
Databases
PostgreSQL
ClickHouse
RabbitMQ
Apache Kafka
DevOps
gRPC
Helm
GitLab CI
CI/CD
Docker
Kubernetes
QA
Playwright
Apply
≈ $15k – $37k per year (Estimated) • Remote/Hybrid • Full-Time • Moscow
Python
Databases
PostgreSQL
OpenSearch
DevOps
OpenShift
GitLab CI
ArgoCD
Kubernetes
GitLab
Apply
≈ $22k – $42k per year (Estimated) • Remote/Hybrid • Full-Time • 3+ years exp • Bachelor's Degree • Moscow
Design
Figma
Apply
Apply
$28k – $35k per year (net) • Remote/Hybrid • Full-Time • Bachelor's Degree • Moscow
SQL
Databases
PostgreSQL
MS SQL
DevOps
Git
Management
Telegram
WhatsApp
QA
Swagger
Postman
Apply
See all jobs
This is one of many
621,325 more open roles from verified company boards, updated every day.
Browse all jobs Get matched roles