{"id":2070569,"url":"https://alion.io/job/datanomica-data-engineer-4","title":"Data Engineer","company":{"id":1363,"name":"Datanomica","domain":"datanomica.org","url":"https://alion.io/company/datanomica","size_band":null,"is_staffing_agency":false,"employer_type":"direct","is_intermediary":false,"listed_via":null,"ats_vendor":"HeadHunter","truth_index":{"grade":"A","score":100,"open_postings":4,"ghost_share":0,"stale_share":0,"repost_share":0,"time_to_fill_p50_days":30,"computed_at":"2026-10-10T05:45:15Z"}},"role":"Data Science","role_family":"Data Science","seniority":"junior","employment_type":null,"work_mode":"on_site","remote_scope":null,"remote_scope_basis":null,"remote_working_hours":null,"hiring_geo_confidence":"structured","locations":["Moscow, Russia"],"countries":["RU"],"hiring_countries":[],"hiring_countries_total":0,"salary":{"min":null,"max":200000,"currency":"RUB","period":"month","gross":false,"usd_annual":26952},"salary_estimate":null,"experience_years_min":2,"visa_sponsorship":false,"relocation_package":false,"has_equity":false,"technologies":[{"name":"Agile","optional":false},{"name":"Apache Kafka","optional":false},{"name":"ETL/ELT","optional":false},{"name":"Git","optional":false},{"name":"Grafana","optional":false},{"name":"Java","optional":false},{"name":"Kanban","optional":false},{"name":"Kotlin","optional":false},{"name":"LLM","optional":false},{"name":"PostgreSQL","optional":false},{"name":"Prometheus","optional":false},{"name":"Scrum","optional":false},{"name":"Spark","optional":false},{"name":"SQL","optional":false},{"name":"CI/CD","optional":true},{"name":"Docker","optional":true},{"name":"GitLab CI","optional":true},{"name":"Greenplum","optional":true},{"name":"Jenkins","optional":true},{"name":"Maven","optional":true}],"status":"live","first_seen_at":"2026-10-08T06:34:15Z","employer_posted_date":"2026-10-08","last_verified_at":"2026-10-10T21:41:27Z","board_verified":true,"closed_at":null,"days_open":2,"trust":{"level":"ok","repost_count":null,"flags":[],"days_open":2},"description":"Мы ООО «Датаномика», собираем инженерные команды под задачи крупного бизнеса. 6+ лет на рынке, 160+ инженеров в штате, 45+ реализованных проектов в финсекторе, телекоме и ретейле. Развиваем шесть направлений экспертизы: высоконагруженные банковские системы, хранилища данных (DWH), генеративный ИИ, комплаенс-системы, кибербезопасность и импортозамещение софта. Аккредитованная ИТ-компания.\n Сейчас у нас открыта вакансия Data-инженера в команду крупного российского Банка.\n Что входит в задачи:\n Разработка и поддержка ядра репликации: Проектирование и реализация высоконагруженных пайплайнов потоковой передачи данных из ERP-системы в КХД.\n Разработка механизмов гарантированной доставки (at-least-once, exactly-once semantics) и обработки сбоев без потери целостности финансовых данных.\n Оптимизация производительности потоков Kafka и Spark Streaming (управление партиционированием, сжатием, батчингом).\n\n Работа с витринами данных: Разработка ETL/ELT-процессов трансформации модели данных Банка.\n Написание сложных SQL-запросов, оконных функций и хранимых процедур для агрегации банковских метрик.\n Поддержка актуальности витрин данных, оптимизация их переформирования при изменении источников\n\n Миграция данных (Data Migration): Участие в проектах вывода из эксплуатации легаси-систем (включая исторические АБС).\n Разработка утилит-перекладчиков для извлечения, очистки, обогащения и загрузки исторических массивов данных в новую модель с сохранением ссылочной целостности.\n\n Качество данных и мониторинг: Внедрение автоматических проверок качества данных (Data Quality checks): профилирование, поиск дублей, проверка консистентности контрольных сумм.\n Настройка мониторинга задержек репликации (lag) и алертинга через Prometheus/Grafana или аналоги.\n\n Взаимодействие: Работа по методологии Agile (Scrum/Kanban). Плотное взаимодействие с архитекторами DWH, администраторами БД PostgreSQL, владельцами продуктов (Product Owners) и аналитиками.\n AI-native : Опыт проектирования с использованием ИИ-инструментов (LLM, Промт-инжениринг, GIT c Агенты).\n Технические навыки и инструменты:\n Язык программирования Java: уверенное владение Core, понимание многопоточности и принципов эффективной работы со стримами. Опыт промышленной разработки от 2 лет. Знание Kotlin как преимущество.\n Apache Spark: опыт разработки приложений на фрейморке Spark. Глубокое понимание архитектуры (драйверы, исполнители), управления памятью. Умение читать планы выполнения запросов (Explain plan).\n Apache Kafka: практический опыт настройки продюсеров и консьюмеров, идемпотентности и распределенных коммитов оффсетов.\n Базы данных и SQL: хороший уровень написания SQL (оконные функции, CTE, рекурсивные запросы). Опыт оптимизации тяжелых запросов через анализ планов исполнения. Желателен опыт работы с СУБД, Hive, Greenplum (приветствуется).\n Инструменты CI/CD и версионирования: Git (умение работать с ветками, разрешать конфликты, писать понятные мерж-реквесты), Maven, Docker. Базовое понимание Jenkins/GitLab CI для автоматизации сборки артефактов.\n Форматы данных: хорошеее понимание Avro (схема-на-лету, эволюция схем), Parquet (колоночное хранение, predicate pushdown).\n Легаси и миграция: опыт анализа чужого кода на PL/SQL; умение проектировать мэппинг полей между старой и новой моделями.\n Мы предлагаем:\n Гибридный формат работы;\n\n Работа в аккредитованной ИТ-компании;\n Проекты в крупнейших банках и корпорациях - реальная нагрузка и масштаб (mission-critical системы, высоконагруженная обработка данных);\n Регулярное обучение и профильные конференции за счёт компании, современное оборудование;\n Официальная «белая» зарплата, оформление с первого рабочего дня, полное соблюдение ТК РФ;\n Интересные амбициозные задачи с достижимым результатом","description_format":"text","description_chars":3735,"description_truncated":false,"requirements":{"experience_years_min":2,"management_years_min":null,"team_size_min":null,"manages_managers":false,"education":null,"security_clearance":false,"languages":[{"language":"Russian","level":"Advanced (C1)","optional":false}]},"benefits":[],"hiring_locations":[],"hiring_excludes":[],"relocation_offered":false,"industries":["Machine Learning","BI & Dashboard Software","Recommendation Systems","Data Engineering & Migration Services"],"lifecycle":[{"event":"open","at":"2026-10-08T06:38:09Z"}],"visa":[],"liveness":{"score":90,"band":"hot","label":"Hiring now","p_open":1,"p_active":0.903,"p_room":1,"age_days":1,"expected_fill_days":30,"reasons":["conf:8","velocity","win:early","comp:junior"],"computed_at":"2026-10-10T05:45:15Z"},"pay":{"stated_usd_annual":26952,"is_top_pay":false},"html_url":"https://alion.io/job/datanomica-data-engineer-4","json_url":"https://alion.io/job/datanomica-data-engineer-4.json","meta":{"generated_at":"2026-10-11T01:03:14Z","cache_seconds":300,"methodology":"https://alion.io/methodology","terms":"https://alion.io/terms","contact":"https://alion.io/contact","api":"https://alion.io/developers","about":"Alion is a live layer of people, companies and AI agents: who they are, whether they are real and active right now, what they do and how to work with them, readable by people and by agents and paid per call.","catalog":"https://alion.io/catalog.json","usage":{"tier":"crawler","counted_by":"address","units_charged":1,"used_today":1414,"day_limit":5000,"remaining_today":3586,"minute_limit":60,"resets_at":"2026-10-12T00:00:00Z"}},"offers":[{"id":"company.slices","title":"One company in depth, by slice","status":"live","price":{"credits":0.02,"usd":0.002,"plus_per_slice":{"credits":0.05,"usd":0.005}},"unit":"per company, plus each slice with data","note":"the employer in depth","call":{"mcp_tool":"get_company","arguments":{"id":1363},"rest":"https://alion.io/mcp/rest/get_company?id=1363"},"human":"https://alion.io/catalog?offer=company.slices&for=job%2Fdatanomica-data-engineer-4"},{"id":"market.stats","title":"A market slice: pay, demand and time to fill","status":"live","price":{"credits":1,"usd":0.1},"unit":"per slice","note":"pay, demand and time to fill for this role and place","call":{"mcp_tool":"market_stats"},"human":"https://alion.io/catalog?offer=market.stats&for=job%2Fdatanomica-data-engineer-4"},{"id":"job.search","title":"Open jobs by role, technology, place, pay and visa","status":"live","price":{"credits":0.02,"usd":0.002},"unit":"per posting in a list","note":"similar open postings","call":{"mcp_tool":"search_jobs"},"human":"https://alion.io/catalog?offer=job.search&for=job%2Fdatanomica-data-engineer-4"},{"id":"company.verify","title":"Is this company real and active right now","status":"pilot","price":null,"unit":"per company","request":{"url":"https://alion.io/catalog/request","method":"POST","body":"{\"offer\": \"company.verify\", \"for\": \"job/datanomica-data-engineer-4\", \"note\": \"what you need it for\"}"},"human":"https://alion.io/catalog?offer=company.verify&for=job%2Fdatanomica-data-engineer-4"}]}