{"id":515681,"url":"https://alion.io/job/rdp-ru-senior-data-engineer","title":"Senior/Tech Lead Data Engineer","company":{"id":45715,"name":"RDP","domain":"rdp.ru","url":"https://alion.io/company/rdp-ru","size_band":null,"is_staffing_agency":false,"employer_type":"direct","is_intermediary":false,"listed_via":null,"ats_vendor":"HeadHunter","truth_index":null},"role":"Data Science","role_family":"Data Science","seniority":"lead","employment_type":"full_time","work_mode":"remote","remote_scope":"stated_regions","remote_scope_basis":"board_field","remote_working_hours":null,"hiring_geo_confidence":"structured","locations":["Moscow, Russia"],"countries":["RU"],"hiring_countries":["RU","BY","KZ","KG","AM"],"hiring_countries_total":5,"salary":null,"salary_estimate":{"min_usd":32000,"max_usd":55000,"period":"year","method":"role_seniority_country_cell","sample_n":13},"experience_years_min":null,"visa_sponsorship":false,"relocation_package":false,"has_equity":false,"technologies":[{"name":"Amazon S3","optional":false},{"name":"Apache Iceberg","optional":false},{"name":"Apache Kafka","optional":false},{"name":"Delta Lake","optional":false},{"name":"Flink","optional":false},{"name":"Java","optional":false},{"name":"pySpark","optional":false},{"name":"Python","optional":false},{"name":"Spark","optional":false},{"name":"SQL","optional":false},{"name":"Trino","optional":false},{"name":"ClickHouse","optional":true},{"name":"Data Vault","optional":true},{"name":"GitOps","optional":true},{"name":"GraphDB","optional":true},{"name":"Kubernetes","optional":true},{"name":"Snowflake","optional":true},{"name":"Superset","optional":true}],"status":"live","first_seen_at":"2026-10-29T13:51:57Z","employer_posted_date":"2026-10-29","last_verified_at":"2026-10-29T15:25:19Z","board_verified":true,"closed_at":null,"days_open":0,"trust":{"level":"ok","repost_count":2,"flags":[],"days_open":26},"description":"Мы проектируем и внедряем ключевые элементы архитектуры российского сегмента сети Интернет. Являемся разработчиком передовых программно-аппаратных комплексов для управления телеком-инфраструктурой.\n Входим в контур группы компаний ПАО «Ростелеком» и являемся стратегическим активом АО «Градиент». Наши аппаратные платформы развернуты на сетях передачи данных ведущих федеральных операторов связи.\n Разработка ведется в рамках стратегических государственных инициатив по цифровому суверенитету страны. Среди организаций, доверяющих нашим технологиям, - профильные ведомства федерального уровня: Роскомнадзор и Минцифры России.\n О проекте:\n Мы развиваем систему постанализа сетевого трафика, работающую с высоконагруженными потоками данных.\n Система агрегирует данные из сотен источников, обрабатывает входной стриминг на уровне сотен тысяч событий в секунду и продолжает масштабироваться - в ближайшее время планируется подключение более 10 дополнительных источников данных.\n Чем предстоит заниматься:\n Проектирование и реализация сложных batch и streaming пайплайнов в новом Lakehouse-стеке;\n Участие в построении новой data-платформы с нуля;\n Проектирование схем хранения и оптимизация Iceberg-таблиц;\n Оптимизация Spark и Trino под highload и near-real-time требования;\n Проектирование решений с учётом роста объёмов данных и нагрузки;\n Разбор и устранение сложных инцидентов производительности;\n Внедрение и развитие практик Data Quality;\n Проведение код-ревью;\n Менторинг старших инженеров и инженеров данных;\n Принятие технических решений в рамках архитектуры платформы.\n Что мы ожидаем:\n 1. Глубокая инженерная экспертиза.\n5+ лет опыта в Data Engineering;\nПродвинутый опыт работы со Spark (batch и streaming);\nПрактический опыт построения потоковой обработки на Flink;\nОтличное знание SQL и опыт оптимизации под большие объёмы данных;\nУверенное понимание брокеров сообщений: гарантии доставки, порядок, дубли, поведение при переполнении. Не привязано к продукту - у нас Kafka, но важен принцип;\nУверенное владение Python, включая PySpark;\nУверенное владение Java: потоковые джобы пишутся на ней;\nОпыт работы с Trino.\n 2. Работа с распределёнными системами.\nОпыт работы с distributed storage (S3 или аналоги);\nПонимание принципов Data Lake / Lakehouse;\nОпыт проектирования таблиц под большие объёмы данных (partitioning, compaction, storage layout);\nОпыт работы с Iceberg / Delta Lake или глубокое понимание их принципов;\nПонимание принципов построения отказоустойчивых и горизонтально масштабируемых data-систем.\n 3. Проектирование и развитие новой платформы.\nОпыт проектирования и построения data-платформ или крупных подсистем с нуля;\nПонимание принципов построения Lakehouse-архитектуры;\nОпыт выбора и обоснования технических решений на уровне отдельных компонентов и пайплайнов;\nПонимание подходов к масштабированию платформы при росте объёмов данных и нагрузки;\nОпыт проектирования решений с учётом отказоустойчивости, производительности и эксплуатационных требований.\n 4. Производительность и надёжность.\nОпыт оптимизации Spark-job'ов;\nПонимание причин деградации производительности в distributed-среде;\nОпыт работы с highload-потоками;\nОпыт внедрения и поддержки Data Quality механизмов;\nПонимание SLA витрин и требований к near-real-time обработке;\nОпыт работы с потоками, где задержка от источника до хранилища нормирована;\nОпыт инструментирования пайплайнов метриками и построения по ним оповещений;\nОпыт разбора сложных проблем производительности и поиска bottleneck'ов в распределённых системах.\n 5. Техническое лидерство (execution-level).\nОпыт проектирования сложных пайплайнов;\nОпыт код-ревью;\nСпособность самостоятельно принимать технические решения в рамках архитектуры;\nУмение декомпозировать сложные инженерные задачи.\n Будет плюсом:\n Опыт работы с различными типами СУБД и хранилищ данных: RDBMS, columnoriented, Graph DB, Search / Full-text engines;\n Опыт работы с Kubernetes;\n Понимание практик Infrastructure as Code;\n Опыт работы с GitOps;\n Опыт работы с protobuf и Parquet;\n Опыт работы с ClickHouse;\n Опыт работы с каталогом данных: описания, происхождение данных, проверки качества;\n Опыт работы с BI-системами, в частности Apache Superset;\n Понимание различных моделей данных (Star / Snowflake, Data Vault, Anchor Modeling);\n Понимание предметной области: сетевой трафик, потоки и сессии, SNI / IP.\n Условия работы:\n Работа в аккредитованной IT компании;\n Трудоустройство в соответствии с ТК РФ;\n Белая заработная плата (оклад обсуждаем с успешным кандидатом после прохождения технического интервью);\n\n График работы: 5/2;\n Возможность работать удаленно;\n Офис находится в БЦ \"Трио\" на метро Динамо (или мцд Гражданская);\n И плюшки ниже :) ↴","description_format":"text","description_chars":4675,"description_truncated":false,"requirements":{"experience_years_min":null,"management_years_min":null,"team_size_min":null,"manages_managers":false,"education":null,"security_clearance":false,"languages":[{"language":"Russian","level":"Advanced (C1)","optional":false}]},"benefits":[],"hiring_locations":[{"name":"Russia","iso":"RU","kind":"country"},{"name":"Belarus","iso":"BY","kind":"region"},{"name":"Kazakhstan","iso":"KZ","kind":"region"},{"name":"Kyrgyzstan","iso":"KG","kind":"region"},{"name":"Armenia","iso":"AM","kind":"region"}],"hiring_excludes":[],"relocation_offered":false,"industries":["Network Security","Network Equipment"],"lifecycle":[{"event":"open","at":"2026-09-07T18:47:05Z"},{"event":"close","at":"2026-09-14T12:55:49Z"},{"event":"restore","at":"2026-09-14T22:46:01Z"},{"event":"6","at":"2026-10-02T10:23:17Z"},{"event":"6","at":"2026-10-29T13:51:57Z"}],"visa":[],"liveness":{"score":58,"band":"ok","label":"Likely open","p_open":1,"p_active":0.778,"p_room":0.75,"age_days":26,"expected_fill_days":30,"reasons":["conf:16","velocity","win:late"],"computed_at":"2026-10-29T05:49:05Z"},"pay":null,"html_url":"https://alion.io/job/rdp-ru-senior-data-engineer","json_url":"https://alion.io/job/rdp-ru-senior-data-engineer.json","meta":{"generated_at":"2026-10-29T17:16:23Z","cache_seconds":300,"methodology":"https://alion.io/methodology","terms":"https://alion.io/terms","contact":"https://alion.io/contact","api":"https://alion.io/developers","about":"Alion is a live layer of people, companies and AI agents: who they are, whether they are real and active right now, what they do and how to work with them, readable by people and by agents and paid per call.","catalog":"https://alion.io/catalog.json","usage":{"tier":"crawler_verified","counted_by":"address","units_charged":1,"used_today":25844,"day_limit":null,"remaining_today":null,"minute_limit":300,"resets_at":"2026-10-30T00:00:00Z"}},"offers":[{"id":"company.slices","title":"One company in depth, by slice","status":"live","price":{"credits":0.02,"usd":0.002,"plus_per_slice":{"credits":0.05,"usd":0.005}},"unit":"per company, plus each slice with data","note":"the employer in depth","call":{"mcp_tool":"get_company","arguments":{"id":45715},"rest":"https://alion.io/mcp/rest/get_company?id=45715"},"human":"https://alion.io/catalog?offer=company.slices&for=job%2Frdp-ru-senior-data-engineer"},{"id":"market.stats","title":"A market slice: pay, demand and time to fill","status":"live","price":{"credits":1,"usd":0.1},"unit":"per slice","note":"pay, demand and time to fill for this role and place","call":{"mcp_tool":"market_stats"},"human":"https://alion.io/catalog?offer=market.stats&for=job%2Frdp-ru-senior-data-engineer"},{"id":"job.search","title":"Open jobs by role, technology, place, pay and visa","status":"live","price":{"credits":0.02,"usd":0.002},"unit":"per posting in a list","note":"similar open postings","call":{"mcp_tool":"search_jobs"},"human":"https://alion.io/catalog?offer=job.search&for=job%2Frdp-ru-senior-data-engineer"},{"id":"company.verify","title":"Is this company real and active right now","status":"pilot","price":null,"unit":"per company","request":{"url":"https://alion.io/catalog/request","method":"POST","body":"{\"offer\": \"company.verify\", \"for\": \"job/rdp-ru-senior-data-engineer\", \"note\": \"what you need it for\"}"},"human":"https://alion.io/catalog?offer=company.verify&for=job%2Frdp-ru-senior-data-engineer"}],"agent":{"mcp":"https://alion.io/mcp/jobs","mcp_open":"https://alion.io/mcp/open","next":[{"tool":"get_job","arguments":{"id":515681}},{"tool":"search_jobs","arguments":{"company":"rdp.ru","detail":"compact"}},{"tool":"match_people","arguments":{"job_id":515681},"note":"people open to offers who fit this vacancy"}],"note":"The same data through MCP tools: https://alion.io/mcp/open needs no sign-in (compact searches, postings, people); https://alion.io/mcp with an Alion account has everything. Docs: https://alion.io/developers"}}