{"id":1144004,"url":"https://alion.io/job/top-selection-data-engineer-etl-migratsia","title":"Data Engineer (ETL-миграция)","company":{"id":768,"name":"Top Selection","domain":"topselection-development.com","url":"https://alion.io/company/top-selection","size_band":"5000+","is_staffing_agency":false,"is_intermediary":false,"ats_vendor":null,"truth_index":null},"role":"Data Science","role_family":"Data Science","seniority":"senior","employment_type":"full_time","work_mode":"remote","remote_scope":"stated_regions","hiring_geo_confidence":"inferred","locations":[],"countries":[],"hiring_countries":["RU","BY","KZ","KG","AM"],"hiring_countries_total":5,"salary":{"min":270000,"max":285000,"currency":"RUB","period":"month","gross":null,"usd_annual":39144},"salary_estimate":null,"experience_years_min":null,"visa_sponsorship":false,"relocation_package":false,"has_equity":false,"technologies":[{"name":"Airflow","optional":false},{"name":"Apache Kafka","optional":false},{"name":"Apache NiFi","optional":false},{"name":"ClickHouse","optional":false},{"name":"ETL/ELT","optional":false},{"name":"Greenplum","optional":false},{"name":"Hadoop","optional":false},{"name":"Oracle","optional":false},{"name":"PostgreSQL","optional":false},{"name":"Spark","optional":false},{"name":"SQL","optional":false},{"name":"Amazon S3","optional":true},{"name":"Grafana","optional":true},{"name":"Informatica","optional":true},{"name":"Prometheus","optional":true},{"name":"pySpark","optional":true},{"name":"Python","optional":true},{"name":"VictoriaMetrics","optional":true},{"name":"КриптоПро","optional":true}],"status":"live","first_seen_at":"2026-09-23T13:59:12Z","employer_posted_date":null,"last_verified_at":"2026-09-23T13:59:12Z","board_verified":false,"closed_at":null,"days_open":0,"trust":{"level":"not_scored","repost_count":null,"flags":[],"days_open":0},"description":"Навыки: Oracle PL/SQL, Высоконагруженные системы, PostgreSQL, Greenplum, ClickHouse, Apache Airflow, Apache Spark, Apache NiFi, Apache Kafka, Apache Hadoop. Квалификация: Senior. Специализации: Инженер по данным.\nПривет! Меня зовут Марина. Я представляю группу компаний Top Selection.\nМы занимаемся трудоустройством IT специалистов на проектную занятость.\nНа данный момент мы в поиске сильного Data Engineer (ETL-миграция) для участия в миграции ИС на Apache стек.\nТребования\nОпыт миграции ETL-систем (желательно с Oracle/Informatica на Apache стек)\nГлубокий SQL: оконные функции, сложные джойны, иерархические запросы\nОптимизация SQL для highload (партиционирование, индексы, explain plans)\nOracle (PL/SQL) и PostgreSQL\nGreenplum и/или Clickhouse\nПроектирование архитектур на Apache Spark (PySpark), NiFi, Airflow\nHadoop (HDFS) и Hive\nМониторинг ETL: Grafana/Prometheus или Victoria Metrics\nОпыт работы с биллинговыми системами (желательно телеком-домен)\nКак преимущество\nПотоковая обработка: Kafka Streams / Spark Streaming\nInformatica PowerCenter (понимание мигрируемой системы)\nБинарные форматы хранения в Hadoop\nРазличия: Hive vs Impala, Greenplum vs PostgreSQL, Clickhouse vs PostgreSQL\nPatroni для кластеризации PostgreSQL/Greenplum\nS3-хранилища\nКриптоПро или защищенные каналы передачи данных\nЗадачи\nМиграция ETL-системы телеком-оператора с Oracle/Informatica на Apache стек (S3, Airflow, NiFi, Kafka, Greenplum)\nПеренос бизнес-логики из Informatica в высокопроизводительный SQL-код\nНаписание и оптимизация SQL для витрин данных и ETL-процессов\nРазработка DAG-ов в Airflow\nНастройка пайплайнов в NiFi (источники: Oracle, PostgreSQL; приемники: S3, файловые архивы)\nРазработка Spark-джобов (PySpark) для больших объемов\nИнтеграция с Kafka для потоковой передачи\nНастройка мониторинга (Grafana/Prometheus) и отслеживание метрик\nРазбор инцидентов по качеству данных и ошибкам загрузки\nCode review","description_format":"text","description_chars":1901,"description_truncated":false,"requirements":{"experience_years_min":null,"management_years_min":null,"team_size_min":null,"manages_managers":false,"education":null,"security_clearance":false,"languages":[]},"benefits":[],"hiring_locations":[{"name":"Russia","iso":"RU","kind":"country"},{"name":"Belarus","iso":"BY","kind":"region"},{"name":"Kazakhstan","iso":"KZ","kind":"region"},{"name":"Kyrgyzstan","iso":"KG","kind":"region"},{"name":"Armenia","iso":"AM","kind":"region"}],"hiring_excludes":[],"relocation_offered":false,"industries":["Mining"],"lifecycle":[{"event":"open","at":"2026-09-23T13:59:12Z"}],"liveness":{"score":86,"band":"hot","label":"Hiring now","p_open":1,"p_active":0.86,"p_room":1,"age_days":0,"expected_fill_days":17,"reasons":["seen:0","win:early"],"computed_at":"2026-09-23T20:46:33Z"},"pay":{"stated_usd_annual":39144,"is_top_pay":false},"html_url":"https://alion.io/job/top-selection-data-engineer-etl-migratsia","json_url":"https://alion.io/job/top-selection-data-engineer-etl-migratsia.json","meta":{"generated_at":"2026-09-23T20:46:33Z","cache_seconds":300,"methodology":"https://alion.io/methodology","terms":"https://alion.io/terms","contact":"https://alion.io/contact","api":"https://alion.io/developers"}}