{"id":2123811,"url":"https://alion.io/job/team-connect-data-engineer-gcp","title":"Data Engineer (GCP)","company":{"id":1765,"name":"Team Connect","domain":"teamconnect.pl","url":"https://alion.io/company/team-connect","size_band":null,"is_staffing_agency":false,"employer_type":"direct","is_intermediary":false,"listed_via":null,"ats_vendor":null,"truth_index":null},"role":"Data Science","role_family":"Data Science","seniority":null,"employment_type":"contractor","work_mode":"hybrid","remote_scope":null,"remote_scope_basis":null,"remote_working_hours":null,"hiring_geo_confidence":"structured","locations":["Warsaw, Poland"],"countries":["PL"],"hiring_countries":[],"hiring_countries_total":0,"salary":null,"salary_estimate":{"min_usd":54000,"max_usd":95000,"period":"year","method":"role_country_seniority_unknown","sample_n":361},"experience_years_min":null,"visa_sponsorship":false,"relocation_package":false,"has_equity":false,"technologies":[{"name":"Agile","optional":false},{"name":"BigQuery","optional":false},{"name":"CI/CD","optional":false},{"name":"ETL/ELT","optional":false},{"name":"GCP","optional":false},{"name":"Google BigQuery","optional":false},{"name":"Informatica","optional":false},{"name":"PostgreSQL","optional":false},{"name":"Python","optional":false},{"name":"SQL","optional":false}],"status":"live","first_seen_at":"2026-10-08T10:25:05Z","employer_posted_date":null,"last_verified_at":"2026-10-08T10:25:05Z","board_verified":false,"closed_at":null,"days_open":9,"trust":{"level":"not_scored","repost_count":null,"flags":[],"days_open":9},"description":"Team Connect to wiodący w Polsce dostawca usług IT w modelu nearshore i offshore. Od 2008 roku z sukcesem tworzymy oraz rozwijamy oprogramowanie dla naszych klientów. \nSpecjalizujemy się w wytwarzaniu oprogramowania w oparciu o metodyki Agile i DevOps - od etapu analizy, przez implementację, aż po dalszy rozwój produktu. Tworzymy aplikacje backendowe, frontendowe oraz mobilne. \nDla jednego z naszych klientów z branży bankowej poszukujemy Data Engineer.\nZakres świadczonej usługi\nprojektowanie, implementację i rozwój rozwiązań Data Engineering na Google Cloud Platform, przede wszystkim z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub;\n\nmigrację i przebudowę procesów przetwarzania oraz zasilania danych z Oracle/on-premise do GCP;\n\nprojektowanie i rozwój procesów wsadowych (batch) oraz strumieniowych (streaming), wraz\nz mechanizmami kontroli jakości, ponawiania i obsługi błędów;\n\nprojektowanie struktur i modeli danych w BigQuery z uwzględnieniem wydajności, skalowalności oraz kosztu przetwarzania i składowania danych;\n\nanalizę danych oraz przygotowywanie logicznych i fizycznych modeli danych dla Oracle, PostgreSQL i warstw danych w GCP;\n\ntworzenie, analizę i strojenie zapytań SQL, w tym analizę planów wykonania i identyfikowanie wąskich gardeł dla dużych wolumenów danych;\n\nanalizę istniejących procesów Informatica PowerCenter i migrację do rozwiązań docelowych\nw GCP;\n\nimplementację logiki transformacji, walidacji i integracji danych w SQL oraz Python, jeżeli wynika to z projektowanego rozwiązania;\n\nwykonywanie analizy technicznej, analizy wpływu i zależności oraz udział w uzgadnianiu specyfikacji rozwiązania;\n\nprzygotowywanie testów jednostkowych i integracyjnych oraz wsparcie testów systemowych, wydajnościowych, regresji i UAT;\n\nprzygotowanie zmian do wdrożenia, instrukcji wdrożenia oraz wsparcie wdrożenia i weryfikacji powdrożeniowej;\n\ndiagnozowanie i usuwanie incydentów oraz udział w analizie przyczyn problemów związanych\nz przetwarzaniem i jakością danych;\n\ntworzenie i aktualizację dokumentacji technicznej oraz pracę z repozytorium kodu i procesami CI/CD zgodnie z modelem DevOps.\n\nOczekiwane rezultaty realizowanych usług\ndziałające, przetestowane i udokumentowane pipeline’y oraz procesy przetwarzania danych\nw GCP, zgodne z wymaganiami funkcjonalnymi i technicznymi;\n\npoprawnie zmigrowane lub przebudowane procesy i struktury danych z Oracle/on-premise do GCP, z zachowaniem kompletności, spójności i jakości danych;\n\nzoptymalizowane struktury BigQuery i zapytania SQL spełniające uzgodnione wymagania\nw zakresie wydajności, skalowalności i racjonalnego wykorzystania zasobów;\n\npoprawnie działające mechanizmy wymiany danych wykorzystujące Cloud Storage i Pub/Sub, odpowiednio do architektury rozwiązania;\n\nprzygotowane elementy niezbędne do ich migracji w kontekście zastąpienia WorkFlowów Informatica PowerCenter;\n\nprzygotowanie kompletnej dokumentacji nowego rozwiązania\n\nprzygotowane i wykonane testy oraz udokumentowane wyniki weryfikacji rozwiązania;\n\nkomplet kodu, konfiguracji, instrukcji wdrożenia i dokumentacji technicznej utrzymywany\nw repozytorium i objęty obowiązującym procesem CI/CD;\n\nzdiagnozowane i usunięte błędy dotyczące wdrożonych komponentów wraz z analizą przyczyn, jeśli jest wymagana.\n\nWymagane doświadczenie\nOdpowiadającym poziomowi Middle Data Engineer. Oczekiwane jest komercyjne doświadczenie w projektowaniu i implementacji procesów integracji lub przetwarzania danych, przy czym dominująca część praktycznego doświadczenia powinna dotyczyć Google Cloud Platform oraz pracy z BigQuery, Cloud Storage i Pub/Sub.\n\nWykonawca usługi powinien posiadać praktyczne doświadczenie z Oracle, w tym w tworzeniu oraz optymalizacji zapytań SQL i pracy z dużymi wolumenami danych. Wymagane jest również doświadczenie developerskie z Informatica PowerCenter pozwalające na samodzielną analizę i modyfikację procesów ETL, jednak technologia ta nie stanowi głównego obszaru roli.\n\nBenefity:\nDługofalowa współpraca\n\nPakiet benefitów – Multisport, prywatna opieka medyczna, ubezpieczenie na życie\n\nBudżet szkoleniowy\n\nBezpłatne lekcje angielskiego\n\nIndywidualne wsparcie ze strony dedykowanego opiekuna firmy\n\nTech stack\nSQL\nGoogle Cloud Platform","description_format":"text","description_chars":4199,"description_truncated":false,"requirements":{"experience_years_min":null,"management_years_min":null,"team_size_min":null,"manages_managers":false,"education":null,"security_clearance":false,"languages":[]},"benefits":[],"hiring_locations":[],"hiring_excludes":[],"relocation_offered":false,"industries":["IT Outsourcing & Dedicated Teams","Recruiting & Staffing","Custom Software Development","IT Staffing & Staff Augmentation"],"lifecycle":[{"event":"open","at":"2026-10-08T23:50:21Z"}],"visa":[],"liveness":{"score":87,"band":"hot","label":"Hiring now","p_open":1,"p_active":0.874,"p_room":1,"age_days":8,"expected_fill_days":42,"reasons":["seen:8","velocity","win:early"],"computed_at":"2026-10-17T05:46:00Z"},"pay":null,"html_url":"https://alion.io/job/team-connect-data-engineer-gcp","json_url":"https://alion.io/job/team-connect-data-engineer-gcp.json","meta":{"generated_at":"2026-10-17T21:40:05Z","cache_seconds":300,"methodology":"https://alion.io/methodology","terms":"https://alion.io/terms","contact":"https://alion.io/contact","api":"https://alion.io/developers","about":"Alion is a live layer of people, companies and AI agents: who they are, whether they are real and active right now, what they do and how to work with them, readable by people and by agents and paid per call.","catalog":"https://alion.io/catalog.json","usage":{"tier":"crawler_verified","counted_by":"address","units_charged":1,"used_today":6374,"day_limit":null,"remaining_today":null,"minute_limit":300,"resets_at":"2026-10-18T00:00:00Z"}},"offers":[{"id":"company.slices","title":"One company in depth, by slice","status":"live","price":{"credits":0.02,"usd":0.002,"plus_per_slice":{"credits":0.05,"usd":0.005}},"unit":"per company, plus each slice with data","note":"the employer in depth","call":{"mcp_tool":"get_company","arguments":{"id":1765},"rest":"https://alion.io/mcp/rest/get_company?id=1765"},"human":"https://alion.io/catalog?offer=company.slices&for=job%2Fteam-connect-data-engineer-gcp"},{"id":"market.stats","title":"A market slice: pay, demand and time to fill","status":"live","price":{"credits":1,"usd":0.1},"unit":"per slice","note":"pay, demand and time to fill for this role and place","call":{"mcp_tool":"market_stats"},"human":"https://alion.io/catalog?offer=market.stats&for=job%2Fteam-connect-data-engineer-gcp"},{"id":"job.search","title":"Open jobs by role, technology, place, pay and visa","status":"live","price":{"credits":0.02,"usd":0.002},"unit":"per posting in a list","note":"similar open postings","call":{"mcp_tool":"search_jobs"},"human":"https://alion.io/catalog?offer=job.search&for=job%2Fteam-connect-data-engineer-gcp"},{"id":"company.verify","title":"Is this company real and active right now","status":"pilot","price":null,"unit":"per company","request":{"url":"https://alion.io/catalog/request","method":"POST","body":"{\"offer\": \"company.verify\", \"for\": \"job/team-connect-data-engineer-gcp\", \"note\": \"what you need it for\"}"},"human":"https://alion.io/catalog?offer=company.verify&for=job%2Fteam-connect-data-engineer-gcp"}]}