Data Warehouse Software Engineer (GCP & Airflow)

Feladat

Amerikai partnerünk projektjére keresünk tapasztalt Data Warehouse Software Engineer kollégát! A pozícióra mind alkalmazotti, mind contractor (B2B) formában várjuk a jelentkezőket Magyarország bármely pontjáról (akár 100% remote munkavégzéssel).

Miért van szükségünk Rád?

A projekt adatinfrastruktúrájának és skálázható architektúrájának záloga a megbízható, modern felhős adattárház. Olyan senior mérnököt keresünk, aki skálázza és optimalizálja a core Google Cloud Platform (GCP) adattárházat és data ingestion ökoszisztémát. Ha otthonosan mozogsz a komplex data pipeline tervezésében, az Apache Airflow (Cloud Composer) orchestrációban és a BigQuery teljesítményhangolásában, köztünk a helyed!

Ebben a szerepkörben kulcsfigurája leszel az enterprise szintű adatarchitektúra alakításának. Szorosan együttműködsz majd nemzetközi szoftverfejlesztő, adat- és analitikai csapatokkal, miközben összetett adatforrásokat integrálsz tiszta, magas rendelkezésre állású és lekérdezésre optimalizált adatmodellekké.

Mivel fogsz foglalkozni?

• Adattárház és pipeline mérnökség: Production-ready ELT/ETL pipeline -ok tervezése, építése és karbantartása, amelyek nagy volumenű, komplex adatkészleteket streamelnek és dolgoznak fel.
• Airflow menedzsment és platform frissítések: Az Apache Airflow / Cloud Composer platform teljes körű kezelése, monitorozása és frissítése. Tiszta, moduláris és karbantartható DAG-ok írása Pythonban, egyedi operátorok/hookok implementálása, valamint a klaszter teljesítményének optimalizálása.
• GCP architektúra és optimalizálás: A core GCP adatszolgáltatások (BigQuery, Cloud Storage, Cloud Functions/Run, Pub/Sub, IAM) karbantartása és finomhangolása. Haladó BigQuery teljesítmény-optimalizálás.
• Python fejlesztés és integrációk: Nagy teljesítményű Python scriptek, API konnektorok és automatizációs eszközök fejlesztése.
• Adatminőség és integritás: Szigorú adatminőségi (Data Quality) keretrendszerek, monitorozás és automatizált riasztási rendszerek bevezetése az adatvesztés elkerülése érdekében.
• Műszaki vezetés és CI/CD: Infrastructure-as-Code (IaC) és CI/CD telepítési folyamatok fenntartása Git használatával. Részvétel az architektúra-tervezésben és a best practice-ek iránymutatásában.

A munkakör betöltéséhez szükséges végzettségek és képességek

• Szoftverfejlesztési tapasztalat: 4–7+ év professzionális szoftverfejlesztői múlt, amiből legalább 3+ év kifejezetten adattárházakra, felhős data pipeline -okra és adatplatform-üzemeltetésre fókuszált.
• Angol nyelvtudás: Folyékony, magabiztos, aktív angol nyelvtudás (napi szintű kommunikáció az amerikai csapattal).
• Senior Python tudás: Production-ready Python fejlesztési készségek adatfeldolgozáshoz, egyedi pipeline eszközökhöz és API integrációkhoz.
• Airflow platform üzemeltetés: Gyakorlati tapasztalat Apache Airflow-val (Cloud Composer előnyben), beleértve a DAG architektúrát, hibaelhárítást, környezeti konfigurációkat és a platform-verziók frissítését.
• GCP ökoszisztéma szakértelem: Mélyreható tapasztalat a Google Cloud analitikai eszközeivel – különösen: BigQuery, Cloud Storage (GCS), Cloud Composer, Pub/Sub és Cloud Functions/Run.
• BigQuery optimalizáció: Haladó szintű ismeretek a BigQuery architektúrájáról, DDL/DML-ről, particionálásról, klaszterezésről, slot-allokációról és költségkezelési stratégiákról.
• DevOps és verziókövetés: Magabiztos Git, CI/CD pipeline és modern szoftverfejlesztési workflow ismeretek.

Előnyt jelent

• GCP Tanúsítvány: Google Cloud Certified Professional Data Engineer (kiemelten ajánlott).
• Nagy adatvolumen (High-Volume) tapasztalat: Több terabájtos vagy milliárdos sorszámú adathalmazokkal, strukturálatlan adatokkal vagy streaming architektúrákkal szerzett tapasztalat.
• Biztonság és megfelelőség: IAM szabályzatok és adat-titkosítási szabványok ismerete.

Felvételi folyamat

• Önéletrajz áttekintése
• Egyeztetés (online vagy személyesen)
• Szakmai szóbeli beszélgetés angolul
• Ajánlat küldése

Juttatások, munkakörülmények

• alkalmazotti státusz
• rugalmas (kötetlen) munkarend, részmunkaidős lehetőség, távoli munkavégzés
• hetente ingyenes angol óra
• fél év után céges okostelefon
• kávé / tea / gyümölcs / müzli és müzliszelet / hűtött víz és szóda ingyenesen az irodában
• online képzéseken való részvétel támogatása, amelyek részben munkaidőben is végezhetők
• személyes fejlődés támogatása (dedikált idő tanulásra, wellbeing manager)
• további pénzügyi juttatások: telefon – és laptop támogatás, különleges családi események támogatása pl.: esküvő, gyermek születése, iskolakezdési támogatás, sporttámogatás stb.