DATA ENGINEER / DATAOPS SPECIALIST (M/K)

Poszukujemy osoby do roli Data Engineer / DataOps Specialist (m/k). Praca jest dedykowana dla międzynarodowej firmy farmaceutycznej. Głównym celem tej roli jest zarządzanie automatyzacją produktów danych w Snowflake i AWS S3 z poziomu widoków SAP Hana. Strumienie danych są koordynowane z wykorzystaniem dedykowanych zadań GitLab CI/CD. Będziesz również odpowiedzialny za kierowanie zespołem technicznym, wyznaczanie kierunku technicznego oraz zapewnianie najlepszych praktyk w zakresie inżynierii danych i operacji. Obowiązki • Tworzenie i rozwój produktów danych w środowiskach Snowflake oraz AWS S3. • Projektowanie, rozwój i utrzymanie pipeline'ów danych z wykorzystaniem GitLab CI/CD. • Optymalizacja oraz utrzymanie procesów przetwarzania danych opartych o widoki SAP HANA. • Zapewnienie wysokiej jakości danych poprzez wdrażanie i rozwój procesów testowania oraz walidacji. • Współpraca z zespołami biznesowymi i technicznymi w celu analizy wymagań oraz dostarczania rozwiązań opartych na danych. • Tworzenie, wdrażanie i promowanie dobrych praktyk w obszarze Data Engineering oraz utrzymania środowisk danych. • Analiza, ocena oraz rekomendowanie nowych narzędzi i technologii wspierających rozwój platform oraz procesów przetwarzania danych. Wymagania • Minimum 4 lata na podobnym stanowisku. • Bardzo dobra znajomość: Python, w zakresie manipulacji danymi, pisania skryptów i automatyzacji. • GitLab CI/CD, w zakresie orkiestracji i automatyzacji pipelienów. • Dobra znajomość SQL z umiejętnością pisania wydajnych i zoptymalizowanych zapytań. • Doświadczenie z analitycznymi bazami danych, najlepiej Snowflake. • Doświadczenie z Redshift lub BigQuery. • Umiejętność pisania i wdrażania testów. • Doświadczenie z co najmniej jednym narzędziem ETL. • Komercyjne doświadczenie w zarządzeniu i optymizacji data pipelines oraz data workflow. • Angielski (min B2/C1). Mile widziana: • Znajomość takich narzędzi jak: DBT, Talend, Monte Carlo, Collibra, Immuta Oferujemy • 100% pracy zdalnej • Kontrakt B2B • Stawka: (130 - 155) pln/h + VAT