Inżynier Danych

Kogo poszukujemy? Wymagania: Minimum 3 lata komercyjnego doświadczenia na stanowisku Inżyniera Danych lub pokrewnym. Bardzo dobra znajomość SQL oraz relacyjnych baz danych (PostgreSQL, MS SQL Server). Praktyczne doświadczenie w projektowaniu, budowie i orkiestracji procesów ETL/ELT, w tym harmonogramowaniu zadań. Dobra znajomość języka Python w kontekście przetwarzania i transformacji danych. Doświadczenie we współpracy z narzędziami BI (np. Power BI, Apache Superset) w zakresie zasilania modeli danych i raportów. Znajomość zagadnień jakości danych, wersjonowania schematów oraz podstawowych praktyk CI/CD w projektach danych. Umiejętność efektywnej współpracy z analitykami danych i interesariuszami biznesowymi, dobra komunikacja oraz samodzielność w rozwiązywaniu problemów. Dodatkowe atuty: Doświadczenie w pracy z Mage.ai lub innymi narzędziami orkiestracji danych. Doświadczenie w środowiskach chmurowych. Czym będziesz się zajmować? Obowiązki: Projektowanie, implementacja oraz rozwój procesów ETL/ELT z wielu systemów źródłowych do warstwy brązowej Hurtowni Danych. Projektowanie i utrzymanie architektury danych oraz schematów w warstwie brązowej, z naciskiem na wydajność, skalowalność i niezawodność. Integracja danych z systemów źródłowych z wykorzystaniem API oraz innych mechanizmów wymiany danych. Tworzenie, optymalizacja i utrzymanie zaawansowanych zapytań SQL wykorzystywanych w procesach ładowania danych oraz przez zespoły analityczne. Wykorzystanie Pythona do transformacji, walidacji i przetwarzania danych, automatyzacji procesów oraz budowy komponentów wspierających pipeline'y ETL. Zapewnienie wysokiej jakości danych poprzez walidacje, kontrolę kompletności, monitoring oraz udział w rozwiązywaniu incydentów danych.