Data Engineer

• Analiza wymagań biznesowych oraz współpraca z interesariuszami przy definiowaniu zakresu danych
• Projektowanie modelu danych dla data martu
• Budowa procesów integracyjnych i ETL zasilających dane z różnych źródeł (Oracle, SQL Server, Kafka, pliki JSON i TXT)
• Transformacja i mapowanie danych do docelowego modelu relacyjnego
• Przygotowanie algorytmów przetwarzających dane w formie wydajnych procedur składowanych
• Przygotowanie i utrzymanie warstwy danych wykorzystywanej przez raporty oraz dashboardy Power BI
• Diagnostyka i rozwiązywanie problemów związanych z przetwarzaniem danych oraz jakością danych
• Przygotowywanie dokumentacji technicznej

Kogo poszukujemy?

• Gotowość do okazjonalnych wizyt w biurze w Katowicach
• Minimum 5 lat doświadczenia w pracy z Microsoft SQL Server, w tym projektowania, rozwoju i utrzymania baz danych
• Bardzo dobra znajomość T-SQL, obejmująca tworzenie procedur składowanych, funkcji, widoków oraz optymalizację wydajności zapytań
• Bardzo duże doświadczenie w pracy z SSIS (SQL Server Integration Services), w szczególności w budowie, utrzymaniu i diagnostyce procesów integracyjnych oraz ETL
• Doświadczenie w projektowaniu i budowie hurtowni danych oraz data martów
• Praktyczna umiejętność przetwarzania danych w formatach JSON, XML oraz plikach tekstowych, obejmująca parsowanie, walidację i transformację danych do modelu relacyjnego
• Doświadczenie w modelowaniu danych, obejmujące projektowanie modeli oraz optymalizację struktur danych na potrzeby raportowania i analiz
• Doświadczenie w integracji danych pochodzących z różnych źródeł, w szczególności z baz Oracle, Microsoft SQL Server, komunikatów Kafka oraz plików wymiany danych
• Umiejętność samodzielnej współpracy z interesariuszami biznesowymi i technicznymi, obejmująca pozyskiwanie wymagań, doprecyzowywanie potrzeb, identyfikację brakujących informacji oraz przekładanie wymagań biznesowych na rozwiązania techniczne i modele danych