Data Engineer

Wspólnie z naszym Partnerem, szwedzkim koncernem energetycznym będącym jednym z największych producentów i dystrybutorów energii w Europie , poszukujemy doświadczonego/ej specjalisty/ki do świadczenia usług jako Data Engineer. Projekt dotyczy budowy i utrzymania platformy danych zasilającej inteligentnych agentów AI automatyzujących procesy SOC w oparciu o Azure Data Explorer i Microsoft Sentinel. OFERUJEMY: Nowy sposób na aplikowanie z AI Rekruterem (AIR) – w trakcie procesu możesz porozmawiać z wirtualnym rekruterem 24/7, bez czekania na telefon. Finalną decyzję zawsze podejmuje Opiekun Projektu. Współpracę w modelu projektowym, z rozliczeniem opartym na etapach i protokołach odbioru poszczególnych deliverables. Wsparcie po stronie Connectis w sprawach administracyjnych i rozliczeniowych związanych ze współpracą. Uczestnictwo w wydarzeniach branżowych oraz meetupach technologicznych. 5 000 PLN za polecenie znajomych do naszych projektów. Elastyczna forma współpracy B2B. Realizacja usług 100% zdalnie. Szybki i zdalny proces. Dziękujemy za wszystkie zgłoszenia. Pragniemy poinformować, że skontaktujemy się z wybranymi osobami. Daily tasks: - Projektowanie i budowanie pipeline'ów ingestion danych w Azure Data Explorer, obejmujące normalizację i definiowanie schematów danych zasilających agentów AI. - Pisanie i optymalizowanie zapytań KQL wykorzystywanych przez agentów do wzbogacania alertów, korelacji zdarzeń i threat huntingu. - Diagnozowanie błędów po stronie danych i integracji oraz rozszerzanie istniejących integracji o nowe źródła i API. - Onboarding nowych źródeł logów do Sentinel i ADX wraz z bieżącą walidacją jakości danych na wejściu. - Konfigurowanie przepływów integracyjnych w Logic Apps oraz routing i transformacja danych w Cribl. - Tworzenie skryptów Python do automatyzacji zadań pipeline'owych i wywołań API między systemami. Minimum 4-letnie doświadczenie komercyjne na stanowisku Data Engineer. Znajomość ekosystemu Microsoft Azure , w tym Microsoft Defender i Entra ID . Ogólna wiedza z zakresu IT security oraz znajomość podstaw sieciowych TCP/IP . Doświadczenie w pracy z SQL i Python w kontekście pipeline'ów danych. Silna, praktyczna znajomość KQL oraz Azure Data Explorer ( ADX ). Bardzo dobra znajomość języka angielskiego. Biegła znajomość języka polskiego. Mile widziane: Doświadczenie w budowie warstw raportowych w SQL na potrzeby dashboardów i agentów analitycznych. Doświadczenie w projektowaniu i implementacji integracji API-based oraz znajomość metod autentykacji. Znajomość Logic Apps i doświadczenie w konfigurowaniu przepływów integracyjnych. Doświadczenie z narzędziem Cribl w zakresie routingu i transformacji danych. Must have: Azure, KQL, Azure Data Explorer, SQL, Python, REST API, JSON, Defender, TCP/IP, Microsoft Entra ID