Data Engineer
Эта же роль в других локациях (2)
- PL, Warszawa
- Warszawa
Коротко
Designs, develops, and maintains ETL processes and data flows using Apache NiFi, builds PostgreSQL database structures, and develops REST APIs for system · Needs: Min. 6 years with relational databases, min. 5 years ETL, expert Apache NiFi, very good PostgreSQL/SQL, REST API experience, basic Python and Linux/Bash
Описание от работодателя
Devire Outsourcing IT to forma współpracy dedykowana dla specjalistów z branży IT, oparta na zasadach własnej działalności gospodarczej - B2B, realizująca projekty dla Klientów prowadzących innowacyjne i nowoczesne projekty.
Dla naszego Klienta - firmy działającej w obszarze rozwoju i utrzymania cyfrowej strony infrastruktury przesyłowej dla branży energetycznej, poszukujemy osoby na stanowisko Senior Data Engineer .
Stawka: 160-180 PLN/h + VAT / B2B
Praca zdalna - z okazjonalną obecnością w biurze w Warszawie lub Wrocławiu ( maksymalnie 1x w miesiącu)
Kontrakt B2B via Devire.
Elastyczne godziny pracy.
Pakiet benefitów.
Daily tasks:
- Projektowanie, rozwój i utrzymanie procesów ETL oraz przepływów danych z wykorzystaniem Apache NiFi.
- Budowa i optymalizacja rozwiązań do przetwarzania oraz integracji danych z wielu źródeł.
- Projektowanie i rozwój struktur bazodanowych w środowisku PostgreSQL.
- Modelowanie danych oraz optymalizacja wydajności baz danych i zapytań SQL.
- Projektowanie oraz rozwój REST API na potrzeby integracji systemów.
- Automatyzacja procesów z wykorzystaniem Python i Bash.
- Współpraca z interesariuszami biznesowymi przy analizie wymagań i projektowaniu rozwiązań data-driven.
- Zapewnienie jakości, spójności oraz wydajności rozwiązań związanych z przetwarzaniem danych.
Min. 6 lat doświadczenia w pracy z relacyjnymi bazami danych oraz ich optymalizacji.
Min. 5 lat doświadczenia w projektowaniu i budowie procesów ETL.
Ekspercka znajomość Apache NiFi oraz doświadczenie w projektowaniu przepływów danych.
Bardzo dobra znajomość PostgreSQL, SQL oraz zaawansowanego modelowania danych.
Doświadczenie w projektowaniu i implementacji REST API.
Podstawowa znajomość Python oraz Linux (Bash).
Doświadczenie w optymalizacji wydajności baz danych i zapytań SQL dla dużych wolumenów danych.
Język angielski na poziomie min. B2.
Must have: ETL, Apache, NiFi, PostgreSQL, SQL, REST API, Python, Linux, Bash