GCP Developer
Коротко
Develops and maintains data processing solutions in GCP, building batch and streaming pipelines with BigQuery, DBT, Dataflow, Composer, and Cloud Storage · Needs: Experience designing and building cloud solutions in GCP, practical knowledge of Dataproc, Composer (Airflow), Cloud Storage, and BigQuery, very good Python
Описание от работодателя
Dla jednego z naszych klientów z branży bankowej, poszukujemy doświadczonego GCP Developera, który odpowiedzialny będzie za rozwój i utrzymanie rozwiązań przetwarzania danych w środowisku GCP.
Daily tasks:
- Rozwój i utrzymanie rozwiązań przetwarzania danych w środowisku Google Cloud Platform (GCP).
- Tworzenie potoków danych (batch i streaming) z wykorzystaniem usług BigQuery, DBT, Dataflow, Composer i Cloud Storage.
- Programowanie w językach Python i SQL.
- Budowa i optymalizacja struktur danych wspierających analitykę i raportowanie.
- Automatyzacja wdrożeń z wykorzystaniem Terraform oraz repozytoriów GitHub.
- Testowanie, monitorowanie i utrzymanie rozwijanych rozwiązań.
- Współpraca z analitykami, architektami oraz zespołami projektowymi przy realizacji wymagań biznesowych.
Wymagane
kompetencje:
Specjalista/tka posiada doświadczenie w projektowaniu i budowie rozwiązań
chmurowych w środowisku Google Cloud Platform (GCP) .
Dysponuje praktyczną
wiedzą z zakresu architektury, projektowania i implementacji systemów
przetwarzania danych oraz integracji systemów z wykorzystaniem usług Dataproc,
Composer (Airflow), Cloud Storage oraz Big Query . DBT mile widziany.
Posiada bardzo dobrą znajomość języka programowania Python i SQL ,
umożliwiającą samodzielne tworzenie i rozwój aplikacji oraz komponentów
integracyjnych działających w środowisku chmurowym.
Wykazuje się doświadczeniem
w pracy z repozytoriami kodu źródłowego GitHub oraz zarządzaniem artefaktami
aplikacyjnymi przy wykorzystaniu Google Artifact Registry.
Mile widziana
znajomość Terraform.
Must have: Python, SQL, GCP, Cloud Storage, BigQuery
Nice to have: Terraform