Data/AI Engineer

Cześć! Poznaj możliwości współpracy ze Scalo! W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych. Obszary naszej działalności obejmują m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły projektowe. Co oferujemy w ramach współpracy? możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services, zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie , dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy. Daily tasks: - migrację platformy danych z Cloudera (on-premise) do architektury opartej na Google Cloud Platform (GCP) oraz wdrożenie nowych rozwiązań Data/AI w chmurze, - opracowanie strategii i ścieżki migracji, w tym podejścia oraz rekomendacji technicznych, - przeniesienie i modernizację istniejących procesów z wykorzystaniem usług GCP, - projektowanie i implementację rozwiązań Data/AI z wykorzystaniem Dataproc, Dataflow, BigQuery, Cloud Composer oraz narzędzi automatyzacji, - lokalizacja projektu: Katowice, - budżet projektu: do 200 PLN/h + VAT, w zależności od doświadczenia oraz zakresu świadczonych usług. Kompetencje wymagane do realizacji usług: doświadczenie w realizacji projektów migracyjnych z on-premise do środowisk chmurowych, mile widziane doświadczenie z platformą Cloudera lub innymi rozwiązaniami opartymi na Hadoop, bardzo dobra znajomość języka Python, w szczególności w obszarze ETL, budowy pipeline’ów danych oraz automatyzacji, bardzo dobra znajomość języka Java, umiejętność projektowania i architektowania rozwiązań danych w GCP z uwzględnieniem skalowalności, bezpieczeństwa oraz optymalizacji kosztów, praktyczna znajomość narzędzi do orkiestracji, CI/CD oraz automatyzacji, takich jak Airflow, Git, Terraform lub rozwiązania równoważne, bardzo dobra znajomość języka angielskiego na poziomie C1, umożliwiająca codzienną komunikację, prowadzenie warsztatów technicznych oraz przygotowywanie dokumentacji projektowej, doświadczenie w analizie istniejących rozwiązań legacy oraz rekomendowaniu docelowych architektur w środowiskach chmurowych, znajomość zagadnień związanych z data governance, bezpieczeństwem danych oraz kontrolą dostępu w środowiskach chmurowych. Nice to have: Cloudera, Hadoop, Python, ETL, Java, GCP, CD, Airflow, Git, Terraform, CA