Data Engineer (DataBricks)

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych.

Obszary naszej działalności obejmują m.in.:

• doradztwo technologiczne,

• tworzenie oprogramowania,

• systemy wbudowane,

• rozwiązania chmurowe,

• zarządzanie danymi,

• dedykowane zespoły projektowe.

Cześć! Poznaj możliwości współpracy ze Scalo!

Zakres współpracy obejmuje:

projekt realizowany w branży finansowej w obszarze AML,
współpracę w zespole analityczno-modelarskim z Data Analitykami oraz Developerami,
rozwój i migrację warstwy danych AML obejmującą centralizację danych z wielu źródeł,
migrację istniejących procesów ETL do nowego środowiska analitycznego,
dostosowanie architektury danych oraz procesów do środowiska opartego o Databricks,
projektowanie, modelowanie, rekomendowanie oraz implementację rozwiązań w PySpark z wykorzystaniem Databricks,
rozwój warstwy danych na poziomie gold w hurtowni danych,
integrację procesów z różnorodnymi źródłami danych, w tym API oraz źródłami wsadowymi,
wykorzystanie technologii Python, PySpark, SQL (Teradata) oraz Databricks,
świadczenie usług w modelu zdalnym z wizytami w biurze raz na kwartał w Warszawie, Wrocławiu lub Poznaniu,
stawka do 130 PLN/h + VAT w oparciu o współpracę B2B.

Kompetencje wymagane do realizacji usług:

wykształcenie wyższe STEM,
5–8 lat doświadczenia w realizacji projektów związanych z przetwarzaniem i analizą danych,
bardzo dobra znajomość Databricks, w tym umiejętność projektowania i implementacji rozwiązań, a nie wyłącznie korzystania z platformy od strony użytkownika,
praktyczne doświadczenie w wykorzystaniu PySpark,
doświadczenie w projektowaniu oraz migracji procesów ETL,
umiejętność modelowania oraz przetwarzania danych w środowiskach hurtowni danych,
doświadczenie w parsowaniu danych,
doświadczenie w integracji procesów ze źródłami danych opartymi o API oraz procesy batchowe,
bardzo dobra znajomość języka Python,
praktyczna znajomość SQL, w szczególności środowiska Teradata,
wysoko rozwinięte umiejętności analityczne,umiejętność współpracy w zespołach projektowych,
komunikatywność oraz otwartość na współpracę zespołową.

Co oferujemy w ramach współpracy?

możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services,
zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie,
dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.

Stos technologiczny - wpisz 3 lub 4 główne technologie oddzielając je przecinkiem np: Java, AWS, Spring, Hibernate

ETL, PySpark, Databricks

Model współpracy - jeśli jest taka konieczność zmień na UZ

B2B

Doświadczenie - wpisz Junior lub Regular lub Senior lub Expert

Senior

Budżet projektu - wpisz górną granicę widełek np. do 150 PLN/h

do 130 PLN/h

Tryb pracy - wpisz: Zdalnie lub Hybrydowo lub Stacjonarnie

zdalnie

Cześć! Poznaj możliwości współpracy ze Scalo!

Zakres współpracy obejmuje:

Kompetencje wymagane do realizacji usług:

Co oferujemy w ramach współpracy?

Stos technologiczny - wpisz 3 lub 4 główne technologie oddzielając je przecinkiem np: Java, AWS, Spring, Hibernate

Model współpracy - jeśli jest taka konieczność zmień na UZ

Doświadczenie - wpisz Junior lub Regular lub Senior lub Expert

Budżet projektu - wpisz górną granicę widełek np. do 150 PLN/h

Tryb pracy - wpisz: Zdalnie lub Hybrydowo lub Stacjonarnie

Zobacz jak rozpocząć współpracę ze Scalo:

job_post.job_location

job_post.job_details

job_post.job_location