Data Engineer (Spark/Data Lakehouse) | Branża bankowa
Podsumowanie oferty

(Podsumowanie wygenerowane przez AI na bazie pełnej treści ogłoszenia rekrutacyjnego)

Projekt dotyczy rozwoju procesów przetwarzania danych w bankowości, w tym rekoncyliacja i synchronizacja danych w środowisku Apache Spark, PySpark, MongoDB. Pracuje się nad warstwami danych w Data Lakehouse (Delta Lake, Apache Iceberg). Zadania obejmują implementację procesów batch i streaming, integrację MongoDB ze Spark, optymalizację wydajności, automatyzację deploymentu z Jenkins, Docker, Kubernetes oraz monitoring z Prometheus i Grafana. Wymagana jest znajomość Python, Spark SQL, Structured Streaming, CI/CD.

newyou can start ASAP

Data Engineer (Spark/Data Lakehouse) | Branża bankowa

Firma: Edge One Solutions Sp. z o.o.

od: 1 września 2026
do: 1 października 2026
brak widełekkontrakt B2B (pełny etat)
Parametry oferty
poziom:senior
tryb pracy: zdalna
lokalizacja:Wrocław, dolnośląskie
Wrocław, dolnośląskie

Wymagania

Technologie wymagane

Python
Apache Spark
PySpark
Spark SQL
DataFrames
MongoDB
Apache Iceberg
Jenkins
Prometheus
Grafana
Jira
Confluence

Technologie mile widziane

Liquibase
OpenShift
Docker

System operacyjny

Linux

Nasze wymagania

  • Minimum 4 lata doświadczenia w pracy z rozwiązaniami data engineeringowymi w środowiskach produkcyjnych.
  • Bardzo dobra znajomość Python, Apache Spark, PySpark, Spark SQL i DataFrames.
  • Doświadczenie ze Structured Streaming.
  • Praktyczna znajomość MongoDB oraz integracji ze Spark poprzez MongoDB Spark Connector.
  • Doświadczenie w modelowaniu danych dokumentowych oraz optymalizacji odczytu i indeksowania w MongoDB.
  • Praktyczne doświadczenie z Apache Iceberg, w tym wersjonowaniem tabel i operacjami merge/upsert.
  • Doświadczenie z Jenkins i procesami CI/CD (spark-unit, integration)
  • Znajomość Prometheus i Grafana.
  • Doświadczenie w pracy w Agile/Scrum lub Kanban oraz z Jira/Confluence.

Mile widziane

  • Doświadczenie z Liquibase.aZnajomość OpenShift i Dockera.

Twój zakres obowiązków

  • Projektowanie i implementacja procesów przetwarzania danych w PySpark i Spark SQL.
  • Rekoncyliacja danych pomiędzy ODS (MongoDB) a systemami źródłowymi.
  • Tworzenie reguł jakości danych oraz wykrywanie duplikatów, braków i anomalii.
  • Integracja Apache Spark z MongoDB przy użyciu MongoDB Spark Connector.
  • Projektowanie i rozwój warstw Raw/Bronze → Silver → Gold w architekturze Data Lakehouse.
  • Praca z Apache Iceberg, w tym wersjonowanie tabel oraz operacje upsert/merge.
  • Optymalizacja wydajności i kosztów przetwarzania danych w Spark.
  • Rozwój procesów batchowych i streamingowych oraz ich monitorowanie.
  • Automatyzacja deploymentu aplikacji Spark z wykorzystaniem Jenkins, Docker i Kubernetes.
  • Konfiguracja monitoringu i alertów z wykorzystaniem Prometheus i Grafana.
  • Diagnozowanie problemów związanych z jakością, spójnością i opóźnieniami danych.
  • Code review, prowadzenie warsztatów oraz tworzenie dokumentacji technicznej.
  • Współpraca z Data Engineerami, analitykami, testerami i zespołem DevOps w metodykach Scrum/Kanban.

O projekcie

Nasz Klient to jeden z wiodących banków uniwersalnych w Polsce, należący do międzynarodowej grupy finansowej. Organizacja oferuje kompleksowe usługi bankowe dla klientów indywidualnych oraz biznesowych, rozwijając nowoczesne rozwiązania w obszarze bankowości codziennej, finansowania i systemów płatniczych.
Rola obejmuje projektowanie i rozwój procesów rekoncyliacji oraz synchronizacji danych w środowisku Spark/PySpark i MongoDB. Osoba na tym stanowisku będzie również budować i utrzymywać warstwy danych w architekturze Data Lakehouse (Delta Lake / Apache Iceberg / Hudi) – od danych surowych po warstwy prezentacyjne.
Model współpracy: zdalny, z wizytami 1 dzień w miesiącu w biurze Klienta we Wrocławiu.

Tak organizujemy naszą pracę

Tak pracujemy

agilescrumkanban

Tak pracujemy nad projektem

  • Continuous Deployment
  • Continuous Integration
  • DevOps
  • narzędzia do trackowania zadań
  • testy integracyjne
  • testy jednostkowe

Nie spełniasz wszystkich wymagań, a projekt Cię zainteresował?

Nie wahaj się i aplikuj. Porozmawiajmy!
Company

To oferujemy

  • Dołączając do Edge One Solutions, otrzymujesz pełne wsparcie w rozwoju zawodowym i osobistym, co daje Ci realną szansę na budowanie kariery zgodnie z własnymi celami.
  • Zyskujesz indywidualne wsparcie Service Delivery Managera, który pomoże Ci zaplanować ścieżkę kariery i zadba o Twój komfort i satysfakcję z pracy w projekcie
  • Szkolenia, certyfikaty i konferencje - dofinansowujemy lub w pełni pokrywamy koszty rozwoju kompetencji technicznych
  • SmartChange – umożliwiamy zmianę projektu i dobieramy kolejny zgodnie z Twoimi preferencjami
  • Dbamy o Twój work-life balance, dlatego poza pracą oferujemy wyjścia integracyjne, aktywności sportowe i inspirujące webinary #edge1talks, które rozwijają i łączą ludzi.
  • Aktywność fizyczna – wspieramy sportowe inicjatywy i wynajem sal treningowych
  • Pakiet zdrowotny – prywatna opieka, karta sportowa, ubezpieczenie i wsparcie psychologiczne

Benefity

  • dofinansowanie zajęć sportowych
  • prywatna opieka medyczna
  • ubezpieczenie na życie
  • możliwość pracy zdalnej
  • elastyczny czas pracy
  • wsparcie psychologiczne

Edge One Solutions Sp. z o.o.

Społeczność Edge One Solutions powstała z miłości do nowych technologii. Liczymy ponad 350 ekspertów, a w Grupie Euvic, której jesteśmy częścią, jest nas już 5500. Indywidualne podejście pozwala na dopasowanie projektów do umiejętności, przez co realnie wspieramy się w rozwoju kompetencji.

Tak się u nas pracuje

Data Engineer (Spark/Data Lakehouse) | Branża bankowa
Zgłaszam się do:
Edge One Solutions Sp. z o.o.
Wrocław, dolnośląskie
Pracodawca zbiera zgłoszenia przez swój system.
Przejdziesz na zewnętrzny formularz.

Klikając w przycisk „Aplikuj” potwierdzasz, że zapoznałeś(‑łaś) się i akceptujesz Regulamin serwisu.



This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

Brakuje Ci informacji?

  • Upewnij się, że w treści nie ma tego, czego szukasz.
  • Zadaj pytanie, jeśli potrzebujesz więcej szczegółów dotyczących powyższej oferty.
  • Przekażemy Twoje pytanie do pracodawcy i postaramy się dostarczyć odpowiedź w ciągu 3 dni roboczych.

Udostępnij ofertę