Praca Data Engineer w ITFS sp. z o. o

Data Engineer / Data Platform Lead

Do współpracy przy rozwoju nowoczesnej platformy danych poszukujemy doświadczone...

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

Nie podano

Algoteque

Wygasa

Do odwołania

Wymagania

Bardzo solidne doświadczenie w projektowaniu i budowie hurtowni danych / platform analitycznych oraz procesów ETL/ELT
Swobodne i praktyczne wykorzystanie SQL oraz Python w codziennej pracy
Doświadczenie z narzędziami do orkiestracji i transformacji danych, takimi jak Apache Airflow (Cloud Composer), dbt, Dataform
Bardzo dobra znajomość Google BigQuery – zarówno od strony architektury, jak i optymalizacji wydajności oraz kosztów
Doświadczenie w roli seniora lub lidera technicznego – praca z zespołem inżynierów danych, mentoring, rozwój kompetencji
Umiejętność przekładania potrzeb biznesowych na spójną architekturę danych
Praktyczna znajomość zagadnień Data Governance, Data Quality, Data Modeling oraz Data Catalog
Bardzo dobre umiejętności komunikacyjne i zdolność pracy z interesariuszami technicznymi oraz biznesowymi
Bardzo dobra znajomość języka angielskiego (środowisko międzynarodowe)

Obowiązki

Prowadzenie i rozwój zespołu Data Engineering – mentoring techniczny, wyznaczanie kierunków rozwoju, wsparcie w rekrutacji oraz budowanie zaangażowanego zespołu
Projektowanie oraz ewolucja platformy danych opartej o rozwiązania chmurowe (BigQuery), z naciskiem na skalowalność, wydajność i bezpieczeństwo
Odpowiedzialność za architekturę przetwarzania danych oraz długofalowy rozwój środowiska analitycznego
Nadzór nad procesami ETL/ELT – ich niezawodnością, optymalizacją oraz integracją danych z wielu źródeł
Rozwijanie i porządkowanie obszaru Data Governance – standardy jakości danych, katalog danych, procesy zarządzania i odpowiedzialności
Uspójnienie oraz dalszy rozwój polityki retencji danych
Aktywne zarządzanie kosztami utrzymania platformy (w szczególności optymalizacja kosztów BigQuery) oraz współudział w planowaniu budżetu
Ścisła współpraca z biznesem, analitykami i zespołami IT w celu efektywnego wykorzystania danych w organizacji
Koordynacja współpracy z partnerami zewnętrznymi przy wdrożeniach i rozbudowie rozwiązań data-platformowych

Pełny etat

Czytaj więcej

Big Data Engineer

ALGOTEQUE to firma doradcza IT, która wspiera startupy, średnie i duże przedsięb...

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

Nie podano

Algoteque

Wygasa

Do odwołania

Wymagania

Minimum 5 lat doświadczenia zawodowego w branży IT, w tym potwierdzona praktyka w projektowaniu architektury rozwiązań danych
Biegłość w technologii Spark (minimum 3 lata doświadczenia) w procesach batch i streaming, przy wykorzystaniu języka Python lub Scala
Ekspercka wiedza z obszaru Big Data, koncepcji Hurtowni Danych oraz strategii Zarządzania Danymi (Data Management)
Praktyczna znajomość platformy Hadoop (Cloudera/Hortonworks) oraz zaawansowana biegłość w języku SQL
Doświadczenie w pracy z narzędziami strumieniowymi, takimi jak Kafka oraz Apache NiFi
Znajomość struktur i formatów danych: JSON, Parquet, ORC, Avro oraz zrozumienie scenariuszy użycia baz takich jak Hive, Kudu, HBase czy Iceberg
Stosowanie dobrych praktyk inżynierii danych, w tym wzorców projektowych i standardów dokumentowania systemów

Obowiązki

Projektowanie architektury nowoczesnych systemów Big Data oraz zaawansowanych ekosystemów przetwarzania danych
Wdrażanie rozwiązań zgodnie z wymaganiami klienta, obejmujących elementy analityki strumieniowej oraz uczenia maszynowego (Machine Learning)
Realizacja procesów przetwarzania danych w trybach batch oraz streaming
Integracja danych pochodzących z wielu zróżnicowanych źródeł w celu zapewnienia spójności analitycznej
Zapewnienie jakości rozwiązań poprzez stosowanie standardów projektowania, kodowania, testowania oraz tworzenie dokumentacji technicznej
Praca w metodyce Scrum, dbając o terminowość i wysoką jakość dostarczanych komponentów systemu

Pełny etat

Czytaj więcej

Senior Data Engineer

Dla globalnej firmy z branży rozrywki i technologii poszukujemy doświadczonych i...

Lokalizacja

Poland , Warszawa

Wynagrodzenie:

Nie podano

1dea

Wygasa

Do odwołania

Wymagania

Minimum 5 lat doświadczenia jako Data Engineer
Biegłość w projektowaniu rozproszonych systemów danych oraz pracy z relacyjnymi i nierelacyjnymi bazami danych
Doświadczenie z narzędziami do przetwarzania danych: Apache Spark, Apache Beam, Kafka, Airflow lub alternatywne
Znajomość platform chmurowych (AWS, GCP lub Azure) i ich usług danych (np. S3, Redshift, BigQuery)
Bardzo dobra znajomość języka angielskiego (komunikacja z zespołami globalnymi)

Obowiązki

Projektowanie i wdrażanie skalowalnej architektury danych dla platform reklamowych TV/CTV
Budowa i utrzymanie wydajnych pipeline’ów do przetwarzania danych w trybie batch i stream
Integracja danych z różnych źródeł (m.in. platform reklamowych, serwerów wideo, zewnętrznych dostawców)
Zapewnienie wysokiej jakości i integralności danych poprzez zaawansowane techniki czyszczenia i wstępnego przetwarzania

Pełny etat

Czytaj więcej

Senior Data Engineer

At Aristocrat, we are committed to bringing happiness to life through the power ...

Lokalizacja

India , Noida

Wynagrodzenie:

Nie podano

Aristocrat Interactive

Wygasa

Do odwołania

Wymagania

3+ years of hands-on experience in data engineering
Strong experience with: Snowflake or similar cloud data warehouses
Airflow or other orchestration tools
Python, SQL, and shell scripting
Hands-on experience with AWS, Azure, or GCP (PubSub, GCS) services
Good understanding of data architecture, security, and performance tuning
Familiarity with version control (e.g., Git), CI/CD tools, and agile workflows
Understanding of how to effectively coordinate and model data for storage, retrieval, and analysis

Obowiązki

Build, develop, and maintain batch and streaming data pipelines
Implement scalable data transformations using Python scripts and orchestrate workflows via Airflow or equivalent tools
Integrate with data platforms such as Snowflake, ensuring efficient data storage and retrieval
Generate and maintain large databases from various sources of structured and unstructured data
Write optimized SQL and Python scripts for data manipulation and ETL processes
Maintain data quality, observability, and pipeline reliability through monitoring and alerting
Collaborate with analytics and business teams to deliver high-impact data solutions
Follow guidelines for version control, documentation, and CI/CD in a collaborative environment

Co oferujemy

Solidny pakiet świadczeń
Globalne możliwości kariery

Pełny etat

Czytaj więcej

Data Engineer (Databricks)

Poszukujemy osoby z bardzo dobrą znajomością Azure Databricks (ADB) oraz Azure D...

Lokalizacja

Poland , Kraków

Wynagrodzenie:

140.00 - 190.00 PLN / Godzina

Astek

Wygasa

Do odwołania

Wymagania

Azure Databricks (ADB): PySpark, Spark SQL, Delta Lake, job clusters vs all-purpose clusters, workflows
Azure Data Factory (ADF): pipeline’y, data flows, triggery, Integration Runtime, parametryzacja, orkiestracja
Programowanie: Python i PySpark (modularność, obsługa błędów, testy jednostkowe)
Batch & Streaming: Structured Streaming, checkpointing, watermarking, wzorce orkiestracji
Optymalizacja wydajności: tuning Sparka, strategie partycjonowania, Parquet/Delta, cache/persistence, AQE, obsługa skew, optymalizacja joinów i shuffle
SQL: zaawansowany SQL do transformacji, tuningu i debugowania
Bazy danych / storage: relacyjne bazy danych (SQL Server, PostgreSQL) oraz ADLS Gen2
Azure: ADLS, Key Vault, Event Hubs / Service Bus, podstawy sieci i IAM
Kontrola wersji i CI/CD: Git (GitHub / Azure DevOps), pipeline’y build & release dla Databricks i ADF

Obowiązki

Projektowanie, budowa i utrzymanie potoków danych w Azure Data Factory (lub Synapse Pipelines) oraz Azure Databricks dla przetwarzania batchowego i strumieniowego
Tworzenie skalowalnych rozwiązań przetwarzania danych w PySpark (preferowane Delta Lake)
Implementacja pipeline’ów streamingowych (Structured Streaming, Event Hubs, Kafka) oraz niezawodnych workflow batchowych wraz z monitoringiem i alertami
Optymalizacja wydajności Spark (partycjonowanie, cache, broadcast joins, AQE, tuning rozmiarów plików) oraz zarządzanie pamięcią i klastrami
Modelowanie danych pod analitykę i ML (architektura medallion: bronze / silver / gold)
Wdrażanie praktyk CI/CD i DevOps dla rozwiązań data engineeringowych
Zapewnienie jakości danych, lineage i governance (np. Great Expectations, Deequ, Azure Purview)
Współpraca z architektami danych, analitykami i zespołami produktowymi
Tworzenie dokumentacji technicznej i materiałów do przekazywania wiedzy

Co oferujemy

Długoterminowa współpraca
Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
Mentoring Competence Center – bycie członkiem społeczności CC od pierwszego dnia pracy jest szansą na rozwijanie swoich umiejętności, uczestniczenie w różnych konferencjach oraz dzielenie się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
Jasna ścieżka kariery
Pakiet benefitów pracowniczych (Multisport, prywatna opieka mediczna, ubezpieczenie na życie)
Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

Pełny etat

Czytaj więcej

Cloud Data Engineer (GCP & BigQuery)

Do zespołu Rozwiązań Cyfrowych i E-Commerce (prowadzonego przez Miłosza Sokoła) ...

Lokalizacja

Poland , Warszawa

Wynagrodzenie:

Nie podano

Medicover

Wygasa

Do odwołania

Wymagania

Minimum 2-3 lata doświadczenia na stanowisku Data Engineer, ze szczególnym uwzględnieniem projektów chmurowych i narzędzi GCP oraz BigQuery
Ekspercka znajomość Google Cloud Platform: Dogłębna wiedza na temat usług składowania i przetwarzania danych wewnątrz GCP
Biegłość w BigQuery: Zaawansowana optymalizacja zapytań SQL, zarządzanie partycjonowaniem, klastrowaniem i kosztami
Praktyczna znajomość optymalizacji zapytań SQL
Znajomość Power BI
Inżynieria danych: Praktyka w budowie procesów ETL/ELT oraz integracji danych z systemów zewnętrznych (np. Google Analytics, API, DataLayer)
Wykształcenie: Wyższe techniczne (Informatyka lub pokrewne)
Język angielski: Minimum na poziomie B2 (dokumentacja techniczna i komunikacja)

Obowiązki

Projektowanie i rozwój nowoczesnej architektury danych w oparciu o ekosystem Google Cloud Platform (GCP) oraz BigQuery
Samodzielne projektowanie rozwiązań bazodanowych oraz raportowych
Optymalizacja wydajnościowa i kosztowa zapytań oraz procesów BigQuery
Aktywne doradztwo technologiczne – dobieranie narzędzi GCP pod konkretne potrzeby biznesowe i raportowe
Wdrażanie i nadzór nad standardami inżynierii danych (od projektu po monitoring)
Współpraca z partnerami biznesowymi w celu przekucia wymagań w gotowe rozwiązania analityczne
Prowadzenie przeglądów technologicznych (R&D) i rekomendowanie innowacji w obszarze Big Data
Integracja danych z wielu źródeł
Udział w planowaniu i prowadzeniu projektów wdrażania rozwiązań w obszarze raportowania

Co oferujemy

Prywatną opiekę medyczną dla Ciebie i Twojej rodziny
Dofinansowanie platformy Medicover Benefits (karty sportowe, bilety do kina/teatru)
Zniżki na usługi i produkty Medicover oraz grupowe ubezpieczenie NNW
Udział w projektach well-beingowych „Zdrowie przez cały rok” i wolontariacie pracowniczym

Pełny etat

Czytaj więcej

Senior Cloud Data Engineer

Miejsce pracy: głównie zdalnie (wizyty w biurze w Warszawie 1x w miesiącu, czase...

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

120.00 - 145.00 PLN / Godzina

ITFS sp. z o. o

Wygasa

Do odwołania

Wymagania

Min. 5 lat doświadczenia zawodowego z Oracle PL/SQL, w tym procedur składowanych, funkcji, pakietów i triggerów
Wykształcenie wyższe informatyczne lub pokrewne
Min. 2-3 lata doświadczenia z GCP BigQuery i Dataform (modelowanie danych, optymalizacja zapytań, manipulacja danymi) – najbardziej preferowane
dopuszczalne doświadczenie z Azure/AWS
Praktyka z systemami kontroli wersji Git/Bitbucket/Azure Repos
Doświadczenie w pracy z hurtowniami danych i procesami ETL
Umiejętność integracji różnych źródeł danych
Dobra znajomość analitycznych funkcji Oracle
Znajomość j. angielskiego na poziomie B2+

Obowiązki

Implementacja nowych funkcjonalności i logiki zgodnie z wymaganiami biznesowymi w środowisku Google Cloud Platform (głównie BigQuery i Dataform)
Praca z relacyjnymi i wielowymiarowymi bazami danych
Udział w dopasowywaniu i skalowaniu rozwiązań, diagnozowaniu problemów, optymalizacji kodu i kontrolach jakości po wdrożeniu, z naciskiem na wydajność, efektywność zasobów i optymalizację kosztów w GCP
Rozwój i optymalizacja procesów transformacji i ładowania danych
Migracja i modernizacja istniejących struktur danych Oracle do BigQuery z wykorzystaniem natywnych funkcji chmurowych
Skuteczne wykorzystanie standardowych komponentów pipeline firmy, proponowanie dostosowań i najlepszych praktyk w metodach data engineering
Współpraca z zespołami integracji oraz data & analytics w celu zapewnienia i utrzymania zautomatyzowanej linii danych podczas migracji
Zapewnienie zgodności z regulacjami prywatności i bezpieczeństwa danych
integracja standardów bezpieczeństwa firmy z środowiskiem GCP
Współpraca z zespołami wielofunkcyjnymi, analitykami danych i interesariuszami biznesowymi w celu zrozumienia i doprecyzowania wymagań danych

Co oferujemy

dofinansowanie do pakietu medycznego Enel-med i Multisport
podstawowy pakiet księgowy - darmowy do trzech faktur miesięcznie

Czytaj więcej

Expert DevOps Engineer - Cloud Data Platform

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

20000.00 - 24000.00 PLN / Miesiąc

220 Marketing Group

Wygasa

Do odwołania

Wymagania

masz bardzo dobrą znajomość Google Cloud Platform, w szczególności rozwiązań do przetwarzania i orkiestracji danych (np. BigQuery, Dataflow, Dataproc, Airflow)
posiadasz doświadczenie w projektach migracyjnych on‑prem → cloud, mile widziana praca z Cloudera lub ekosystemem Hadoop
bardzo dobrze znasz Python (ETL, pipeline’y danych, automatyzacja)
dobrze znasz język Java
masz doświadczenie w projektowaniu i utrzymaniu pipeline’ów danych w środowiskach produkcyjnych
potrafisz projektować rozwiązania chmurowe z uwzględnieniem skalowalności, bezpieczeństwa oraz optymalizacji kosztowej
bardzo dobrze posługujesz się językiem angielskim (C1) – codzienna komunikacja

Obowiązki

odpowiadasz za techniczne przygotowanie i realizację migracji platformy danych z Cloudera (on‑premises) do środowiska Google Cloud Platform
projektujesz, rozwijasz i utrzymujesz narzędzia oraz automatyzacje wspierające proces migracji danych, w tym skrypty, pipeline’y oraz mechanizmy transferu danych historycznych i przyrostowych
budujesz i utrzymujesz rozwiązania w GCP do ładowania danych (data ingestion), przetwarzania oraz orkiestracji procesów (m.in. harmonogramowanie, zarządzanie zależnościami, retry, monitoring)
współpracujesz z zespołami danych i architektury, dbając o zgodność rozwiązań z obowiązującymi standardami platformowymi, wymaganiami bezpieczeństwa, niezawodności i skalowalności
wspierasz uruchomienia, testy migracyjne oraz proces stabilizacji środowisk GCP, a także bierzesz udział w ich optymalizacji kosztowej i operacyjnej

Co oferujemy

Pracę w dojrzałym biznesowo i technologicznie ponad 1000-osobowym Pionie IT
Kompleksowy rozwój kompetencji w zakresie wytwarzania oprogramowania, bezpieczeństwa IT, metodyki DevOps poprzez udział w projektach m.in. dotyczących migracji naszych środowisk i aplikacji do chmury publicznej
Dostęp do platform edukacyjnych m.in. Microsoft ESI, Udemy Business, eTutor oraz dofinansowanie niezbędnych szkoleń technicznych
Współpracę we wzajemnie uczących się społecznościach programistycznych, analitycznych, testerskich, Women in Tech, w tym pracę z mentorami i uczenie się na stażu towarzyszącym
Pakiet medyczny, ubezpieczenie na życie, platformę Mindgram, Pracowniczy Program Emerytalny i Program Profilaktyki Onkologicznej
Karty sportowe (Medicover Sport i Multisport) i kafeterię benefitową na punkty
Dodatkowe dni wolne
Program Poleceń Pracowniczych ze świadczeniem pieniężnym
Możliwość skorzystania z autorskich kosztów uzyskania przychodu (do 70%) za wkład twórczy w rozwój oprogramowania
Atrakcyjne konkursy z nagrodami i rabaty do wybranych sklepów

Pełny etat

Czytaj więcej

Wybierz kraj

Data Engineer

Opis stanowiska

Obowiązki

Wymagania

Mile widziane

Looking for more opportunities?

Data Engineer

Data Engineer / Data Platform Lead

Big Data Engineer

Senior Data Engineer

Senior Data Engineer

Data Engineer (Databricks)

Cloud Data Engineer (GCP & BigQuery)

Senior Cloud Data Engineer

Expert DevOps Engineer - Cloud Data Platform

Nasze AI odpowiada w Twoim języku