Praca Data Engineer w Robert Bosch Sp. z o.o. (Warszawa)

Data Engineer

Miejsce pracy: 100% zdalnie. Start pracy: ASAP (preferowany max 30 dniowy okres ...

Lokalizacja

Poland

Wynagrodzenie:

135.00 - 160.00 PLN / Godzina

ITFS sp. z o. o

Wygasa

Do odwołania

Wymagania

min 5 lat doświadczenia na stanowisku Data Engineer
doświadczenie w realizacji projektów budowy hurtowni danych / data lake / data platform klasy enterprise
bardzo dobra znajomość Google Cloud Platform w zakresie: BigQuery, Google Cloud Storage, Dataflow (batch & streaming), Composer / Airflow, podstawowa wiedza w obszarze GKE
bardzo dobra znajomość i codzienne praktyczne doświadczenie z DBT
umiejętność projektowania i implementacji data pipeline (ETL/ELT)
bardzo dobra praktyczna znajomość Python w kontekście przetwarzania danych
doświadczenie z przynajmniej jednym z narzędzi orkiestracji strumieniowej (Kafka / Pub/Sub / Dataflow Streaming)
umiejętność pracy w IaC (Terraform – bardzo duże plus)
doświadczenie z Docker, Kubernetes
doświadczenie w testowaniu jakości danych i monitoringu (SLA, alerty, data quality framework)

Obowiązki

codzienna praca z dbt – budowa, utrzymanie i optymalizacja transformacji danych
praca z BigQuery - codzienne zapytania, modelowanie, zarządzanie dużymi zbiorami
Google Cloud Storage – etapowanie, przechowywanie i transfer danych między systemami
orkiestracja, harmonogramy i monitoring w Google Composer / Airflow
główny język do tworzenia pipeline, automatyzacji i usług wspierających w Python
praca z Kafka, Dataflow, Terraform, GKE

Czytaj więcej

Data Engineer / Data Platform Lead

Do współpracy przy rozwoju nowoczesnej platformy danych poszukujemy doświadczone...

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

Nie podano

Algoteque

Wygasa

Do odwołania

Wymagania

Bardzo solidne doświadczenie w projektowaniu i budowie hurtowni danych / platform analitycznych oraz procesów ETL/ELT
Swobodne i praktyczne wykorzystanie SQL oraz Python w codziennej pracy
Doświadczenie z narzędziami do orkiestracji i transformacji danych, takimi jak Apache Airflow (Cloud Composer), dbt, Dataform
Bardzo dobra znajomość Google BigQuery – zarówno od strony architektury, jak i optymalizacji wydajności oraz kosztów
Doświadczenie w roli seniora lub lidera technicznego – praca z zespołem inżynierów danych, mentoring, rozwój kompetencji
Umiejętność przekładania potrzeb biznesowych na spójną architekturę danych
Praktyczna znajomość zagadnień Data Governance, Data Quality, Data Modeling oraz Data Catalog
Bardzo dobre umiejętności komunikacyjne i zdolność pracy z interesariuszami technicznymi oraz biznesowymi
Bardzo dobra znajomość języka angielskiego (środowisko międzynarodowe)

Obowiązki

Prowadzenie i rozwój zespołu Data Engineering – mentoring techniczny, wyznaczanie kierunków rozwoju, wsparcie w rekrutacji oraz budowanie zaangażowanego zespołu
Projektowanie oraz ewolucja platformy danych opartej o rozwiązania chmurowe (BigQuery), z naciskiem na skalowalność, wydajność i bezpieczeństwo
Odpowiedzialność za architekturę przetwarzania danych oraz długofalowy rozwój środowiska analitycznego
Nadzór nad procesami ETL/ELT – ich niezawodnością, optymalizacją oraz integracją danych z wielu źródeł
Rozwijanie i porządkowanie obszaru Data Governance – standardy jakości danych, katalog danych, procesy zarządzania i odpowiedzialności
Uspójnienie oraz dalszy rozwój polityki retencji danych
Aktywne zarządzanie kosztami utrzymania platformy (w szczególności optymalizacja kosztów BigQuery) oraz współudział w planowaniu budżetu
Ścisła współpraca z biznesem, analitykami i zespołami IT w celu efektywnego wykorzystania danych w organizacji
Koordynacja współpracy z partnerami zewnętrznymi przy wdrożeniach i rozbudowie rozwiązań data-platformowych

Pełny etat

Czytaj więcej

Big Data Engineer

ALGOTEQUE to firma doradcza IT, która wspiera startupy, średnie i duże przedsięb...

Lokalizacja

Poland , Warsaw

Wynagrodzenie:

Nie podano

Algoteque

Wygasa

Do odwołania

Wymagania

Minimum 5 lat doświadczenia zawodowego w branży IT, w tym potwierdzona praktyka w projektowaniu architektury rozwiązań danych
Biegłość w technologii Spark (minimum 3 lata doświadczenia) w procesach batch i streaming, przy wykorzystaniu języka Python lub Scala
Ekspercka wiedza z obszaru Big Data, koncepcji Hurtowni Danych oraz strategii Zarządzania Danymi (Data Management)
Praktyczna znajomość platformy Hadoop (Cloudera/Hortonworks) oraz zaawansowana biegłość w języku SQL
Doświadczenie w pracy z narzędziami strumieniowymi, takimi jak Kafka oraz Apache NiFi
Znajomość struktur i formatów danych: JSON, Parquet, ORC, Avro oraz zrozumienie scenariuszy użycia baz takich jak Hive, Kudu, HBase czy Iceberg
Stosowanie dobrych praktyk inżynierii danych, w tym wzorców projektowych i standardów dokumentowania systemów

Obowiązki

Projektowanie architektury nowoczesnych systemów Big Data oraz zaawansowanych ekosystemów przetwarzania danych
Wdrażanie rozwiązań zgodnie z wymaganiami klienta, obejmujących elementy analityki strumieniowej oraz uczenia maszynowego (Machine Learning)
Realizacja procesów przetwarzania danych w trybach batch oraz streaming
Integracja danych pochodzących z wielu zróżnicowanych źródeł w celu zapewnienia spójności analitycznej
Zapewnienie jakości rozwiązań poprzez stosowanie standardów projektowania, kodowania, testowania oraz tworzenie dokumentacji technicznej
Praca w metodyce Scrum, dbając o terminowość i wysoką jakość dostarczanych komponentów systemu

Pełny etat

Czytaj więcej

Senior Data Engineer

Dla globalnej firmy z branży rozrywki i technologii poszukujemy doświadczonych i...

Lokalizacja

Poland , Warszawa

Wynagrodzenie:

Nie podano

1dea

Wygasa

Do odwołania

Wymagania

Minimum 5 lat doświadczenia jako Data Engineer
Biegłość w projektowaniu rozproszonych systemów danych oraz pracy z relacyjnymi i nierelacyjnymi bazami danych
Doświadczenie z narzędziami do przetwarzania danych: Apache Spark, Apache Beam, Kafka, Airflow lub alternatywne
Znajomość platform chmurowych (AWS, GCP lub Azure) i ich usług danych (np. S3, Redshift, BigQuery)
Bardzo dobra znajomość języka angielskiego (komunikacja z zespołami globalnymi)

Obowiązki

Projektowanie i wdrażanie skalowalnej architektury danych dla platform reklamowych TV/CTV
Budowa i utrzymanie wydajnych pipeline’ów do przetwarzania danych w trybie batch i stream
Integracja danych z różnych źródeł (m.in. platform reklamowych, serwerów wideo, zewnętrznych dostawców)
Zapewnienie wysokiej jakości i integralności danych poprzez zaawansowane techniki czyszczenia i wstępnego przetwarzania

Pełny etat

Czytaj więcej

Senior Data Engineer

At Aristocrat, we are committed to bringing happiness to life through the power ...

Lokalizacja

India , Noida

Wynagrodzenie:

Nie podano

Aristocrat Interactive

Wygasa

Do odwołania

Wymagania

3+ years of hands-on experience in data engineering
Strong experience with: Snowflake or similar cloud data warehouses
Airflow or other orchestration tools
Python, SQL, and shell scripting
Hands-on experience with AWS, Azure, or GCP (PubSub, GCS) services
Good understanding of data architecture, security, and performance tuning
Familiarity with version control (e.g., Git), CI/CD tools, and agile workflows
Understanding of how to effectively coordinate and model data for storage, retrieval, and analysis

Obowiązki

Build, develop, and maintain batch and streaming data pipelines
Implement scalable data transformations using Python scripts and orchestrate workflows via Airflow or equivalent tools
Integrate with data platforms such as Snowflake, ensuring efficient data storage and retrieval
Generate and maintain large databases from various sources of structured and unstructured data
Write optimized SQL and Python scripts for data manipulation and ETL processes
Maintain data quality, observability, and pipeline reliability through monitoring and alerting
Collaborate with analytics and business teams to deliver high-impact data solutions
Follow guidelines for version control, documentation, and CI/CD in a collaborative environment

Co oferujemy

Solidny pakiet świadczeń
Globalne możliwości kariery

Pełny etat

Czytaj więcej

Data Engineer (Databricks)

Poszukujemy osoby z bardzo dobrą znajomością Azure Databricks (ADB) oraz Azure D...

Lokalizacja

Poland , Kraków

Wynagrodzenie:

140.00 - 190.00 PLN / Godzina

Astek

Wygasa

Do odwołania

Wymagania

Azure Databricks (ADB): PySpark, Spark SQL, Delta Lake, job clusters vs all-purpose clusters, workflows
Azure Data Factory (ADF): pipeline’y, data flows, triggery, Integration Runtime, parametryzacja, orkiestracja
Programowanie: Python i PySpark (modularność, obsługa błędów, testy jednostkowe)
Batch & Streaming: Structured Streaming, checkpointing, watermarking, wzorce orkiestracji
Optymalizacja wydajności: tuning Sparka, strategie partycjonowania, Parquet/Delta, cache/persistence, AQE, obsługa skew, optymalizacja joinów i shuffle
SQL: zaawansowany SQL do transformacji, tuningu i debugowania
Bazy danych / storage: relacyjne bazy danych (SQL Server, PostgreSQL) oraz ADLS Gen2
Azure: ADLS, Key Vault, Event Hubs / Service Bus, podstawy sieci i IAM
Kontrola wersji i CI/CD: Git (GitHub / Azure DevOps), pipeline’y build & release dla Databricks i ADF

Obowiązki

Projektowanie, budowa i utrzymanie potoków danych w Azure Data Factory (lub Synapse Pipelines) oraz Azure Databricks dla przetwarzania batchowego i strumieniowego
Tworzenie skalowalnych rozwiązań przetwarzania danych w PySpark (preferowane Delta Lake)
Implementacja pipeline’ów streamingowych (Structured Streaming, Event Hubs, Kafka) oraz niezawodnych workflow batchowych wraz z monitoringiem i alertami
Optymalizacja wydajności Spark (partycjonowanie, cache, broadcast joins, AQE, tuning rozmiarów plików) oraz zarządzanie pamięcią i klastrami
Modelowanie danych pod analitykę i ML (architektura medallion: bronze / silver / gold)
Wdrażanie praktyk CI/CD i DevOps dla rozwiązań data engineeringowych
Zapewnienie jakości danych, lineage i governance (np. Great Expectations, Deequ, Azure Purview)
Współpraca z architektami danych, analitykami i zespołami produktowymi
Tworzenie dokumentacji technicznej i materiałów do przekazywania wiedzy

Co oferujemy

Długoterminowa współpraca
Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
Mentoring Competence Center – bycie członkiem społeczności CC od pierwszego dnia pracy jest szansą na rozwijanie swoich umiejętności, uczestniczenie w różnych konferencjach oraz dzielenie się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
Jasna ścieżka kariery
Pakiet benefitów pracowniczych (Multisport, prywatna opieka mediczna, ubezpieczenie na życie)
Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

Pełny etat

Czytaj więcej

Cloud Data Engineer (GCP & BigQuery)

Do zespołu Rozwiązań Cyfrowych i E-Commerce (prowadzonego przez Miłosza Sokoła) ...

Lokalizacja

Poland , Warszawa

Wynagrodzenie:

Nie podano

Medicover

Wygasa

Do odwołania

Wymagania

Minimum 2-3 lata doświadczenia na stanowisku Data Engineer, ze szczególnym uwzględnieniem projektów chmurowych i narzędzi GCP oraz BigQuery
Ekspercka znajomość Google Cloud Platform: Dogłębna wiedza na temat usług składowania i przetwarzania danych wewnątrz GCP
Biegłość w BigQuery: Zaawansowana optymalizacja zapytań SQL, zarządzanie partycjonowaniem, klastrowaniem i kosztami
Praktyczna znajomość optymalizacji zapytań SQL
Znajomość Power BI
Inżynieria danych: Praktyka w budowie procesów ETL/ELT oraz integracji danych z systemów zewnętrznych (np. Google Analytics, API, DataLayer)
Wykształcenie: Wyższe techniczne (Informatyka lub pokrewne)
Język angielski: Minimum na poziomie B2 (dokumentacja techniczna i komunikacja)

Obowiązki

Projektowanie i rozwój nowoczesnej architektury danych w oparciu o ekosystem Google Cloud Platform (GCP) oraz BigQuery
Samodzielne projektowanie rozwiązań bazodanowych oraz raportowych
Optymalizacja wydajnościowa i kosztowa zapytań oraz procesów BigQuery
Aktywne doradztwo technologiczne – dobieranie narzędzi GCP pod konkretne potrzeby biznesowe i raportowe
Wdrażanie i nadzór nad standardami inżynierii danych (od projektu po monitoring)
Współpraca z partnerami biznesowymi w celu przekucia wymagań w gotowe rozwiązania analityczne
Prowadzenie przeglądów technologicznych (R&D) i rekomendowanie innowacji w obszarze Big Data
Integracja danych z wielu źródeł
Udział w planowaniu i prowadzeniu projektów wdrażania rozwiązań w obszarze raportowania

Co oferujemy

Prywatną opiekę medyczną dla Ciebie i Twojej rodziny
Dofinansowanie platformy Medicover Benefits (karty sportowe, bilety do kina/teatru)
Zniżki na usługi i produkty Medicover oraz grupowe ubezpieczenie NNW
Udział w projektach well-beingowych „Zdrowie przez cały rok” i wolontariacie pracowniczym

Pełny etat

Czytaj więcej

Backend Developer | Data Engineer

PSE Innowacje Sp. z o.o. poszukuje osoby na stanowisko Backend Developer | Data ...

Lokalizacja

Poland , Wrocław

Wynagrodzenie:

Nie podano

PSE Innowacje sp. z o. o.

Wygasa

Do odwołania

Wymagania

Doświadczenia w przetwarzaniu dużych zbiorów danych oraz budowę stabilnych rozwiązań produkcyjnych
Bardzo dobra znajomość SQL
Znajomość narzędzi do budowania orkiestracji przetwarzania danych (np. Airflow, NiFi)
Znajomość frameworków lub bibliotek do przetwarzania danych (np. Apache Spark, dbt)
Znajomość dobrych praktyk CI/CD oraz pracy z repozytoriami kodu (np. GitLab, GitHub pipelines)
Doświadczenie z konteneryzacją (Docker, Podman, Kubernetes lub OpenShift)
Umiejętność pracy z narzędziami eksploracji danych / BI (np. PowerBI, Superset, Dremio)

Obowiązki

Projektowanie i budowanie architektury danych na potrzeby organizacji
Integracja danych z różnych źródeł, zarówno batch, jak i stream
Automatyzacja procesów ETL oraz orkiestracja przepływów danych
Wsparcie dla zespołów analitycznych, data scientistów oraz użytkowników biznesowych w dostępie do danych
Zapewnienie jakości dostarczanego kodu, wsparcie w analizie, testowaniu i usuwaniu błędów w oprogramowaniu
Współtworzenie oraz rozwój platformy danych (Data Lakehouse) z naciskiem na przetwarzanie danych oraz eksplorację danych
Praca w interdyscyplinarnym zespole w podejściu Agile

Co oferujemy

Stabilne zatrudnienie na podstawie umowy o pracę
Konkurencyjny system wynagrodzeń, składający się z wynagrodzenia podstawowego oraz atrakcyjnego systemu premiowego
Indywidualny budżet szkoleniowy
Klarowna ścieżka rozwoju zawodowego
Elastyczne godziny pracy
Prywatna opieka medyczna
Karta Multisport
Ubezpieczenie na życie na preferencyjnych warunkach
Dodatkowe świadczenia w ramach ZFŚS
Dodatkowy dzień wolny z okazji Dnia Energetyka – 14 sierpnia

Pełny etat

Czytaj więcej

Wybierz kraj

Data Engineer

Opis stanowiska

Obowiązki

Wymagania

Co oferujemy

Looking for more opportunities?

Data Engineer

Data Engineer

Data Engineer / Data Platform Lead

Big Data Engineer

Senior Data Engineer

Senior Data Engineer

Data Engineer (Databricks)

Cloud Data Engineer (GCP & BigQuery)

Backend Developer | Data Engineer

Nasze AI odpowiada w Twoim języku