Praca: Data Engineer [rekrutacja online]


Data Engineer [rekrutacja online]

Location: Wrocław

 


Daily activities

Network Engineering department provides in-depth analysis of worldwide telecommunications networks. As a Data Engineer you will be working in a team responsible for designing, building, and maintaining datasets and data pipelines. If youre keen on working with big data sets, using modern technologies to collect and integrate data from various sources, finding not obvious insights from collected data - join us - even if you just want to begin your data journey!

 

We work with:

  • Python and/or Scala for data processing
  • Large datasets stored in various databases (blob: HDFS+Parquet, S3; PostgreSQL; MongoDB)
  • Airflow for data pipelines orchestration
  • Kubernetes / Docker for containerization
  • Selected BIs for data visualization (Tableau, PowerBI, Superset)

Our expectations:

  • good Python knowledge (even better if combined with data libs: pandas, NumPy)
  • knowledge of Scala is a plus, interest in learning Scala is key!
  • familiarity with Apache Spark and column-oriented data formats (parquet / orc)
  • familiarity with partitioning, indexing and retention strategies
  • good knowledge of SQL in the context of working with > 1mln rows tables
  • ability to work with HDFS and S3 storages
  • nice to have: Azure in the context of data processing (data bricks, adls, data factory, synapse)
  • Master’s or Bachelor’s degree in Computer Science, Software Technology or equivalent education
  • Strong communication and teamwork skills
  • Proficiency in English (both written and spoken)

Sprawdź podobne oferty z wielkopolskiego

Data Analyst / Developer

Migracja procedur i kodu z obecnych platform (9.4 do Viya 3.X) Rozwój narzędzi Weryfikacja wyników Dzielenie się wiedzą w zakresie SAS Viya Wdrażanie użytkowników do pracy...

Młodszy Programista Baz Danych

Do Twoich zadań będą należeć m.in.: zarządzanie lokalnym serwerem baz danych MS SQL Server, tworzenie nowych i modyfikacja istniejących aplikacji .NET opartych o lokalne...

Data Engineer [rekrutacja online]

Location: Wrocław Daily activities Network Engineering department provides in-depth analysis of worldwide telecommunications networks. As a Data Engineer you will be working in...

Najnowsze oferty pracy:

  • Firma:  Avenga
    Dodane:  dzisiaj
    Lokalizacja:  wielkopolskie/
    The Security Expert will be utilized as a shared skill between several teams which are releasing customer-faced applications. The main goal is to set up standard procedures...
  • Firma:  INSTAL-FILTER SA
    Dodane:  dzisiaj
    Lokalizacja:  wielkopolskie/ Kościan
    Zakres obowiązków: Nadzór oraz prowadzenie uruchomień i przeglądów serwisowych na obiektach przemysłowych; Realizacja zleceń zgodnie z harmonogramem i z założeniami...
  • Firma:  INSTAL-FILTER SA
    Dodane:  dzisiaj
    Lokalizacja:  wielkopolskie/ Kościan
    Zakres obowiązków: Wykonywanie przeglądów serwisowych na obiektach przemysłowych; Realizacja zleceń zgodnie z harmonogramem i z założeniami technicznymi; Ścisła...
  • Firma:  INSTAL-FILTER SA
    Dodane:  dzisiaj
    Lokalizacja:  wielkopolskie/ Kościan
    Zakres obowiązków: Przygotowywanie dokumentacji projektowej w zakresie budowalnym; Opracowywanie koncepcji konstrukcji przemysłowych; Realizacja projektów zgodnie z...
Więcej ofert pracy

Praca

Stanowisko: