Data Engineer [rekrutacja online]

Data Engineer [rekrutacja online]

Location: Wrocław

 


Daily activities

Network Engineering department provides in-depth analysis of worldwide telecommunications networks. As a Data Engineer you will be working in a team responsible for designing, building, and maintaining datasets and data pipelines. If youre keen on working with big data sets, using modern technologies to collect and integrate data from various sources, finding not obvious insights from collected data - join us - even if you just want to begin your data journey!

 

We work with:

  • Python and/or Scala for data processing
  • Large datasets stored in various databases (blob: HDFS+Parquet, S3; PostgreSQL; MongoDB)
  • Airflow for data pipelines orchestration
  • Kubernetes / Docker for containerization
  • Selected BIs for data visualization (Tableau, PowerBI, Superset)

Our expectations:

  • good Python knowledge (even better if combined with data libs: pandas, NumPy)
  • knowledge of Scala is a plus, interest in learning Scala is key!
  • familiarity with Apache Spark and column-oriented data formats (parquet / orc)
  • familiarity with partitioning, indexing and retention strategies
  • good knowledge of SQL in the context of working with > 1mln rows tables
  • ability to work with HDFS and S3 storages
  • nice to have: Azure in the context of data processing (data bricks, adls, data factory, synapse)
  • Master’s or Bachelor’s degree in Computer Science, Software Technology or equivalent education
  • Strong communication and teamwork skills
  • Proficiency in English (both written and spoken)

    Agencja Restrukturyzacji i Modernizacji Rolnictwa

    mazowieckie / Warszawa

    29-11-2021

    Starszy Specjalista / Główny Specjalista w Departamencie Ewidencji Producentów i Rejestracji Zwierząt

    Stanowisko pracy ds. analiz i projektowania systemu IRZ -1 Liczba poszukiwanych kandydatów/ wymiar etatu: 1 osoba/ 1 etat - umowa o pracę Oferujemy: przejrzyste zasady wynagradzania, możliwości rozwoju zawodowego i podnoszenia kwalifikacji,...

    Avenga

    podkarpackie /

    28-11-2021

    Senior Solution Architekt

    Tasks: Data Modeling: Data warehouse Dimensional Modeling and Operational Application modeling in 3NF; in compliance with company standards Ability to clearly draw solution design API and web services design for cross-application data integration...

    Avenga

    podlaskie /

    28-11-2021

    Senior Solution Architekt

    Tasks: Data Modeling: Data warehouse Dimensional Modeling and Operational Application modeling in 3NF; in compliance with company standards Ability to clearly draw solution design API and web services design for cross-application data integration...

Więcej ofert pracy

Podobne oferty pracy

  • Orange Polska S.A.t

    mazowieckie / Warszawa

    28-11-2021

    Data Engineer

    Wsparcie podmiotów biznesowym i spółek zależnych Orange w rozwijaniu i wykorzystaniu sztucznej inteligencji oraz technologii Big Data w ich działalności, zarówno na etapie tworzenia jak i wdrażania aplikacji Wsparcie podmiotów operacyjnych i...

  • Orange Polska S.A.t

    mazowieckie / Warszawa

    28-11-2021

    Data Scientist

    Wsparcie podmiotów biznesowym i spółek zależnych Orange w rozwijaniu i wykorzystaniu sztucznej inteligencji oraz technologii Big Data w ich działalności, zarówno na etapie tworzenia jak i wdrażania aplikacji Wsparcie podmiotów operacyjnych i...

  • Orange Polska S.A.t

    mazowieckie / Warszawa

    28-11-2021

    Machine Learning Data Engineer

    Wsparcie podmiotów biznesowym i spółek zależnych Orange w rozwijaniu i wykorzystaniu sztucznej inteligencji oraz technologii Big Data w ich działalności, zarówno na etapie tworzenia jak i wdrażania aplikacji Wsparcie podmiotów operacyjnych i...