Data Engineer

Stanowisko: Data Engineer

Miejsce pracy: Gdynia

Data dodania: 02.04.2021

DCG is a modern technology company, gathering in its ranks IT related professionals. Due to the continuous development and the large number of recruitment projects that we carry out for our Partners, we are looking for a person for the position:

Data Engineer

Responsibilities:

  • Ingest various data sources to the on-prem Hadoop data lake
  • Create/Enrich the transformations from new data sources using Python or Scala and Apache Spark
  • Create data pipeline in Apache Oozie
  • Unit Test the data applications
  • Collaborate with DevOps colleagues to enable CI and CD (Jenkins) to the data pipelines
  • Collaborate with Data Scientists
  • Become part of release process to deploy applications in production environment

Requirements:

  • ETL
  • Python
  • Apache Spark
  • PySpark
  • Communication in English
  • Hadoop – HDFS, Hive, Oozie
  • Scala
  • Jenkins/Bamboo
  • Machine Learning understanding
  • Deploying Machine Learning applications

Offer:

  • Private medical care
  • Constant support of dedicated consultant
  • Team-building events organised by DCG
  • Competitive salary adequate to experience and skills

Przed wyslaniem CV/dokumentów aplikacyjnych, uprzejmie prosimy kandydatów o zapoznanie się z klauzulą informacyjną.

Po zapoznaniu się z klauzulą informacyjną podaną przez Administratora Danych dobrowolnie wyrażam zgodę na przetwarzanie przez Ogłoszeniodawcę moich danych osobowych, zawartych w mojej ofercie pracy, dla potrzeb procesu tej rekrutacji oraz dla realizacji przyszłych projektów rekrutacyjnych.

Agencja doradztwa personalnego (nr licencji 4642)

Dane spółki: Diverse CG Sp. z o.o. Sp.k., ul. Towarowa 28, 00-839 Warszawa                                                     

REGON: 141316780

NIP: 5222877930

KRS: 0000733458

Obserwuj nas: