Big Data Engineer
Warszawa Big Data Engineer
Warszawa
NR REF.: 1131565
Hays IT Contracting to nowoczesna forma współpracy dla specjalistów z branży informatycznej, na zasadach B2B, dla wiodących na rynku Klientów prowadzących innowacyjne projekty. Wyróżnia nas wiedza o rynku oraz angażowanie najlepszych w danej dziedzinie ekspertów.
Dla naszego Klienta – specjalizującego się w tworzeniu oprogramowania i aplikacji dla biznesu – poszukujemy obecnie osoby na stanowisko: Big Data Engineer, która dołączy do jednego z projektów (szczegóły obu poniżej)
Forma współpracy: B2B
Lokalizacja: Ochota (okolice pl. Zawiszy)
Zarys projektów:
1. Projekt dotyczy budowy inteligentengo narzędzia do Data Ingestion (ETL) na bazie zarządzania metadanymi dla szwajcarskiego NGO oraz chorwackiego Banku. Wymagana znajomość Pythona oraz mile widziana znajomość NiFi. Współpraca z obszarami technologocznymi AWS (m in. S3, Reshift) oraz Oracle Data Ingestion
2. Projekt dotyczy budowy, rozwoju i utrzymania eko-systemu narzędzi stanowiących platformę do zarządzania danymi w oparciu o referencyjną architekturę Lambda. Platforma ma obsługiwać 17 rynków na terenie Europy w czasie „near-real-time” i być centralnym komponentem w architekturze IT Klienta.
Wymagania:
Oferujemy:
Warszawa
NR REF.: 1131565
Hays IT Contracting to nowoczesna forma współpracy dla specjalistów z branży informatycznej, na zasadach B2B, dla wiodących na rynku Klientów prowadzących innowacyjne projekty. Wyróżnia nas wiedza o rynku oraz angażowanie najlepszych w danej dziedzinie ekspertów.
Dla naszego Klienta – specjalizującego się w tworzeniu oprogramowania i aplikacji dla biznesu – poszukujemy obecnie osoby na stanowisko: Big Data Engineer, która dołączy do jednego z projektów (szczegóły obu poniżej)
Forma współpracy: B2B
Lokalizacja: Ochota (okolice pl. Zawiszy)
Zarys projektów:
1. Projekt dotyczy budowy inteligentengo narzędzia do Data Ingestion (ETL) na bazie zarządzania metadanymi dla szwajcarskiego NGO oraz chorwackiego Banku. Wymagana znajomość Pythona oraz mile widziana znajomość NiFi. Współpraca z obszarami technologocznymi AWS (m in. S3, Reshift) oraz Oracle Data Ingestion
2. Projekt dotyczy budowy, rozwoju i utrzymania eko-systemu narzędzi stanowiących platformę do zarządzania danymi w oparciu o referencyjną architekturę Lambda. Platforma ma obsługiwać 17 rynków na terenie Europy w czasie „near-real-time” i być centralnym komponentem w architekturze IT Klienta.
Wymagania:
- Bardzo dobra znajomość języka Java 8/ Python / Scala
- Biegła znajomość języka angielskiego w mowie i piśmie
- Znajomość platformy HortonWorks Hadoop
- Znajomość Apache Spark i Apache Airflow
- Praktyczna znajomość Apache Kafka i przetwarzania strumieniowego oraz NiFi w ramach procesów ETL
- Wiedza na temat serializacja danych (JSON,XML,Avro,Protobuf)
- Bazy danych SQL i NoSQL (HBase/Cassandra)
- Wiedza na temat podstawowych wzorców architektonicznych Big Data (Lambda/Kappa)
- Mile widziana znajomość zagadnień administracji ww. technologiami (Hortonworks/Airflow/Kafka/Nifi)
- Mile widziana znajomość AWS (S3, Glue, Redshift)
Oferujemy:
- Benefity pozapłacowe: m.in. Medicover, Multisport
- Zatrudnienie w oparciu o kontrakt B2B
- Praca w dogodnie skomunikowanej lokalizacji w Warszawie
- Możliwość częściowej pracy zdalnej (ok 20%)
Prosimy o aplikowanie poprzez przycisk znajdujący się po prawej stronie ogłoszenia.