Big Data Analyst

P&P Solutions Sp. z o.o.

Kraków, małopolskie, Polska

3 d. temu

Dla naszego Klienta z branży bankowej poszukujemy Analityka Big Data.

UoP : 15 000 PLN brutto

B2B : 850 PLN + VAT / MD

Big Data Analyst

Miejsce pracy : Kraków

Zadania :

Tworzenie skryptów i zapytań w SQL i Python, celem optymalizacji procesów raportowania danych digital w organizacji.

Tworzenie i utrzymanie procesów umożliwiających dostęp do danych dla analityków danych w oparciu o aplikacje napisane w języku Java na platformie Apache Hadoop (BigData)

Tworzenie nowych procesów zasilania (ETL) na platformie BigData

Utrzymanie istniejących procesów służących do zasilania (ETL) na platformie BigData

Optymalizacja istniejących procesów na platformie BigData

Dostosowywanie istniejących procesów ETL do nowych potrzeb biznesowych, zarówno w trybie batch jak i near-realtime

Tworzenie i utrzymanie cyklicznych zadań zasilających lub przetwarzających dane (ETL) w oparciu o platformę BMC Control-M

Tworzenie i utrzymanie cyklicznych zadań zapewniających nieprzerwany dostęp do danych, zarówno bieżących jak i historycznych, dla analityków danych oraz innych jednostek banku

Nadzór oraz weryfikacja ok. 750 plików log przychodzących codziennie w nocy z systemów źródłowych pod kątem ich kompletności i ich gotowości do zasilenia procesami ETL

Stack technologiczny :

Java z wykorzystaniem JUnit, Apache Maven, Jenkins, GitLab.

Znajomość tematyki baz danych. Umiejętność tworzenia tabel oraz znajomość języka SQL na poziomie dobrym oraz Pythona.

Apache Hadoop, szczególnie Hive, HBase, Kafka, HDFS, MapReduce, Flink, Storm, Flume

Mile widziana znajomość BMC Control-M

Oferujemy :

Stabilne, długoterminowe zatrudnienie na podstawie UoP bądź B2B,

Pakiet benefitów

Aplikuj

Zgłoś tę pracę

Thank you for reporting this job!

Your feedback will help us improve the quality of our services.