Usługi pośrednictwa pracy IT Zdalne zespoły Abonament rekrutacyjny O nas Kontakt Wszystkie prace Praca w IT Przykłady CV Nasz blog 2 Case Studies

Wznów: Senior Programista Data

Lokalizacja: Polska

Stawka: 21000 PLN brutto

PODSUMOWANIE UMIEJĘTNOŚCI

Umiejętności techniczne:

  • Optymalizacja SQL
  • ETL
  • Data Warehouse
  • Bash
  • Integracja danych
  • Orkiestracja danych
  • Big data/Hadoop/Impala/Hive
  • Kafka
  • Python
  • Snowflake

DOŚWIADCZENIE ZAWODOWE

Stanowisko: Team Lead, Inżynier Danych

07.2018 - obecnie

Obowiązki:

  • Zarządzanie zespołem 5 inżynierów danych, wdrażanie nowych pracowników i udzielanie pomocy Inicjowanie i utrzymanie:

optymalizacji środowiska Impala oraz tworzenie monitoringu SQL,

strumieni danych w czasie rzeczywistym dla Hadoopa,

architektury kreatora dla niektórych typów integracji,

wyboru i monitorowania formatu przechowywania danych,

automatyzacji, monitorowania, wyzwalaczy dla procesów wewnętrznych,

zbierania metadanych.

  • Wsparcie dla ponad 50 klientów (analitycy, programiści, naukowcy danych)
  • Konfiguracja, utrzymanie i nadzór nad 3000+ zautomatyzowanymi i skalowalnymi zadaniami ETL/ELT
  • Optymalizacja ponad 200 nieefektywnych zapytań i potoków (proces ETL skrócony z 14 do 6 godzin)
  • Tworzenie materiałów edukacyjnych
  • Rozwiązywanie wielu incydentów

Narzędzia i technologie: Jenkins, Bash, skrypty Pythona, Oracle, SQL, Snowflake, Streamsets, Tidal, Airflow

Stanowisko: DevOps

Kwiecień 2015 - Lipiec 2018

Obowiązki:

  • Rozwój i utrzymanie zautomatyzowanych potoków CI/CD za pomocą Jenkinsa
  • Provisioning serwerów i wdrażanie funkcji za pomocą Ansible
  • Wdrożenie klastra Hadoop Cloudera (HDFS, YARN, HBase, ZooKeeper, Kafka)
  • Dyżur 24/7

Narzędzia i technologie: HBase, Kafka, Hadoop, Bash, Ansible, Zabbix, Grafana, Git, Docker, Jenkins

Stanowisko: Starszy Inżynier Danych

08.2013 - 04.2015

Obowiązki:

  • Udział w opracowywaniu architektury DWH
  • Automatyzacja i orkiestracja potoków danych
  • Utworzenie zespołu inżynierów danych DWH
  • Dyżur 24/7

Narzędzia: Jenkins, Bash, Oracle, SQL

Dołącz do społeczności Znoydzem.

Aplikuj jako Specjalista ds