Java разработчик ( гибридное хранилище данных Сбербанка)

договорная зарплата

СБЕР
График
полный рабочий день
Опыт работы
от 3 лет
Образование
высшее

Формируется команда, распределенная  в нескольких регионах России, для реализации перспективной задачи по построению гибридного хранилища данных Сбербанка (Hadoop + Oracle)  и централизованного формирования обязательной отчетности Банка. Работаем по технологии agile и создаем команды экспертов.

 

Ключевая задача: проектирование и разработка витрин сбора и обработки данных предоставления отчетности в ЦБ на технологии Hadoop.

 

С чем придется работать:

  • Проектирование и построение витрин и прототипов отчетов в хранилище данных: код на Java 8 + SPARK, БД – Hadoop, немного Teradata и Oracle
  • Рефакторинг и ревью кода части оптимизации ETL-нагрузки
  • Все как должно быть в хорошей разработке: CI, CD, SCRUM, Jira, Git и пр.

 

Требования к компетенциям:

  • знание Java Core, опыт разработки Java от года
  • опыт работы с любыми реляционными базами данных, владение SQL (DDL + DML), диалект не принципиален
  • навык работы с Maven, Git, Jira, Jenkins, Bitbucket
  • опыт работы с оркестраторами Oozie
  • базовое владение unix-shell

 

Будет плюсом:

  • понимание архитектуры Hadoop
  • понимание архитектур: распределенных и MPP систем
  • понимание Hive, Impala (RDD, Dataset)
  • умение оптимизировать запросы в Hive и Spark
  • понимание, как работает HDFS и формата файлов Parquet
  • знание Apache Spark, Docker, Apache Kafka
  • понимание архитектурного стиля взаимодействия компонентов распределённых приложений в сети - REST

Мы предлагаем:

  • Официальное трудоустройство согласно ТК РФ;
  • Прозрачная система мотивации (оклад + годовая премия);
  • Социальное страхование (от несчастных случаев, ДМС);
  • Возможность профессионального развития (корпоративное обучение);
  • Корпоративная программа лояльности (льготное кредитование, скидки в компаниях-партнерах);
  • Офис по адресу Старо-Петергофский пр. м. Нарвская.
Место работы
Санкт-Петербург, Санкт-Петербург, пл Карла Фаберже 8, п/и 195112
ID вакансии 43722406 Вакансия опубликована Опубликована 19 октября
СБЕР