Data Engineer (Единый семантический слой)

Описание

В команду Сбера требуются мотивированные специалисты на проект Единый семантический слой (ЕСС) для предметной области Профиль юридического лица . Мы умеем обрабатывать и агрегировать информацию о юридических лицах. Предлагаем вам стать частью нашей команды.
Проект Единый семантический слой - это единое облако данных.
Его цель - предоставление потребителям интегрированных данных не зависимо от АС-источника.
Данные в ЕСС объединены в единую модель, имеют сквозную идентификацию объектов и размечены единой нормативно-справочной информацией.
Основные драйверы создания ЕСС в банке - это формирование регуляторной отчетности и миграция риск-инфраструктуры на данные единой корпоративной аналитической платформы.
Обязанности

• разработка ETL потоков на платформе Hadoop (Scala + Spark SQL)
• поиск возможностей оптимизации, повышение скорости расчета, эффективности использования вычислительных ресурсов
• повышение стабильности работы приложений, анализ типовых ошибок и возможных рисков, развитие системы логирования, её полноты и информативности для последующей промышленной эксплуатации, при необходимости участие в решении возникающих при эксплуатации инцидентов
• развитие системы контроля качества, автотестов
• подготовка дистрибутивов и описания в соответствии с требованиями оформления Банка.

Требования

• высшее техническое образование
• опыт работы от года
• знание стека Hadoop + Spark + scala
• навыки работы с одной из сред IDE, системой сборки, системой контроля версий (git)
• знание SQL и JDBC
• опыт работы с технической проектной документацией Бизнес-требования, Технические спецификации на разработку, Архитектура, User guide, Admin guide
• английский язык на уровне чтения технической документации, профильных ресурсов, форумов.

Условия

• комфортный и современный офис рядом с м. Кутузовская
• ежегодный пересмотр зарплаты, годовая премия
• корпоративный спортзал и зоны отдыха
• расширенный ДМС и льготное страхование для семьи
• ипотека для сотрудников выгоднее до 4%
• корпоративная пенсионная программа
• вознаграждение за рекомендацию друзей в команду Сбера
• скидки на продукты компаний-партнеров.