Middle Data Engineer (Развитие клиентского опыта B2C)

Обязанности

Проект/команда : витрины данных по продукту Пакеты услуг . Пакеты услуг комплексный продукт, предоставляющий спец. офферы на продукты Банка и экосистемы Сбера. Мы ищем инженера по созданию витрин данных, который присоединится к нашей команде и займётся разработкой и поддержкой витрин данных на базе Hadoop. Вам предстоит участвовать в полном цикле разработки, начиная с анализа требований и заканчивая реализацией и поддержкой решений. Мы ожидаем, что кандидат обладает знаниями в области обработки больших данных, владеет Java/Scala и и Python, а также умеет работать с экосистемой Hadoop и Spark. Обязанности проектирование, разработка и сопровождение витрин данных на базе Hadoop оптимизация производительности существующих витрин данных участие в разработке ETL-процессов для загрузки данных в витрины поддержка и мониторинг работы витрин данных взаимодействие с бизнес-пользователями для понимания их потребностей и перевода их в технические требования взаимодействие с командами разработки и дата-аналитики, по вопросам сбора, обработки и хранения данных разбор инцидентов качества данных, развитие автоматизированных тестов (Data Quality) документирование разработанных решений. Требования практический опыт в разработке витрин данных, выстраивании ETL-процессов уверенное владение SQL (аналитические функции, подзапросы, хранимые процедуры/функции, оптимизация производительности),готовность к созданию инструментов для нужд инфраструктуры и разработки опыт работы с Hadoop (HDFS, YARN, Hive) и Spark знание Java/Scala и опыт разработки на нём опыт разработки на Python понимание инструментов и технологий Big Data знание принципов построения распределённых систем хранения и обработки данных опыт обработки и миграции больших объёмов данным между различными источниками опыт работы с системами контроля версий (Git). Будет плюсом: опыт работы с Kafka опыт работы с CI/CD инструментами (Jenkins, GitLab CI) базовые знания Docker и иных технологий контейнеризации опыт работы с системами Unix (bash). Условия достойная заработная плата, премия по итогам года формат работы: гибрид/офис на выбор страхование жизни и здоровья для сотрудников (ДМС) и скидки на медицинскую страховку для родственников обеспечение необходимым оборудованием для продуктивной работы профессиональный и дружный коллектив, готовый принимать и считаться с любой точкой зрения возможность обучаться за счет компании, посещать конференции по профессиональной тематике льготное кредитование в Сбербанке возможность пользоваться премиальными продуктами Банка на специальных условиях (в т.ч. по ипотечным программам) широкий спектр дисконт-программ, скидок и привилегий от компаний-партнёров корпоративные подарки для детей корпоративные и благотворительные мероприятия ( Зелёный марафон , Сбербанкиада, КВН, волонтёрские программы и т.д.) свободный dress code.