Data Engineer

Обязанности

Мы - Команда Продуктовая полка одна из частей платформы персонализации. Наша цель создать мощные инструменты для того, чтобы клиенты получали самые релевантные предложения по продуктам банка и экосистемы. Задача команды развитие инструмента, который позволяет эффективно обрабатывать данные и создавать персонализированные предложения. Работа подразумевает глубокое погружение в процессы и дает отличную возможность, с одной стороны, посмотреть на продукт команды с точки зрения пользователя, а с другой, - оказать прямое влияние на его развитие. Ты получишь знания и опыт работы со стеком BigData-разработки: Scala, Apache Spark Apache Hadoop (HDFS, Hive), Apache Airflow, Python Kafka Инструменты Devops GreenPlum Обязанности Разрабатывать автоматизированный мониторинг состояния расчетов предложений Развивать пользовательский функционал для создания и тестирования формирования предложений Генерировать новые фичи для пользовательских инструментов, которые строятся над ядром, и реализовывать их в коде Составлять пользовательскую и техническую документацию по разрабатываемым фичам Оказывать поддержку пользователям на всех этапах работы Принимать участие в развитии ядра нашей системы с применением полученного пользовательского опыта Требования Знаешь основные компоненты инфраструктуры Hadoop (hdfs, yarn, др.), понимаешь принципы их работы Имеешь опыт работы с PySpark, Scala Spark Имеешь опыт работы с Kafka Уверенное владение SQL Владеешь Python, ведь на нем мы разрабатываем пользовательские инструменты Имеешь развитые аналитические способности и системное мышление Готов быстро осваивать новые для себя технологии и инструменты Нацелен на результат Имеешь общий стаж работы не менее 2 лет Имеешь высшее техническое образование Условия офисный формат работы годовой бонус и ежегодный пересмотр расширенный ДМС с первого дня + стоматология и льготное страхование для семьи корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях офис на Кутузовской льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний