Data Engineer (RnD)

Обязанности

Команда кибербезопасности Сбера создает новый комплексный продукт по выявлению дипфейков (видео, аудио, текст), в том числе и для потребностей государственного сектора. Для его реализации мы собираем команду высококвалифицированных специалистов. Продукт будет расти и развиваться и не ограничится 1-2 кварталами разработки. На вакансию Дата-инженера мы ищем специалиста, который будет искать, собирать и создавать данные для обучения ML-моделей. Создавать и поддерживать БД для удобного и быстрого доступа к данным. Дата-инженер с навыками Python-разработчика и понимаем работы DS. Обязанности поиск, извлечение, очистка, загрузка и предобработка данных из свободного доступа автоматизация процессов по получению характеристик и описания данных (видео, аудио, изображения, текст) и разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных описание потребности для разработки специализированного ПО DataScientist-ами реализация регулярных процессов поставки данных для продуктовых команд и DataScientist-ов проектирование и организация хранилища данных, артефактов и логов обучения ML-моделей, артефактов работы продукта. Требования уверенно программируете на Python работали со специализированными аналитическими инструментами на базе Python (Jupyter, Pandas, Numpy, Matplotlib) работали с базами данных SQL, PostgreSQL и подобными и обладаете знаниями SQL на продвинутом уровне (аналитические функции, хранимые процедуры, материализованные представления, оптимизация производительности) запускали open-sourse проекты и ML-модели для генерации и аугментации данных работаете в командной строке Unix-подобных систем (Linux, macOS). сами создавали, поддерживали и развивали базы данных имеете опыт работы с очередями Kafka, RabbitMq Условия комфортный современный офис БЦ Оружейный формат работы: офис ежегодный пересмотр зарплаты и годовая премия корпоративный спортзал и зоны отдыха более 400 образовательных программ СберУниверситета для профессионального и карьерного развития расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа ипотека выгоднее до 7% для каждого сотрудника бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров вознаграждение за рекомендацию друзей в команду Сбера.