СберData engineer /ML engineer (GenAI)
Москва
Команда разрабатывает GenAI-платформу для автономной генерации персонализированных маркетинговых коммуникаций. Вы будете строить мультиагентные системы, ETL и аналитические витрины, чтобы обеспечить качественные данные и масштабируемую генерацию контента для бизнеса
ГрейдMiddle/Senior
Опытот 3 лет
Стек
PythonPySparkGreenPlumKafkaHadoopHiveImpalaScalaSQL
Задачи
- •Разработка и деплой мультиагентных систем для генерации коммуникаций в реальном времени
- •Проектирование архитектуры хранилища данных и интеграция с внешними системами
- •Разработка ETL-процессов: загрузка, очистка и трансформация больших объёмов данных
- •Проектирование и сборка аналитических витрин для аналитики и моделирования
- •Мониторинг, оптимизация и обеспечение качества процессов загрузки и трансформации данных
- •Участие в оценке требований, планировании релизов и совместной работе с командой
Обязательно
- •опыт работы Data Engineer/ML Engineer от 3 лет
- •продвинутый SQL (аналитические функции, подзапросы, оптимизация)
- •отличное знание Python или Scala и опыт с pySpark
- •опыт разработки ETL-процессов и работы с большими объёмами данных
- •знание концепций Data Warehousing и Big Data
- •опыт работы со стеком Hadoop/Spark/Hive/Impala и Kafka
- •понимание принципов DevOps и участие в автоматизации сборки и развёртывания
Будет плюсом
- •навыки работы с генеративными AI-моделями
- •опыт создания и применения AI-агентов
- •опыт использования GigaChat, Kandinsky и аналогов
- •инструментальное владение AI для анализа и автоматизации
