NLP Engineer (GigaChat Pretrain)

Описание вакансии

компания "сбербанк"

мы - команда gigachat pretrain data, готовим pretrain данные для gigachat и gigachat vision. pretrain данные - это фундамент, с которого начинается путь современной llm модели и то, от чего наиболее зависит ее итоговое качество. сырых данных более 40пб и основная задача заключается в том, чтобы из этого хаоса сделать датасет, на котором будет обучена лучшая llm в россии.

обязанности

• генерировать синтетические данные: математика, код, произвольная синтетика с сидами - документами из web
• исследовать токенизацию и ее влияние на качество модели (возможно написание статей)
• решать задачи кластеризации миллиардов документов
• исследовать разные факторы, которыми обладают текстовые данные
• генерировать vision данные для прокачки vlm
• разрабатывать новые алгоритмы парсинга html и исследовать его влияние на качество модели
• исследовать зависимости между pretrain данными и agentic capabilities итоговой модели
• разрабатывать стабильную инфраструктуру, которая будет поддерживать проведение сотен и тысяч экспериментов над данными.

требования

• имеешь коммерческий релевантный опыт связанный с nlp или построением инфраструктуры для данных от двух лет.

будет плюсом:

• навыки работы с генеративными ai-моделями; опыт создания ai-агентов и использования их в работе будет преимуществом
• опыт использования gigachat, kandinsky и аналогов в продуктах, навыки создания и использования ai-агентов
• инструментальное владение ai для анализа, генерации и автоматизации
• опыт с mapreduce системами.

условия

• комфортный современный офис рядом с м. кутузовская
• гибридный формат работы (2 дня в офисе, 3 дня на удалёнке)
• ежегодный пересмотр зарплаты, годовая премия
• корпоративный спортзал и зоны отдыха
• система обучения для профессионального и карьерного развития
• расширенный полис дмс с первого дня работы и страхование для семьи
• льготная программа ипотеки для сотрудников
• бесплатная подписка сберпрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду сбера.

Метки