NLP (Gigaсhat)

Описание

Мы команда GigaChat - создаём и развиваем core-технологию генеративной языковой модели. Она может писать тексты, создавать изображения и даже код на Python. Она умеет отвечать на вопросы, вести диалог, сочинять стихи и рассказы, придумывать идеи для бизнеса, писать письма и многое другое. Ведем набор на 4 направлениям: разработку фреймворка распределенного обучения GigaFSDP, исследование обучений в FP8; развитие метрик качества GigaChat-a, например, через оценку способности решать задачи олимпиад международного уровня; команду инфраструктуры обучений, 5-D параллелизм, в том числе ускорение обучений мультимодальных моделей; разработку низкоуровневых оптимизаций операций на аппаратном уровне. На эти роли мы ищем талантливого NLP Engineer, с которым мы будем вместе совершенствовать и развивать GigaChat. Для всех этих экспериментов у нас есть кластер с большим числом A/H 100'ых

Обязанности

* довести качество до ChatGPT на русском и дальше обогнать его; * помогать решать бизнес-задачи с помощью нашей технологии сначала для внутренних клиентов в Сбере, а потом и внешним; * придумывать и внедрять новые применения для LLM; * помогать выводить в прод все, что мы обучим; * постоянно держаться up-to-date со свежими статьями

Требования

* уверенное владение Python, Pytorch; * знание базовых алгоритмов и математики; * знания в DL, опыт обучения просто моделей и больших моделей; * опыт обучения моделей для продакшен; * понимание текущего состояния эволюции больших LLM's; * C++ & CUDA; * будет плюсом наличие публикаций

Условия

* комфортный современный офис в Москве и Санкт-Петербурге * возможность выбрать удобный гибридный график * ежегодный пересмотр зарплаты годовая премия * зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * программа адаптации и помощь руководителя на старте (для стартовых позиций) * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * ипотека для сотрудников выгоднее до 7% * бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера