NLP-исследователь в команду AGI NLP

Описание вакансии

Мы — команда AGI NLP, которая занимается передовыми исследованиями в области больших языковых моделей (LLM), AI-агентов, RAG-систем и оценки их возможностей. Наша работа охватывает создание новых подходов к оценке, разработку бенчмарков, обучение генеративных LLM и исследование их способностей.

Что вас ждёт:

работа с современными LLM, такими как ChatGPT, GigaChat, LLaMA, Qwen, DeepSeek и другими
возможность заниматься прикладными исследованиями мирового уровня
публикация результатов на конференциях уровня A/A
влияние на развитие AGI (искусственного общего интеллекта) и участие в проектах на самом фронтире индустрии.

Обязанности

разрабатывать задачи и тесты для оценки моделей (например, метрики следования инструкциям, вызова функций, проверка моделей на безопасность и т.д.)
проводить эксперименты и оценивать текущие модели, включая сотрудничество с ведущими компаниями в области ИИ
исследовать, как различные методы стимулирования влияют на результаты моделей
разрабатывать принципиальные подходы к измерению возможностей ИИ и проводить эксперименты для их проверки
создавать бенчмарки и тесты для оценки AI-агентов.

Требования

имели опыт опытом работы с передовыми крупными языковыми моделями (LLM)
имели опыт проведения полного цикла экспериментов: от сбора данных и формирования метрик до поддержки внедрённой фичи
имели опыт работы hf/transformers и API OpenAI/Claude/GigaChat
следите за развитием индустрии больших языковых моделей и мультимодальных моделей.

Будет плюсом, если вы:

имеете опыт работы с тестированием и бенчмарками
у вас есть публикации уровня А/А*
успешно выступали в соревнованиях по машинному обучению или являетесь выпускником ШАДа.