Senior Data Scientist в команду LLM-разметки в AI VK

О проекте. Наша команда управляет контентом, обогащая его дополнительной информацией за счёт ML-моделей, краудсорсинга, LLM. Мы являемся центром экспертизы по автоматизированной разметке, за счёт которой работают рекомендации, поиск, модерация и антифрод. Именно наша команда строит ML-модели и предоставляет предиктивную аналитику по контенту и профилям для бизнес-юнитов холдинга. Для этого мы выстраиваем end-to-end пайплайны обработки и дистрибуции данных, обучаем и используем как классические ML-модели, так и LLM (LLaMa, ChatGPT и другие).

Мы ищем в команду сервиса LLM-разметок Senior Data Scientist с опытом интеграции LLM/VLM в бизнес-процессы компании.

Задачи:

• построение и улучшение ML-архитектуры процессов обработки данных с использованием внутренних и внешних LLM/VLM;
• автоматизация за счёт LLM/VLM бизнес-процессов, в которых классические ML-модели недостаточно эффективны;
• обучение классических ML-моделей, настраивание их качественной и количественной оценки, анализ результатов;
• работа с краудсорсингом и внутренними инструментами разметки для подготовки Ground Truth данных;
• взаимодействие с заказчиками, груминги, декомпозиция крупных ML-проектов.

Требования:

• успешный опыт интеграции LLM/VLM в бизнес-процессы;
• опыт работы с Python (Pandas, NumPy, SciPy, CatBoost, XGBoost), SQL (оконки, процедуры) — для подготовки данных и обучения ML-моделей;
• опыт работы с Airflow, BI-системами — Datalens/Superset/Tableu/Power-BI;
• высшее техническое или математическое образование;
• более двух лет опыта на позиции Data Science или Machine Learning;
• хорошие soft-скиллы;
• умение работать с математической статистикой для управления статзначимостью метрик моделей и пайплайнов;
• опыт работы с Hadoop, PostgreSQL или YT.