Инженер NLP

• Основной фокус – Instruct tuning для задач Text-to-SQL / NL2SQL и PLP;
• Lизайн экспериментов, формулировка гипотез для улучшения NLP/PLP моделей и алгоритмов, планирование исследовательских экспериментов с выводами;
• Проведение экспериментов, написание кода, подготовка датасетов и бенчмарков, проведение замеров и анализ результатов;
• Обучение моделей на кластере, включая обучение моделей с нуля и дообучение опенсорс моделей;
• Взаимодействие с прод-командой для интеграции моделей и алгоритмов в продакшн;
• Ориентированность на SOTA, читать пейперы, быть в курсе последних исследований, предлагать новые смелые подходы и направления.

• Опыт работы в направлении от 3х лет
• Хорошие теоретические знания в DL, с упором в современный NLP и трансформеры
• Умение формулировать эксперименты с научной строгостью, обосновывать их, проводить самостоятельно и делать выводы
• Опыт обучения трансформеров
• Опыт распределенного обучения моделей (deepspeed, fsdp, torch.distributed, accelerate)
• Знание стандартных библиотек для DL и NLP (PyTorch и библиотеки Huggingface)
• Увлеченность NLP/PLP и DL
• Знания lora/p-tune и других peft/sft-подходов
• Знакомство с Spider/CoSQL

Будет плюсом:

• Опыт работы на похожей позиции
• Участие в соревнованиях по ML
• Сабмиты на лидербордах по NLP/PLP
• Публикации уровня А/A*, Q1
• Обучение моделей на кластере, опыт распределенного обучения

• Возможность профессионального и карьерного роста в компании
• Возможность поучаствовать в разных проектах
• Опыт работы в распределенной команде профессионалов
• Уровень заработной платы обсуждается индивидуально
• Оформление в соответствии с ТК РФ в Bell Integrator
• Формат работы Удаленно РФ