Команда, отвечающая за AI инициативы бизнеса Департамента Глобальных Рынков Сбера.
Департамент Глобальных Рынков (ДГР) – предоставляет корпоративным и розничным клиентам широкий спектр продуктов и услуг на финансовых рынках. Ключевые направления бизнеса: торговые операции с ценными бумагами, деривативами, ликвидностью, на валютном, товарно-сырьевом рынках, структурные продукты.
Мы помогаем внутренним клиентам увеличивать доходность, создаем информационную платформу, проводим анализ финансовых рынков, работаем с разными форматами данных.
Наша команда решает очень широкий спектр DS-задач с применением самых передовых ML/DL алгоритмов и инструментов. В нашей компетенции — разработка, тестирования и вывод в промышленную среду моделей .
Мы ищем талантливого специалиста, который обладает опытом работы с большими языковыми моделями (LLM). Вы будете играть ключевую роль в исследовании и применении нашей LLM для решения широкого спектра задач, включая генерацию текста, извлечение информации, Q&A системы, логическое мышление и другие.
Обязанности
- Участие в разработке решения на основе обучения/ файнтюнинга (SFT LoRA, RLHF) современных генеративных сеток (GigaChat, LLAMA2, Gpt3.5/4)
- Построение пайплайна обработки данных и обучения LLM (LLM цепочек)
- Разработка векторизованных баз знаний с использованием LangChain, ChromaDB
- Организация процесса мониторинга качества LLM
- Тестирование, анализ и ранжирование сильных и слабых сторон различных моделей и конкретного решения
- Участие в формировании требований и необходимых данных по улучшению моделей
- Разработка документации и руководства для пользователей и разработчиков
- Подготовка и анализ новостей для обучения модели.
Требования
- Знание Python на уровне middle-разработчика
- Опыт анализа и обработки данных (numpy/pandas) и их визуализация (matplotlib, seaborn, plotly)
- Опыт web scraping (в идеале – playwright/parsel/httpx, возможно – selenium/beautifulsoup/requests)
- Опыт работы с БД (ORM)
- Опыт создания dashboards (streamlit/ gradio/ dash)
- Опыт асинхронного программирования (asyncio)
- Linux, Git, Docker.
Навыки NLP:
- Владение базовыми знаниями в Deep Learning и NLP с практическим опытом работы в этом направлении
- Знание PyTorch или Tensorflow для возможности fine-tuning LLM под конкретную задачу
- Знание LLM-фреймворков и библиотек (в идеале – langchain, дополнительно как пример - llama-index, openai) для создания LLM-приложений
- Опыт использования LLM (gpt-3.5-turbo/gpt-4/open source), в идеале – опыт использования их API для создания LLM-приложений
- Знание методов Prompt Engineering.
Условия
- Формат работы: офис (ул.Вавилова,19). Возможен гибрид
- ДМС с первого дня
- Скидки на продукты банка и экосистемы
- Постоянное развитие: обучающие курсы от лучших университетов и компаний (МФТИ, ВШЭ, NVIDIA и другие), участие в международных конференциях
- Развитое DS community, регулярные митапы, дайджесты и конференции.