Разработчик LLM
Summary
Designs and trains large language models using PyTorch and Hugging Face Transformers, including fine-tuning (SFT, LoRA, PEFT), dataset preparation, model optimization (quantization, inference), and LLM-API function/tool-calling integration.
Зарплата: от 127500 RUR (до вычета налогов)
Обязанности:- проектирование архитектуры LLM и выбор базовой модели под задачи проекта;
- создание и обучение моделей с нуля либо проведение fine‑tuning (SFT, LoRA, PEFT;
- подготовка, очистка и разметка датасетов, формирование instruction‑данных;
- реализация и запуск пайплайна обучения на базе PyTorch;
- оптимизация моделей (quantization, снижение latency, inference‑оптимизация);
- реализация function/tool calling и интеграция LLM с API.
Требования:
- уверенное владение PyTorch и опыт реализации пайплайнов обучения.
- понимание архитектуры Transformer (attention, embeddings, базовые механизмы работы моделей).
- опыт проектирования и применения методов дообучения (SFT, LoRA, PEFT).
- практический опыт оптимизации моделей (quantization, inference‑оптимизация, снижение задержек);
- опыт работы с Hugging Face Transformers.
- релокация в Республику Татарстан;
- конкурентный уровень з/п;
- дневная рабочая неделя (ненормированная);
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Менделеевск, г. Нижнекамск;
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе.