Выбор приоритетных задач, потенциально решаемых с помощью LLM
Классификация и выбор задач по потенциальному бизнес-эффекту, уровню технологической зрелости и срокам реализации
Оценка эффектов от внедрения решений на базе генИИ (снижение затрат на НИОКР, увеличение скорости создания моделей, повышение их качества)
Анализ данных и бизнес процессов
Анализ качества и полноты исходных данных (документов, структурированных данных)
Анализ текущих процессов определения исполнителей и ответственных в этих бизнес-процессах
Оценка имеющихся компетенций, рекомендации по формированию проектной команды
Проведение пилотов и внедрение решений
Сбор обратной связи пользователей пилота, итеративное внесение изменений
Разработка первой версии для промышленной эксплуатации (production), внедрение в различных подразделениях Компании
Разработка и установка пилотного решения
Предобработка тестируемой части данных
Аудит архитектуры существующих решений, консалтинг
Сбор и анализ существующих данных, погружение в доменную область (интервью, поиск аналогов)
Анализ и выявление точек повышения качества пайплайна
Рекомендации по разметке и подготовке данных
Консалтинг по локальному развертыванию LLM решений
Тестирование решений на базе LLM
Ручное, полуавтоматическое, автоматическое и нагрузочное тестирование
Подготовка отчетов по тестированию, включая анализ и рекомандации
Тестирование на безопасность (уязвимости, инъекции и так далее)
Подготовка скриптов для генерации синтетических датасетов
Разработка и внедрение системы оценки качества решений на базе LLM
Подготовка инструкций по разметке результатов тестирования
Определение количественных и качественных критериев тестирования
Разработка классификатора вопросов
Сотрудничество в сфере ГенИИ: консалтинговые услуги, пилотные проекты и внедрение решений; обеспечение качества ГенИИ-решений: подготовка данных, тестирование, аудит архитектуры