Сравню варианты обработки при одинаковых требованиях к результату. Учтем состав операций, повторы и длинные случаи, чтобы итоговая оценка не держалась на удобном среднем. Сравню новую конфигурацию на согласованной нагрузке и требованиях к качеству. Повторы и длинные случаи учитываются отдельно.
Ожидаемый результат
Сравню новую конфигурацию на согласованной нагрузке и требованиях к качеству. Повторы и длинные случаи учитываются отдельно.
Стоимость и сроки — после обсуждения задачи
Этапы работы
Разобрать исходные данные: Обезличенные логи, расходы, целевые ограничения, рабочий набор и отдельные тесты.
Согласовать объем и ограничения на конкретных примерах
Подготовить материалы и одну согласованную итерацию изменений
Проверить результат по критериям и передать итоговую версию
Что получит заказчик
Сравню новую конфигурацию на согласованной нагрузке и требованиях к качеству. Повторы и длинные случаи учитываются отдельно.
Перечень новых вариантов и отличий от предыдущей версии
Обновленные материалы и сводка проверок по согласованным критериям
Ограничения и условия
Объем, сроки, число итераций и стоимость согласуются до начала работ.
Права на исходные материалы и достоверность характеристик подтверждаются отдельно.
Внешние подписки, рекламные размещения и постоянное сопровождение оцениваются отдельно.
Содержание 2
Примеры условий, которые фиксируем в начале
| Пример задачи | Что важно согласовать |
|---|---|
| WAV-пакет: разбиение длинных файлов под лимит приема | Использованы шесть авторских тональных PCM-файлов. Проверена подготовка аудио к ограниченному приему, а не распознавание речи или качество внешнего ASR. |
| Локальный кэш поиска: повтор, другой пользователь и новая редакция | Это локальный кэш строк в одном вызове стенда. Сетевой сервис и языковая модель не участвуют. |