first commit
This commit is contained in:
39
workers/summarizer/eval/results/min/05-metrics-heavy.md
Normal file
39
workers/summarizer/eval/results/min/05-metrics-heavy.md
Normal file
@@ -0,0 +1,39 @@
|
||||
<!-- уровень: min | модель: qwen3.5-4b-instruct-q4_k_m | источник: 05-metrics-heavy.txt | статус: ok | время: 114.5с -->
|
||||
|
||||
## Ключевые тезисы
|
||||
- Выручка за третий квартал составила 14.2 миллиона рублей с перевыполнением плана на 5.2 процента.
|
||||
- Активных инстансов VidConf на конец квартала 47, из них 12 на уровне AI средний и 3 на максимальном.
|
||||
- Маржинальность по проектам поставки в среднем 62 процента, по подписке на поддержку — 78 процентов.
|
||||
- По качеству транскрибации word error rate на минимальном уровне 14.3 процента, на среднем 9.1, на максимальном 5.8.
|
||||
- Прогноз на следующий квартал: план по выручке 17 миллионов, рост 19.7 процента к текущему кварталу.
|
||||
|
||||
## Принятые решения и задачи
|
||||
- Занести замеры качества транскрибации в регламент с повторением раз в квартал при смене моделей — ответственный: Наталья — срок: не указан
|
||||
- Обновить документ capacity.md с цифрами из нагрузочных тестов SFU — ответственный: Роман — срок: вчера
|
||||
- Увеличить лимит reduce минимум до 1536 токенов начиная с прошлой недели — ответственный: не назначен — срок: не указан
|
||||
- Отслеживать снижение числа жалоб по категории неверных имен в саммари в следующем квартале — ответственный: не назначен — срок: не указан
|
||||
- Зафиксировать цели и назначить следующий обзор через квартал — ответственный: не назначен — срок: через квартал
|
||||
|
||||
## Открытые вопросы
|
||||
- Будет ли снижено число жалоб по категории неверных имен в саммари в следующем квартале? (Наталья)
|
||||
|
||||
## Цифры и факты
|
||||
- Выручка за третий квартал: 14.2 миллиона рублей (план 13.5 миллиона)
|
||||
- Активных инстансов VidConf на конец квартала: 47 (в начале квартала 31)
|
||||
- Отток инстансов за квартал: 2 (4.3 процента)
|
||||
- Затраты на инфраструктуру за квартал: 890 тысяч рублей
|
||||
- Маржинальность по проектам поставки: 62 процента
|
||||
- Маржинальность по подписке на поддержку: 78 процентов
|
||||
- Word error rate на минимальном уровне: 14.3 процента
|
||||
- Word error rate на среднем уровне: 9.1 процента
|
||||
- Word error rate на максимальном уровне: 5.8 процента
|
||||
- Деградация нагрузки SFU начинается при битрейте выше 2.5 Мбит/с
|
||||
- Максимальное количество одновременных издателей на одном сервере: 80
|
||||
- Количество закрытых тикетов поддержки за квартал: 96
|
||||
- Средний SLA ответа: 3.4 часа (целевой 4 часа)
|
||||
- Основная категория обращений: 41 процент (установка и конфигурация)
|
||||
- Категория обращений по качеству AI: 27 процентов
|
||||
- Прочие обращения: 32 процента
|
||||
- Прогноз выручки на следующий квартал: 17 миллионов рублей
|
||||
- Бюджет на инфраструктуру на следующий квартал: 1.1 миллиона рублей
|
||||
- План по росту инстансов для найма специалиста поддержки: выше 60
|
||||
Reference in New Issue
Block a user