driveasi / риски и kpi
08 · риски и эффективность

Главные риски закрыты архитектурно

Утечки и галлюцинации — не «будем внимательны», а классификация данных, локальное исполнение по умолчанию, AI-Firewall и независимый критик на обезличенных данных.

ВЛИЯНИЕ ↑ · ВЕРОЯТНОСТЬ →
критическое
высокое
среднее
низкая
средняя
высокая
выберите риск

Срыв поставки сервера БЯМ

Заказ сразу после оплаты; еженедельный контроль вех поставки; прототипы и память на серверах УПР; резерв — DeepSeek 4.1 Flash и национальные модели.

показатели эффективности

Пять целевых значений — и как мы их измеряем

ПоказательЦельИсточник и метод
Доля запросов, обработанных внутри локального контура> 80%Langfuse / LiteLLM: распределение запросов по маршрутам
Утечки данных классов III–IV в облако0Журнал AI Security Gateway, аудит всех обращений к облаку
Доля замечаний облачного критика, закрытых после доработки≥ 90%Langfuse: трассировка цикла «ответ — критика — доработка»
Сотрудники, использующие систему еженедельно (через 3 мес.)≥ 70%Статистика Open WebUI, опросы пользователей
Стоимость локальных токенов по облачным тарифам за 5 лет≥ CAPEXЕжемесячный отчёт: объём токенов × тариф облачного аналога

Производительность

Задержка ответа, загрузка ускорителей, ошибки, стоимость по маршрутам

Langfuse · Prometheus · Grafana

Качество

Еженедельный прогон 200–500 пар «вопрос — ответ — источник», оценки пользователей

eval-набор · критик

Дрейф данных

Новые типы документов и термины, рост запросов «без ответа», смена маршрутов

мониторинг распределений

Безопасность

Срабатывания AI-Firewall, попытки инъекций, аудит обращений к облаку

журнал Gateway

При деградации качества ниже порога — откат версии модели или конфигурации. Ежеквартально — сравнительный бенчмарк моделей для своевременной замены устаревших.

канал открыт

Задайте вопрос — ответит архитектор проекта

Терминал связан напрямую с руководителем проекта. Спросите про стоимость, сроки, модели или безопасность — ответ придёт в это же окно.

@ValeRa_AOS_ru