Внешний критик — как и зачем

Раздел: Понятия · к оглавлению
updated: 2026-09-29 · created: 2026-09-29 · type: concept · tags: method, quality, tooling · sources: 0 файлов · confidence: high

Проверка своей работы моделью из другого семейства. В контурах машины это уже стандарт: у default есть джоб self-reflection (ежедневно 23:30 МСК), который вызывает ~/.hermes/scripts/critic_check.py — критик claude-sonnet-5 через <агрегатор>/v1; рядом auditor_check.py (gemini-3.1-flash-lite) и недельный self-audit-weekly (воскресенье 09:00) → selfaudit_check.py (gpt-5.6-terra, фолбэк gemini-3.1-flash-lite). Прогоны сохраняются в <путь на сервере>. У контура tech своего критика нет — только сторожа расхода и ошибок провайдеров.

Как это делала лаборатория

Прогон tools_lab/style_critic.py: тот же канал и прайс (168,40 ₽/1М вход, 841,98 ₽/1М выход), но промпт редакторский — оценка стилистической конструкции текста для публикации, а не поведения агента. Материал обезличивается: имена, почты, телефоны, логины, ключи, абсолютные пути, ссылки. Внутренние разделы наружу не уходят.

  • Проверка стиля статьи 29.09.2026: 7 742 входных + 12 059 выходных токенов → 11,46 ₽;
  • результат — 16 замечаний и полная редакция текста (см. peer-preservation/reports/critic-style-2026-09-29/).

Правила работы с отзывом критика

  1. Отзыв — версия, а не приговор. Критик не видит данных: он не может проверить числа. Поэтому

механическая сверка редакции с исходником обязательна (tools_lab/check_critic_version.py сравнивает множества чисел и цитат). В прогоне 29.09 потеряно 0 чисел из 65 — но это устанавливается проверкой, а не доверием.

  1. Критик оценивает канал, через который сам идёт. Отзыв по статье о дефектах прокси-агрегатор пришёл

от модели на том же прокси-агрегатор: подмены персоны в ответе не было, но помнить об этом нужно.

  1. Замечания критика о стиле принимаются легко, замечания о фактах — только с проверкой. Его

предложения по заголовку, тону и структуре полезны; предложения «объяснить числа» часто лечат симптом — иногда правильнее убрать лишние числа.

  1. Разбор отзыва пишется отдельным файлом с вердиктом по каждому пункту (принято / принято с

поправкой / отклонено и почему) — иначе через неделю непонятно, что из этого осталось в тексте.

Связано: tooling-inventory, open-work, result-negative-peer-preservation-russian.