агентная разработка
Что доказывает зелёный тест: от задачи агента к наблюдаемому результату
Какие доказательства связывают зелёный тест агента с пользовательским результатом, внешним эффектом и человеческой приёмкой.
Читать статьюБлог
Блог Аналитической мастерской
Канонические определения, статьи и разборы про Source map, System Context Pack, Review Findings, Task Pack и AI для системных аналитиков.
Новые статьи в глоссарии
SCP, Review Findings и Task Pack
System Context Pack
Что такое SCP, когда он нужен, из каких блоков состоит и как на кейсе Acme Pay отделить факты от конфликтующих источников.
Review Findings
Как фиксировать противоречия, пробелы и риски требований с evidence, severity и следующим действием.
Task Pack
Как собрать рабочую постановку задачи с требованиями, вопросами, рисками, evidence и acceptance criteria.
Словарь
Страницы под SEO и GEO: короткие определения, связанные термины и канонические URL, на которые можно ссылаться из постов и докладов.
Самооценка уверенности модели
Если число получено обычной просьбой «укажи уверенность», его полезность ещё нужно проверить. Само наличие процента не означает, что он соответствует реальной частоте правильных решений.
Точность классификации
Если из 100 обращений 90 переданы правильному отделу, точность на этой проверке составляет 90%. Это результат проверки всей группы. Отдельному новому обращению он не присваивает вероятность правильности 90%.
Калибровка уверенности
Если среди обращений с оценкой около 80% примерно 80% распределены правильно, оценка хорошо соответствует результатам в этой группе. Если правильно распределена только половина, система переоценивает свою надёжность. Калибровку проверяют на данных; для отдельного ответа она не гарантирует правильность.
Порог автоматического решения
Порог выбирают по результатам испытаний и допустимой цене ошибки. Число 90% само по себе не делает правило надёжным. Также нужно проверить, помогает ли оценка отличать более надёжные решения от менее надёжных.
Source map
Помогает аналитику понять, чему можно доверять, где источники расходятся и какие вопросы нужно закрыть до анализа.
Project-local RAG
Ограничивает поиск source map, Confluence, Git, PDF, переписками и артефактами конкретной задачи, чтобы ответ был проверяемым.
System Context Pack
Фиксирует роли, термины, ограничения, открытые вопросы и границы задачи до постановки.
Review Findings
Показывает, что должен проверить человек перед тем, как задача уйдёт в разработку.
Task Pack
Собирает результат анализа в форму, которую можно обсуждать с PM, разработкой и владельцами процесса.
системный анализ
Документация API, Wiki и письмо поддержки расходятся: что решить до разработки
Как разобрать конфликт официальной документации, старой Wiki, прототипа и письма поддержки до постановки задачи в разработку.
Читать →
агентная разработка
Агент закончил задачу. Почему completion ещё не доказывает результат
Выполнение завершилось, артефакт существует, результат принят — это три разных состояния.
Читать →
системный анализ
Трассировка требований без матрицы ради матрицы: как доказать, что изменение системы решает бизнес-проблему
Как связать бизнес-проблему, источники, требования, сценарии, NFR и evidence приёмки, сохранив человеческую ответственность за результат.
Читать →
локальные модели
Completion gate для локальных моделей: как проверить результат до оценки качества
Как разделить завершённость, детерминированные проверки и человеческую приёмку, чтобы технический обрыв не превращался в ошибку качества.
Читать →системный анализ
Decision Log для аналитика: журнал решений, которые вы приняли молча
Шаблон журнала аналитических решений на одну строку в минуту. Зачем он нужен агенту, чем отличается от ADR и как начать вести на текущем проекте.
Читать →системный анализ
Source map для системного аналитика: как собрать System Context Pack за час
System Context Pack за час: карта источников с датой и статусом, структурированные утверждения с цитатами, Review Findings и Task Pack на кейсе миграции API Acme Pay v2.1.
Читать →постановка
Task Pack: как прийти к PM не с пустыми руками
Task Pack собирает требования, вопросы, риски, ссылки на источники и критерии готовности в черновик решения.
Читать →системный анализ
Спека, которую агент не переврёт: 12 проверок перед тем, как отдать задачу
Двенадцать мест, где спецификация оставляет ИИ-агенту свободу додумывать: источники, язык, границы, решения и проверка посторонним человеком.
Читать →