Почему семь вопросов
Все семь вопросов — не выдуманный фреймворк, а восемь полей паспорта агента, которые сайт фиксирует для каждого запуска: задача, вход, процесс, выход, ограничения, разрешения, контур и проверка (подробнее на странице стоимости). Агент с заполненным паспортом отвечает на каждый вопрос; агент без паспорта — красивая презентация с непредсказуемым поведением.
Вопросы 1–3: задача, данные, остановка
1. Какова задача и критерий результата? Принцип сайта: перед запуском фиксируются задача, входные данные, ожидаемый артефакт, критерии приёмки, ограничения и человек, принимающий решение. Без этого стоимость даже не обсуждается.
2. Какие данные агент получает? Модель доверия требует least privilege: каждый источник и инструмент подключается отдельно, доступ к другим данным не должен подразумеваться интерфейсом.
3. Где агент останавливается и спрашивает человека? Контроль человека обязателен: спорные решения останавливаются и ждут подтверждения, чувствительные действия объясняются до согласия. Агент без точек остановки — неуправляемый процесс.
Вопросы 4–5: источники и границы утверждений
4. Как вывод связан с источником? У проверяемого агента каждый вывод трассируем: журнал работы фиксирует входы, решения и источники; результат можно проследить до исходных данных. Примеры: RAG-навигатор отвечает точными цитатами с реквизитами, консультант по базе — со ссылкой на таблицу-источник, аналитик требований привязывает каждое требование к источнику.
5. Что агент не позволяет себе утверждать? Ограничения должны быть названы в паспорте: выборка не равна статистике рынка, протокол требует проверки человека, RAG-ответ не является юридическим заключением, аудит не является сертификацией. Если ограничений нет в паспорте — их не существует только в рекламе.
Вопросы 6–7: контур и артефакт
6. В каком контуре работают данные? Облачный, командный или локальный — контур фиксируется до запуска вместе со сроком хранения и списком обработчиков. Для чувствительных данных это решающий вопрос: локальная обработка архитектурно исключает передачу третьим сторонам.
7. В какой форме возвращается результат? Правильный ответ — проверяемый артефакт: документ, черновик, таблица, отчёт с цитатами. Артефакт можно открыть, поправить и передать дальше. Если результат существует только в чате с агентом и нигде больше — его нельзя ни проверить, ни использовать.
Как пользоваться чек-листом
Прогоните по этим вопросам и кандидатов на покупку, и собственный проект внедрения. Дальше маршрут короткий: демо-запуск для проверки заявлений, метод для фиксации критериев, принципы безопасности для контура и доступов. Если после демо вопросы остались — честнее вернуться к обследованию, чем к оплате счёта.
Вопросы и ответы
Зачем нужен чек-лист при выборе ИИ-агента?
Чек-лист из семи вопросов помогает проверить агента до запуска: цель, данные, точки контроля человека, связь вывода с источником, ограничения, контур и критерии приёмки. Без чек-листа легко пропустить критическое ограничение, которое сделает результат бесполезным.
Обязателен ли локальный контур?
Нет: контур выбирается по чувствительности данных. Для задач, которые не представляют коммерческую тайну и персональные данные подходит облачный или командный; для тайны и чувствительных записей — локальный. Контур выбирается заказчиком.
Хватит ли одного демо для решения?
Демо проверяет заявления на синтетических данных; решение о запуске стоит принимать после фиксации критериев приёмки на ваших материалах.
Сколько вопросов в чек-листе?
Семь: цель, данные, остановки и вопросы к человеку, связь вывода с источником, чего нельзя утверждать, контур, форма артефакта.
Почему вопрос «что результат не позволяет утверждать?» важен?
Он выявляет ограничения заранее: у каждого агента поле «Ограничение» зафиксировано в паспорте.
Что значит «связь вывода с источником»?
Каждый вывод трассируем до исходных данных: журнал и цитаты подтверждают результат.
Как проверить контур?
Спросить, где обрабатываются данные и передаются ли они третьим сторонам; список раскрытия — до рабочего запуска.
Применим ли чек-лист к чужим агентам?
Да: вопросы универсальны и проверяют любой агентный продукт.
Что делать с ответами вендора?
Сопоставить с паспортом, журналом и демо: заявления без механизмов — красный флаг.
Кто должен проходить чек-лист?
Ответственный за внедрение вместе с командой до обсуждения цены.