Анализ траекторий агентов через Inspect Scout

testing

check-trajectories-workflow — это скилл для Claude Code, который автоматизирует анализ траекторий агентов из лог-файлов оценок с помощью Inspect Scout. Скилл запускает встроенные сканеры (outcome_summary, external_failure, formatting_failure, reward_hacking_success, ethical_refusal) и поддерживает создание пользовательских сканеров через InspectEvalScanner. Рабочий процесс включает 11 шагов: от выбора лог-файла и создания папки agent_artefacts/trajectory_analysis/<eval_name> до запуска run_all_scanners.py, extract_results.py, analyze_validity.py и формирования итогового ANALYSIS.md. Подходит командам, которые занимаются контролем качества AI-моделей и хотят выявлять сбои инфраструктуры, ошибки форматирования и reward hacking быстрее, чем при ручном разборе логов.