CATT - Тестирование агентов и сервисов против Muse/Instinct в CI
Show HN: CATT 0.2.1: Test agents/services against a Muse/Instinct-alike, in CI
CATT (Consumer Agent Testing Tool) — это инструмент с открытым исходным кодом, который проверяет, как AI-ассистент взаимодействует с вашим сервисом. Запускайте сценарных или управляемых моделью агентов против MCP-серверов, MCP-приложений, веб-сайтов и HTTP API, а затем проверяйте, что именно сделал сервис: правильные ли инструменты вызваны, соблюдены ли правила одобрения, защищены ли приватные данные и корректен ли финальный ответ. CATT поддерживает эмуляцию Muse и Instinct, ведёт запись доказательств и позволяет сравнивать результаты между сборками — идеально для CI-пайплайнов. Установка через uv, быстрый старт на loopback без аккаунта и модели.
CATT — это суррогат: он приближает хост ассистента, а не его закрытую реализацию. Успешный тест не сертифицирует совместимость с Muse или любым другим хостируемым ассистентом.