Jevotron находит аномалии в данных одной командой в терминале
Jevotron: Multiple Jev integrations from the command line
Утилита jevotron из командной строки оценивает каждую запись CSV, YAML, JSON, TOML, OBO и текстовых файлов, подсвечивая подозрительные поля и формируя очередь на проверку. Она показывает, какие данные отправляются модели, кэширует результаты в SQLite и позволяет возобновить прерванный запуск без повторной оценки неизменённых записей. В пилоте на 24 публичных трейсах агентов jt совпал со 163 человеческими метками качества шагов в 130 случаях (79,8%).
На небольшой выборке из 24 публичных трейсов, отфильтрованных по длине, jt совпал со 130 из 163 меток качества шагов (79,8%).