Бенчмарк показал, во сколько на самом деле обходится JavaScript-фреймворк при работе с AI-агентами
The AI cost of JavaScript frameworks
Nolan Lawson прогнал один и тот же Pokémon-апп на PokéAPI через агентов на Opus 5.5 в 12 JavaScript-фреймворках и мета-фреймворках, включая Next.js, Nuxt, SvelteKit и Angular, и замерил стоимость, время, токены, а также оценки Lighthouse. Дешевле всех оказались Hono+htmx и Astro, дороже — SvelteKit, Gracile+Lit и Angular. При этом разброс между запусками настолько велик, что выводы о превосходстве одного фреймворка над другим часто не подтверждаются данными.
LLM — это генераторы случайных слов, поэтому иногда выпадает низкий бросок кубика, и агент уходит в странное ответвление, тратя кучу токенов, хотя фреймворк и его инструменты тут ни при чём.