LLM 코딩 에이전트에 가장 좋은 프로그래밍 언어는?
What's the best programming language for coding agents?
동적 언어가 정적 언어보다 토큰 효율적이라는 주장을 검증하기 위해, 저자는 zstd 디코더 구현과 Pandoc 벤치마크라는 두 가지 실제 작업에서 에이전트를 평가했습니다. 결과는 중간 노력 수준에서는 동적 언어가 약간 우세했지만, 높은 노력 수준에서는 차이가 사라지고 오히려 정적 언어가 더 나은 경우도 있었습니다. 또한 J 같은 밀집 언어의 효율성 주장은 사소한 문제에서만 성립하며, 실제 작업에서는 인기 있는 언어가 더 나은 성능을 보였습니다. 저자는 이러한 주장이 보편적으로 옳지 않다고 결론짓습니다.
동적 언어가 일반적으로 LLM 토큰 비용이 낮다는 주장은 기껏해야 방향성만 맞을 뿐, 특정 사례에 실제로 적용되지는 않는다.