Wagtail, GLM 5.3 Flash로 한 달 코딩 도전… 절반만 성공
One month coding with GLM 5.3 Flash

Wagtail 팀이 한 달 동안 GLM 5.3 Flash만 사용해 코딩하는 실험을 진행했다. 전반에는 예산 내에서 성공했지만, 후반에는 다른 모델로 10억 토큰이 새어 나가며 실패했다. 프로토타입에 잘못된 모델을 선택해 하룻밤에 1억 5천만 원? 아니, 1억 5천만 토큰과 150달러를 쓴 사례, 인프라 부족으로 성능 저하를 겪은 일, 그리고 14개 모델 벤치마크 데이터를 공개하며 효율적인 모델 선택의 중요성을 강조한다.
우리는 대부분 5배 적은 비용으로 비슷한 결과를 얻을 수 있었을 것이다. 교훈을 얻었다! 이를 위한 예산을 책정하고 더 신중해야 한다.