Wagtail, GLM 5.3 Flash로 한 달 코딩 도전… 절반만 성공

One month coding with GLM 5.3 Flash

Wagtail, GLM 5.3 Flash로 한 달 코딩 도전… 절반만 성공

Wagtail 팀이 한 달 동안 GLM 5.3 Flash만 사용해 코딩하는 실험을 진행했다. 전반에는 예산 내에서 성공했지만, 후반에는 다른 모델로 10억 토큰이 새어 나가며 실패했다. 프로토타입에 잘못된 모델을 선택해 하룻밤에 1억 5천만 원? 아니, 1억 5천만 토큰과 150달러를 쓴 사례, 인프라 부족으로 성능 저하를 겪은 일, 그리고 14개 모델 벤치마크 데이터를 공개하며 효율적인 모델 선택의 중요성을 강조한다.

우리는 대부분 5배 적은 비용으로 비슷한 결과를 얻을 수 있었을 것이다. 교훈을 얻었다! 이를 위한 예산을 책정하고 더 신중해야 한다.
  1. epistasis

    이 수치들에서 정말 충격적인 점 하나는 에너지 사용량이 얼마나 낮은지야:

    > 그 모델의 사용량은 우리 예산 내에 충분히 들어왔어 ($68, 에너지 사용 약 4kWh / 탄소 배출 365그램).

    에너지 비용은 말 그대로 전체 비용의 1%야. 맥락을 말하자면, 4kWh의 에너지는 EV로 약 15마일을 주행할 수 있는 양이고, 이는 평균적인 사람의 일일 주행 거리의 절반 정도야. 물 10갤런을 끓이는 정도지.

    AI 데이터센터가 세상에 미치는 영향에 대한 이야기를 들으면, 여기서 쓰이는 효과를 얻으려면 에너지가 10배에서 100배는 들 거라고 생각하게 되잖아.

    내 결론은: AI 데이터센터 구축은 아마도 우리에게 그렇게 많은 다크 파이버를 남긴 파이버 구축만큼이나, 어쩌면 그보다 더 큰 과잉 구축이라는 거야. 경제를 구할 유일한 것은 NVIDIA와 칩 팹이 계획된 구축량을 따라잡을 만큼 충분한 칩을 생산하지 못하는 능력뿐이야.

  2. aktenlage

    > 안타깝게도 여전히 그에 따른 결과가 있어. 나는 프로토타입에 '잘못된' 모델을 선택했고, 우리는 거의 하룻밤 사이에 450M 토큰 / $150 / 5kWh의 에너지 사용량을 썼어. MCP 서버 자체는 잘 작동하고 이제 기능에 대한 훌륭한 데모를 갖게 됐으니, 완전히 헛된 건 아니야:

    > 그럼에도 불구하고, 모델 선택과 에이전트 패턴에 주의해야 한다는 좋은 교훈이야. 우리는 그다지 더 많은 노력 없이 아마도 5배 적은 비용으로 비슷한 결과를 얻을 수 있었을 거야. 교훈을 얻었어! 이에 대한 예산을 세우고 더 조심해야 해. 예상할 수 있었지만, 이제 알았으니까.

    이해가 안 돼. 왜 잘못된 거지? 어떤 게 더 나았을까? 교훈은 뭐고 어떻게 예견할 수 있었을까?

  3. hgoel

    나는 DGX Spark 클러스터에서 GLM5.3-Flash의 최근 속도 개선에 매우 흥분했어. 정말 Opus ~4.5와 대화하던 느낌에 가까워. 일관성 면에서는 아직 완전히 거기까지는 아니지만, 정말 좋은 경험이야. 가드레일이 더 적고 고품질의 abliterated 버전은 유용성을 더욱 높여줘.

    그런데 Qwen3.8-Flash-Next는 실행에 필요한 자원이 더 적으면서도 그 수준에 매우 근접해 있어서, Qwen4가 정말 기대돼.

  4. disiplus

    이 글은 LLM으로 생성된 건가, 실패한 정확한 이유를 예시와 함께 어디엔가 제대로 언급했나, 아니면 내가 읽는 데 어려움을 겪고 있는 건가.

  5. monksy

    GLM5.3-flash는 모호한 방식으로 사소한 수정을 할 때 나에게 환상적이었어. "x 기능 고쳐줘, 뭐가 잘못되고 있는 거야." 그러면 일을 해내.

  6. Tepix

    그냥 끔찍한 기사야, 매우 모호하고, 이유도 틀렸고, 정말 시간 낭비야.

  7. nxobject

    이건 글쓴이의 핵심 요점은 아니었지만, "이건 우리가 평소에 추구하는 건 아니지만, 프로토타입에는 잘 맞는다"라고 말했을 때 와닿았어. 그건 바이브 코딩에 대한 내 느낌을 잘 포착해 - 엄청나게 복잡한 작업을 처리할 수 있어! 하지만, 예를 들어 AI가 생성한 GPU 드라이버를 매일 사용할 생각은 전혀 없어! 아마도 "첫 시도는 버리게 될 거야"라는 걸 (다시) 당연하게 여겨야 할지도 몰라.

  8. ThibWeb

    좀 어리석은 도전이었고, 얼마나 실행 가능할지 확신이 없었지만, 그 과정에서 실제로 사용량/비용을 좌우하는 요인과 둘 다 통제하는 방법에 대해 많이 배웠어

이 날의 다른 글

2026-10-02