LLM 토큰을 같은 너비로 그리는 폰트 컴파일러

Generate fonts where every LLM token is the same width

브라우저에서 폰트와 토크나이저를 결합해 모든 토큰을 3em 너비로 렌더링하는 TTF를 생성한다. Discord와 Slack에서 특정 메시지에 적용할 수 있으며, 토크나이저가 폰트의 셰이핑 규칙에 내장된다. Byte-level BPE와 DeepSeek V4.1 Flash 프리토크나이저만 지원하고, GLM-5.3과 Claude용 ctok은 근사치다. 브라우저 셰이핑과 유니코드 정규화로 토큰 경계가 달라질 수 있다.

이것은 토큰 폰트이지, 전체 메시지의 정확한 토큰 카운터가 아니다.

이 날의 다른 글

2026-09-27