LLM 생성 GPU 커널의 39.5%가 오류: 계약 수준 검증기로 밝혀낸 충격적 결과
A Contract-Grade Verifier for LLM-Generated GPU Kernels

언어 모델로 생성된 GPU 커널의 정확성을 검증하는 기존 테스트는 단순한 무작위 입력 검사에 불과해, NaN이나 무한대 같은 오류를 놓치거나 형태 변화에 취약합니다. 본 연구는 12가지 무관용 검증 게이트로 구성된 계약 수준 검증기를 개발하여, 공개 시스템이 정상으로 판정한 2,638개의 생성 커널 중 39.5%가 근본적으로 오류임을 발견했습니다. 또한, GDN 계열을 위한 최초의 네이티브 Blackwell tcgen05 학습 역전파 커널을 검증하여 그 정확성을 입증했습니다.
커널 생성 분야의 보고된 진전 뒤에 숨은 정확성 신호는 숫자가 시사하는 것보다 훨씬 약하며, 무관용 계약 세트가 그 격차를 대부분 해소할 수 있습니다.