OpenAI의 음성 AI, WebRTC 때문에 "다시 말해줄래요?"라고 묻는다
OpenAI still has a WebRTC Problem

moq.dev의 개발자 kixelated는 OpenAI가 음성 AI에 WebRTC를 쓰는 것을 다시 비판한다. WebRTC는 화상회의용으로 설계돼 지연된 오디오 패킷을 버리기 때문에, 패킷 손실이 생기면 AI가 사용자에게 말을 되풀이해 달라고 요청하게 된다. 반면 LLM은 마지막 패킷의 지연이 중요하고 오디오는 작아서, Media over QUIC(MoQ)는 최대 5초간 재전송해 문맥을 온전히 전달한다. Pipecat이 MoQ를 지원하기 시작했다.
음성 에이전트는 사용자에게 프롬프트를 다시 전송해 달라고 요청해서는 절대 안 된다. 대신 전송 계층에 프롬프트를 다시 전송해 달라고 요청해야 한다.