OpenAI по-прежнему не может решить проблему WebRTC в голосовом AI
OpenAI still has a WebRTC Problem

Автор блога moq.dev снова атакует WebRTC: протокол создан для конференций с людьми и агрессивно выбрасывает опоздавшие аудиопакеты, из-за чего голосовой агент просит повторить фразу и теряет токены. Для LLM важна задержка последнего пакета, а не каждого — значит, можно переотправлять данные секундами. Решение — Media over QUIC с таймстемпами и буферизацией; поддержку MoQ уже добавили в Pipecat.
Голосовой агент никогда не должен просить пользователя повторить запрос. Он должен просить транспорт повторить запрос.