UIUCが「Googleより優れている」と主張する電気工学AIチューターを公開、11モデルを並列実行

UIUC AI Teaching Assistant

イリノイ大学アーバナ・シャンペーン校（UIUC）のCenter for AI Innovationが、電気工学コース向けのマルチモーダルQA＆検索システム「AI Teaching Assistant」をオープンソースで公開した。テキスト、画像、音声を処理する11のモデルを並列実行し、応答時間の中央値は2秒。教科書、講義ビデオ、学生QAフォーラムのデータを利用し、RLHFでは電気工学の学生5人を雇って作成したデータセットを使用。評価ではGPT-3が自身を高く評価するという限界も認めつつ、反復的な評価で品質を向上させている。