ロボットデータ基盤は「YouTube」の設計で作れる——Hebbian RoboticsのParetoが示す新発想

YouTube System Design for Robotics Data Infrastructure

ロボット学習用データ基盤「Pareto」を開発したHebbian Roboticsが、その設計がYouTubeのシステム設計に酷似していると解説。アップロード、処理、保存、インデックス、再生というパイプラインは、数千人のユーザーが動画をアップロードするのと同型だ。マルチモーダルなエピソードデータの扱い、Temporalによる耐久性のあるワークフロー、GPUとCPUの使い分け、ストリーミング配信など、具体的な実装を交えて紹介する。