操作のラグを減らす通信

こんな課題をご相談ください

• クラウド上のゲームやアプリを操作すると、画面の反応が遅れる
• 高性能な処理をサーバーに集約しつつ、操作感を保ちたい
• 先読みや予測を導入すると、計算量と映像の通信量が増えてしまう

操作をサーバーへ送り、その結果の映像が戻るまで待つ構成では、往復通信が操作感に影響します。本研究では、操作への反応と、映像を送るために必要な資源を合わせて考えます。

研究のアプローチ

利用者が次に行う可能性のある入力に対応する映像を、先に生成・送信する「投機的映像伝送」を研究しています。端末は実際の入力に合う映像を選んで表示します。複数候補の映像には共通部分があるため、画面を小領域に分け、差のある部分を送ることで通信量を抑えます。

研究で扱っていること

投機的映像伝送の通信量削減では、候補映像の類似した領域を検出し、重複を省く方式を扱っています。複数ジャンルのゲーム映像を使い、通信量と画質、必要な計算処理の関係を検討しています。

適用時には、入力の種類や予測の範囲が重要です。画面の反応が改善する条件、候補に含まれない入力が起きたときの表示、サーバー側の処理負荷を一緒に確かめます。

共同研究で確かめたいこと

入力ログ、映像サンプル、現在の遅延の内訳を共有していただければ、対象アプリでの実験方法を検討できます。遠隔操作などへの展開は、入力と状態の変化を整理し、対象ごとに有効性を確かめる共同研究課題です。

関連する研究テーマ

• 3次元映像・点群伝送：大きな3次元データの通信量と品質を扱います。
• 5G/6Gネットワークの計測・改善：通信による遅延の要因を調べます。
• ロボットと通信の協調：通信条件と実世界の動作を一緒に考えます。