情報処理学会 インタラクション2024

スライドや論文等の資料を説明する動画（資料動画と呼ぶ）において，ユーザは動画とそれに対応する資料の元データ間の対応関係を把握することが要求され，これには大きな負荷を伴う．本研究では，この動画・資料間の相互の探索を支援するための動画・資料ビューアの統合型ユーザインタフェースであるSwapVidを提案する．本インタフェースでは，動画・資料コンテンツの両者をOCR解析し，各動画フレームと資料位置との対応関係を推定する．これに基づき，ユーザの操作に応じて動画・資料ビューアを切り替え表示することにより，動画・資料を1つのウィンドウ内でシームレスに扱うことを実現する．本デモでは，SwapVidインタフェースに加え，ZoomやWebブラウザ等の既存アプリにSwapVidを適用可能なアプリケーションを紹介する．