松島 圭佑(北海道大学)，阿部 優樹(北海道大学)，坂本 大介(北海道大学)，小野 哲雄(京都橘大学)

https://www.wiss.org/WISS2025/assets/representatives/2-B05.jpg

概要

本研究は，YouTube 等の動画プラットフォームで他の視聴者と一緒に音楽コンサート動画を楽しむための音声絵文字インタフェースを提案する．現在は，ライブコメントにより他の視聴者のリアクションを知ることができるが，これらはテキストや絵文字などの視覚情報に依存するため，視覚障がい者や，ランニング中や作業中であるために画面を見ない聴取者の参加は困難である．これに対し，既存研究はライブコメント中の文字を音声提示する手法を提案したが，コメントの 70%を占める絵文字の提示は検討されていない．さらに我々の初期テストでは，音声絵文字提示が音楽体験を過度に妨げることが判明した．そこで本研究では，音楽コンサートにおいて，観客が声で参加する「コールアンドレスポンス」に着目した．この「コール」文化を応用することで，音楽体験を妨げない絵文字コメントの音声合成が可能になると考えた．具体的には，システムが自動でコールを検出し，そのタイミングで音声絵文字を挿入する音声絵文字インタフェースを提案する．