19 PracToneVis:管楽器奏者のためのLLMを用いた基礎練習支援システム 池谷 優希(お茶の水女子大学),伊藤 貴之(お茶の水女子大学)
https://www.wiss.org/WISS2025/assets/representatives/19.jpghttps://scrapbox.io/files/692fcff2f452b18b1b7f19e2.jpg
概要
奏者にとって基礎練習は演奏技術の土台となる重要な活動であるが,その成果を客観的に評価する機会は多くない.特に音色は定量的評価が困難であり,課題の把握が難しい.本研究では,ロングトーンを対象とした基礎練習支援システム「PracToneVis」を開発し,音響解析による可視化と大規模言語モデル(LLM)によるフィードバックを通じて,演奏傾向の理解を支援する.音響解析において,我々は音量・音程・音色の3点に着目している.音量と音程は基準値との差分に基づき評価し,音色は倍音構成から抽出した特徴ベクトルをクラスタリングして可視化する.さらにこれらの安定性を得点化し,LLMによる自然言語での解説とともに演奏者に提示する.実験では,10名のフルート奏者によるロングトーンを分析し,PracToneVisの出力に対する評価アンケートを実施した.その結果,音色に関する表示の有用性が示された.今後は,より可読性の高い可視化方法の検討と,問題点の自動検出を通じて,さらなる練習の効率化を目指す.
3日目にデモ発表を行います!【ブース:3-C01】
参加者メモ・コメント
https://scrapbox.io/files/69311997ad82bc4b263de7af.jpeg
共著者です。登壇者は今年2月に研究室配属になって半年で本論文を投稿しました。WISSへのモチベのおかげです。itot.icon
ロゴがナイスすぎます!𥱋瀨洋平.icon
伊藤研ロゴ、いいですね〜♪ソノヤマタカスケ.icon
この伊藤研ロゴは公式なのか...? narumi.icon
既に僕も何か所かで使ってます!itot.icon
楽器やるので内容期待 yukimat.icon
ロングトーン... うっ...若かりし頃の記憶が
松田さんはなんの楽器されるんですか?𥱋瀨洋平.icon
伊藤先生のお仲間ですね!𥱋瀨洋平.icon
おおっ、伊藤先生もトロンボーンをされるんですね。仲間だyukimat.icon
著者です。私も吹奏楽とビッグバンドをやっていました!
わいわい yukimat.icon
黄色いサングラス持ってくればよかった!itot.icon
まだ物理で持っていらっしゃるんですか!𥱋瀨洋平.icon
経験年数40年以上...単にLLMに指摘されるのが不満なだけだったりして.koike.icon
著者の方も管楽器のご経験があるのかお聞きしたいです!(研究のモチベーションというか…)baku89.icon
筆頭著者は主にフルートをやってます!itot.icon
特定の音のみ音色が異なる理由は?(指の当て方の安定度? 定在波が安定しにくい管路構造?)
木管楽器の場合はどこの穴をふさぐかで倍音構成が非線形的に変わります。金管楽器の場合は管が長くなるほど高次倍音が減って曇って聞こえる傾向にありますitot.icon
→とういうことは、主に構造的な要因で、演奏者の技術でカバーしにくい?(それとも吹き方や押さえ方で緩和できる?)
→カバーするのに熟練を要するという感じですね。(熟練を早めるためにこういうツールを有効活用したいということになります)itot.icon
質疑
✅️ アンブシュアの違いを判別できる可能性はあるんでしょうか?(フルートにはそういうのないのかしら yukimat.icon
ロングトーンするのはいいんだけど、その音に合わせて口の形を変えちゃうと(=一貫性が無いと)良くないという説もあるので気になる yukimat.icon
同様に、発音・しまい方などなど... どんどん研究進めてほしい!
ありがとうございます!基礎練習の種類、分析項目など増やしていけるよう頑張ります!
データセット(ユーザ,練習パターンなどなど)はどの程度の大きさのものを準備しましたか?koike.icon
あ,発表された.
音だけでなくて,演奏姿勢の動画とかも使うといいと思います.koike.icon
ありがとうございます!
✅️ 管楽器以外の、たとえば声楽なんかにも応用は効かないんでしょうか?ソノヤマタカスケ.icon
某カラオケの某全国採点でもロングトーンとか声質とか使われてるので気にはなってるんですよね…くらもといたる.icon
それな!!ソノヤマタカスケ.icon
自分は声楽に対して詳しくないので分かりませんが、確かに似たようなことはできそうかなと思います。是非声楽に詳しい方にやっていただけたらと...!
✅️ 演奏者の演奏特性をいかした、楽曲をレコメンドするようなシステムとかは?
ロングトーンからのレコメンドは精度上げが難しそうな気がします。しかし、アルペジオやリップスラーなどより多様な基礎練習に対応できるようになれば可能だと思います。