VRChat: AudioLink
#VRChat #DSP
VRChatにおいて、ワールド内のAudioSourceの音声を解析してUDONおよびシェーダーで利用可能にする機構
https://github.com/llealloo/vrc-udon-audio-link
https://qiita.com/skkn/items/90efab403d26e27c9607
https://booth.pm/ja/items/3384598
Example World
https://vrchat.com/home/world/wrld_8554f998-d256-44b2-b16f-74aa32aac214
https://gyazo.com/b72679ef1681c01352d0068f300a5e23
https://gyazo.com/03cf39f86df37867a38c796cd97b35bd
The AudioLink Texture
AudioLinkにおいて、波形や解析結果はすべてテクスチャ内に格納される
4 Band
4バンドをオーディオリアクティブに使うことができる
指定した範囲のBandのどこかが指定したしきい値を超えているかどうか
ColorChord
Chromatic（12音階）の音源を色に変換するColorChordという技術を用いる
コードを色で表現することが可能
4000Hz付近以降から正確なChordが取れなくなっているっぽい