シュッとしとる絵文字システム

https://www.youtube.com/watch?v=iTxV3VcgBsc

XRクラブイベント「シュッとしとるヤツ」用に開発した現実世界のスマホからVRChatに絵文字を出すシステム

シュッとしとるヤツはXRクリエイティブアワード2022の個人部門で優秀賞を受賞した

anaro と Saina と共同開発

構成

https://scrapbox.io/files/68145cfb34746c2d7dec1322.png

会場のQRコードからWebアプリにアクセスし、絵文字を表示するリクエストを送る

WebアプリにはUnityクライアントがWebSocketで接続しており、ブラウザからのリクエストを流す

Unityクライアントは受け取ったリクエストをMIDIにエンコードして送信する

VRChatワールドのU#スクリプトがMIDIを絵文字情報にデコードして同期する

各VRChatクライアントで絵文字情報からパーティクルを表示する

備考

元々WebアプリをC#で作り、Unityクライアントとの接続はMagicOnionを使っていたが、HTTP/1とHTTP/2を両立させるためにポートを分ける必要があるなどの制限があり、Render.comに移行するにあたってWebアプリをGoで書き直してWebSocketを使うようにした