AItuber
やりますやります
ってか、現存するVTuberの声を真似できれば、実質分身
音声合成と組み合わせたら、特定の人間を再現できる
ひろゆきメーカーとか
【AIにゲーム実況させてみた 】- 数フレームごとに状況を認識
GPT-3で実況を生成
VOICEVOXで発話(ずんだもん)
立ち絵はNovelAIで画像生成
アニメーションはTHAv3
まだまだ未熟だけど可能性感じる。これからアップグレードしていきたい!
有名人の声に出来るAI
あの芸能人と会話ができる!?人工知能「AIタレント」が3DCGでクローン人間として登場!
その人の声で話す分身AIを作るoden
吉本興業、AI活用し芸能人をアバター化。米ObENと提携
Neuro-sama
https://www.youtube.com/watch?v=oI4jb3UCN9Q
Pictoria
AIが変な発言をして炎上するリスクをはらんでいる、どう対策するか?
人から3dモデル、これすごいな
つよつよAI使ったAI VTuberを手軽に動かせるようにした
AI Vtuber作ってる東工大の人
モデルチューニングして、ボイスロイドと連動させてAI vtuber始めるか
音声からモデルを動かしてみた
AI Vtuber生成研究所
絵を動かす
IRIAM
画像1枚から3Dモデルを生成してアニメーションさせる
文章から「3Dアバター」と「動き」を自動作成するAI シンガポールと中国のチームが開発
AIのVtuber化でほのぼのしている場合ではない国家安全保障上の問題とさっきは言ったけど、それにしてもNeuro-samaすごいな。どういう技術だろう。
VPTやMineDojoの強化学習では前者が長期計画、後者はタスクレベルを自然言語命令でAIがマイクラプレイは可能になっているから、プレイはできてチャットは別の技術では
韓国のヴァーチャルガールズグループ
つむぎ年
良い記事!
Hyper + ChatGPT + AI Animation = personal interactive avatar teachers on any topic.
NovelAIでLive2D
Dream Booth
one-shot-talking-face
D-ID
AITuver 春日部つむぎ
AI Vtuberのカスタム
【個人開発】AIでVTuberを作るのに必要な知識は、機械学習の知識ではない
オープンソースAIを用いた音声対話ロボットの作成
デジタルヒューマンブレイン!?
・Chat/Question分類、Chatを軽い処理に置き換え
・End of Talk検知モデルによる音声入力切り上げを導入(モデルは疑似データで学習、まだ精度が悪い)
結果としてレスポンスが(たぶん)向上
確かに、という感じがする
AIに感情モデル
AI Youtube
https://www.youtube.com/watch?v=4r-_iW8fmWU
AI Vtuberで資金調達
設計
今夜はChatGPT+3Dモデル+音声認識+音声合成(VOICEVOX / VOICEROID)のバーチャルエージェント開発RTAをやろうと思います
個人で合成音声キャラ運営やAItuberの声のコーパスのご依頼する時の声の方の探し方と収録方法|夕輝ひかり
APIを立てるメリットはAPI鯖公開によるマシンリソースの分離と可用性の上昇だと思っているので、一つのパッケージにしたい場合は向かないのではと思ってます
このアーキテクチャ(正確には違いますが)でChatGPT API使うと1.5~3秒程度で最終的なトークンが画面に出力され始めることを確認しました。Azure上のOpenAIならもっと早くなりそう。(申請待ち)
ねぎぽよ氏のおっかけで、音声認識+ChatGPT+音声合成+アバター描画を試した。端的に言って、やばい。
ChatGPT APIを使ってAIキャラクターを作ってみる!
AITuber作成の入門記事書きました!!
koeiro
AITuber開発者になるためには何が必要か、全体像を見渡せる動画をアップロードしました。
「言語モデル」とか「画像生成AI」とか「合成音声」とか、個々の技術は論文書けそうなヒトも、シンプルにVtuberとしてデビューするのに苦労しているヒトが多くて、概要を見渡せる資料が必要かな、と。
AI Tuberお試しキット