Appearance
ChatDollKit/AITuber系フレームワーク調査
AITuber系フレームワーク
AITuberKit
https://github.com/tegnike/aituber-kit
- 音声入力にも対応している
- vrmに対応
- ウェブアプリケーション向けのツールなのでunityには向かない。webviewを使えば使えるかも。
VRM_AI
https://github.com/tori29umai0123/VRM_AI
- ChatDollKitとほぼ仕様は同じ。
- 2023年からコミットがない。
ChatVRM
https://github.com/pixiv/ChatVRM
- ブラウザで動作する
- AITuberKitによく似てる。
- 技術デモで開発されているため、機能はすくない。
結論：一番高機能でunityでも使えるものはChatDollKit。
手軽さでいうとほかのものもある。一番メジャーなのはAITuberKitでした。
vrm対応かつ音声認識のものはこのくらいしか見つけられませんでした。
また、これはフレームワークというよりかは自作するときに使うものなのですが、
UnityNeuroSpeechというシステムもありました。
これは、音声認識と音声合成とローカルLLMを一気に呼び出せるフレームワークです、これにVRMのシステムを自分で作って乗せればAITuberになります。
ChatDollKitの最新情報
5/16が最新のリリース。
NijiVoiceに対応、AITuber同士の会話ができるようになった。
そのほか↓
- バックエンド関係の改善
- HTTPSアクセスの遅延改善
- webGLのビルドエラーが改善
Author: 松崎 | Source:
松崎\ChatDollKit AITuber系フレームワーク調査 22caba435ee7800fb416fb46ce7ef011.md