Appearance
V1.2(2025.8/22)
https://drive.google.com/file/d/1E2gNZIfAxQSbs3IqfpRwhCvwzNx8bjQS/view?usp=sharing
概要
本アプリは OpenAI API と にじボイス API を組み合わせ、ユーザーが音声による質問や指示を行い、AIからの補助を受けられる仕組みを提供します。
音声入力とVRコントローラー操作を組み合わせることで、直感的な対話体験を実現しています。
操作方法
UIの表示切替
- 右手コントローラー Aボタン
- UIを切り替え
- UIは以下の2種類
- トークログ(会話履歴の表示)
- モデル選択/ボイス選択設定
UIの操作
- コントローラーから出るレイ を使用
- コントローラー人差し指ボタン で選択・決定
音声入力(AI対話)
- 左手コントローラー 中指ボタンを押しっぱなし → 録音開始
- ボタンを離す → 録音終了し、音声がAIに送信される
- AIからの返答が再生される
機能
ボイス
- 速度変更可能(現在1.5倍速)
- UIから操作できるように実装予定
録音
- 録音時間の調整が可能
- 現状の最大録音時間は 60秒
AIモデル
- 現在は 3種類 のモデルを利用可能
- モデルは追加可能(例:GPT-5 を追加予定)
今後の拡張予定
- ボイス操作のさらなるカスタマイズ(速度・声質など)
- 利用可能なAIモデルの拡充
- UI/UX改善による直感的な操作性の向上
Author: 村井 | Source:
村井\uPano×MetaQuest3でパノラマビューアプリデモ開発\V1 2(2025 8 22) 257aba435ee780ecba05e9aaac005255.md