2023年10月1.4.9版本发布
Eng | 繁中 | 日本語 | 한국어 | 简中 |
AI 助力與任何角色進行語音聊天
概述
現在您可以面對面與您最喜愛的角色進行對話!
- 您可以選擇使用 ChatGPT 或任何您可以在 OobaBooga WebUI 上運行的 LLM。
- 完全本地選項可用。如果您希望完全免費和私密,您可以運行自己的 LLM 並使用它來提供聊天功能。
- 內置多語言語音識別。
- 內置多語言 TTS 引擎。我們已經包含了一個擁有超過 900 種不同聲音的英語模型。其他語言的聲音可供下載。
- 內置本地口型同步。
- 空間音頻,您可以在不看的情況下知道說話者的位置。
- 輕鬆自定義角色的個性和描述。
- 您可以保存並重播聊天消息。
- 您還可以使用來自流行的 AI 角色扮演程序(如 TavernAI)的角色(以 JSON 格式)。
目前的限制
- 語音引擎僅支持 Windows。目前在 Mac、Android、Quest 上沒有語音選項。
- 與 DanceXR 一起運行 LLM 需要強大的 GPU 和大容量 VARM。建議使用遠程設置。
文檔
有用的鏈接
- OpenAI https://platform.openai.com/
著名的 ChatGPT。要使用他們的模型進行 AI 聊天,您需要在 OpenAI 上註冊並獲取一個 API 密鑰。然後在 DanceXR 的 Chat Config 中輸入該密鑰。該服務不是免費的,但價格便宜。不要將 ChatGPT Plus 與其混淆,它們是不同的服務。即使您有 ChatGPT Plus 訂閱,使用時仍會按使用量收費。
- OobaBooga WebUI: https://github.com/oobabooga/text-generation-webui
這是一個允許您在本地運行 LLM(大型語言模型)的程序。
- 安裝 WebUI 後,您需要下載一個模型來運行。這裡有兩個我們推薦的未經審查的模型。
https://huggingface.co/TheBloke/Luna-AI-Llama2-Uncensored-GPTQ(7b,更容易運行) https://huggingface.co/TheBloke/Nous-Hermes-Llama2-GPTQ(13b,更智能)
- Runpod: https://www.runpod.io/
這是一個允許您租用 GPU 並運行 AI 模型的服務。如果您不想麻煩地安裝自己的 WebUI,或者沒有強大的硬件運行 LLM,這是其中一個選擇。
- 語音下載 https://rhasspy.github.io/piper-samples/
我們使用的 TTS 引擎名為 Piper。上面的鏈接列出了目前可用的所有聲音。如果您有興趣,您也可以訓練自己的語音模型。
模型改進
- 裙子和頭髮物理效果現在有更多選項供您微調。
- 改進了乳房和軟體物理碰撞控制。
- 您現在可以使用自動更新來動畫化穿衣系統的過渡效果。
改進的 Pico 支持
- 支持顏色通過
- 修復了錯誤
其他修復和改進
- 在場景中有許多角色時,改進了幀率。