Overview
产品概述
Lobe Vidol 是 lobehub 推出的开源项目，提供精致的 UI 设计，集成了 MMD 舞蹈内容、角色无缝对话等功能。平台支持文本聊天、视频对话、多模型提供商、角色与舞蹈市场、TTS/STT 语音对话以及渐进式 Web 应用（PWA）；用户无需安装或注册即可访问官网快速体验，也可通过 Discord 与开发者和社区交流。项目当前处于早期开发阶段，欢迎提交 issue 和参与贡献。
Capabilities
核心能力
文本聊天模式
通过流式响应提供流畅的对话体验，可设置角色对话场景，营造沉浸式交流。
视频对话模式
可在消息框中使用视频按钮与角色模型进行面对面聊天、角色表演等更丰富的互动，并设置背景、舞台、动作和舞蹈。
多模型提供商支持
支持接入多种模型提供商，而非局限于单一提供商，以灵活适配不同用户需求并为开发者提供更多选择。
角色与舞蹈市场
提供角色和舞蹈市场，内置 Mixamo 角色动作与姿态库，支持上传 VRM 模型，并可通过 vmd 文件与喜爱的偶像一起跳舞。
Use Cases
适用场景
-
01
创建专属虚拟偶像
使用角色编辑器创建自己的虚拟偶像，设置触摸响应，上传 VRM 模型到站点并与之互动。
-
02
与虚拟偶像语音对话
借助 TTS 与 STT 语音对话能力，与角色进行更自然的语音交流。
-
03
让角色在舞台上跳舞
通过 vmd 文件和舞台加载功能，让角色在不同舞台风格中表演舞蹈。
Integrations
集成能力
AWS Bedrock
集成 AWS Bedrock 服务，支持 Claude / LLama2 等模型，提供自然语言处理能力。
Google AI
接入 Google Gemini 系列模型（Gemini Pro、Gemini Vision），支持高级语言理解与生成。
Anthropic Claude
集成 Anthropic Claude 系列模型，包括 Claude 3 和 Claude 2，具备多模态与超长上下文能力。
ChatGLM
加入智谱 ChatGLM 系列模型（GLM-4 / GLM-4-vision / GLM-3-turbo），提供高效的对话模型选项。
Moonshot AI
集成 Moonshot 系列模型，旨在提供更深层的对话理解。
Together.ai
集成数百个开源模型和向量模型，无需本地部署即可访问。
