Xiaozhi ESP32 Server Java

Created By

joey-zhou6 months ago

小智ESP32的Java企业级管理平台，提供设备监控、音色定制、角色切换和对话记录管理的前后端及服务端一体化解决方案

# java

# esp32

Overview Content Tools Comments

Content

Xiaozhi ESP32 Server Java

基于 Xiaozhi ESP32 项目开发的 Java 版本服务端，包含完整前后端管理平台
为智能硬件设备提供强大的后端支持和直观的管理界面

反馈问题 · 部署文档 · 更新日志

项目简介 📝

Xiaozhi ESP32 Server Java 是基于 Xiaozhi ESP32 项目开发的 Java 版本服务端，包含完整的前后端管理平台。该项目旨在为用户提供一个功能丰富、操作便捷的管理界面，帮助用户更好地管理设备、配置等。

考虑到企业级应用场景的需求，Java 作为一种成熟的企业级开发语言，具备更完善的生态系统支持和更强大的并发处理能力，因此我们选择开发这个 Java 版本的服务端，为项目提供更多可能性和扩展空间。

后端框架：Spring Boot + Spring MVC
前端框架：Vue.js + Ant Design
数据存储：MySQL + Redis
全局响应式：适配各种设备及分辨率

适用人群 👥

如果您已经购买了 ESP32 相关硬件，且希望通过一个功能完善、界面友好的管理平台来控制和管理您的设备，那么本项目非常适合您。特别适合：

需要企业级稳定性的用户
个人开发者，希望快速搭建使用的用户
希望有完整前端管理界面的用户
需要更强大数据管理和分析能力的用户
对系统扩展性有较高要求的用户
需要支持大量设备并发连接的场景
对实时数据处理有高要求的应用场景

功能模块 ✨

已完成功能 ✅

功能模块	状态	描述
设备管理	✅	查看已接入的所有设备列表、设备状态实时监控、添加/编辑/删除设备信息、设备绑定自动应用默认设置
音色选择	✅	提供多种音色模板、预览音色效果、为不同设备分配不同音色配置
音色克隆	✅	支持火山引擎与阿里云音色克隆，实现个性化声音定制
聊天记录	✅	查看历史聊天记录、按日期/关键词搜索聊天内容、删除消息、清空记忆功能
智能体	✅	对接Coze与Dify等智能体平台，实现复杂场景对话能力
角色切换	✅	预设角色切换（AI老师、男/女朋友、智能家居助手等）支持语音切换角色
持久化对话	✅	支持持久化对话记录，方便查看历史对话内容
LLM多平台支持	✅	支持OpenAI、智谱AI、讯飞星火、Ollama等多种大语言模型
默认配置管理	✅	支持设置默认配置，新绑定设备自动应用默认设置
IoT设备控制	✅	支持通过语音指令管理IoT设备，实现智能家居控制
智能功能调用	✅	支持音乐播放（音乐服务由第三方提供，仅供个人娱乐使用，本项目不承担任何版权责任）、角色切换等功能的智能调用
多语音识别服务	✅	支持Funasr、阿里、腾讯、Vosk等多种语音识别服务
双向流式交互	✅	支持实时语音输入和实时回复输出，提高对话流畅度
实时打断	✅	支持实时打断功能，提高对话流畅度
本地离线识别	✅	支持Vosk本地离线语音识别，无需联网即可使用
WebSocket通信	✅	高性能WebSocket通信，支持设备实时状态更新和控制
MQTT通信	✅	支持MQTT通信协议，长连接、服务端主动唤醒
自动语音唤醒	✅	支持自定义唤醒词唤醒，无需按键即可激活设备
多设备同时接入	✅	支持多设备同时接入，实现全屋语音覆盖
TTS多引擎支持	✅	支持微软、阿里、火山等多种TTS引擎
多用户支持	✅	支持多用户配置，满足家庭多成员使用需求
设备分组	✅	支持设备分组管理，方便设备分类和管理
用户端	✅	原生卡片方式用户端设备管理页面，方便用户简洁配置

开发中功能 🚧

功能模块	状态	描述
聊天数据可视化	🚧	聊天频率统计图表等数据可视化功能
混合模式角色	🚧	支持多角色混合模式，通过不同唤醒词唤醒不同角色（自动切换）
记忆管理	🚧	自定义记忆对话条数、历史对话总结/摘要功能、手动操作对话记录
声纹识别	🚧	支持声纹识别功能，实现个性化语音助手
多语言支持	🚧	支持多语言界面，满足不同地区用户需求
Function Call	🚧	支持LLM函数调用功能，实现复杂任务处理和智能决策
Home Assistant	🚧	支持智能家居设备控制，通过语音指令管理Home Assistant设备
多模态交互	🚧	支持图像识别和处理，实现更丰富的交互方式
情感分析	🚧	通过语音情感分析，提供更人性化的回复
多设备协同	🚧	支持多设备协同工作，实现全屋覆盖的语音助手系统
自定义插件系统	🚧	支持自定义插件开发，扩展系统功能
知识库集成	🚧	支持接入外部知识库，增强问答能力
语音提醒与闹钟	🚧	支持设置语音提醒和闹钟功能
远程控制	🚧	支持远程控制设备，实现外出时的设备管理