产品说明:智能家庭视频守护系统是一个基于AI的视频监测系统,用于接入不同视频源实现定时画面识别检测,目前可实现定时识别画面物体及事件,人脸识别,AI语音对话,风险检测等功能。基础架构:服务端:采用 Node.js + Express+Mysql。多媒体处理:利用 ffmpeg 进行音视频处理。实时通信:借助 WebSocket技术实现前后端实时通信。大模型集成:使用 DeepSeek大模型进行对话;集成图像识别大模型(可以自由配置接入不同模型)。前端页面:运用原生 HTML+JS(目前新增了Vue版)。语音交互:基于自研VAD技术实时采集语音,与大模型对话,大模型输出结果后合成语音播放,支持语音打断。可在页面配置唤醒词(如 “你好监控”)进行大模型唤醒。
联系我时,请说是在杭州含情网络技术有限公司看到的,谢谢!