一、场景

心理倾诉系统,主要充当传统的心理客服,陪伴用户进行心理倾诉,以达到缓解用户情绪等问题。

二、功能亮点

亮点说明
支持多模态用户音频+文本,后期支持用户面部画像。
支持记忆检索能根据当前问题检索用户历史记忆。
支持语音实时流式输出回答的时候支持实时流式输出,支持用户实时打断,类似豆包视频通话。
支持多智能体多个智能体分工,更加专业的心理回答。
支持情绪诊断能够实时输出用户的心理情绪词,以及置信度分值。
支持危机预测能够实时发现用户自杀、自伤、自残等危机。
支持干预任务推荐由心理专家精心研发的干预任务,帮助用户缓解情绪。
支持工具调用用户一句话,就可以调用相关工具。
支持心理倾诉报告生成根据用户聊天会话,生成该会话的倾诉报告。

三、功能模块

在这里插入图片描述

模块介绍
vad检查实时音频中的用户音频
语义完整性检查检查用户是否表达完整
asr语音转文本
tts文本转语音
情绪识别智能体识别用户情绪、危机等心理问题
意图识别智能体识别用户的意图
干预任务智能体根据用户聊天历史,给用户推荐干预任务
心理倾诉智能体根据用户的情绪、意图、干预任务、记忆、当前问题进行专业回答
工具调用智能体根据用户指令,调用相关工具
默认聊天智能体非心理问题、工具调用失败的回答智能体

四、产品体验

在这里插入图片描述

五、主要评估指标

数据集A:来源于公司用户倾诉电话音频+开源数据集+上线后产生的数据,下面简称A。

指标说明
情绪词召回率用于线下,人工标注A情绪词,统计大模型生成的情绪词召回了多少A情绪词
干预任务召回率用于线下,人工标注A的干预任务,统计大模型推荐任务召回了多少A干预任务
共情能力用于线下,评估倾诉智能体,用LLM评估回答是否对用户情绪共情
回答意图相关性用于线下,评估倾诉智能体,用LLM评估回答是否符合用户意图
干预任务关联性用于线下,评估倾诉智能体,用LLM评估回答是否关联任务
人工评估用于线下,用于所有智能体
聊天点赞率用于线上,统计聊天点赞率占总聊天的比率
任务使用率用于线上,统计任务使用率占用推荐任务总数的比率
情绪下降率用于线上,统计情绪置信度分值下降率

记忆检索原理

Logo

更多推荐