体验家XMPlus-全旅程客户体验管理

“客服回复很快,但三天了还是没解决,能不能直接告诉我下一步怎么办?”这条评论同时表达了对响应速度的认可、对问题解决的不满和进一步指引的需求。
若只输出一个整体“正面”或“负面”标签,容易丢失需要处理的具体内容。本文以这条人工编写的反馈为例,介绍从原文到话题、情绪、诉求,再到统计验证的处理方法。示例不代表任何客户数据或模型评测成绩。
话题回答“在谈什么”,情绪回答“对这个方面的感受如何”,诉求回答“希望获得什么帮助”。三类信息可以关联,但不应混为一个标签。
体验家Agent提供话题分类和情绪分析;平台文本分析可按话题树组织,并将分析结果与原始问卷关联。下面的片段级数据模型和复核规则是通用设计,不代表系统已经采用完全相同的输出结构。
| 原文片段 | 话题 | 情绪判断 | 明确诉求 |
| 客服回复很快 | 服务—响应速度 | 正向 | 无 |
| 三天了还是没解决 | 服务—问题解决 | 负向 | 希望解决问题 |
| 能不能直接告诉我下一步怎么办 | 服务—操作指引 | 需结合上下文判断 | 获取下一步指引 |
第三段没有明确表达情绪强度,不宜仅因其与负面片段相邻,就自动判为强烈不满。保留“不确定”或“需复核”,比强行填满所有分类更便于校验。
可以按业务需要设置层级,例如“服务—响应速度—首次响应慢”“服务—问题解决—多次联系未解决”。每个末级标签最好包括定义、正例、反例和易混淆项。
“等了很久”需要上下文:可能是在等排队、客服回复或退款。缺少对象时,不要直接进入某个精确末级话题;可以停留在较粗层级或进入待复核集合。
标签粒度还应服务行动。如果“响应速度”和“解决效率”由不同流程负责人管理,就有必要区分;如果细分到某个非常具体的表达却没有足够样本,也没有对应处理动作,则未必适合单独建类。
话题树需要版本管理。增加新标签后,同一批文本的分布可能变化,因此趋势比较应说明标签版本;需要重算历史数据时,保留原结果,不能将分类规则变化解释为客户意见突然变化。
第一步保留原文与来源编号,另存规范化文本。空白、格式和明显乱码可以整理,但不要去掉否定词、程度词或表达情绪的标点。
第二步划分涉及的方面,为每个标签保存支持它的原文片段。原文必须可以回查,不能让模型改写一句话后把它标为“客户原话”。
第三步进行话题和情绪判断,对多方面反馈保留多条结果。反语、口语和指代不清的内容,进入人工复核,而不是依靠正面词数量直接判定。
第四步提取明确诉求,并区分直接表达与分析人员的推测。“希望提供进度查询”属于明确诉求;“可能想退款”若无对应原文,只能标为待验证推测,不能形成确定的客户意图。
建议输出至少包含:原文编号、片段、话题版本、标签、情绪、明确诉求及复核状态。是否能够输出这些字段,需要结合实际工具能力确认。
一条评论包含两个话题,就可能产生两行标签结果。若把标签表直接与问卷明细连接,评分记录也可能被复制。计算满意度或NPS时,应按原始有效回答去重,不能用标签行数作分母。
话题比例也需要明确单位。假设10条有效评论中有4条提到等待,这4条共拆出6个等待片段,则“提到等待的评论占比”为40%,不能用6除以10写成60%的客户受到影响。
同一评论可以命中多个话题,因此各话题评论占比相加可以超过100%。这不是必然错误,但报告必须说明采用多标签计数,以及分母是有效文本评论,不是所有客户或全部问卷回答。
如果要看低分客户的主题分布,应先确定有效低分回答,再统计其中有文本、成功分析和命中主题的数量。文本填写缺失不能被解释为客户没有问题。
建立一批与实际业务接近的人工标注样本,覆盖常见主题、少数主题、多方面反馈、否定、反语及无法判断的表达。标注人员需要使用同一套定义;存在分歧时先讨论规则,再评估模型。
可以按话题或情绪分别计算查准率与查全率:查准率看已判中的记录有多少确实正确,查全率看应识别的记录有多少被找到。若人工确认有10条负面片段,模型找到其中8条,同时额外误判2条,则该示例的查准率和查全率均为80%。这只是计算演示,不是产品准确率。
总体指标之外,还应抽查少见话题和长文本。常见标签占比很高时,一个看似不错的总体分数,可能掩盖关键问题持续漏判。
主题与情绪可以帮助定位需要关注的客户诉求,但不能单独证明问题发生率、客户流失或某项措施的收益。评论中的“不会再买”是表达,需要结合后续行为才能研究实际留存。
把结构化评分、片段原文和业务背景放在一起,可以形成更完整的观察。但不一致的记录应保留并调查,不能为了让结论一致而删除“高分但有负面内容”的反馈。
文本分析的结果应能从统计值回到记录,再从标签回到原文片段。后续改进应围绕标签边界、复核样本和漏判类型展开,而不是只让报告更流畅。
不必须。事实陈述、缺少上下文或含义不明的内容,可以保留中性、不确定或待复核状态,具体分类规则应事先定义。
不应如此。客户数、评论数和片段数分别统计,按分析目的选择单位,并保留能够回接原记录的编号。
应先检查是否为噪声、标签覆盖不足或新问题。可以建立待整理集合,经人工确认后调整话题树,再决定是否重算历史数据。
扫码关注体验家公众号,随时随地获取体验家观点
免费订阅
提交信息,我们将定期为您推送更多您喜欢的内容
我们将定期为您推送更多精彩内容
Copyright © 2023 XMPlus 瀚一数据科技(深圳)有限公司 粤ICP备18114013号-2
粤公网安备44030502005360号