在线客服系统需要通过一个完善的评价系统来评价它的好坏，我们的评价体系有基于人工标记的评价和基于用户反馈的评价，下面我们就来看看由哪几个方面来进行判断。
 
在线客服系统素材图
 

怎样判断在线客服系统的优劣？

 
1、人工标注的评价
 
系统的回答能力要看知识库的丰富情况，能不能回答用户的所有问题，系统的最佳状态是，能不能正确回答所有能回答的答案，无法确定的即拒绝回答。因此，这里的评价指标包括结果率、拒绝率、召回率、准确度等，目标是使在线客服系统的结果率无限接近数据的实际结果率。召回率和正确度要最大程度的高，这里显示一组标准评价来计算系统的指标。我们每天从整个数据集取样小数据集，使小数据集的数据分布尽可能地适合整个数据集。
 
然后，标注团队对数据集进行标注，以显示每个问题的实际答案。一般标准完成后，对链接进行质量检查，确保标注结果尽可能准确，从而为每日数据创建标准评估集。基于这组标准评价，评估系统的好坏，每当进行新的模型迭代时，都会使用一组标准评价来评价新模型，只有新模型的效果好，才能允许在线。
 
2、用户反馈的评价
 
人工评价可以判断在线客服系统回答是否正确，但不知道答案合理性怎样，能否为用户解决问题，用户是否需要得到反馈，在线客服系统的根本目的是帮助用户解决问题。在产品中设计智能客户服务和在线客户服务的评价功能。
 
例如，允许用户评估智能客户服务的每个回答或特定会话，与人工客服服务聊天完成后，可以将评价卡发送给用户，评估满意度。最终，我们可以统计参与评价比率、满意度等指标，真正反映在线客服系统的好坏。实际上，用户参与率往往较低，因此使用多种方法刺激用户评价。
 
所以，通过以上两种方式，我们就可以大致判断出在线客服系统到底是好还是不好，从而确定是不是要选择。