本发明涉及一种模型失效检测方法、装置、电子设备及介质,所述方法包括:获取待测模型对应的训练数据的第一文本分布;获取所述待测模型对应的业务数据的第二文本分布;获取所述第一文本分布以及所述第二文本分布之间的偏移值;在所述偏移值大于预设的预警阈值时,执行预设操作,例如发出报警信息;最后从公共词集合中按照偏离量由大到小的顺序对单词进行排序。本发明的技术方案,属基于KL散度或JS散度的数据分布差异量化方法,可实现针对文本数据应用场景的各项适配,保证模型在上线后性能符合预期;本发明的有益效果包括:及时对模型的退化情况进行量化预警,避免低效率的数据收集工作,避免造成资源浪费。
声明:
“模型失效检测方法、装置、电子设备及介质” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究,如用于商业用途,请联系该技术所有人。
我是此专利(论文)的发明人(作者)