你好，我是海丰。今天我们开始模型评估指标的学习。 整个AI项目的落地过程中都有着模型评估指标的身影。在模型设计阶段，AI产品经理在编写需求的时候，除了需要写清楚产品的业务指标，也要说明通过模型来解决什么样的问题，模型应该达到的标准是什么，算法工程师会...

你好，我是海丰。 这节课，我们来学习分类模型的评估指标。上节课我们说了，分类模型的性能评估指标有混淆矩阵、$KS、AUC$等等。混淆矩阵是其中最基础的性能评估指标，通过它，我们可以直观地看出二分类模型预测准确和不准确的结果具体有多少，而且像是$KS、...

你好，我是海丰。 上节课，我们学习了混淆矩阵，以及准确率、精确率和召回率这3个基础指标的计算。这节课，我们依然会借助上节课的信用评估模型，来学习二分类模型中常用的两个综合性指标，KS和AUC。 构建KS和AUC的基础：TPR和FPR首先，我们来看两个...

你好，我是海丰。 股票价格预测模型或者说算法不仅是金融界一项重要的研究课题，也往往和我们的直接经济利益相关，因此一直备受关注。 为了能够准确预测股票未来的价格，很多公司和机构不断尝试开发了很多股票价格预测的模型。但是，对于用算法来进行股票价格的预测这...

你好，我是海丰。 模型稳定性指的是模型性能的稳定程度，只有稳定性足够好的模型才能通过上线前的评估，而且上线后，我们也要对模型稳定性进行观测，判断模型是否需要迭代。在实际工作中，我们会用PSI来评估模型的稳定性。 这节课，我们就借助一个信用评分的产品，...

你好，我是海丰。今天，我们来讲一讲算法模型监控指标体系的建设。 算法模型的监控指标体系（后面简称监控体系），就是将业务数据进行采集，同时用可视化图表展现给用户，并且提供相应的告警功能。 一般来说，当业务线初建的时候，我们可以不用考虑太多监控体系的需求...