模型评估是模型开发过程不可或缺的一部分。它有助于发现表达数据的最佳模型和所选模型将来工作的性能如何。
(资料图)
按照数据集的目标值不同,可以把模型评估分为分类模型评估和回归模型评估。
均方根误差(Root Mean Squared Error,RMSE)
RMSE是一个衡量回归模型误差率的常用公式。 不过,它仅能比较误差是相同单位的模型。a 为真实值;p 为预测值
举例:
假设上面的房价预测,只有五个样本,对应的真实值为:100,120,125,230,400预测值为:105,119,120,230,410
那么使用均方根误差求解得:
其他评价指标:
相对平方误差(Relative Squared Error,RSE)平均绝对误差(Mean Absolute Error,MAE)相对绝对误差(Relative Absolute Error,RAE)模型评估用于评价训练好的的模型的表现效果,其表现效果大致可以分为两类:过拟合、欠拟合。
在训练过程中,你可能会遇到如下问题:
训练数据训练的很好啊,误差也不大,为什么在测试集上面有问题呢?
当算法在某个数据集当中出现这种情况,可能就出现了拟合问题。
因为机器学习到的天鹅特征太少了,导致区分标准太粗糙,不能准确识别出天鹅。
欠拟合(under-fitting):模型学习的太过粗糙,连训练集中的样本数据特征关系都没有学出来。
机器已经基本能区别天鹅和其他动物了。然后,很不巧已有的天鹅图片全是白天鹅的,于是机器经过学习后,会认为天鹅的羽毛都是白的,以后看到羽毛是黑的天鹅就会认为那不是天鹅。
过拟合(over-fitting):所建的机器学习模型或者是深度学习模型在训练样本中表现得过于优越,导致在测试数据集中表现不佳。
模型评估是模型开发过程不可或缺的一部分。它有助于发现表达数据的最佳模型和所选模型将来工作的性能如何。
七年级英语作文范文带翻译第1篇Today,whenIgohomeafterschool,Igotoashoptobuyapencil But,whenIleavehomeinthemorning,Iforgettobringmywallet Ifeels
1、企业缴纳所得税后的利润,除国家另有规定外,按照下列顺序分配:一、弥补企业以前年度亏损。2、二、提取10%法定盈余
一、乱举报他人会怎么样处理乱举报他人的处理办法如下:1 可以进行报警,公安机关查证后确认举报人是恶意举报,会对其进行治安
1、您好峨眉山景区门票原价185元,半价90元,大学本科及以下学生、1 5米以下儿童等照顾人群提供半价。2、军人,70岁以上老人,劳模,残疾人凭
投资四川·成都都市圈全球投资推介会在上海举行
奥尼尔向八村垒正式道歉!杜兰特上线纠错:人家叫Rui不是Rudy,奇才,嘻哈,nba,八村垒,日本篮球,凯文杜兰特,凯文·杜兰特,沙奎尔·奥尼尔
文 羊城晚报全媒体记者侯梦菲通讯员江子波王春楼视频 广东海警局为深入推进清湾2023联合行动,坚决打击海上违法犯罪活动,据广东海警局通报,
新天然气:信达证券担任新天然气重大资产重组独立财务顾问的承诺函
近日上海市公布了2022年度上海市重点工程实事立功竞赛光荣榜水务赛区多家单位、集体和个人榜上有名快来看看有没有你熟悉的吧~表彰名单金杯公