关于机器学习中的偏差和方差 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
burnex
V2EX    机器学习

关于机器学习中的偏差和方差

  •  
  •   burnex 2018-09-18 09:30:50 +08:00 2675 次点击
    这是一个创建于 2646 天前的主题,其中的信息可能已经有所发展或是发生改变。

    偏差和方差具体怎么计算一直搞不是很清楚,最近查看资料按自己的理解画了一个流程图,请大家帮忙看下我理解的对不对,有什么错漏之处,谢谢

    偏差和方差

    大图请点击链接: https://i.loli.net/2018/09/17/5b9f4f455c1e1.png

    3 条回复    2018-09-30 15:05:01 +08:00
    zynlp
        1
    zynlp  
       2018-09-18 10:13:45 +08:00 via iPhone
    看样子楼主说的偏差像是绝对损失函数?
    miniliuke
        2
    miniliuke  
       2018-09-18 10:30:14 +08:00 via Android
    方差和期望是针对多样本的,对于单个样本没有意义......如果楼主说的是样本集,你这样算偏差也是没有意义的;还有求均值就是求均值,和期望没有关系
    swordspoet
        3
    swordspoet  
       2018-09-30 15:05:01 +08:00
    赞!仔细看了看图,图中的偏差和方差都是针对于单个样本的,最后还需要将所有样本的偏差和方差求和汇总吧?

    说一说我对方差和偏差的理解:

    方差和偏差分别评价了两个不同因素(数据、模型)在机器学习中的表现,也可以这样来理解:方差代表了数据扰动所造成的影响,增大样本容量通常可以减轻数据扰动带来的影响;偏差则刻画了算法或模型的拟合能力,它与数据本身关系不太大,通过特征工程、调节参数、选择模型等手段可以解决偏差问题。随着训练程度的增大,学习器拟合性能越来越强,偏差会越来越小,而数据的任何扰动则会使已经完善的学习器产生较大方差。

    总之,方差关乎数据,偏差关乎模型。

    下面这张图讲得很清楚:

    ![如何解释方差与偏差的区别? \| Thinking Realm]( )
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     995 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 18:55 PVG 02:55 LAX 10:55 JFK 13:55
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86