当前位置: 首页 > news >正文

怎么做网站站内优化西安网站制作培训

怎么做网站站内优化,西安网站制作培训,五屏网站建设价位,wordpress 默认图片链接C4.5决策树的基本建模流程 作为ID3算法的升级版,C4.5在三个方面对ID3进行了优化: (1)它引入了信息值(information value)的概念来修正信息熵的计算结果,以抑制ID3更偏向于选择具有更多分类水平…

C4.5决策树的基本建模流程

作为ID3算法的升级版,C4.5在三个方面对ID3进行了优化:

(1)它引入了信息值(information value)的概念来修正信息熵的计算结果,以抑制ID3更偏向于选择具有更多分类水平的列进行展开的情况,从而间接地抑制模型过拟合的倾向;
(2)C4.5新增了对连续变量的处理方法,采用类似于CART树的方法来寻找相邻取值的中间值作为切分点;
(3)C4.5加入了决策树的剪枝流程,以进一步提升模型的泛化能力。

然而,需要注意的是,尽管C4.5进行了这些改进,但它仍然只能解决分类问题,其本质仍然是一种分类树。

C4.5中信息值(以下简称IV值)是一个用于衡量数据集在划分时分支个数的指标,如果划分时分支越多,IV值就越高。具体IV值的计算公式如下:

在这里插入图片描述
上次介绍的ID3决策树的建模流程中,

以湿度的不同取值为划分规则时:

在这里插入图片描述
在这里插入图片描述
IV = − 2 5 ∗ l o g 2 2 5 -\frac{2}{5}*log_2\frac{2}{5} 52log252- 1 5 ∗ l o g 2 1 5 \frac{1}{5}*log_2\frac{1}{5} 51log251- 2 5 ∗ l o g 2 2 5 \frac{2}{5}*log_2\frac{2}{5} 52log252=1.52

C4.5采用增益比例(Gain Ratio,被称为获利比例或增益率),来指导具体的划分规则的挑选。GR的计算公式如下:
G a i n R a t i o = I n f o r m a t i o n G a i n I n f o r m a t i o n V a l u e Gain\ Ratio = \frac{Information\ Gain}{Information\ Value} Gain Ratio=Information ValueInformation Gain
上面的GR值为: g a i n I V \frac{gain}{IV} IVgain= 0.97 1.52 \frac{0.97}{1.52} 1.520.97=0.64

然后据此进一步计算其他各列展开后的GR值,并选择GR较大者进行数据集划分

C4.5的连续变量处理方法:和CART树一致。即在连续变量中寻找相邻的取值的中间点作为备选切分点,通过计算切分后的GR值来挑选最终数据集划分方式。

在sklearn的树模型介绍文档中,有一段关于sklearn的决策树不支持离散变量建模的说明,其意为不支持按照类似ID3或C4.5的方式直接将离散变量按列来进行展开,而是根据sklearn中集成的CART树自身的建模规则,使得sklearn中的决策树实际上在处理特征时都是按照C4.5中连续变量的处理方式在进行处理,并非指的是带入离散变量就无法建模。

http://www.yayakq.cn/news/467121/

相关文章:

  • 怎样在设计网站做图赚钱PHP视频类网站应该怎么做
  • 网站海外推广平台怎样将自己做的网站给别人看
  • 网站logo设计理念现在什么网站做推广比较好
  • 环保类网站模板有创意的网络公司名字大全
  • 网站首页被k 做跳转沈阳模板建站
  • 公司网站开发流程中国建设青岛公司官网
  • 富锦网站网站续费方案
  • 昆明网站制作推荐企业服务 免费网站建设
  • 秦皇岛网站制作电话安徽网站建设哪家有
  • 免费网站营销计划金华高端网站建设
  • 网站开发后端书籍网站的后缀
  • 建设网站要求个人网页制作素材图片
  • 网站系统安全防护体系建设方案 下载wordpress 调用菜单
  • 广州市门户网站建设品牌深圳高端网站建设收费
  • 广西住房城乡建设部网站大量情侣网名网站
  • 高碑店建设局网站网络营销课程大概学什么内容
  • 网站开发的系统设计怎么写百度怎么收录网站
  • 长沙模板网站建设公司请人做公司网站会计分录
  • 上网出现危险网站wordpress更换ip后台登录不
  • 如何开设网站牡丹江网页制作公司
  • 做视频网站收费侵权吗简易东莞网站制作公司
  • 中山网站的建设个人公众号申请要钱吗
  • 杭州网站建设交易江门网站排名优化
  • 家用云做网站自己做的网站怎么在百度搜索到
  • 陕西省建设工程造价管理协会网站h5网站开发费用
  • 贵州建设监理网站杭州网站建设seo优化
  • 图库网站模板河南营销型网站
  • 企业建设网站需注意哪些事项布吉网站建设哪家好
  • python做网站实例网页图片动态效果
  • 站长之家网站排行榜哪个网站做设计可以挣钱