×

基于列生成的启发式分类树学习。 (英语) Zbl 1458.68201号

摘要:本文探讨了列生成(CG)技术在构建分类任务的单变量二元决策树中的应用。我们基于决策树中的根到叶路径提出了一种新的整数线性规划(ILP)公式。该模型通过基于列生成的启发式算法进行求解。为了加快启发式,我们通过考虑从众所周知的CART算法的解决方案中抽样的决策分割子集,使用受限实例数据。大量的数值实验表明,我们的方法与基于ILP的最新算法具有竞争力。特别是,该方法能够处理具有数万个数据行的大数据集。此外,对于大型数据集,它发现解决方案与CART竞争。

MSC公司:

68T20型 人工智能背景下的问题解决(启发式、搜索策略等)
62H30型 分类和区分;聚类分析(统计方面)
68T05型 人工智能中的学习和自适应系统
68T09号 数据分析和大数据的计算方面
90立方厘米 整数编程
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] Al-Yakoob,S.M。;Sherali,H.D.,多班次和工作地点员工调度问题的列生成方法,J.Oper。Res.Soc.,59,1,34-43(2008)·Zbl 1167.90498号
[2] Bertsimas,D。;Dunn,J.,《最佳分类树》,J.Mach。学习。,106, 7, 1039-1085 (2017) ·Zbl 1455.68159号
[3] Borndörfer,R。;谢尔滕,美国。;Schlechte,T。;Weider,S.,《航空公司机组人员排班的列生成方法》,《运营研究论文集2005》,343-348(2006),施普林格:施普林格-柏林-海德堡·Zbl 1114.90375号
[4] 布雷曼,L。;弗里德曼,J。;奥尔森,R。;Stone,C.,《分类和回归树》(1984),沃兹沃斯和布鲁克斯:沃兹沃思和布鲁克斯蒙特里,加利福尼亚州·Zbl 0541.62042号
[5] CPLEX,I.I.,2016年。V 12.7用户手册。https://www-01.ibm.com/software/commerce/optimization/cplex-optimizer。
[6] Dash,S.,Günlük,O.,Wei,D.,2018年。通过列生成的布尔决策规则。阿希夫:1805.09901[cs.AI]。
[7] 1-32 ·兹比尔1165.90578
[8] 脱硅剂,J。;Soumis,F。;Desrochers,M.,《按列生成的带时间窗口的路由》,《网络》,14545-565(1984)·Zbl 0571.90088号
[9] 弗拉特,M。;Briskorn博士。;Laugier,A.,《一种用于具有分层技能的稳定多技能劳动力分配的分支和价格算法》,欧洲期刊Oper。第251、2676-685号决议(2016年)·Zbl 1346.90471号
[10] 福特,L.R。;Fulkerson,D.R.,最大多商品网络流的建议计算,管理。科学。,5, 97-101 (1958) ·Zbl 0995.90516号
[11] Garey,M.R.和David,S.J.,1979年。计算机与棘手;NP-完备性理论指南。国际标准图书编号0-7167-1045-5·Zbl 0411.68039号
[12] 吉尔摩,P.C。;Gomory,R.E.,《切割库存问题的线性规划方法》,Oper。决议,9849-859(1961)·Zbl 0096.35501号
[13] Günlük,O.,Kalagnanam,J.,Menickelly,M.,Scheinberg,k.,2018年。基于整数规划的最优广义决策树。ArXiv:1612.03225v2[cs.AI]·Zbl 1475.90039号
[14] Hyafil,L。;Rivest,R.L.,“构建最优二叉决策树是np-complete,Inf.Proc。莱特。,15-17 (1976) ·兹伯利0333.68029
[15] Kim,J.W。;Lee,B.H。;肖,M.J。;Chang,H.L。;Nelson,M.,《决策树归纳技术在互联网店面个性化广告中的应用》,国际电子杂志。商业,5,3,45-62(2001)
[16] Lichman,M.,2013年。UCI机器学习库。http://archive.ics.uci.edu/ml。
[17] Linden,A。;Yarnold,P.R.,《使用分类树分析确定医疗干预的因果机制》,J.Eval。临床。实际。,24, 2, 353-361 (2018)
[18] 李海大学
[19] 第2卷
[20] 诺鲁齐,M。;柯林斯,M。;约翰逊,医学硕士。;弗利特,D.J。;Kohli,P.,决策树的高效非贪婪优化,第28届神经信息处理系统国际会议论文集,1720-1728(2015)
[21] Norton,S.W.,《生成更好的决策树》,第11届国际人工智能联合会议论文集,800-805(1989)·Zbl 0709.68085号
[22] Payne,H.J。;Meisel,W.S.,《构建最优二叉决策树的算法》,IEEE Trans。计算。,100, 9, 905-916 (1977) ·Zbl 0363.68131号
[23] Quinlan,J.R.,决策树归纳,马赫。学习。,1, 1, 81-106 (1986)
[24] 范里森,B。;Negenborn,R.R。;Dekker,R.,基于离线获得最优解的决策树实时集装箱运输规划,Decis。支持系统。,89, 1-16 (2016)
[25] Scikit-lean,2018年。V 0.19.2用户手册。http://scikit-earn.org/stable/_downloads/scikit-earn-docs.pdf。
[26] 花键,R。;Gabor,A.F.,时间窗分配车辆路径问题,交通。科学。,49, 4, 721-731 (2014)
[27] 2017年CPAIOR,意大利帕多瓦,2017年6月5-8日,会议记录·Zbl 1489.68259号
[28] Verwer,S。;Zhang,Y.,使用二进制线性规划公式学习最佳分类树,第33届AAAI人工智能会议(2019年)
[29] Verwer,S。;Zhang,Y。;Ye,Q.C.,使用回归树和线性模型作为整数程序的拍卖优化,Artif。智力。,244, 368-395 (2017) ·Zbl 1404.68122号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。