×

组合特征选择线性回归中的最优学习。 (英语) Zbl 1397.62250号

摘要:我们在应用程序中提出了一个新的顺序信息收集框架,其中回归用于学习一组未知参数,并与优化交替以设计新的数据点。这些问题可以使用排名和选择(R&S)框架来处理,但当决策空间组合增长时,传统的R&S过程将经历较高的计算成本。这一挑战出现在商业分析的许多应用中;特别是,我们的动机是有效学习非营利筹款的有效策略。我们提出了一种同时学习未知回归参数和未知采样噪声的信息过程值。然后,我们基于最优量化,开发了该过程的近似版本,该版本保留了良好的性能,并且可以更好地扩展到大型问题。

MSC公司:

62J05型 线性回归;混合模型
62F07型 统计排名和选择程序
62升10 序列统计分析
62第20页 统计学在经济学中的应用
PDF格式BibTeX公司 XML格式引用
全文: 内政部 链接

参考文献:

[1] Benson HY,Salamü(2013a)混合整数二阶锥规划:一项调查。Topaloglu H,编辑。信息运筹学教程(马里兰州卡通斯维尔INFORMS),13-36。链接
[2] Benson HY,Salamü(2013b)混合整数二阶锥规划的平滑和正则化及其在投资组合优化中的应用。Zuluaga LF,Terlaky T,编辑。建模与优化——理论与应用:MOPTA 2012年会议的部分贡献(柏林施普林格),87-111。交叉参考·Zbl 1305.90327号
[3] Bertsimas D,O'Hair A,Relyay S,Silberholz J(2016)设计癌症联合化疗方案的分析方法。管理科学。62(5):1511-1531。链接
[4] Brantley MW、Lee LH、Chen C-H、Chen A(2013)《回归高效模拟预算分配》。IIE事务处理。45(3):291-308. 交叉参考
[5] Brantley MW,Lee LH,Chen C-H,Xu J(2014)一种有效的模拟预算分配方法,结合了分区域的回归。Automatica公司50(5):1391-1400. 交叉参考·Zbl 1296.93176号
[6] Chen C-H、Lee LH(2010)随机模拟优化:一种最优计算预算分配(世界科学,新加坡)。交叉参考
[7] Chen C-H,Lin J,Yücesan E,Chick SE(2000)《进一步提高顺序优化效率的模拟预算分配》。离散事件发电机。系统10(3):251-270. 交叉参考·Zbl 0970.90014号
[8] Chen KD,Hausman WH(2000)技术说明:使用基于选择的联合分析的最优产品线选择问题的数学性质。管理科学。46(2):327-332。链接·Zbl 1231.90159号
[9] Chick SE(2006)主观概率和贝叶斯方法。Henderson SG、Nelson BL编辑。模拟《运营研究和管理科学手册》,第13卷(爱思唯尔,北荷兰人),225-258。交叉参考
[10] Chick SE、Branke J、Schmidt C(2010)《近视患者最大化信息期望值的序贯抽样》。信息J.计算。22(1):71-80. 链接·Zbl 1243.62005年
[11] J inler E(2011)概率与随机(Springer-Verlag,纽约)。交叉参考
[12] Cohn DA、Ghahramani Z、Jordan MI(1996)《统计模型的主动学习》。J.人工智能研究。4(1):129-145. ·Zbl 0900.68366号
[13] Dani V,Hayes TP,Kakade SM(2008)土匪反馈下的随机线性优化。程序。第21届年度Conf.Learn。理论,芬兰赫尔辛基, 355-366.
[14] Defourny B,Ryzhov IO,Powell WB(2015)《L^{2}球体中测量的最佳信息融合》。数学。操作。物件。40(4):1060-1088. 链接·Zbl 1329.90102号
[15] Dette H(1997)根据“标准化”优化标准设计实验。J.罗伊。统计师。Soc公司。B59(1):97-110。交叉参考·Zbl 0884.62081号
[16] Falk A(2007)《实地礼物交换》。计量经济学75(5):1501-1511. 交叉参考·Zbl 1133.91037号
[17] Fan J,Han F,Liu H(2014)大数据分析的挑战。国家科学。版次。1(2):293-314. 交叉参考
[18] Frazier PI,Powell WB,Dayanik S(2008)用于顺序信息收集的知识梯度策略。SIAM J.控制优化。47(5):2410-2439. 交叉参考·Zbl 1274.62155号
[19] Frazier PI、Powell W、Dayanik S(2009)相关正常信念的知识粒度政策。信息J.计算。21(4):599-613. 链接·Zbl 1243.91014号
[20] Fu MC,Hu J-Q,Chen C-H,Xiong X(2007)相关抽样条件下确定最佳设计的模拟分配。信息J.计算。19(1):101-111. 链接·Zbl 1241.62006年
[21] Glazebrook KD、Meissner J、Schurr J(2013)我的店铺应该有多大?货架空间、需求学习和分类决策之间的相互作用。提交出版.
[22] Goemans MX,Williamson DP(1995)使用半定规划改进最大割和可满足性问题的近似算法。美国临床医学杂志42(6):1115-1145. 交叉参考·Zbl 0885.68088号
[23] Graf S,Luschgy H(2000年)概率分布量化的基础(柏林施普林格-弗拉格)。交叉参考
[24] Han B、Ryzhov IO、Defourny B(2013)美国红十字会捐赠者保留策略的有效学习。Pasupathy R、Kim S-H、Tolk A、Hill R、Kuhl ME编辑。程序。2013年冬季模拟会议。(IEEE,新泽西州皮斯卡塔韦),17-28。交叉参考
[25] Hong LJ,Nelson BL(2009)《模拟优化简介》。Rosetti MD、Hill RR、Johansson B、Dunkin A、Ingalls RG编辑。程序。2009年冬季模拟会议。(IEEE,新泽西州皮斯卡塔韦),75-85。交叉参考
[26] Jones DR,Schonlau M,Welch WJ(1998),昂贵黑盒函数的高效全局优化。J.全球优化。13(4):455-492. 交叉参考·Zbl 0917.90270号
[27] Karlan D,List JA,Shafir E(2011)小型比赛和慈善捐赠:来自自然实地实验的证据。《公共经济学杂志》。95(5):344-350. 交叉参考
[28] Kim S-H(2013)统计排名和选择。Gass SI,Fu MC,编辑。运筹学与管理科学百科全书(柏林施普林格),1459-1469年。交叉参考
[29] Kim S-H,Nelson BL(2006)选择最佳系统。Henderson SG、Nelson BL编辑。模拟《运营研究和管理科学手册》,第13卷(爱思唯尔,北荷兰),501-534。交叉参考
[30] Kim S-H,Nelson BL(2007)排名和选择的最新进展。Henderson SG、Biller B、Hsieh M-H、Shorte J、Tew JD、Barton RR编辑。程序。2007年冬季模拟会议。(IEEE,新泽西州皮斯卡塔韦),162-172。
[31] Landry CE,Lange A,List JA,Price MK,Rupp NG(2006)对慈善经济学的理解:来自实地实验的证据。夸脱。《经济学杂志》。121(2):747-782. 交叉参考
[32] Lasserre JB(2002)非线性0-1规划的显式等价半正定规划。SIAM J.Optim公司。12(3):756-769. 交叉参考·Zbl 1007.90046号
[33] Laurent M,Rendl F(2005)半定规划和整数规划。Aardal K、Nemhauser GL、Weismantel R编辑。离散优化《运营研究和管理科学手册》,第12卷(阿姆斯特丹爱思唯尔出版社),393-514。交叉参考·Zbl 1194.90066号
[34] Minka TP(2010)贝叶斯线性回归。技术报告,微软研究院,英国剑桥。
[35] Modaresi S、Saure D、Vielma JP(2013)《组合优化学习:探索什么和如何探索》。提交出版.
[36] 蒙哥马利特区(2009)实验设计与分析第7版(John Wiley&Sons,新泽西州霍博肯)。
[37] Negoescu DM、Frazier PI、Powell WB(2011)药物发现中测序实验的知识粒度算法。信息J.计算。23(3):346-363。链接·Zbl 1243.92023号
[38] Nemirovski AS,Todd MJ(2008)优化的内部点方法。数字学报17:191-234. 交叉参考·Zbl 1160.65027号
[39] Norkin VI,Pflug GCh,Ruszczynski A(1998)随机全局优化的分支定界方法。数学。编程83(1-3):425-450. 交叉参考·Zbl 0920.90111号
[40] Pages G,Printems J(2003)《数值的最优二次量化:高斯情况》。蒙特卡罗方法应用。9(2):135-166. 交叉参考·Zbl 1029.65012
[41] Porkolab L,Khachiyan L(1997)关于半定程序的复杂性。J.全球优化。10(4):351-365. 交叉参考·Zbl 0881.90127号
[42] 鲍威尔·WB(2011)近似动态规划:解决维数问题,第2版(John Wiley&Sons,新泽西州霍博肯)。交叉参考
[43] Powell WB,Ryzhov IO(2012年)最佳学习(John Wiley&Sons,Inc.,新泽西州霍博肯)。交叉参考
[44] Qu H,Ryzhov IO,Fu MC(2012)未知相关结构的排名和选择。Laroque C、Himmelspach J、Pasupathy R、Rose O、Uhrmacher AM编辑。程序。2012年冬季模拟会议。(IEEE,新泽西州皮斯卡塔韦),144-155。交叉参考
[45] Rusmevichientong P,Tsitsiklis JN(2010)《线性参数化匪徒》。数学。操作。物件。35(2):395-411. 链接·Zbl 1217.93190号
[46] Russo D,Van Roy B(2014)通过后验抽样学习优化。数学。操作。物件。39(4):1221-1243. 链接·兹比尔1310.93091
[47] Ryzhov IO、Han B、BradićJ(2016)《利用数据分析培育灾害捐赠者》。管理科学。62(3):849-866。链接
[48] Sargeant A,Kähler J(1999)《志愿部门筹资支出回报》。非盈利管理领导力10(1):5-19. 交叉参考
[49] Sargeant A、Jay E、Lee S(2006)《慈善绩效基准:募捐中直接营销的回报》。J.非营利和公共部门营销16(1-2):77-94. 交叉参考
[50] Wojtaszek DT,Chinneck JW(2010)通过新节点选择规则实现更快的MIP解决方案。计算。操作。物件。37(9):1544-1556. 交叉参考·Zbl 1190.90109号
[51] Xu WL,Nelson BL(2013)《模拟优化的经验随机分界》。IIE事务处理。45(7):685-698. 交叉参考
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。