×

非理性繁荣:纠正概率估计中的偏差。 (英语) Zbl 1506.62266号

总结:我们考虑的是一种常见的设置,即观察大量事件的概率估计,例如许多债券的违约风险。不幸的是,即使使用无偏估计,选择与最极端概率对应的事件也可能导致系统低估不确定性的真实水平。我们开发了一种经验贝叶斯方法“过度确定性调整概率”(ECAP),使用了Tweedie公式的一种变体,该公式更新了概率估计以纠正选择偏差。ECAP是一种灵活的非参数方法,它直接估计与概率估计相关的得分函数,因此不需要对真实概率的先验作出任何限制性假设。ECAP在概率估计有偏差的情况下也能很好地工作。我们通过理论结果、模拟和两个真实数据集的分析证明,ECAP可以比原始概率估计值提供显著改进。

MSC公司:

2015年1月62日 贝叶斯推断
62P05号 统计学在精算科学和金融数学中的应用
PDF格式BibTeX公司 XML格式引用

参考文献:

[1] 阿布拉莫维奇,F。;本杰明,Y。;Donoho,D.L。;Johnstone,I.M.,“通过控制错误发现率来适应未知稀疏性,《统计年鉴》,34584-653(2006)·Zbl 1092.62005年 ·doi:10.1214/00905360000000074
[2] Agmon,S.,《椭圆边值问题讲座》(1965),新泽西州普林斯顿:Van Nostrand,普林斯顿,新泽西·Zbl 0142.37401号
[3] 本杰明,Y。;Yekutieli,D.,“错误发现率调整选定参数的多个置信区间”,美国统计协会杂志,100,71-81(2005)·Zbl 1117.62302号 ·doi:10.1198/0162145000001907
[4] Bickel,P.J。;Levina,E.,“通过阈值进行协方差正则化,《统计年鉴》,36,2577-2604(2008)·Zbl 1196.62062号 ·doi:10.1214/08-AOS600
[5] Brown,L.D。;Greenshtein,E.,“估计正态均值高维向量的非参数经验贝叶斯和复合决策方法,统计年鉴,371685-1704(2009)·Zbl 1166.62005年 ·doi:10.1214/08-AOS630
[6] Donoho,D.L。;Johnstone,I.M.,“基于小波收缩的理想空间自适应,生物特征,81425-455(1994)·Zbl 0815.62019号 ·doi:10.1093/biomet/81.3.425
[7] Efron,B.,“Tweedie公式和选择偏差,美国统计协会杂志,1061602-1614(2011)·Zbl 1234.62007年 ·doi:10.1198/jasa.2011.tm11181
[8] 埃夫隆,B。;Morris,C.,“使用Stein估计及其推广进行数据分析,美国统计协会杂志,70311-319(1975)·Zbl 0319.62018号 ·doi:10.1080/01621459.1975.10479864
[9] 盖尔曼,A。;Shalizi,C.R.,“贝叶斯统计的哲学和实践,英国数学和统计心理学杂志,66,8-38(2012)·Zbl 1410.62009年 ·doi:10.1111/j.2044-8317.2011.02037.x
[10] 亨德森,北卡罗来纳州。;Newton,M.A.,“切割:大尺度推断的改进排名和选择”,《皇家统计学会杂志》,B辑,78,781-804(2015)·Zbl 1414.62064号 ·doi:10.1111/rssb.12131
[11] 赫尔,J。;Predescu,M。;White,A.,“债券价格、违约概率和风险溢价,《信贷风险杂志》,153-60(2005)·doi:10.21314/JCR.2005.007
[12] Y.池田。;Kubokawa,T。;Srivastava,M.S.,“正态和非正态分布中大协方差矩阵的线性收缩估计的比较,计算统计和数据分析,95,95-108(2016)·Zbl 1468.62087号 ·doi:10.1016/j.csda.2015.09.011
[13] 詹姆斯·W·。;Stein,C.,第四届伯克利数理统计与概率研讨会论文集,361-379(1961),加州伯克利:加州大学出版社,加州伯克莱·Zbl 1281.62026号
[14] 蒋伟(Jiang,W.)。;Zhang,C.-H.,“正态均值的一般最大似然经验Bayes估计”,《统计年鉴》,371647-1684(2009)·Zbl 1168.62005号 ·doi:10.1214/08-AOS638
[15] Kealhofer,S.,“量化信贷风险I:违约预测”,《金融分析师杂志》,59,30-44(2003)·doi:10.2469/faj.v59.n1.2501
[16] O.莱多特。;Wolf,M.,“大维协方差矩阵的非线性收缩估计,统计年鉴,401024-1060(2012)·Zbl 1274.62371号 ·doi:10.1214/12-AOS989
[17] Leung,C.K。;Joseph,K.W.,“体育数据挖掘:大学足球赛的预测结果”,《Procedia Computer Science》,第35期,第710-719页(2014年)·doi:10.1016/j.procs.2014.08.153
[18] 梅尔。;Van de Geer,S。;Bühlmann,P.,“高维加性建模,统计年鉴,373779-3821(2009)·Zbl 1360.62186号 ·doi:10.1214/09-AOS692
[19] Petrone,S.公司。;Rizzelli,S。;卢梭,J。;Scricciolo,C.,“经典和贝叶斯推断中的经验贝叶斯方法”,METRON,72,201-215(2014)·2014年6月13日 ·doi:10.1007/s40300-014-0044-1
[20] 姿势,R.M。;史密斯,W.R。;McClish,D.K。;Huber,E.C。;克莱莫,F.L.W。;施密特,B.P。;Alexander-Forti,D。;拉赫特,E.M。;科伦达,I。;克里斯托弗,C。;Centor,R.M.,“医生对急性充血性心力衰竭患者的生存预测,JAMA内科,1571001-1007(1997)·doi:10.1001/archente.157.9.1001
[21] Robbins,H.,“统计学的经验贝叶斯方法,第三届伯克利数理统计与概率研讨会论文集,1157-163(1956)·Zbl 0074.35302号
[22] Silver,N.,“2018年中期预测的538项表现如何”(2018年)
[23] Smeenk,R.M。;Verwaal,V.J。;安东尼尼,N。;Zoetmulder,F.A.N.,“通过细胞还原手术和腹腔内热疗化疗治疗腹膜假粘液瘤患者的生存分析”,《外科年鉴》,245,104-109(2007)
[24] Soumbatiants,S.公司。;查佩尔,H.W。;Johnson,E.,“利用州民意调查预测美国总统选举结果,公共选择,127,207-223(2006)·doi:10.1007/s11127-006-1259-3
[25] Stone,C.J.,“非参数估计的最优收敛速度,《统计年鉴》,8,1348-1360(1980)·Zbl 0451.62033号 ·doi:10.1214/aos/1176345206
[26] Van de Geer,S.,《M估计中的经验过程》(2000),剑桥:剑桥大学出版社,剑桥·Zbl 1179.62073号
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。