×

线性阈值函数的改进近似。 (英语) Zbl 1273.68292号

摘要:我们证明了关于(n)维布尔超立方体上任意线性阈值函数(f(x)=mathrm{sign}(w\cdotx-\theta))如何用简单阈值函数逼近的两个主要结果。我们的第一个结果表明,每个变量阈值函数(f)都接近一个仅依赖于(mathrm{Inf}(f)^2\cdot\mathrm}poly}(1/\epsilon)许多变量的阈值函数,其中(mathrm{Inf{(f。这是弗里德古特著名定理的指数深化[E.弗里德古特《组合数学》第18卷第1期,第27–35页(1998年;Zbl 0909.06008号)]它表明,对于阈值函数,每个布尔函数(f)都是(epsilon)-接近于一个只依赖于(2^{O(mathrm{Inf}(f)/epsilen)})多个变量的函数。我们通过显示(Omega(\mathrm{Inf}(f)^2+1/\epsilon^2))近似阈值函数需要许多变量来补充这个上限。
我们的第二个结果是证明了每个可变阈值函数都接近于一个最多具有整数权重的阈值函数(mathrm{poly}(n)cdot2^{tilde{O}(1/\epsilon^{2/3})})。这是对错误参数\(\epsilon\)的依赖性的一个改进R.塞韦迪奥[计算复杂性16,第2期,180–209(2007;Zbl 1128.68043号)]它给出了一个\(mathrm{poly}(n)\cdot2^{tilde{O}(1/\epsilon^2)}\)界。我们的改进是通过一种新的证明技术获得的,该技术使用了概率论中的强反集中界。
新技术还对Servedio[loc.cit.]的原始结果给出了简单的模块化证明,并扩展到在均匀分布以外的一系列概率分布下给出阈值函数的低权重近似值。

MSC公司:

68卢比99 离散数学与计算机科学
06E30年 布尔函数
28A35型 乘积空间中的测度和积分
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] M.Aizenman,F.Germinet,A.Klein,S.Warzel(2009)关于随机变量的Bernoulli分解、浓度边界和光谱局部化。概率论及相关领域143(1-2):219-238·Zbl 1152.60020号
[2] N、 阿龙;V.H.、Vu、无文章标题、反哈达玛矩阵、硬币称重、阈值门和不可分解超图。组合理论杂志,A辑,79133-160(1997)·Zbl 0890.05011号
[3] M Anthony,G.Brightwell,J.Shawe-Taylor(1995)关于使用标记示例指定布尔函数。离散应用数学61:1-25·Zbl 0826.06008号 ·doi:10.1016/0166-218X(94)00007-Z
[4] W、 贝克纳,无文章标题,傅里叶分析中的不等式。数学年鉴,102159-182(1975)·Zbl 0338.42017号
[5] R.Beigel(1994)。感知器、PP和多项式层次结构。计算复杂性4,339-349·Zbl 0829.68059号
[6] A Beimel,E.Weinreb(2006)单调加权阈值函数的单音电路。信息处理信函97(1):12-18·Zbl 1184.68227号 ·doi:10.1016/j.ipl.2005.09.008
[7] M.Bellare和J.Rompel(1994年)。随机-有效的不经意采样。第35届计算机科学基础年会(FOCS),276-287·Zbl 1147.68028号
[8] Bonami(1970),系数练习曲Fourier des functiones de Lp(G)。傅里叶协会年鉴(格勒诺布尔)20(2):335-402·Zbl 0195.42501号 ·doi:10.5802/如果357
[9] J Bourgain(2002)关于布尔函数的傅里叶谱分布。以色列J.数学。131:269-276·Zbl 1021.43004号 ·doi:10.1007/BF02785861
[10] J Bruck,R.Smolensky(1992)多项式阈值函数、AC 0函数和谱范数。SIAM计算机杂志21(1):33-42·Zbl 0743.68063号 ·数字对象标识代码:10.1137/0221003
[11] N Bshouty,C.Tamon(1996)关于单调函数的傅里叶谱。美国医学会杂志43(4):747-770·Zbl 0882.68060号 ·数字对象标识代码:10.1145/234533.234564
[12] S Chawla,R.Krauthgamer,R.Kumar,Y.Rabani,D.Sivakumar(2006)《关于逼近多截和稀疏截的硬度》。计算复杂性15(2):94-114·Zbl 1132.68418号 ·doi:10.1007/s00037-006-0210-9
[13] M.Dertouzos(1965年)。阈值逻辑:一种综合方法。麻省理工学院出版社,马萨诸塞州剑桥·Zbl 0136.13701号
[14] I Diakonikolas、P.Gopalan、R.Jaiswal、R.Servedio、E.Viola(2010)《有限独立愚人半空间》。SIAM J.关于计算。39(8): 3441-3462 ·Zbl 1221.68169号 ·数字对象标识代码:10.1137/100783030
[15] I Dinur,S.Safra(2005)《关于近似最小顶点覆盖的硬度》。数学年鉴162(1):439-485·Zbl 1084.68051号 ·doi:10.4007/annals.2005.162.439
[16] W Doeblin,P.Lévy(1936)《概率计算》。变量的存在是一种天生的信息分散。C.R.学院。科学。202: 2027-2029
[17] D Dubhashi,A.Panconesi(2009)《随机算法分析的测量浓度》。剑桥大学出版社·Zbl 1213.60006号
[18] P Erdös(1945)关于Littlewood和Offord的一个引理。牛市。阿默尔。数学。Soc.51:898-902·兹比尔0063.01270 ·doi:10.1090/S0002-9904-1945-08454-7
[19] P Erdös(1965)数论中的极值问题。程序。交响乐。纯数学。8: 181-189 ·兹伯利0144.28103 ·doi:10.1090/pspum/008/0174539
[20] C.G.Esséen(1968)关于独立随机变量之和的集中函数。Z.Wahrscheinlichkeits理论。盖布。9: 290-308 ·Zbl 0195.19303号 ·doi:10.1007/BF00531753
[21] V Feldman、P.Gopalan、S.Khot、A.Ponnuswami(2009)《关于奇偶、单数和半空间的不可知学习》。SIAM J.计算。39(2): 606-645 ·Zbl 1198.68156号 ·数字对象标识代码:10.1137/070684914
[22] W.Feller(1968)。概率论及其应用简介。约翰·威利父子公司·Zbl 0155.23101号
[23] A.Fiat和D.Pechyony(2004年)。决策树:实用算法的更多理论证明。《算法学习理论》,第15届国际会议(ALT 2004),156-170·Zbl 1110.68393号
[24] E Friedgut(1998)平均灵敏度低的布尔函数依赖于很少的坐标。组合数学18(1):474-483·Zbl 0909.06008号
[25] E Friedgut,G.Kalai(1996)每个单调图属性都有一个尖锐的阈值。程序。阿默尔。数学。Soc.124:2993-3002(社会124:2993-3002)·Zbl 0864.05078号 ·网址:10.1090/S0002-9939-96-03732-X
[26] D.Glassner,R.A.Servedio(2009年)。基本布尔函数的无分布测试下限。计算理论5(1),191-216·Zbl 1213.68415号
[27] P Goldberg(2006)《从平均满意分配估计布尔感知器所需精度的界限》。SIAM离散数学杂志20:328-343·Zbl 1115.68092号 ·doi:10.137/S089548080103426675
[28] L Gross(1975)对数Sobolev不等式。阿默尔。数学杂志。97(4):1061-1083·Zbl 0318.46049号 ·doi:10.2307/2373688
[29] G Halász(1977)组合数论和概率集中函数的估计。期间。数学。匈牙利。8(3): 197-211 ·Zbl 0378.76061号
[30] S Hampson,D.Volper(1986)线性功能神经元:结构和训练。生物控制论53:203-217·Zbl 0583.92030号 ·doi:10.1007/BF00336991
[31] J Hástad(1994)关于门槛门的重量大小。SIAM离散数学杂志7(3):484-492·Zbl 0811.68100号 ·doi:10.1137/S0895480192235878
[32] J.Hástad(2005)。个人沟通·Zbl 0063.01270号
[33] J.Hong(1987)。关于联结主义模型。芝加哥大学计算机科学系技术报告87-012·Zbl 1221.68169号
[34] J.Kahn、G.Kalai和N.Linial(1988年)。变量对布尔函数的影响。程序中。第29届计算机科学基础年会(FOCS),68-80·Zbl 0864.05078号
[35] A.Kalai(2007年)。学习嵌套半空间和上坡决策树。程序中。第20届学习理论年会(COLT),378-392·Zbl 1203.68156号
[36] A Kalai,A.Klivans,Y.Mansour,R.Servedio(2008)《不确定性学习半空间》。SIAM计算机杂志37(6):1777-1805·Zbl 1155.68030号 ·doi:10.1137/060649057
[37] S Khot,O.Regev(2008)顶点覆盖可能很难接近\[{2-\epsilon}\]。计算机与系统科学杂志74(3):335-349·兹比尔1133.68061 ·doi:10.1016/j.jcss.2007.06.019
[38] S Khot,R.Saket(2011)关于学习两个半空间的交集的难度。J.计算。系统。科学。77(1): 129-141 ·Zbl 1213.68496号 ·doi:10.1016/j.jss.2010.06.010
[39] A.N.科尔莫戈罗夫(1958-60)。M.P.Lévy集中功能的所有权。Ann.Inst.H.Poincaré16,27-34·Zbl 0105.11804号
[40] R Krauthgamer,Y.Rabani(2009)《嵌入L1的改进下限》。SIAM J.计算。38(6): 2487-2498 ·Zbl 1191.68869号 ·doi:10.1137/060660126
[41] J.E.Littlewood和A.C.Offord(1943年)。关于随机代数方程的实根数。三、 Rec.数学。[Mat.Sbornik]N.S.12,277-286·Zbl 0061.01801号
[42] K Matulef,R.O'Donnell,R.Rubinfeld,R.Servedio(2010)《测试半空间》。SIAM J.关于计算。39(5): 2004-2047 ·Zbl 1207.68167号 ·doi:10.1137/070707890
[43] S Muroga(1971)阈值逻辑及其应用。Wiley-Interscience,纽约·Zbl 0243.94014号
[44] S Muroga,I.Toda,S.Takasu(1961)《多数转换元件理论》。J.Franklin Institute富兰克林研究所271:376-418·Zbl 0196.51705号 ·doi:10.1016/0016-0032(61)90702-5
[45] N Nisan,M.Szegedy(1994)关于布尔函数作为实多项式的次数。计算。复杂性4:301-313·Zbl 0829.68047号 ·doi:10.1007/BF01263419
[46] R O’Donnell,R.Servedio(2007)在多项式时间内学习单调决策树。SIAM J.关于计算。37(3):827-844·Zbl 1147.68028号 ·电话:10.1137/060669309
[47] R O’Donnell,R.Servedio(2011)《周参数问题》。SIAM J.关于计算。40(1):165-199·Zbl 1217.94139号 ·数字对象标识代码:10.1137/090756466
[48] Y Rabani,A.Shpilka(2010)线性阈值函数小ε网的显式构造。SIAM J.关于计算。39(8): 3501-3520 ·Zbl 1209.68347号 ·doi:10.1137/090764190
[49] P.Raghavan(1988)。在阈值网络中学习。计算学习理论第一次研讨会,19-27·Zbl 0743.68063号
[50] B.A.Rogozin(1973)。独立随机变量和的集中函数的积分型估计。多克。阿卡德。诺克SSSR 211,1067-1070。
[51] M Rudelson,R.Vershynin(2008)《Littlewood-Offord问题与随机矩阵的可逆性》。数学进展218(2):600-633·Zbl 1139.15015号 ·doi:10.1016/j.aim.2008.01.010
[52] A.Sárközy和E.Szemerédi(1965)。在问题von Erdös und Moser中。《算术学报》第11期,205-208年·Zbl 0134.27801号
[53] Servedio R.(2007)每个线性阈值函数都有一个低权重近似值。计算。复杂度16(2):180-209·Zbl 1128.68043号 ·doi:10.1007/s00037-007-0228-7
[54] A.A.Shertov(2008)半空间矩阵。计算。复杂性17(2):149-178·Zbl 1147.68027号 ·doi:10.1007/s00037-008-0242-4
[55] I.S.希加诺夫(1986)。中心极限定理中常数上界的改进。《苏联数学杂志》2545-2550·兹比尔0606.60032
[56] K.-Y.Siu,V.P.Roychowdhury&T.Kailath(1995年)。离散神经计算:理论基础。新泽西州恩格尔伍德悬崖普伦蒂斯·霍尔·Zbl 0838.68034号
[57] T.Tao和V.Vu(2006)。加性组合数学。《剑桥高等数学研究》,剑桥大学出版社,剑桥·Zbl 1127.11002号
[58] T Tao,V.Vu(2009)从Littlewood-Offord问题到循环定律:随机矩阵谱分布的普遍性。牛市。阿默尔。数学。Soc.46:377-396·兹伯利1168.15018 ·doi:10.1090/S0273-0979-09-01252-X
[59] V.Vu(2008)。子集和问题的结构方法。《建筑桥梁》,博莱学会数学研究第19卷,525-545。施普林格,柏林,海德堡·Zbl 1169.11012号
[60] A.Wigderson(1994)。成对独立的惊人力量。第26届ACM计算机理论研讨会论文集,645-647。
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。