arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2001.10872stat.MLcs.LG
收藏

有效维数的尺度依赖概念

A scale-dependent notion of effective dimension

CompatibL Sp;ETH Zürich(苏黎世联邦理工学院);ADQ Inc(ADQ公司);Duality Group(对偶集团)

Oksana Berezniuk, Alessio Figalli, Raffaele Ghigliazza, Kharen Musaelian

摘要:

我们引入了一个统计模型的“有效维数”的概念,该模型基于当被赋予费舍尔信息矩阵作为度量时覆盖模型空间所需的大小为$1/\sqrt{n}$的立方体的数量,$n$是观测的数量。观测次数确定了自然尺度或分辨率。然后,通过使用该自然尺度正则化的费舍尔信息矩阵的频谱来测量有效维度。

英文摘要:

We introduce a notion of "effective dimension" of a statistical model based on the number of cubes of size $1/\sqrt{n}$ needed to cover the model space when endowed with the Fisher Information Matrix as metric, $n$ being the number of observations. The number of observations fixes a natural scale or resolution. The effective dimension is then measured via the spectrum of the Fisher Information Matrix regularized using this natural scale.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑