The analysis of results from HEP experiments often involves the estimates of the composition of the binned data samples, based on Monte Carlo simulations of various sources. Due to a finite statistic of MC samples they have statistical fluctuation. This work proposes the method of incorporating the systematic uncertainties due to finite statistics of MC samples with negative weights. The possible approximations are discussed and the comparison of different methods are presented.
QBDT, a new boosting decision tree method with systematic uncertainties into training for High Energy Physics
针对高能物理领域的分类问题,提出了一种新的提升决策树(BDT)方法QBDT。在许多高能物理的研究中,由于存在巨大的背景和各种系统不确定性,人们努力提高信号的显著性。为什么不开发一种直接针对意义的BDT方法呢?事实上,意义在这种新方法中起着核心作用。它用于在构建树时分割节点,也是对BDT分数有贡献的权重。由于系统不确定性可以很容易地包含在显著性计算中,因此该方法能够通过训练来学习减少系统不确定性的影响。以质子-质子碰撞$pp \to h + X \to γτ^+τ^-+X$中稀有辐射Higgs衰变的研究为例,比较了QBDT和目前流行的梯度BDT(GradeBDT)方法。QBDT被发现,以减少信号强度和系统的不确定性源之间的相关性,从而给一个更好的意义。系统不确定度源对信号强度不确定度的贡献为GradBDT法的50- 85%。
Comment on "Including Systematic Uncertainties in Confidence Interval Construction for Poisson Statistics"
Conrad等人最近在一篇论文(Physical Review D 67(2003)012002)中讨论了将系统不确定性纳入置信区间计算的问题。在他们的工作中,探测器效率和背景通量预测的系统不确定性被纳入以下的混合频率-贝叶斯公式的Feldman和Highland,但使用的似然比排序的Feldman和Feldman,以产生“统一”的置信区间。一般来说,所得到的间隔表现得与人们直观预期的一样,即随着不确定性的增加而增加。然而,据指出,对于观测到的事件数量少于预期背景或与预期背景数量相当的情况,间隔有时可能以完全违反直觉的方式表现-在不确定性增加的情况下,最初的间隔会减少,但这仅限于信号效率不确定性增加的情况。在这篇评论中,我们表明,有问题的行为是由于整合的信号效率的不确定性,同时最大限度地提高最佳拟合备择假设的可能性。如果备择假设似然是通过无条件最大化未知信号和信号效率不确定性来确定的,则限值显示正确的直观行为。
Optimal statistical inference in the presence of systematic uncertainties using neural network optimization based on binned Poisson likelihoods with nuisance parameters