arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2302.04391cs.LGcs.CL
收藏

面向以数据为中心的机器学习的重标记方法

The Re-Label Method For Data-Centric Machine Learning

Tong Guo

AI总结:

针对工业深度学习人工标注数据存在噪声的问题,提出以模型预测为参考、人工重标记噪声数据的方法,覆盖多类深度学习任务,经开发集与人工评估验证有效,可实现开发集90分以上的成绩。

摘要:

在工业深度学习应用中,我们的人工标注数据存在一定数量的噪声数据。为解决该问题并在开发集上取得90分以上的成绩,我们提出一种简单方法:以模型预测结果作为人工标注的参考,找出噪声数据并由人工重新标记。本文针对分类、序列标注、目标检测、序列生成、点击率预测等广泛的深度学习任务阐释了该思路。开发集评估结果与人工评估结果均验证了我们的思路。

英文摘要:

In industry deep learning application, our manually labeled data has a certain number of noisy data. To solve this problem and achieve more than 90 score in dev dataset, we present a simple method to find the noisy data and re-label the noisy data by human, given the model predictions as references in human labeling. In this paper, we illustrate our idea for a broad set of deep learning tasks, includes classification, sequence tagging, object detection, sequence generation, click-through rate prediction. The dev dataset evaluation results and human evaluation results verify our idea.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑