arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2403.16099cs.CLcs.LG
收藏

一个法国假新闻多标签数据集:人类与机器的洞见

A Multi-Label Dataset of French Fake News: Human and Machine Insights

Sorbonne Université(索邦大学);CNRS(法国国家科学研究中心);Institut Jean-Nicod(让·尼科研究所);ENS-PSL(巴黎文理研究大学);EHESS(法国社会科学高等研究院);Freedom Partners(自由伙伴公司);Université de Rennes(雷恩大学);Inria(法国国家信息与自动化研究所);IRISA(雷恩信息、信号与自动化研究所);Airbus Defence and Space(空客防务与空间公司);Mondeca(蒙代卡公司);European Union Agency for Railways(欧盟铁路局);Observatoire des Médias(媒体观察站)

Benjamin Icard, François Maine, Morgane Casanova, Géraud Faye, Julien Chanson, Guillaume Gadek, Ghislain Atemezing, François Bancilhon, Paul Égré

AI总结:

本研究构建了含100篇文档的法国假新闻多标签语料库OBSINFOX,通过多标签多标注员设置分析人类假新闻认知特征,结合主题体裁分析与主观性分析工具探究标签关联,为假新闻相关研究提供了公开数据集。

摘要:

我们提出了一个包含100篇文档的语料库OBSINFOX,这些文档选自被专业机构认定为不可靠的17家法国媒体来源,由8名标注员使用11个标签进行标注。通过收集比通常情况更多的标签、以及比常规做法更多的标注员,我们能够识别出人类认为是假新闻特征的属性,并将其与自动分类器的预测结果进行比较。我们使用Gate Cloud进行了主题和体裁分析,结果表明该语料库中存在大量类似讽刺的文本。随后我们使用主观性分析器VAGO及其神经版本,阐明了“主观性”标签标注与“假新闻”标签标注之间的关联。该标注数据集可在以下网址在线获取:https://github.com/obs-info/obsinfox

英文摘要:

We present a corpus of 100 documents, OBSINFOX, selected from 17 sources of French press considered unreliable by expert agencies, annotated using 11 labels by 8 annotators. By collecting more labels than usual, by more annotators than is typically done, we can identify features that humans consider as characteristic of fake news, and compare them to the predictions of automated classifiers. We present a topic and genre analysis using Gate Cloud, indicative of the prevalence of satire-like text in the corpus. We then use the subjectivity analyzer VAGO, and a neural version of it, to clarify the link between ascriptions of the label Subjective and ascriptions of the label Fake News. The annotated dataset is available online at the following url: https://github.com/obs-info/obsinfox Keywords: Fake News, Multi-Labels, Subjectivity, Vagueness, Detail, Opinion, Exaggeration, French Press

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑