arXivDaily arXiv每日学术速递 周一至周五更新
​通知:联邦节假日调休:哥伦布日 / 原住民日(Columbus Day / Indigenous Peoples' Day),今日(13日)无更新。
arXiv 2401.07944cs.CL

SemEval-2017 任务 4:使用 BERT 进行 Twitter 情感分析

SemEval-2017 Task 4: Sentiment Analysis in Twitter using BERT

University of Minnesota Duluth(明尼苏达大学德卢斯分校)

Rupak Kumar Das, Ted Pedersen

AI总结:

本文使用 BERT(BASE)模型解决 SemEval-2017 任务 4A 的 Twitter 英语情感分析,在二分类子任务上优于朴素贝叶斯基线,并考虑了数据伦理问题。

摘要:

本文使用基于 Transformer 架构的 BERT 模型来解决 SemEval2017 任务 4A 的英语 Twitter 情感分析问题。当训练数据量较小时,BERT 是一种非常强大的用于分类任务的大型语言模型。在本实验中,我们使用了具有 12 个隐藏层的 BERT(BASE)模型。与朴素贝叶斯基线模型相比,该模型提供了更好的准确率、精确率、召回率和 F1 分数。它在二分类子任务中的表现优于多分类子任务。由于 Twitter 数据包含个人和敏感信息,我们在实验过程中还考虑了各种伦理问题。我们实验中使用的数据集和代码可以在该 GitHub 仓库中找到。

英文摘要:

This paper uses the BERT model, which is a transformer-based architecture, to solve task 4A, English Language, Sentiment Analysis in Twitter of SemEval2017. BERT is a very powerful large language model for classification tasks when the amount of training data is small. For this experiment, we have used the BERT(BASE) model, which has 12 hidden layers. This model provides better accuracy, precision, recall, and f1 score than the Naive Bayes baseline model. It performs better in binary classification subtasks than the multi-class classification subtasks. We also considered all kinds of ethical issues during this experiment, as Twitter data contains personal and sensible information. The dataset and code used in our experiment can be found in this GitHub repository.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑