Rumor Detection with Self-supervised Learning on Texts and Social Graph
University of Science and Technology of China(中国科学技术大学);Beijing Electronic Science and Technology Institute(北京电子科技学院)
谣言检测是近年来新兴的研究领域。其核心是对丰富信息中固有的谣言特征进行建模,例如社交网络中的传播模式和帖子内容中的语义模式,并将其与真相区分开来。然而,现有的谣言检测工作在建模异构信息方面存在不足,要么只使用单个信息源(例如社交网络或帖子内容),要么忽略多个源之间的关系(例如通过简单的级联融合社交和内容特征)。因此,它们在全面理解谣言和准确检测谣言方面可能存在缺陷。在这项工作中,我们探讨了对比自监督学习异质信息源,以揭示它们之间的关系,更好地描述谣言。从技术上讲,我们补充了主要的监督任务的检测与辅助自我监督任务,丰富后表示通过后自我歧视。具体地,给定帖子的两个异构视图(即,对社交模式和语义模式进行编码的表示),通过最大化相同帖子的不同视图与其他帖子的不同视图之间的互信息来进行区分。考虑到信息源的不同关系,我们设计了基于集群和基于实例的方法来生成视图并进行区分。我们称这个框架为自监督谣言检测(SRD)。在三个真实数据集上的大量实验验证了SRD在社交媒体上自动谣言检测的有效性。
2022-04-19 cs.LG cs.SI
Learning Social Image Embedding with Deep Multimodal Attention Networks
Beihang University(北京航空航天大学);Microsoft Research(微软研究院);National Computer Network Emergency Response Technical Team/Coordination Center of China(国家计算机网络应急技术处理协调中心)
基于深度模型的社交媒体数据嵌入学习已经引起了广泛的研究兴趣,并在链接预测、分类、跨模态搜索等方面得到了广泛的应用。然而,对于包含链接信息和多模态内容两者的社交图像(例如,文本描述和视觉内容),简单地采用从网络结构或数据内容学习的嵌入导致次优的社交图像表示。在本文中,我们提出了一种新的社交图像嵌入方法,称为深度多模态注意力网络(DMAN),它采用深度模型来联合嵌入多模态内容和链接信息。具体来说,为了有效地捕捉多模态内容之间的相关性,我们提出了一个多模态注意力网络来编码图像区域和文本单词之间的细粒度关系。为了利用网络结构进行嵌入学习,提出了一种新的Siamese-Triplet神经网络来建模图像之间的链接。利用联合深度模型,学习的嵌入可以捕获多模态内容和非线性网络信息。大量的实验进行了调查,我们的方法在多标签分类和跨模态搜索的应用程序的有效性。与最先进的图像嵌入相比,我们提出的DMAN在多标签分类和跨模态搜索任务方面取得了显着的改进。
2017-10-18 cs.LG cs.MM stat.ML
Social Debiasing for Fair Multi-modal LLMs
National University of Singapore(新加坡国立大学);University of Warwick(华威大学);Ant Group(蚂蚁集团);Shandong University(山东大学);Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳))
针对多模态大语言模型(MLLMs)的社会偏见问题,本文构建含18种平衡社会概念的综合反事实数据集(CMSC),提出结合偏见感知采样与损失重缩放的反刻板印象去偏(CSD)策略,在不降低通用性能的前提下有效减少偏见。
2025-08-20 cs.AI cs.CL
Visual Persuasion in COVID-19 Social Media Content: A Multi-Modal Characterization
University of Pittsburgh(匹兹堡大学)
社交媒体内容通常采用多模态设计来传递信息和塑造意义,并将解释转向理想的含义,但使用文本和视觉图像的选择和结果尚未得到充分研究。这项工作提出了一种计算方法来分析多模态内容中说服性信息的结果,重点关注Twitter上分享的COVID-19相关新闻文章中的流行度和可靠性两个方面。这两个方面在错误信息的传播中交织在一起:例如,一篇旨在提供错误信息的不可靠文章必须获得一定的知名度。这项工作有几个贡献。首先,我们提出了一个多模态(图像和文本)的方法,有效地确定流行性和可靠性的信息源同时。其次,我们确定的文本和视觉元素,是预测信息的普及和可靠性。第三,通过建模跨模态关系和相似性,我们能够揭示不可靠的文章是如何以扭曲,偏见的方式构建多模态意义的。我们的工作展示了如何使用多模态分析来理解有影响力的内容,并对社交媒体素养和参与度产生影响。
2021-12-05 cs.AI cs.CL cs.CV
Multi-Task Pharmacovigilance Mining from Social Media Posts
University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
社交媒体已成为药物警戒研究的重要信息源,越来越多的人发布了以前未报告的医疗药物不良反应。为了有效地监测社会医疗岗位上药品不良反应(ADR)的各个方面,提出了一种多任务神经网络框架,该框架能够在不同的监督级别下集体学习与ADR监测相关的多个任务。除了能够正确分类ADR帖子并从在线帖子中准确提取ADR提及之外,所提出的框架还能够从给定的社交媒体帖子中进一步了解药物被服用的原因,称为“适应症”。在我们的框架中采用了基于覆盖率的注意力机制,以帮助模型正确识别关注帖子中多个单词的“短语”ADR和指示。我们的框架是适用于有限的并行数据的情况下,不同的药物警戒tasks.We评估建议的框架在现实世界的Twitter数据集,其中建议的模型优于国家的最先进的替代方案,每个单独的任务一致。
2018-02-16 cs.AI cs.CL cs.LG
ADVISER: A Toolkit for Developing Multi-modal, Multi-domain and Socially-engaged Conversational Agents
University of Stuttgart(斯图加特大学)
我们提出了ADVISER -一个开源的,多域的对话系统工具包,使开发多模态(包括语音,文本和视觉),社会参与(如情感识别,参与度预测和反向通道)会话代理。我们的工具包的最终基于Python的实现是灵活的,易于使用,易于扩展,不仅适用于技术经验丰富的用户,如机器学习研究人员,而且适用于技术经验较少的用户,如语言学家或认知科学家,从而为协作研究提供了一个灵活的平台。开源代码链接:https://github.com/DigitalPhonetics/adviser
2020-05-04 cs.AI cs.CL
Multi-Modal Bayesian Embeddings for Learning Social Knowledge Graphs
Tsinghua University(清华大学);Carnegie Mellon University(卡内基梅隆大学)
我们研究在线社交网络可以连接到开放的知识库的程度。这个问题被称为学习社会知识图谱。我们提出了一个多模态贝叶斯嵌入模型,GenVector,学习潜在的主题,生成词和网络嵌入。GenVector利用嵌入的大规模未标记数据,并表示两种模态的数据-即,社交网络用户和知识概念--在共享的潜在主题空间中。三个数据集上的实验表明,该方法明显优于国家的最先进的方法。然后,我们将该方法部署在AMiner上,AMiner是一个大型在线学术搜索系统,拥有38,049,189名研究人员的网络,拥有35,415,011个概念的知识库。我们的方法显着降低了出错率在一个在线的A/B测试与现场用户。
2016-04-20 cs.CL cs.SI
FR-Detect: A Multi-Modal Framework for Early Fake News Detection on Social Media Using Publishers Features
University of Zanjan(赞詹大学)
近年来,随着互联网的扩张和有吸引力的社交媒体基础设施,人们更喜欢通过这些媒体关注新闻。尽管这些媒体在新闻领域拥有诸多优势,但由于缺乏任何控制和核查机制,导致假新闻泛滥,成为对民主、经济、新闻业和表达自由的最重要威胁之一。设计和使用自动方法来检测社交媒体上的假新闻已成为一项重大挑战。在本文中,我们研究了出版商在检测社交媒体上的假新闻方面的作用。我们还提出了一个高精度的多模态框架,即FR检测,使用用户相关和内容相关的功能与早期检测能力。为此目的,已为出版商引入两项与用户有关的新功能,即活动可信度和影响力。此外,还提供了一个基于文本级的卷积神经网络,以将这些特征与潜在文本内容特征适当地结合起来。实验结果表明,发布者的功能可以提高基于内容的模型的性能高达13%和29%的准确率和F1分数,分别。
2021-09-10 cs.CL cs.LG cs.SI
Multi-Modal Discussion Transformer: Integrating Text, Images and Graph Transformers to Detect Hate Speech on Social Media
University of Waterloo(滑铁卢大学)
本文提出多模态讨论Transformer(mDT),利用图Transformer融合讨论上下文中的文本与图像信息来检测Reddit仇恨言论,并构建新数据集HatefulDiscussions验证其优于仅处理单条评论的基线方法。
2024-02-22 cs.CL cs.LG cs.MM
AMUSED: An Annotation Framework of Multi-modal Social Media Data
University of Duisburg-Essen(杜伊斯堡-埃森大学);University of Agder(阿格德大学)
在本文中,我们提出了一个名为AMUSED的半自动化框架,用于从多个社交媒体平台收集多模态注释数据。该框架旨在通过在数据汇集过程中紧密结合机器和人类来缓解收集和注释社交媒体数据的问题。从专业新闻媒体或博客的文章列表中,AMUSED检测新闻文章中社交媒体帖子的链接,然后从相应的社交媒体平台下载同一帖子的内容,以收集有关该特定帖子的详细信息。该框架能够从Twitter,YouTube,Reddit等多个平台获取注释数据。该框架旨在减少社交媒体平台数据注释背后的工作量和问题。AMUSED可以应用于多个应用领域,作为用例,我们已经实现了从不同社交媒体平台收集COVID-19错误信息数据的框架。
2021-08-10 cs.CL cs.IR cs.SI
Detecting AI-Generated Content on Social Media with Multi-modal Language Models
Carnegie Mellon University(卡内基梅隆大学);Meta
针对AI生成内容检测的泛化性差、单模态依赖和缺乏可解释性问题,提出基于多模态数据的紧凑视觉-语言模型,实现检测与解释,在公开基准和内部数据集上达到最优性能。
2026-06-11 cs.CL cs.CV
Stark: Social Long-Term Multi-Modal Conversation with Persona Commonsense Knowledge
School of Computing, KAIST(韩国科学技术院计算机学院);KT Corporation(KT公司)
本文提出Stark大规模长期多模态对话数据集及Mcu自动构建框架,并训练Ultron 7B模型,以解决个性化长期图像分享对话问题。
2024-07-04 cs.CL cs.CV
How to Generate Popular Post Headlines on Social Media?
Zhejiang University(浙江大学);Huayun Informaton and Technology Co. Ltd(华云信息技术有限公司)
本文针对社交媒体热门标题自动生成问题,提出结合多个偏好提取器与BART的MEBART模型,通过捕捉趋势和个人风格,在小红书真实数据集上取得了最先进性能。
2023-09-18 cs.AI cs.CL
Bi-Directional Recurrent Neural Ordinary Differential Equations for Social Media Text Classification
Indian Institute of Technology Hyderabad(印度理工学院海得拉巴分校)
由于文本的嘈杂和简短性质,对Twitter等社交媒体中的帖子进行分类是困难的。基于递归神经网络(RNN)的序列分类模型对于分类本质上是连续的帖子是流行的。RNN假设隐藏的表示动态以离散的方式演化,并且不考虑发布的确切时间。在这项工作中,我们建议使用递归神经常微分方程(RNODE)进行社交媒体帖子分类,考虑发布时间,并允许隐藏表示的计算以时间敏感的连续方式发展。此外,我们提出了一种新的模型,双向RNODE(Bi-RNODE),它可以考虑在两个方向上的信息流的张贴时间预测后标签。我们的实验表明,RNODE和Bi-RNODE是有效的社会媒体中的谣言的立场分类的问题。
2021-12-23 cs.CL cs.LG
Interpretable Multi-Modal Hate Speech Detection
MIT Media Lab(麻省理工学院媒体实验室);Google Brain(谷歌大脑)
随着社交媒体在塑造世界各地公众舆论和信仰方面发挥越来越大的作用,人们越来越关注识别和应对社交媒体上的仇恨言论问题。网络空间的仇恨言论有严重的表现形式,包括社会两极分化和仇恨犯罪。虽然先前的作品已经提出了自动化技术来检测在线仇恨言论,但这些技术主要未能超越文本内容。此外,很少有人试图把重点放在这些模型的可解释性方面,因为不正确的预测会产生社会和法律影响。在这项工作中,我们提出了一个深度神经多模态模型,它可以:(a)通过有效地捕捉文本的语义以及特定仇恨表达的社会文化背景来检测仇恨言论,以及(b)为我们的模型决策提供可解释的见解。通过对不同的建模技术进行全面的评估,我们证明了我们的模型能够优于现有的最先进的仇恨言论分类方法。最后,我们展示了社会和文化背景特征对挖掘与不同类别仇恨相关的集群的重要性。
2021-03-02 cs.CL cs.LG
A Computational Framework for Multi-Modal Social Action Identification
Princeton University(普林斯顿大学);University of Georgia(佐治亚大学);Drexel University(德雷塞尔大学)
我们创建了一个计算框架来理解社会行动,并展示了如何使用这个框架来构建一个开源事件检测工具,该工具具有可扩展的统计机器学习算法和来自世界各地的超过6亿条地理标记推文的子采样数据库。这些推文是在2014年4月1日至2015年4月30日之间收集的,最引人注目的是当黑人生命物质运动开始时。我们展示了这些方法如何被研究人员、政府官员和公众诊断性地用于理解在非常细粒度的时间和地理层面上的和平与暴力集体行动。
2017-10-24 cs.CL cs.CY cs.SI
Depression detection in social media posts using affective and social norm features
National Technical University of Athens(雅典国家技术大学);Institute for Speech and Language Processing(言语与语言处理研究所)
我们提出了一个从社交媒体帖子中检测抑郁症的深层架构。所提出的架构建立在BERT的基础上,从社交媒体帖子中提取语言表示,并使用专注的双向GRU网络将这些表示结合起来。我们将情感信息,通过增强的文本表示与预训练的情感分类器中提取的特征。心理文学的动机,我们建议将亵渎和道德功能的职位和话在我们的建筑使用后期融合方案。我们的分析表明,道德和亵渎可以是抑郁症检测的重要特征。我们将我们的模型应用于Pirina数据集上的Reddit帖子的抑郁检测,并进一步考虑在Reddit RSDD数据集中提出的每个用户多个帖子的情况下检测抑郁用户的设置。包含所提出的功能在两种设置中产生最先进的结果,即F1评分分别绝对提高2.65%和6.73%。索引术语:抑郁检测,BERT,特征融合,情感识别,亵渎,道德
2023-03-24 cs.CL
Modeling Political Orientation of Social Media Posts: An Extended Analysis
Oklahoma State University(俄克拉荷马州立大学);Southwestern Oklahoma State University(俄克拉荷马州立西南大学);Colorado State University(科罗拉多州立大学)
本文提出两种利用新闻媒体偏见和帖子内容标注社交媒体帖子的启发式方法,结合传统监督学习与少样本学习预测帖子政治倾向,在Gab和Twitter上验证了方法的有效性。
2023-11-21 cs.CL cs.LG cs.SI
Does Social Support Expressed in Post Titles Elicit Comments in Online Substance Use Recovery Forums?
Penn Medicine(宾夕法尼亚大学医学中心);University of Pennsylvania(宾夕法尼亚大学)
从药物使用中恢复的个人经常在在线恢复论坛上寻求社会支持(情感和信息),在那里他们可以撰写和评论帖子,表达他们的斗争和成功。这些论坛中的一个共同挑战是某些帖子(其中一些可能是寻求支持的帖子)没有评论。在这项工作中,我们使用两个Reddit物质恢复论坛的数据:/r/Leaves和/r/OpiatesRecovery,以确定帖子标题中表达的社会支持与他们收到的评论数量之间的关系。我们发现,在引起评论的帖子标题中表达的社会支持类型从一个物质使用恢复论坛到另一个不同。
2020-11-10 cs.CL
Mining Coronavirus (COVID-19) Posts in Social Media
Purdue University(普渡大学);Emory University(埃默里大学)
世界卫生组织(WHO)于2020年3月11日将新型冠状病毒(COVID-19)定性为全球大流行。在此之前和1月下旬,更具体地说是1月27日,虽然大多数感染病例仍在中国和一些游轮上报告,但我们开始使用Twitter搜索API抓取社交媒体用户的帖子。我们的目标是利用机器学习和语言工具来更好地了解疫情在中国的影响。与我们最初预期监测局部疫情不同,COVID-19迅速蔓延至全球。在这篇简短的文章中,我们报告了我们使用最先进的机器学习模型从社交媒体用户帖子中自动检测COVID-19阳性报告的研究的初步结果。
2020-03-28 cs.CL cs.LG stat.ML
MMChat: Multi-Modal Chat Dataset on Social Media
Alibaba Group(阿里巴巴集团);Utrecht University(乌得勒支大学);Samsung Research China - Beijing (SRC-B)(三星中国研究院-北京(SRC-B))
在会话中描述多模态上下文对于开发更具吸引力的对话系统是重要的。在这项工作中,我们探索这一方向,通过引入MMChat:一个大规模的中文多模态对话语料库(32.4M原始对话和120.84K过滤对话)。与以前的众包或从虚构电影中收集的语料库不同,MMChat包含从社交媒体上的真实对话中收集的基于图像的对话,其中观察到稀疏性问题。具体而言,在日常交流中,图像发起的对话可能会偏离一些非图像为基础的话题进行。为了更好地研究这个问题,我们手动注释来自MMChat的100 K对话,并进一步相应地过滤语料库,从而产生MMChat-hf。我们开发了一个基准模型,以解决对话生成任务的稀疏性问题,通过调整注意力路由机制的图像特征。实验表明,将图像特征的有用性和处理图像特征的稀疏性的有效性。
2022-05-01 cs.CL cs.CV
Improving Social Media Popularity Prediction with Multiple Post Dependencies
Tsinghua University(清华大学);Beijing University of Posts and Telecommunications(北京邮电大学)
针对现有模型未能充分利用帖子间多重依赖关系的问题,提出DSN框架,通过多模态特征提取和层次化信息传播分别建模帖内与帖间依赖,显著提升了社交媒体流行度预测精度。
2023-07-28 cs.AI cs.CL cs.MM
Multi-modal Attention Network for Stock Movements Prediction
University of Electronic Science and Technology of China(电子科技大学)
股票价格的波动是逐段的趋势波动,而不是纯粹的随机游走。传统上,对未来股票走势的预测是基于历史交易记录。如今,随着社交媒体的发展,市场上许多活跃的参与者选择公布他们的策略,这提供了一个窗口,通过提取社交媒体背后的语义来窥探整个市场对未来走势的态度。然而,社交媒体包含相互矛盾的信息,无法完全取代历史记录。在这项工作中,我们提出了一个多模态注意力网络,以减少冲突,并整合语义和数字特征,以全面预测未来的股票走势。具体而言,我们首先从社交媒体中提取语义信息,并根据发帖者的身份和公众声誉来估计其可信度。然后,我们结合语义从网上帖子和数字特征,从历史记录,使交易策略。实验结果表明,我们的方法在预测准确率(61.20%)和交易利润(9.13%)方面均明显优于以前的方法。这表明,我们的方法提高了股票走势预测的性能,并为未来的研究多模态融合对股票预测。
2022-10-12 cs.CL cs.LG q-fin.TR
Understanding Social Media Cross-Modality Discourse in Linguistic Space
The Hong Kong Polytechnic University(香港理工大学);Nanjing University of Aeronautics and Astronautics(南京航空航天大学)
带有文本和图像的多媒体通信在社交媒体上很受欢迎。然而,有限的研究关注如何图像与文本的结构,形成连贯的意义在人类认知。为了填补这一空白,我们提出了一个新的跨模态话语的概念,反映了人类读者如何耦合图像和文本的理解。在多媒体环境中,文本描述首先来自图像(称为字幕)。五个标签-实体级插入,投影和具体化和场景级重述和扩展-进一步被用来塑造字幕和文本的结构,并呈现它们的联合意义。作为试点研究,我们还建立了第一个包含16 K多媒体推文的数据集,其中包含手动注释的话语标签。实验结果表明,基于带字幕的多头注意力的多媒体编码器能够获得较好的编码效果。
2023-02-26 cs.CL cs.MM cs.SI
Spatial Data Mining of Public Transport Incidents reported in Social Media
Wrocław University of Science and Technology(弗罗茨瓦夫理工大学)
公共交通机构将社交媒体作为向乘客传达交通事故的重要工具。然而,虽然关于交通现象的短期日常信息通常以低延迟发布在社交媒体上,但其可用性是短期的,因为内容很少以聚合形式呈现。关于交通现象的社交媒体传播通常缺乏GIS注释,因为大多数社交媒体平台不允许将非POI GPS坐标附加到帖子。因此,对传输现象信息的分析是最少的。我们收集了一家波兰公共交通公司三年来在社交媒体上发布的用户评论。通过探索,我们推断出六类交通信息类型。我们成功地为社交媒体帖子构建了一个信息类型分类器,检测帖子中的站点名称,并将其与GPS坐标相关联,从而获得对长期聚合现象的空间理解。我们表明,我们的方法使公民科学,并使用它来分析三年的基础设施事件对乘客流动性的影响,以及对每个事件的情绪和反应规模。波兰语在空间语言理解方面资源不足,尤其是在社交媒体环境中。为了改善这种情况,我们发布了两个带注释的数据集:带有事件类型标签的社交媒体帖子,以及与注释情绪匹配的停止名称和社交媒体评论。我们还开源了实验代码库。
2021-10-11 cs.CL cs.LG cs.SI
Detecting value-expressive text posts in Russian social media
University of Waterloo(滑铁卢大学);Institute of Sociology FCTAS RAS(俄罗斯科学院联邦社会学研究中心社会学研究所)
本文提出了一种在俄罗斯社交媒体VKontakte中准确检测价值表达文本帖子的模型,利用人类和AI辅助注释及主动学习方法,最终通过微调rubert-tiny2模型实现了高检测精度。
2025-12-09 cs.AI cs.CL
Improving Multimodal Classification of Social Media Posts by Leveraging Image-Text Auxiliary Tasks
University of Sheffield(谢菲尔德大学);Bloomberg(彭博公司)
本研究提出在微调多模态模型时联合使用图像-文本对比和图像-文本匹配两个辅助损失,以改进社交媒体帖子的多模态分类,在五个数据集上实现高达2.6个F1分数点的提升。
2024-02-03 cs.CL cs.LG cs.SI
Similarity Guided Multimodal Fusion Transformer for Semantic Location Prediction in Social Media
Dalian University of Technology(大连理工大学);Shandong University of Science and Technology(山东科技大学)
针对社交媒体多模态帖子语义位置预测中噪声与模态异质性难题,提出相似性引导多模态融合Transformer,通过粗细粒度相似性引导交互与相似性感知融合提升预测性能。
2024-06-23 cs.CL cs.CV
Social Emotion Mining Techniques for Facebook Posts Reaction Prediction
Maastricht University(马斯特里赫特大学)
截至2016年2月,Facebook允许用户通过使用五种所谓的“反应”来表达他们对帖子的体验情绪。本文提出并评估了预测这些反应的公司/公司(如连锁超市)的公共页面上的用户帖子的替代方法。为此,我们从大型连锁超市的Facebook页面上收集了帖子(及其反应),并构建了一个可用于其他研究的数据集。为了预测新帖子的反应分布,使用预训练的词嵌入测试神经网络架构(卷积和递归神经网络)。神经网络的结果得到了改善,通过引入一个自举方法的情绪和情感挖掘的评论为每个职位。最终的模型(神经网络和基线情感挖掘器的组合)能够预测Facebook帖子上的反应分布,均方误差(或错误分类率)为0.135。
2017-12-08 cs.AI cs.CL cs.IR
The Shifting Landscape of Vaccine Discourse: Insights From a Decade of Pre- to Post-COVID-19 Vaccine Posts on Social Media
Kansas State University(堪萨斯州立大学);University of Illinois(伊利诺伊大学);National Research Council Canada(加拿大国家研究委员会)
研究分析了新冠爆发前后社交媒体上疫苗话语的变化,揭示了疫情期间疫苗相关情绪词使用的变化趋势及公众态度的演变。
2025-11-20 cs.CL cs.SI
Multilingual Models for Check-Worthy Social Media Posts Detection
Kempelen Institute of Intelligent Technologies(凯姆佩伦智能技术研究所);West Pomeranian University of Technology in Szczecin(什切青西波美拉尼亚理工大学)
本研究开发了可高效同时检测社交媒体中有害帖子及可核查事实主张的多标签多语言分类模型,验证了其鲁棒性,覆盖多语言场景。
2026-09-07 cs.CL
Evaluating Impact of Social Media Posts by Executives on Stock Prices
St. Xavier’s College (Autonomous)(圣泽维尔学院(自治));Jadavpur University(贾达普大学)
预测股票市场的走势一直是投资者非常感兴趣的研究领域。研究表明,产品的受欢迎程度受到人们谈论的内容的高度影响。像Twitter、Reddit这样的社交媒体已经成为这种影响的热点。本文研究了社交媒体帖子对使用Twitter和Reddit帖子的股票收盘价预测的影响。我们的目标是将社交媒体数据的情绪与历史股票数据相结合,并使用时间序列模型研究其对收盘价的影响。我们使用多个基于深度学习的模型在不同的数据集上进行了严格的实验和深入分析,以研究高管和普通人的帖子对收盘价的影响。对多只股票(苹果和特斯拉)和去中心化货币(比特币和以太坊)的实验结果一致显示,在包括社交媒体数据的预测方面有所改善,在包括高管职位方面也有更大的改善。
2022-12-06 cs.CL cs.IR cs.SI
Emotion Experience, Expression, and Perception: Emotion Analysis on Multimodal Social Media Posts
University of Bamberg(班贝格大学);University of Stuttgart(斯图加特大学)
本研究提出Mult2EMo数据集,探究社交媒体帖子中作者情感体验与读者感知的关系,发现重建情感表达具挑战性,理解触发事件至关重要。
2026-09-17 cs.CL
Linking Social Media Posts to News with Siamese Transformers
Institute for Data Science(数据科学研究所);Carleton University(卡尔顿大学)
许多计算社会科学项目研究围绕特定趋势主题的在线话语。这些工作通常涉及到获取与事件相关的大型语料库,以分析对事件的反应的各个方面。关键词搜索呈现出精确度和召回率的权衡,而众包注释虽然有效,但成本高昂。这项工作的目的是使自动和准确的ad-hoc检索的评论讨论一个热门话题,从一个大的语料库,只使用少数种子新闻文章。
2020-01-10 cs.CL cs.IR
Extractive Adversarial Networks: High-Recall Explanations for Identifying Personal Attacks in Social Media Posts
University of Michigan(密歇根大学)
我们介绍了一种对抗性方法,用于产生神经文本分类器决策的高召回解释。基于现有的通过硬注意力进行提取解释的架构,我们添加了一个对抗层,该层扫描剩余的注意力以获得剩余的预测信号。出于在社交媒体评论中检测人身攻击的重要领域的动机,我们还证明了通过显式操纵其偏差项来手动设置模型的语义适当的“默认”行为的重要性。我们开发了一个验证集的人类注释的人身攻击,以评估这些变化的影响。
2018-10-19 cs.CL cs.IR cs.LG
Sentiment Analysis of Fashion Related Posts in Social Media
The Chinese University of Hong Kong(香港中文大学)
随着时间的推移,社交媒体在时尚产业中的作用越来越大。在这项工作中,我们研究了社交媒体平台上与时尚相关的帖子的情感分析。这项任务有两个主要挑战。首先,必须联合考虑不同模态的信息,以做出最终预测。其次,一些独特的时尚相关属性应予以考虑。虽然大多数现有的工作集中在传统的多模态情感分析,他们总是无法利用时尚相关的属性在这项任务中。我们提出了一个新的框架,联合利用图像视觉,后文本,以及时尚属性模态来确定情感类别。我们的模型的一个特点是,它提取的时尚属性,并将它们与图像视觉信息的有效表示。此外,它还通过一种相互的注意力机制,挖掘了时尚属性与帖子文本之间的相互关系。由于没有适合此任务的现有数据集,因此我们准备了超过12k时尚相关社交媒体帖子的大规模情感分析数据集。大量的实验证明了我们的模型的有效性。
2021-11-15 cs.CL cs.IR
Psychologically Potent, Computationally Invisible: LLMs Generate Social-Comparison-Eliciting Posts They Fail to Detect
Department of English Language Education(英语语言教育系);Analytics/Assessment Research Centre(分析/评估研究中心)
本研究通过构建小红书社会比较读者诱发基准(XHS-SCoRE),发现 LLM 在生成引发社会比较的帖子时存在生成-检测不匹配,即该信号在领域内可学习但无法通过提示分类稳健访问。
2026-08-31 cs.CL
Exploring Social Media Posts for Depression Identification: A Study on Reddit Dataset
Indian Institute of Science Education and Research, Bhopal(印度科学教育与研究学院博帕尔分校)
本研究针对抑郁症识别问题,基于Reddit 2022年抑郁相关论坛热门帖子数据,结合UMLS Metathesaurus标注与经典机器学习模型,实现了92.28%的抑郁帖子预测准确率,验证了社交媒体数据用于抑郁症识别的可行性。
2024-04-16 cs.CL cs.SI
Detecting Inspiring Content on Social Media
University of Michigan(密歇根大学);Facebook AI(脸书人工智能研究院)
本文首次用机器学习方法研究社交媒体中的鼓舞内容,通过分析Reddit英文帖子并发布包含5800条鼓舞与5800条非鼓舞帖子的数据集,自动检测鼓舞性内容及其主题。
2023-05-29 cs.CL
Insta-VAX: A Multimodal Benchmark for Anti-Vaccine and Misinformation Posts Detection on Social Media
University of California, Davis(加州大学戴维斯分校);Columbia University(哥伦比亚大学)
在社交媒体上分享反对疫苗的帖子,包括错误信息帖子,已被证明会造成混乱,降低公众对疫苗的信心,导致疫苗犹豫和抵制。近年来,在线网络中以各种语言和视觉形式出现的此类反疫苗帖子迅速增加,对有效的内容审查和跟踪构成了巨大挑战。本文扩展了以前利用文本信息来理解疫苗信息的工作,介绍了Insta-VAX,这是一个新的多模态数据集,由64,957个与人类疫苗相关的Instagram帖子组成。我们对该数据集应用了由两名训练有素的专家评委验证的众包注释程序。然后,我们对几个最先进的NLP和计算机视觉分类器进行了基准测试,以检测帖子是否表现出反疫苗态度,以及它们是否包含错误信息。大量的实验和分析表明,多模态模型可以更准确地分类的职位比单模态模型,但仍然需要改进,特别是在视觉上下文理解和外部知识合作。该数据集和分类器有助于监测和跟踪疫苗讨论,以促进社会科学和公共卫生努力,解决疫苗错误信息问题。
2021-12-15 cs.CL cs.CV
An Annotated Dataset for Explainable Interpersonal Risk Factors of Mental Disturbance in Social Media Posts
Mayo Clinic(梅奥诊所);Lakehead University(湖首大学);Thapar Institute of Engineering & Technology(塔帕尔工程技术学院)
本文构建并发布了一个带人工解释的标注数据集,用于识别社交媒体中影响心理困扰的两类人际风险因素——受挫归属感和感知负担感,并建立基线模型以支持实时个性化AI模型开发。
2023-05-30 cs.CL cs.IR
Navigating the Post-API Dilemma | Search Engine Results Pages Present a Biased View of Social Media Data
University of Notre Dame(圣母大学)
本研究针对后API时代社交媒体数据访问缺失问题,通过比较谷歌SERP结果与Reddit、Twitter/X非抽样数据,发现SERP存在热门偏向、内容偏见、情感偏差及主题缺口,得出其并非API可行替代方案的结论。
2024-11-27 cs.CL cs.IR cs.SI
Why Do You Feel This Way? Summarizing Triggers of Emotions in Social Media Posts
The University of Texas at Austin(德克萨斯大学奥斯汀分校);University of Illinois Chicago(伊利诺伊大学芝加哥分校)
COVID-19大流行等危机持续威胁着我们的世界,并以不同的方式在情感上影响着全球数十亿人。了解导致人们情绪的触发因素至关重要。社交媒体帖子可以成为此类分析的一个很好的来源,但这些文本往往充满了多种情绪,触发因素分散在多个句子中。本文从一个新的角度,即情感检测和触发摘要,旨在检测文本中的感知情感,并总结事件和他们的评价,触发每种情感。为了支持这一目标,我们引入了CovidET(Covid-19期间的情绪及其触发器),这是一个包含约1,900个与COVID-19相关的英语Reddit帖子的数据集,其中包含帖子中描述的感知情绪的手动注释和触发器的抽象摘要。我们开发强大的基线来共同检测情绪并总结情绪触发因素。我们的分析表明,CovidET在特定于情感的摘要以及长社交媒体帖子中的多情感检测方面提出了新的挑战。
2022-10-22 cs.CL cs.SI
Simple Attention-Based Representation Learning for Ranking Short Social Media Posts
University of Maryland, College Park(马里兰大学帕克分校);David R. Cheriton School of Computer Science, University of Waterloo(滑铁卢大学戴维·R·切里顿计算机科学学院);Facebook AI(脸书人工智能研究院)
本文探讨了使用神经网络对短社交媒体帖子进行用户查询排名的问题。而不是从一个复杂的体系结构开始,我们从自底向上的进行,并检查一个简单的,字级的连体结构的有效性,增强了基于注意力的机制,用于捕获语义的“软”匹配查询和后令牌。在TREC微博跟踪数据集上进行的大量实验表明,我们的简单模型不仅比现有方法更有效,而且速度也更快。我们的samCNN(简单注意力匹配CNN)模型的实现与社区共享,以支持未来的工作。
2019-09-02 cs.CL
From Post To Personality: Harnessing LLMs for MBTI Prediction in Social Media
Beijing Institute of Technology(北京理工大学);The Chinese University of Hong Kong(香港中文大学)
针对大语言模型幻觉及MBTI类别分布不均两大挑战,提出融合检索增强生成与合成少数类过采样的PtoP框架,在社交媒体MBTI预测任务上超越10种基线,达到当前最优性能。
2025-08-28 cs.CL cs.SI
Social Media Fashion Knowledge Extraction as Captioning
The Chinese University of Hong Kong(香港中文大学);Alibaba DAMO Academy(阿里巴巴达摩院);National University of Singapore(新加坡国立大学)
本文将社交媒体时尚知识提取建模为多模态描述生成问题,利用预训练生成模型与辅助任务直接从帖子生成句子化知识,并构建人工标注数据集验证其有效性。
2023-09-28 cs.CL
Enhancing Fake News Detection in Social Media via Label Propagation on Cross-modal Tweet Graph
Northwest University(西北大学);Osaka University(大阪大学)
针对多模态假新闻检测中图连接稀疏的问题,本文提出基于 CLIP 的跨模态推文图与 FCN-LP 标签传播方法,并结合域泛化损失,在三个数据集上持续超越现有方法。
2024-06-14 cs.CL cs.MM cs.SI
Identifying Dogmatism in Social Media: Signals and Models
Microsoft(微软)
我们探讨了社会媒体中教条主义的语言和行为特征,并构建了可以识别教条主义评论的统计模型。我们的模型基于Reddit帖子的语料库,收集了各种各样的对话主题,并通过付费众包进行注释。我们将现有心理学理论(如过度自信)描述的教条主义的关键方面付诸实施,发现它们具有预测能力。我们还发现了教条主义新信号的证据,例如教条主义帖子倾向于不发出认知过程的信号。当我们使用我们的预测模型来分析数百万其他Reddit帖子时,我们发现证据表明教条主义是一种更深层次的人格特质,存在于许多不同领域的教条主义用户中,并且参与教条主义评论的用户往往会增加教条主义帖子。
2016-09-01 cs.CL cs.SI