Beyond English benchmarks: clinical llm evaluation in Brazilian Portuguese
Federal University of Rio de Janeiro(里约热内卢联邦大学);Toronto Metropolitan University(多伦多都会大学)
提出首个双语临床基准ClinicalBr,基于巴西病例报告构建,评估四个模型发现葡萄牙语-英语性能差距具有任务依赖性,诊断检索英语优势明显,其他任务差距消失。
2026-06-05 cs.AI cs.CL
Prosa: Rubric-Based Evaluation of LLMs on Real User Chats in Brazilian Portuguese
Maritaca AI;Jusbrasil
本文提出Prosa基准,通过多判官过滤的二元评分标准减少LLM评分偏差,提升评估的判别能力,验证了评分标准的重要性。
2026-05-02 cs.AI cs.CL
Amadeus-Verbo Technical Report: The powerful Qwen2.5 family models trained in Portuguese
Amadeus AI
本报告介绍了面向巴西葡萄牙语的Amadeus Verbo大型语言模型家族的开发经验,涵盖0.5B至72B多种参数规模的基础、合并与指令微调模型,旨在展示在资源充足时微调基础模型以推动开源开发民主化的便捷性。
2025-05-20 cs.AI cs.CL
Manacá-1B-Instruct-2: Reproducible Safety Alignment for a Native Brazilian-Portuguese LLM. Negative DPO Results, a Controlled Composition Scan, and a Silent Failure Mode of the LLM Judge
National Laboratory for Scientific Computing (LNCC)(国家科学计算实验室);Institute of Artificial Intelligence(人工智能研究所)
该研究推出第二代巴西葡萄牙语大语言模型Manacá-1B-Instruct-2,记录其三次负向DPO尝试,发现安全SFT的最优通用数据占比区间,证实其安全性能优于四个基准模型,还揭示LLM评判器存在隐性失效模式,相关资源均已公开。
2026-10-15 cs.CL
Zero-shot Performance of Generative AI in Brazilian Portuguese Medical Exam
Einstein Global Advanced Technologies for Equity(埃因斯坦全球先进科技以公平为宗旨);Hospital Israelita Albert Einstein(埃因斯坦医院);Departamento de Pacientes Graves(重症患者部门);Stanford Center for Artificial Intelligence in Medicine and Imaging(斯坦福大学医学与成像人工智能中心);Departmento de Cirurgia(外科部门);Faculdade de Medicina, Universidade de São Paulo(圣保罗大学医学院);Faculdade Israelita de Ciências da Saúde Albert Einstein(埃因斯坦以色列健康科学学院)
本文在 HCFMUSP 巴西葡语医学住院医师考试零样本条件下评测六个 LLM 与四个 MLLM,发现顶级 Claude 模型准确率接近人类,但多模态图像题仍有差距。
2025-07-26 cs.CL
Teaching LLMs Brazilian Healthcare: Injecting Knowledge from Official Clinical Guidelines
FEEC, UNICAMP(UNICAMP电子工程学院);Maritaca AI
本文通过适配Qwen2.5-14B-Instruct模型,生成合成数据并采用持续预训练和GRPO方法,构建了HealthBench-BR和PCDT-QA基准,实现了在巴西医疗领域上的高准确率表现。
2026-05-01 cs.CL
ALBA: A European Portuguese Benchmark for Evaluating Language and Linguistic Dimensions in Generative LLMs
NOVA University of Lisbon(新里斯本大学);NOVA LINCS(新里斯本大学计算机科学与系统研究实验室)
ALBA是首个针对欧洲葡萄牙语的语言学评估基准,通过八个维度评估生成模型在语言多样性、文化绑定语义等任务中的表现,揭示了模型在不同语言学维度上的性能差异。
2026-03-27 cs.AI cs.CL cs.LG
BRoverbs -- Measuring how much LLMs understand Portuguese proverbs
Institute of Computing, University of Campinas(计算研究所,坎皮纳斯大学);Maritaca AI;University of Campinas(坎皮纳斯大学)
针对葡萄牙语LLM评估不足,提出BRoverbs数据集,利用巴西谚语评估模型对区域语言和文化理解,提供新基准工具。
2025-09-10 cs.CL
BLUEX v2: Benchmarking LLMs on Open-Ended Questions from Brazilian University Entrance Exams
UNICAMP(坎皮纳斯州立大学);Tropic AI;Maritaca AI
针对葡萄牙语开放性问题评估的不足,提出BLUEX v2基准,包含巴西两所顶尖大学第二阶段入学考试的395道题,采用LLM-as-a-judge评估21个模型,发现数学推理和图像理解是最难的能力维度。
2026-07-01 cs.CL
TTS-Portuguese Corpus: a corpus for speech synthesis in Brazilian Portuguese
Federal University of Technology – Paraná(巴拉那联邦理工大学);DefinedCrowd Corp.(DefinedCrowd公司);Federal University of Mato Grosso(马托格罗索联邦大学);Research Center in Digitalization and Intelligent Robotics (CEDRI)(数字化与智能机器人研究中心(CEDRI))
语音为人机交互提供了一种自然的方式。特别地,语音合成系统在不同的应用中是流行的,例如个人助理、GPS应用、屏幕阅读器和辅助工具。然而,就用于语音合成的资源和系统而言,并非所有语言都处于同一水平。这项工作包括以新数据集的形式为巴西葡萄牙语创建公开可用的资源,以及用于端到端语音合成的深度学习模型。这样的数据集具有来自单个扬声器的10.5小时,其中具有RTISI-LA声码器的Tacotron 2模型表现出最佳性能,达到4.03 MOS值。所获得的结果与涵盖英语和葡萄牙语的最新技术的相关作品相当。
2022-01-29 cs.CL cs.LG eess.AS
DEEPAGÉ: Answering Questions in Portuguese about the Brazilian Environment
Universidade de São Paulo(圣保罗大学)
气候变化和生物群落保护的挑战是我们这个时代最紧迫的问题之一,特别是在巴西,那里有重要的环境保护区。鉴于生态主题的大型文本数据库的可用性,很自然地诉诸于问答(QA)系统,以提高社会对这些主题的认识和理解。在这项工作中,我们引入了多个QA系统,以新颖的方式结合了BM 25算法,一种稀疏检索技术,PTT5,一种预先训练的最先进的语言模型。我们的问答系统专注于葡萄牙语,从而提供文献中找不到的资源。作为训练数据,我们收集了来自开放域数据集的问题,以及葡萄牙语维基百科的内容和新闻。因此,我们为创新架构和新应用做出了贡献,我们的最佳模型获得了36.2的F1分数。
2021-10-19 cs.CL cs.LG
Predicting Multiple ICD-10 Codes from Brazilian-Portuguese Clinical Notes
Federal University of Santa Catarina(圣卡塔琳娜联邦大学);Healthcare(3778医疗);Syrian-Lebanese Hospital(叙利亚-黎巴嫩医院)
从电子临床记录中编码ICD是一个人工、耗时且昂贵的过程。然而,代码分配对于计费目的和数据库组织来说是一项重要任务。虽然许多作品已经研究了使用机器学习技术从自由文本自动ICD编码的问题,但大多数使用英语记录,特别是来自MIMIC-III公共数据集的记录。这项工作提出了一个数据集与巴西葡萄牙临床笔记的结果。我们开发并优化了Logistic回归模型、卷积神经网络(CNN)、门控递归单元神经网络和带注意力的CNN(CNN-Att)用于预测诊断ICD代码。我们还报告了MIMIC-III数据集的结果,该数据集在相同家族的模型中表现优于以前的工作,以及最先进的技术水平。与MIMIC-III相比,巴西葡萄牙语数据集包含的每个文档的单词要少得多,仅使用出院摘要。我们尝试连接此数据集中可用的其他文档,从而极大地提高了性能。CNN-Att模型在两个数据集上都取得了最佳结果,MIMIC-III的微平均F1得分为0.537,而我们的数据集上的微平均F1得分为0.485。
2020-07-29 cs.CL cs.LG
A Large-Scale Dataset for Multi-Class Financial News Classification in Brazilian Portuguese
Federal University of Paraíba(帕拉伊巴联邦大学);Federal University of Campina Grande(帕坎纳联邦大学);Federal Rural University of Pernambuco(伯南布哥联邦农村大学);Federal University of Pernambuco(伯南布哥联邦大学)
针对巴西葡萄牙语金融NLP数据集稀缺问题,构建含16万篇新闻的语料库,评估三种相似度方法,发现标签质量影响大,为该任务建立基线并提供研究参考。
2026-10-16 cs.CL cs.LG
Development of email classifier in Brazilian Portuguese using feature selection for automatic response
电子邮件自动分类是文本分类的一个重要应用。我们研究巴西葡萄牙语的电子邮件业务消息的自动回复。我们提出了一个新的语料库,包含从一个真正的应用程序的消息,基线分类实验使用朴素贝叶斯和支持向量机。然后,我们讨论了词形还原的效果和词性标记过滤对查准率和查全率的作用。支持向量机分类加上非词化的动词,名词和形容词的选择是最好的方法,87.3%的最大准确率。葡萄牙语中的直接词形化导致了该组中最低的分类结果,SVM和Naive Bayes的精度分别为85.3%和81.7%。因此,虽然词形化降低了精确度和召回率,但词性过滤改善了整体结果。
2019-07-08 cs.CL cs.IR cs.LG
Sabiá-2: A New Generation of Portuguese Large Language Models
Maritaca AI(马里塔卡人工智能公司)
本文提出葡萄牙语大语言模型家族Sabiá-2,其中Sabiá-2 Medium在多数考试中超越GPT-3.5并在部分考试中匹敌GPT-4,且通过专业化以更低成本实现高性能,同时指出数学与编程能力仍需提升。
2024-03-26 cs.AI cs.CL
PTT5: Pretraining and validating the T5 model on Brazilian Portuguese data
UNICAMP(坎皮纳斯州立大学);NeuralMind Inteligência Artificial(NeuralMind人工智能公司);University of Waterloo(滑铁卢大学)
在自然语言处理(NLP)方面,需要更多的葡萄牙语资源,因为最先进的研究中使用的大部分数据是其他语言。在本文中,我们在BrWac语料库(一个广泛的葡萄牙语网页集合)上预训练了一个T5模型,并在三个不同的任务上评估了它与其他葡萄牙语预训练模型和多语言模型的性能。我们证明了我们的葡萄牙语预训练模型比原始T5模型具有更好的性能。此外,我们展示了使用葡萄牙语词汇的积极影响。我们的代码和模型可在https://github.com/unicamp-dl/PTT5上找到。
2020-10-08 cs.CL
Examining the Behavior of LLM Architectures Within the Framework of Standardized National Exams in Brazil
Universidade Federal de Minas Gerais(米纳斯吉拉斯联邦大学)
本文利用 ENEM 公开答题与社会经济数据,比较 GPT-3.5、GPT-4、MariTalk 与不同 SES 学生在客观题和作文上的表现,揭示模型答案不代表任何人类群体。
2024-08-09 cs.CL cs.CY
Performance of Data Augmentation Methods for Brazilian Portuguese Text Classification
Alana AI(阿拉纳人工智能)
本研究评估了不同现有数据增强方法在巴西葡萄牙语文本分类任务中的性能,发现部分技术带来了一定改进,但也指出需进一步研究语言偏差与非英语数据稀缺问题。
2023-04-05 cs.CL
Image captioning for Brazilian Portuguese using GRIT model
Alana AI Research(阿拉纳人工智能研究院)
本研究基于GRIT模型开发巴西葡萄牙语图像描述生成方法,通过调整模型在葡萄牙语数据集上训练,实现更高效的图像描述生成。
2024-02-07 cs.AI cs.CL cs.CV
Evaluating GPT-3.5 and GPT-4 on Grammatical Error Correction for Brazilian Portuguese
该研究构建含四类错误的巴西葡萄牙语GEC数据集,评估GPT-3.5、GPT-4与办公软件的语法纠错效果,发现GPT-4召回率最高但大模型精确率低易过度纠正,验证了其在非英语GEC场景的潜力。
2023-07-18 cs.AI cs.CL
Juru: Legal Brazilian Large Language Model from Reputable Sources
Computer Science Department, University of São Paulo(圣保罗大学计算机科学系);Maritaca AI
本文提出Juru,利用巴西权威法律来源的19亿个唯一token持续预训练Mistral-7B,以低成本验证领域专业化可提升法律性能但会损害通用能力。
2025-07-28 cs.AI cs.CL
RDF2PT: Generating Brazilian Portuguese Texts from RDF Data
University of Leipzig(莱比锡大学);Tilburg University(蒂尔堡大学);University of Wolverhampton(伍尔弗汉普顿大学);Military Institute of Engineering - Brazil(巴西军事工程学院);Federal University of Rio de Janeiro - Brazil(巴西里约热内卢联邦大学);German Federal Institute for Risk Assessment - Germany(德国联邦风险评估研究所);Paderborn University(帕德博恩大学)
由于关联数据的持续增长,从资源描述框架(RDF)数据生成自然语言最近获得了极大的关注。这些方法中的一些生成英语以外的语言的自然语言,但是,没有提出从RDF生成巴西葡萄牙语文本的工作。我们通过介绍RDF2PT,一种将RDF数据语言化为巴西葡萄牙语的方法来解决这一研究空白。我们评估了RDF2PT在一个开放式问卷调查,44名母语人士分为专家和非专家。我们的研究结果表明,RDF2PT能够生成类似于人类生成的文本,因此可以很容易地理解。
2018-02-22 cs.CL
Acoustic models of Brazilian Portuguese Speech based on Neural Transformers
Universidade de São Paulo(圣保罗大学)
本研究基于Transformer构建巴西葡萄牙语语音声学模型,经800余小时语音预训练后,在呼吸功能不全检测等任务上微调,性能较无预训练模型显著提升,部分任务达最优水平。
2023-12-14 cs.CL cs.LG cs.SD
Brazilian Portuguese Image Captioning with Transformers: A Study on Cross-Native-Translated Dataset
Instituto Federal do Espírito Santo (IFES)(巴西联邦大学埃斯皮里图圣安东尼奥理工学院);École de Technologie Supérieure (ÉTS)(加拿大超技术学院)
本研究通过跨原生翻译数据集评估Transformer模型在巴西葡萄牙语图像描述生成中的表现,发现Swin-DistilBERTimbau表现优异,GPT-4在CLIP-Score上表现最佳,同时揭示了模型中的系统性偏见。
2026-01-30 cs.CL cs.CV cs.LG
Toxic Language Detection in Social Media for Brazilian Portuguese: New Dataset and Multilingual Analysis
Federal University of São Carlos(圣卡洛斯联邦大学);University of Sheffield(谢菲尔德大学)
仇恨言论和有毒评论是社交媒体平台用户普遍关注的问题。尽管这些评论在这些平台上是少数,但它们仍然能够造成伤害。因此,识别这些评论是研究和防止社交媒体中毒性扩散的重要任务。以前的自动检测有害评论的工作主要集中在英语上,很少有像巴西葡萄牙语这样的语言。在本文中,我们提出了一个新的大规模数据集,巴西葡萄牙语的鸣叫注释为有毒或无毒或不同类型的毒性。我们介绍了我们的数据集收集和注释过程,我们的目标是选择覆盖多个人口统计群体的候选人。最先进的BERT模型能够在二元情况下使用单语数据实现76%的宏观F1评分。我们还表明,尽管多语言方法最近取得了进展,但仍然需要大规模的单语数据来创建更准确的模型。多标签分类的错误分析和实验表明,对某些类型的有毒评论进行分类是困难的,这些评论在我们的数据中出现的频率较低,并强调了开发能够识别不同类别毒性的模型的必要性。
2020-10-09 cs.CL cs.LG cs.SI
MariNER: A Dataset for Historical Brazilian Portuguese Named Entity Recognition
USP
本文针对巴西葡萄牙语历史文本缺乏标准NER数据集的问题,构建了首个包含超9,000句人工标注的20世纪早期数据集MariNER,并评估了最先进NER模型在其上的性能。
2025-06-29 cs.CL
Sentiment Analysis on Brazilian Portuguese User Reviews
Federal University of Rio de Janeiro(里约热内卢联邦大学)
情感分析是自然语言处理中最经典和最主要的研究任务之一。随着更复杂和可扩展的机器学习模型的提出,这个问题有了显著的进步。尽管取得了这一进展,巴西葡萄牙语仍然只处理有限的语言资源,例如专用于情感分类的数据集,特别是当考虑到在训练、测试和验证集中存在预定义分区时,这些分区将允许更公平地比较不同的算法替代方案。出于这些问题,这项工作分析了一系列的文件嵌入策略的预测性能,假设极性作为系统的结果。该分析包括巴西葡萄牙语的五个情感分析数据集,统一在单个数据集中,以及训练,测试和验证集的参考分区,两者都通过数字存储库公开提供。在不同的情况下,特定于集群的模型进行交叉评估,以评估其泛化能力和采用一个独特的模型来解决所有的情况下的可行性。
2021-12-10 cs.CL
Predictive Authoring for Brazilian Portuguese Augmentative and Alternative Communication
Universidade Federal de Pernambuco(伯南布哥联邦大学);NeuralMind
本文提出使用BERTimbau模型提升巴西葡萄牙语AAC系统中图标预测的准确性,通过不同表示方法对比发现同义词预测效果最佳。
2023-08-18 cs.AI cs.CL cs.LG
LegalBench-BR: A Benchmark for Evaluating Large Language Models on Brazilian Legal Decision Classification
Teresina, PI, Brazil(巴西蒂雷西纳州,PI)
本文提出LegalBench-BR,首个公开的巴西法律文本分类评估基准,通过LoRA微调在消费级GPU上实现零边际推理成本,展示领域适应模型在巴西法律分类中的必要性。
2026-04-20 cs.CL
Benchmarking quantized LLaMa-based models on the Brazilian Secondary School Exam
Systems and Computing Department(系统与计算系);Federal University of Campina Grande(坎皮纳斯格雷大联邦大学)
本文评估了基于7亿和13亿LLaMa模型的量化模型在巴西中学考试上的性能,通过1006道题目测试,发现最佳模型在葡萄牙语原题上准确率为46%,英文翻译上为49%,并评估了模型的计算效率。
2023-09-21 cs.AI cs.CL
Studying Dishonest Intentions in Brazilian Portuguese Texts
Interinstitutional Center for Computational Linguistics (NILC)(跨机构计算语言学中心(NILC));University of São Paulo(圣保罗大学)
社会科学、心理学和语言学的先前研究表明,说谎者对他们故事的内容有一定的控制力,然而他们潜在的心理状态可能会通过他们讲述的方式“泄露”出来。据我们所知,以前没有系统的努力存在,以描述和模型欺骗语言巴西葡萄牙语。为了填补这一重要的空白,我们进行了初步的实证语言学研究的虚假陈述在巴西新闻。我们系统地分析了语言特征,使用欺骗性的新闻语料库,其中包括假新闻和真新闻。结果表明,它们在词汇、句法和语义方面存在很大差异,并且在标点符号和情感方面也存在差异。
2021-04-01 cs.AI cs.CL cs.IR
MTEB-BR: A Text Embedding Benchmark for Brazilian Portuguese
Federal Institute of São Paulo (IFSP)(圣保罗联邦理工学院)
针对葡萄牙语无专用基准测试的问题,引入MTEB-PT基准测试,含22个巴西葡萄牙语本地任务。评估93个模型,报告统计层信息,得出模型分层、开源模型表现及全球多语言排行榜与葡萄牙语排行榜关系等结论。
2026-07-09 cs.CL cs.IR cs.LG
Building a Sentiment Corpus of Tweets in Brazilian Portuguese
Interinstitutional Center for Computational Linguistics (NILC)(跨机构计算语言学中心(NILC))
社交媒体、论坛和网站中的大量数据激发了自然语言处理多个领域的研究,例如情感分析。由于其主观和语义特征,该领域的流行激发了对新方法和分类方法的研究。因此,对不同领域和不同语言的数据集有很高的需求。本文介绍了TweetSentBR,一个情感语料库,巴西葡萄牙语手动注释与15.000句电视节目领域。这些句子被标记为三类(积极的,中性的和消极的)由七个注释,以下文献指南,以确保注释的可靠性。我们还使用三种机器学习方法进行了极性分类的基线实验,在二值分类中,F-Measure达到80.99%,准确率为82.06%,在三点分类中,F-Measure达到59.85%,准确率为64.62%。
2017-12-24 cs.CL
DeBERTinha: A Multistep Approach to Adapt DebertaV3 XSmall for Brazilian Portuguese Natural Language Processing Task
University of Campinas(坎皮纳斯大学);Federal University of Pernambuco(伯南布哥联邦大学);University of São Paulo(圣保罗大学)
本文提出多步骤方法将DebertaV3 XSmall适配为巴西葡萄牙语模型DeBERTinha,通过葡语词汇构建和替换词元检测微调,在多项NLP任务中以40M参数超越BERTimbau-Large。
2023-10-31 cs.CL
TuPy-E: detecting hate speech in Brazilian Portuguese social media with a novel dataset and comprehensive analysis of models
Alberto Luiz Coimbra Institute of Post-graduation and Engineering Research Federal University of Rio de Janeiro(里约热内卢联邦大学阿尔贝托·路易斯·科英布拉研究生院与工程研究院)
针对葡萄牙语社交媒体仇恨言论检测难题,构建最大注释语料库TuPy-E,采用开源方法,结合BERT模型进行综合分析,兼顾学术与应用。
2023-12-29 cs.CL
Brazilian Portuguese Speech Recognition Using Wav2vec 2.0
Federal University of Technology - Paraná(巴拉那联邦理工大学);University of São Paulo(圣保罗大学);Federal University of Mato Grosso(马托格罗索联邦大学);Federal University of Goias(戈亚斯联邦大学)
深度学习技术已被证明在各种任务中是有效的,特别是在语音识别系统的开发中,即旨在将音频句子转录为书面单词序列的系统。尽管该领域取得了进展,但语音识别仍然被认为是困难的,特别是对于缺乏可用数据的语言,如巴西葡萄牙语(BP)。从这个意义上说,这项工作提出了一个公共的自动语音识别(ASR)系统的发展,只使用开放的可用的音频数据,从微调的Wav 2 vec 2.0 XLSR-53模型预先训练在许多语言,BP数据。最终的模型在7个不同的数据集上呈现了12.4%的平均单词出错率(当应用语言模型时为10.5%)。据我们所知,所获得的误差是最低的开放端到端(E2 E)ASR模型BP。
2021-12-22 cs.CL
A Lightweight Regression Method to Infer Psycholinguistic Properties for Brazilian Portuguese
University of São Paulo(圣保罗大学);Federal Technological University of Paraná (UTFPR)(巴拉那联邦理工大学);University of Sheffield(谢菲尔德大学)
词的心理语言学特性已经被用于各种自然语言处理任务的方法中,例如文本简化和可读性评估。大多数这些属性是主观的,涉及昂贵和耗时的调查收集。最近的方法使用有限的心理语言学属性的数据集,将它们自动扩展到大型词典。然而,这些方法所使用的一些资源并不适用于大多数语文。本研究提出了一种方法来推断巴西葡萄牙语(BP)的心理语言学属性,使用回归建一套轻的功能通常可用于资源较少的语言:字长,频率列表,词汇数据库组成的学校字典和词嵌入模型。推导出的性质之间的相关性与相关工作获得的结果接近。由此产生的资源包含26,874个BP单词,并附有具体性,获得年龄,意象和主观频率。
2017-05-19 cs.CL
Can I guess where you are from? Modeling dialectal morphosyntactic similarities in Brazilian Portuguese
Universidade Federal de Alagoas(阿拉戈斯联邦大学);Universidade Federal de Sergipe(塞尔希培联邦大学)
本文研究巴西葡萄牙语中形态句法的共变关系,探讨是否能通过语言变量的综合行为推断方言起源。通过四种语法现象和聚类方法建模,发现聚类方法能揭示反映区域方言模式的说话人分组。
2026-03-21 cs.CL cs.CY
fakenewsbr: A Fake News Detection Platform for Brazilian Portuguese
本文面向巴西葡萄牙语新闻,提出结合 TF-IDF 与 Word2Vec 的机器学习虚假新闻检测方法,并构建了提供实时分析的 fakenewsbr.com 平台。
2023-09-21 cs.CL cs.LG stat.ML
JurisTCU: A Brazilian Portuguese Information Retrieval Dataset with Query Relevance Judgments
Câmara dos Deputados(议会委员会);Tribunal de Contas da União (TCU)(联邦审计法院)
本文介绍了一个包含16045份巴西联邦会计法院判例文书和150个带有相关性标注查询的巴西葡萄牙语信息检索数据集,通过混合方法产生相关性判断,展示了文档扩展方法在提升BM25性能上的显著效果,以及OpenAI模型在短关键词查询中的优越表现。
2025-08-01 cs.CL cs.IR
SAMPA: Transformer-based segmentation of prosodic boundaries in Brazilian Portuguese
ICMC(Instituto Superior Técnico);University of Lisbon(里斯本大学)
研究巴西葡萄牙语韵律边界分割问题,基于Whisper提出SAMPA分割器,通过微调及评估不同配置,在多数据集测试中取得有竞争力的边界检测性能,模型能遵循多种线索检测韵律边界。
2026-10-27 cs.AI cs.CL
AI-PAVE-Br: Leveraging Large Language Models for Enhanced Product Attribute Value Extraction through a Golden Set Approach
LuizaLabs – Center of Excellence in Artificial Intelligence(LuizaLabs人工智能卓越中心);Department of Computing and Informatics – Mackenzie Presbyterian University(计算与信息学系-麦金西 Presbyterian大学);Institute of Mathematics and Computer Sciences - University of São Paulo(数学与计算机科学研究所-圣保罗大学)
针对巴西电商产品数据爆炸和复杂性,提出AI-PAVE-Br系统,利用大语言模型和精心标注的黄金集,显著提升葡萄牙语产品属性值提取的准确性。
2026-06-24 cs.AI cs.CL cs.LG
Extracting accent features in spoken Brazilian Portuguese without sociolinguistic labels
PEE/COPPE, UFRJ(PEE/COPPE,UFRJ);Faculdade de Engenharia Elétrica e Computação (FEEC), UNICAMP(电子工程与计算学院(FEEC),UNICAMP);DEL/Poli & PEE/COPPE, UFRJ(DEL/Poli与PEE/COPPE,UFRJ)
针对巴西葡萄牙语口音分类中标签缺乏的问题,提出一种仅使用声学标签的新工作流,通过隔离区域口音地标和基于音素的强制对齐器提取特征,在口音相关任务上优于通用架构。
2026-06-02 cs.CL eess.AS
Embedding generation for text classification of Brazilian Portuguese user reviews: from bag-of-words to transformers
文本分类是一项自然语言处理(NLP)任务,与许多商业应用相关,如电子商务和客户服务。当然,由于内在的语言方面,如讽刺和细微差别,准确地对这些摘录进行分类往往是一个挑战。为了完成这个任务,必须为文档提供一个健壮的数字表示,这个过程称为嵌入。嵌入代表了当今NLP的一个关键领域,在过去十年中取得了重大进展,特别是在引入单词到向量概念以及用于解决NLP任务的深度学习模型(包括卷积神经网络(CNN),递归神经网络(RNN)和基于转换器的语言模型(TLM))普及之后。尽管在这一领域取得了令人印象深刻的成就,有关巴西葡萄牙语文本生成嵌入的文献报道很少,特别是在考虑商业用户评论时。因此,这项工作的目的是提供一个全面的实验研究嵌入方法,针对巴西葡萄牙语的用户评论的二进制情感分类。本研究包括从经典的(词袋)到最先进的(基于Transformer的)NLP模型。这些方法与五个开放源代码数据库进行了评估,这些数据库具有开放数字存储库中提供的预定义数据分区,以鼓励再现性。微调的TLM在所有情况下都取得了最佳结果,其次是基于神经网络的TLM,LSTM和CNN,根据分析的数据库,它们具有交替的排名。
2022-12-01 cs.AI cs.CL
Carolina: a General Corpus of Contemporary Brazilian Portuguese with Provenance, Typology and Versioning Information
University of São Paulo(圣保罗大学);Federal Institute of Education, Science and Technology of Bahia(巴伊亚联邦教育、科学与技术学院);State University of Southwestern Bahia(巴伊亚西南州立大学)
本文介绍了第一个公开版本的卡罗莱纳州语料库,并讨论了其未来的发展方向。Carolina是一个大型的巴西葡萄牙语文本开放语料库,正在建设中,使用网络作为语料库的方法增强了出处,类型学,版本和文本完整性。该语料库的目的是被用作语言学研究的可靠来源,并作为计算机科学研究语言模型的重要资源,有助于将葡萄牙语从低资源语言中删除。在这里,我们提出了建设的语料库方法,比较它与其他现有的方法,以及语料库的现状:卡罗莱纳州的第一个公开版本有$653,322,577$令牌,分布在$7$广泛的类型。每个文本都在其标题中使用几个不同的元数据类别进行注释,这些类别是我们使用TEI注释标准开发的。我们还展示了正在进行的衍生作品,并邀请NLP研究人员贡献自己的作品。
2023-03-28 cs.AI cs.CL
PLSUM: Generating PT-BR Wikipedia by Summarizing Multiple Websites
维基百科是一个重要的免费知识来源。尽管如此,巴西葡萄牙语维基百科仍然缺乏对许多主题的描述。为了扩大巴西维基百科,我们贡献了PLSum,一个从多个描述性网站生成类似维基的摘要的框架。该框架有一个提取阶段,随后是一个抽象阶段。特别是,对于抽象阶段,我们微调和比较了Transformer神经网络的两个最新版本PTT5和Longformer。为了微调和评估模型,我们创建了一个包含数千个示例的数据集,将参考网站链接到维基百科。我们的研究结果表明,它是可能的巴西葡萄牙语的网页内容生成有意义的摘要。
2021-12-02 cs.CL cs.LG
Manacá-1B: An Open, Reproducible Brazilian-Portuguese Language Model and a Tokenizer-Aware, Paired Evaluation
Laboratório Nacional de Computação Científica (LNCC)(国家科学计算实验室(LNCC))
本研究针对巴西葡萄牙语开源语言模型复现难、缺乏不确定性度量对比的问题,发布17.2亿参数的Manacá-1B模型及可复现流程,揭示分词器转换的评估陷阱并提供修复方案,所有资源可复现论文结果。
2026-09-01 cs.CL
NILC-Metrix: assessing the complexity of written and spoken language in Brazilian Portuguese
Instituto de Ciências Matemáticas e de Computação - University of São Paulo(圣保罗大学数学与计算机科学研究所);The University of Sheffield(谢菲尔德大学);Itaú Unibanco(伊塔乌联合银行)
本文提出并公开提供NILC-Meetings,一个计算系统,包括200个指标提出的话语,心理语言学,认知和计算语言学的研究,以评估文本的复杂性在巴西葡萄牙语(BP)。这些度量与描述性分析和计算模型的创建相关,并且可以用于从书面和口头语言的各种语言水平中提取信息。NILC-Meetings中的指标是在过去13年中开发的,从2008年开始使用Coh-Meetings-Port,这是在PorSimples项目范围内开发的工具。Coh-Meetings-Port从Coh-Meetings工具中调整了一些度量标准,用于计算英语文本的衔接和连贯性。在2010年PorSimples结束后,Coh-Meetings-Port最初的48个指标中增加了新的指标。鉴于大量的指标,我们提出了他们以下的组织类似的指标Coh-Meetings v3.0,以方便与葡萄牙语和英语的指标进行比较。在这篇论文中,我们通过三个应用来说明NILC-Meetings的潜力:(i)描述性分析儿童电影字幕和为小学I和II编写的文本之间的差异(ii)PorSimples项目的原始和简化文本语料库的文本复杂性的新预测器;(iii)利用青少年讲述的儿童故事的文字记录,为学校成绩建立一个复杂性预测模型。对于每个应用程序,我们评估哪组指标更具区分力,显示它们对每个任务的贡献。
2021-12-17 cs.CL
MedPT: A Massive Medical Question Answering Dataset for Brazilian-Portuguese Speakers
本文提出MedPT数据集,包含384,095个真实患者-医生问答对,覆盖3200多种健康问题,通过多阶段筛选流程和LLM标注,实现了高语义丰富度,用于医疗专业分类任务,达到94%的F1分数。
2026-03-16 cs.CL
A Neural Approach to Language Variety Translation
University of Wolverhampton(伍尔弗汉普顿大学);Saarland University(萨尔大学)
在本文中,我们提出了第一个基于神经的机器翻译系统训练,以翻译标准的国家之间的品种相同的语言。我们以一对巴西-欧洲葡萄牙语为例,并比较该方法的性能,基于短语的统计机器翻译系统。我们报告的性能提高了0.9 BLEU点从欧洲翻译到巴西葡萄牙语和0.2 BLEU点时,在相反的方向翻译。我们还进行了一个人的评价实验与母语为巴西葡萄牙语,这表明,人类更喜欢的输出相比,基于神经系统的统计系统。
2018-07-02 cs.CL
Sabiá-4 Technical Report
Maritaca AI;Jusbrasil
Sabiá-4和Sabiazinho-4是新一代巴西葡萄牙语模型,通过四阶段训练流程提升法律文档、多轮对话和智能体任务能力,实现成本与性能的平衡。
2026-03-10 cs.CL
Recognizing the vocabulary of Brazilian popular newspapers with a free-access computational dictionary
Federal University of Rio Grande do Sul (UFRGS)(南里奥格兰德联邦大学(UFRGS));Federal University of São Carlos (UFSCar)(圣卡洛斯联邦大学(UFSCar));Université Paris-Est (UPE)(巴黎东大学(UPE))
我们报告了一个实验,以检查一组流行的书面葡萄牙语的两个版本的巴西葡萄牙语,DELAF PB 2004年和DELAF PB 2015年的计算词典的单词的识别。这本词典可免费用于巴西葡萄牙语的语言分析和其他研究,这证明了批判性研究的合理性。词汇来自PorPopular语料库,由流行报纸Di{á}rio Ga{ú}cho(DG)和Massa!(MA)。从DG,我们保留了一套文本与984.465字(令牌),在2008年出版,与拼写之前使用的葡萄牙语拼写协议在2009年通过。从MA,我们检查了2012年,2014年和2015年的论文,有215.776个单词(令牌),所有这些都有新的拼写。检查包括:a)生成DG和MA中出现的单词(类型)列表; b)将其与DELAF PB两个版本的条目列表进行比较; c)评估该词汇表的覆盖范围; d)提出纳入未覆盖项目的方法。研究结果表明,DG中平均有19%的类型在DELAF PB 2004或2015中没有发现。在MA,这一平均值为13%。转换版本的字典在识别单词的性能略有影响。
2019-04-19 cs.CL
Essay-BR: a Brazilian Corpus of Essays
Federal University of Piauí(皮奥伊联邦大学);Federal Institute of Piauí(皮奥伊联邦学院)
自动作文评分(Automatic Essay Scoring,AES)是一种对作文进行评分的计算机技术,旨在提供计算模型,以自动或最少的人工参与对作文进行评分。虽然有几个AES的研究在各种语言,其中很少有集中在葡萄牙语。主要原因是缺乏一个语料库与人工评分的文章。为了弥合这一差距,我们创建了一个大型语料库,其中包含巴西高中生在在线平台上撰写的几篇文章。所有的文章都是辩论性的,并由专家在五个能力方面进行评分。此外,我们对创建的语料库进行了实验,并展示了葡萄牙语所带来的挑战。我们的语料库可在https://github.com/rafaelanchieta/essay上公开获取。
2021-05-19 cs.CL
CORAA: a large corpus of spontaneous and prepared speech manually validated for speech recognition in Brazilian Portuguese
Federal University of Technology – Paraná(巴拉那联邦理工大学);Federal University of Goias(戈亚斯联邦大学)
自动语音识别(ASR)是一项复杂而具有挑战性的任务。近年来,这一领域取得了重大进展。具体而言,就巴西葡萄牙语(BP)而言,直至二零二零年下半年,约有376小时公众可用于ASR任务。随着2021年初新数据集的发布,这一数字增加到574小时。然而,现有的资源是由音频组成的,只包含阅读和准备的演讲。缺乏包括自发语音的数据集,这在不同的ASR应用中是必不可少的。CORAA(Corpus of Annotated Audios)v1。290.77小时,BP中ASR的公开可用数据集,包含验证对(音频转录)。CORAA还包含欧洲葡萄牙语音频(4.69小时)。我们还提出了一个基于Wav 2 Vec 2.0 XLSR-53的公共ASR模型,并在CORAA上进行了微调。我们的模型在CORAA测试集和普通语音测试集上的单词出错率分别为24.18%和20.08%。当测量字符出错率时,我们得到CORAA和普通语音分别为11.02%和6.34%。CORAA语料库的组装,以改善在BP的ASR模型与现象,从自发的讲话,并激励年轻的研究人员开始他们的研究对葡萄牙语的ASR。所有语料库都可以在CC BY-NC-ND 4.0许可证下在https://github.com/nilc-nlp/CORAA上公开获得。
2021-11-18 cs.CL cs.SD eess.AS