From Scarcity to Capability: Empowering Fake News Detection in Low-Resource Languages with LLMs

稀缺 资源(消歧) 业务 资源稀缺 自然资源经济学 计算机科学 经济 市场经济 计算机网络
作者
Hrithik Majumdar Shibu,Shrestha Datta,Md. Sumon Miah,Nasrullah Sami,M. S. Chowdhury,Md. Saiful Islam
出处
期刊:Cornell University - arXiv
标识
DOI:10.48550/arxiv.2501.09604
摘要

The rapid spread of fake news presents a significant global challenge, particularly in low-resource languages like Bangla, which lack adequate datasets and detection tools. Although manual fact-checking is accurate, it is expensive and slow to prevent the dissemination of fake news. Addressing this gap, we introduce BanFakeNews-2.0, a robust dataset to enhance Bangla fake news detection. This version includes 11,700 additional, meticulously curated fake news articles validated from credible sources, creating a proportional dataset of 47,000 authentic and 13,000 fake news items across 13 categories. In addition, we created a manually curated independent test set of 460 fake and 540 authentic news items for rigorous evaluation. We invest efforts in collecting fake news from credible sources and manually verified while preserving the linguistic richness. We develop a benchmark system utilizing transformer-based architectures, including fine-tuned Bidirectional Encoder Representations from Transformers variants (F1-87\%) and Large Language Models with Quantized Low-Rank Approximation (F1-89\%), that significantly outperforms traditional methods. BanFakeNews-2.0 offers a valuable resource to advance research and application in fake news detection for low-resourced languages. We publicly release our dataset and model on Github to foster research in this direction.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
是玥玥啊完成签到,获得积分10
刚刚
1秒前
Tonson完成签到,获得积分10
2秒前
达分歧完成签到 ,获得积分10
3秒前
林林完成签到 ,获得积分10
3秒前
跳跃猫咪完成签到 ,获得积分10
3秒前
Ayin完成签到,获得积分10
3秒前
acuis发布了新的文献求助10
4秒前
NNi发布了新的文献求助10
4秒前
4秒前
4秒前
忐忑的果汁完成签到 ,获得积分10
5秒前
5秒前
6秒前
ieeat发布了新的文献求助10
6秒前
量子星尘发布了新的文献求助10
6秒前
6秒前
6秒前
7秒前
端正小猫完成签到,获得积分10
7秒前
志摩001完成签到,获得积分10
7秒前
8秒前
九陌发布了新的文献求助10
8秒前
yuilcl完成签到,获得积分10
8秒前
10秒前
JYAQI关注了科研通微信公众号
10秒前
10秒前
cx应助佳佳528采纳,获得10
11秒前
yenom完成签到,获得积分10
11秒前
隐形曼青应助kailan采纳,获得10
11秒前
王第一发布了新的文献求助10
11秒前
月是故乡明完成签到,获得积分10
11秒前
12秒前
yuilcl发布了新的文献求助10
12秒前
量子星尘发布了新的文献求助10
12秒前
30完成签到 ,获得积分10
14秒前
乖不如野完成签到,获得积分10
14秒前
14秒前
善良的映之完成签到,获得积分10
14秒前
zzzz发布了新的文献求助10
16秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Clinical Microbiology Procedures Handbook, Multi-Volume, 5th Edition 2000
The Cambridge History of China: Volume 4, Sui and T'ang China, 589–906 AD, Part Two 1000
The Composition and Relative Chronology of Dynasties 16 and 17 in Egypt 1000
Russian Foreign Policy: Change and Continuity 800
Real World Research, 5th Edition 800
Qualitative Data Analysis with NVivo By Jenine Beekhuyzen, Pat Bazeley · 2024 800
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5717982
求助须知:如何正确求助?哪些是违规求助? 5249617
关于积分的说明 15284035
捐赠科研通 4868135
什么是DOI,文献DOI怎么找? 2614009
邀请新用户注册赠送积分活动 1563957
关于科研通互助平台的介绍 1521400