From Scarcity to Capability: Empowering Fake News Detection in Low-Resource Languages with LLMs

稀缺 资源(消歧) 业务 资源稀缺 自然资源经济学 计算机科学 经济 市场经济 计算机网络
作者
Hrithik Majumdar Shibu,Shrestha Datta,Md. Sumon Miah,Nasrullah Sami,M. S. Chowdhury,Md. Saiful Islam
出处
期刊:Cornell University - arXiv
标识
DOI:10.48550/arxiv.2501.09604
摘要

The rapid spread of fake news presents a significant global challenge, particularly in low-resource languages like Bangla, which lack adequate datasets and detection tools. Although manual fact-checking is accurate, it is expensive and slow to prevent the dissemination of fake news. Addressing this gap, we introduce BanFakeNews-2.0, a robust dataset to enhance Bangla fake news detection. This version includes 11,700 additional, meticulously curated fake news articles validated from credible sources, creating a proportional dataset of 47,000 authentic and 13,000 fake news items across 13 categories. In addition, we created a manually curated independent test set of 460 fake and 540 authentic news items for rigorous evaluation. We invest efforts in collecting fake news from credible sources and manually verified while preserving the linguistic richness. We develop a benchmark system utilizing transformer-based architectures, including fine-tuned Bidirectional Encoder Representations from Transformers variants (F1-87\%) and Large Language Models with Quantized Low-Rank Approximation (F1-89\%), that significantly outperforms traditional methods. BanFakeNews-2.0 offers a valuable resource to advance research and application in fake news detection for low-resourced languages. We publicly release our dataset and model on Github to foster research in this direction.

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
大幅提高文件上传限制,最高150M (2024-4-1)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
LYZSh发布了新的文献求助10
刚刚
皮皮猪发布了新的文献求助10
1秒前
2秒前
3秒前
狂野大象发布了新的文献求助20
3秒前
3秒前
7秒前
塵亦完成签到,获得积分10
8秒前
称心太阳发布了新的文献求助10
9秒前
李健应助三明治采纳,获得10
9秒前
9秒前
kk发布了新的文献求助10
12秒前
简墨完成签到,获得积分10
12秒前
塵亦发布了新的文献求助10
13秒前
烂漫的易真完成签到,获得积分10
14秒前
14秒前
15秒前
17秒前
帅气不惜发布了新的文献求助10
19秒前
19秒前
scirev完成签到,获得积分10
19秒前
医者修心发布了新的文献求助10
20秒前
疯狂的虔发布了新的文献求助10
22秒前
gej发布了新的文献求助10
23秒前
24秒前
luym发布了新的文献求助30
29秒前
31秒前
32秒前
32秒前
乔达摩完成签到 ,获得积分10
35秒前
dorr发布了新的文献求助10
36秒前
炙热念双完成签到 ,获得积分10
37秒前
刘姝彤发布了新的文献求助10
37秒前
吕帅锜发布了新的文献求助10
38秒前
8R60d8应助简单滑板采纳,获得10
40秒前
Owen应助听风者采纳,获得10
40秒前
现代的战斗机完成签到,获得积分10
42秒前
kk发布了新的文献求助10
42秒前
潇洒友蕊关注了科研通微信公众号
42秒前
科研通AI2S应助咚咚采纳,获得10
44秒前
高分求助中
Production Logging: Theoretical and Interpretive Elements 2000
Very-high-order BVD Schemes Using β-variable THINC Method 1200
BIOLOGY OF NON-CHORDATES 1000
进口的时尚——14世纪东方丝绸与意大利艺术 Imported Fashion:Oriental Silks and Italian Arts in the 14th Century 800
Autoregulatory progressive resistance exercise: linear versus a velocity-based flexible model 550
The Collected Works of Jeremy Bentham: Rights, Representation, and Reform: Nonsense upon Stilts and Other Writings on the French Revolution 320
Generative AI in Higher Education 300
热门求助领域 (近24小时)
化学 医学 生物 材料科学 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 基因 遗传学 物理化学 催化作用 细胞生物学 免疫学 冶金
热门帖子
关注 科研通微信公众号,转发送积分 3356590
求助须知:如何正确求助?哪些是违规求助? 2980171
关于积分的说明 8693302
捐赠科研通 2661747
什么是DOI,文献DOI怎么找? 1457350
科研通“疑难数据库(出版商)”最低求助积分说明 674761
邀请新用户注册赠送积分活动 665614