From Scarcity to Capability: Empowering Fake News Detection in Low-Resource Languages with LLMs

稀缺 资源(消歧) 业务 资源稀缺 自然资源经济学 计算机科学 经济 市场经济 计算机网络
作者
Hrithik Majumdar Shibu,Shrestha Datta,Md. Sumon Miah,Nasrullah Sami,M. S. Chowdhury,Md. Saiful Islam
出处
期刊:Cornell University - arXiv
标识
DOI:10.48550/arxiv.2501.09604
摘要

The rapid spread of fake news presents a significant global challenge, particularly in low-resource languages like Bangla, which lack adequate datasets and detection tools. Although manual fact-checking is accurate, it is expensive and slow to prevent the dissemination of fake news. Addressing this gap, we introduce BanFakeNews-2.0, a robust dataset to enhance Bangla fake news detection. This version includes 11,700 additional, meticulously curated fake news articles validated from credible sources, creating a proportional dataset of 47,000 authentic and 13,000 fake news items across 13 categories. In addition, we created a manually curated independent test set of 460 fake and 540 authentic news items for rigorous evaluation. We invest efforts in collecting fake news from credible sources and manually verified while preserving the linguistic richness. We develop a benchmark system utilizing transformer-based architectures, including fine-tuned Bidirectional Encoder Representations from Transformers variants (F1-87\%) and Large Language Models with Quantized Low-Rank Approximation (F1-89\%), that significantly outperforms traditional methods. BanFakeNews-2.0 offers a valuable resource to advance research and application in fake news detection for low-resourced languages. We publicly release our dataset and model on Github to foster research in this direction.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
刚刚
李李完成签到,获得积分10
1秒前
1秒前
Owen应助Wu采纳,获得10
1秒前
Demon完成签到,获得积分10
1秒前
生气的鸡蛋完成签到,获得积分10
2秒前
爱笑的山灵完成签到,获得积分10
2秒前
潇洒闭月发布了新的文献求助10
3秒前
Victoria发布了新的文献求助30
4秒前
5秒前
zhangl完成签到,获得积分10
5秒前
领导范儿应助胖Q采纳,获得10
5秒前
5秒前
kkkklin发布了新的文献求助10
5秒前
5秒前
Hysen_L发布了新的文献求助10
6秒前
6秒前
7秒前
小猴子应助科研通管家采纳,获得10
8秒前
搜集达人应助科研通管家采纳,获得10
9秒前
科研通AI6应助科研通管家采纳,获得10
9秒前
JamesPei应助科研通管家采纳,获得10
9秒前
搜集达人应助科研通管家采纳,获得10
9秒前
英姑应助科研通管家采纳,获得10
9秒前
桐桐应助科研通管家采纳,获得10
9秒前
科研通AI6应助科研通管家采纳,获得10
9秒前
JamesPei应助科研通管家采纳,获得10
9秒前
科研通AI2S应助科研通管家采纳,获得10
9秒前
英姑应助科研通管家采纳,获得10
9秒前
烟花应助科研通管家采纳,获得10
9秒前
桐桐应助科研通管家采纳,获得10
9秒前
深情安青应助henryjun采纳,获得10
9秒前
科研通AI2S应助科研通管家采纳,获得10
9秒前
所所应助科研通管家采纳,获得10
9秒前
烟花应助科研通管家采纳,获得10
9秒前
星辰大海应助科研通管家采纳,获得10
9秒前
所所应助科研通管家采纳,获得10
9秒前
科目三应助科研通管家采纳,获得10
9秒前
星辰大海应助科研通管家采纳,获得10
9秒前
高分求助中
2025-2031全球及中国金刚石触媒粉行业研究及十五五规划分析报告 40000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Introduction to strong mixing conditions volume 1-3 5000
Ägyptische Geschichte der 21.–30. Dynastie 2500
Clinical Microbiology Procedures Handbook, Multi-Volume, 5th Edition 2000
„Semitische Wissenschaften“? 1510
从k到英国情人 1500
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5743404
求助须知:如何正确求助?哪些是违规求助? 5413822
关于积分的说明 15347458
捐赠科研通 4884191
什么是DOI,文献DOI怎么找? 2625636
邀请新用户注册赠送积分活动 1574492
关于科研通互助平台的介绍 1531400