Voice Activity Detection Optimized by Adaptive Attention Span Transformer

计算机科学 语音识别 语音活动检测 Mel倒谱 变压器 人工智能 编码器 分类器(UML) 模式识别(心理学) 语音处理 特征提取 工程类 操作系统 电气工程 电压
作者
Wenpeng Mu,Bingshan Liu
出处
期刊:IEEE Access [Institute of Electrical and Electronics Engineers]
卷期号:11: 31238-31243 被引量:10
标识
DOI:10.1109/access.2023.3262518
摘要

Voice Activity Detection (VAD) is a widely used technique for separating vocal regions from audio signals, with applications in voice language coding, noise reduction, and other domains. While various strategies have been proposed to improve VAD performance, such as ACAM, DCU-10, and Tr-VAD, these approaches often suffer from common limitations, including being unsuitable for long audio and being time-consuming. To address these issues, we propose a new method called AAT-VAD, which integrates an adaptive width attention learning mechanism into the classic transformer framework. Our approach involves extracting Mel-scale Frequency Cepstral Coefficients (MFCC) from the Mel scale frequency domain, adding a masking function to each transformer attention head, and inputting the features processed by the transformer encoder layer into the classifier. Experimental results indicate that our method achieves a 12.8% higher F1-score than DCU-10 and a 0.6% higher F1-score than Tr-VAD under different noise interferences. Furthermore, the average detection cost function (DCF) value of our method is only 14.3% of DCU-10 and 92.4% of Tr-VAD, and the test time of AAT-VAD is only 37.4% of that of Tr-VAD for the same noisy vocal mixed audio.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
mawenxing完成签到,获得积分10
1秒前
萱萱发布了新的文献求助10
2秒前
3秒前
12应助DODODO采纳,获得50
4秒前
6秒前
xinxin完成签到,获得积分10
6秒前
阿盛发布了新的文献求助10
7秒前
7秒前
香蕉觅云应助EF采纳,获得10
8秒前
9秒前
9秒前
lydiaabc完成签到,获得积分10
10秒前
11秒前
bji完成签到,获得积分10
11秒前
11秒前
hmv发布了新的文献求助10
11秒前
轶6完成签到,获得积分10
14秒前
14秒前
15秒前
张鱼丸子发布了新的文献求助30
17秒前
18秒前
lindalin发布了新的文献求助10
18秒前
香蕉觅云应助xc采纳,获得10
18秒前
lin完成签到 ,获得积分10
18秒前
负负得正完成签到,获得积分10
18秒前
李健应助qxz采纳,获得10
19秒前
萱萱发布了新的文献求助10
19秒前
网站技术人员完成签到,获得积分10
20秒前
xueshufengbujue完成签到,获得积分10
23秒前
笑笑完成签到,获得积分10
24秒前
Li发布了新的文献求助10
24秒前
hxm发布了新的文献求助10
24秒前
故酒应助不安梦桃采纳,获得10
26秒前
领导范儿应助diudiu采纳,获得10
26秒前
27秒前
27秒前
27秒前
娃娃哈发布了新的文献求助10
27秒前
27秒前
李li完成签到,获得积分10
28秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Zeolites: From Fundamentals to Emerging Applications 1500
Encyclopedia of Materials: Plastics and Polymers 1000
Architectural Corrosion and Critical Infrastructure 1000
Early Devonian echinoderms from Victoria (Rhombifera, Blastoidea and Ophiocistioidea) 1000
Hidden Generalizations Phonological Opacity in Optimality Theory 1000
Handbook of Social and Emotional Learning, Second Edition 900
热门求助领域 (近24小时)
化学 医学 生物 材料科学 工程类 有机化学 内科学 生物化学 物理 计算机科学 纳米技术 遗传学 基因 复合材料 化学工程 物理化学 病理 催化作用 免疫学 量子力学
热门帖子
关注 科研通微信公众号,转发送积分 4924525
求助须知:如何正确求助?哪些是违规求助? 4194571
关于积分的说明 13029123
捐赠科研通 3966454
什么是DOI,文献DOI怎么找? 2173951
邀请新用户注册赠送积分活动 1191426
关于科研通互助平台的介绍 1100971