清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整的填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Investigating rater severity/leniency in interpreter performance testing

翻译 认证 等级间信度 心理学 流利 可靠性(半导体) 评定量表 应用心理学 计算机科学 发展心理学 数学教育 功率(物理) 物理 量子力学 政治学 法学 程序设计语言
作者
Chao Han
出处
期刊:Interpreting [John Benjamins Publishing Company]
卷期号:17 (2): 255-283 被引量:42
标识
DOI:10.1075/intp.17.2.05han
摘要

Rater-mediated performance assessment (RMPA) is a critical component of interpreter certification testing systems worldwide. Given the acknowledged rater variability in RMPA and the high-stakes nature of certification testing, it is crucial to ensure rater reliability in interpreter certification performance testing (ICPT). However, a review of current ICPT practice indicates that rigorous research on rater reliability is lacking. Against this background, the present study reports on use of multifaceted Rasch measurement (MFRM) to identify the degree of severity/leniency in different raters’ assessments of simultaneous interpretations (SIs) by 32 interpreters in an experimental setting. Nine raters specifically trained for the purpose were asked to evaluate four English-to-Chinese SIs by each of the interpreters, using three 8-point rating scales (information content, fluency, expression). The source texts differed in speed and in the speaker’s accent (native vs non-native). Rater-generated scores were then subjected to MFRM analysis, using the FACETS program. The following general trends emerged: 1) homogeneity statistics showed that not all raters were equally severe overall; and 2) bias analyses showed that a relatively large proportion of the raters had significantly biased interactions with the interpreters and the assessment criteria. Implications for practical rating arrangements in ICPT, and for rater training, are discussed.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
大幅提高文件上传限制,最高150M (2024-4-1)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
聪明的鹤完成签到 ,获得积分10
29秒前
桐桐应助科研通管家采纳,获得10
59秒前
勤恳的饭饭完成签到,获得积分10
1分钟前
ee_Liu完成签到,获得积分10
1分钟前
妙手回春板蓝根完成签到,获得积分20
1分钟前
CChi0923完成签到,获得积分10
1分钟前
乒坛巨人完成签到 ,获得积分10
1分钟前
Shandongdaxiu完成签到 ,获得积分10
1分钟前
舒服的幼荷完成签到,获得积分10
1分钟前
茶包完成签到,获得积分10
2分钟前
Skywings完成签到,获得积分10
2分钟前
明理问柳完成签到,获得积分10
2分钟前
vampire完成签到,获得积分10
2分钟前
斯文败类应助科研通管家采纳,获得10
3分钟前
胖胖橘完成签到 ,获得积分10
3分钟前
1461完成签到 ,获得积分10
3分钟前
ycw7777完成签到,获得积分10
3分钟前
花花完成签到 ,获得积分10
3分钟前
大水完成签到 ,获得积分10
3分钟前
皮皮球完成签到 ,获得积分10
3分钟前
阿泽完成签到 ,获得积分10
3分钟前
Qiuqiu发布了新的文献求助10
3分钟前
chcmy完成签到 ,获得积分0
3分钟前
随影相伴完成签到 ,获得积分10
4分钟前
Sigma完成签到 ,获得积分10
4分钟前
大雁完成签到 ,获得积分10
4分钟前
xue112完成签到 ,获得积分10
4分钟前
nano完成签到 ,获得积分10
5分钟前
zhangzhangzhang完成签到 ,获得积分10
5分钟前
缺粥完成签到 ,获得积分10
5分钟前
5分钟前
三百一十四完成签到 ,获得积分10
5分钟前
称心绮完成签到,获得积分10
6分钟前
vsvsgo完成签到,获得积分10
6分钟前
紫金之巅完成签到 ,获得积分10
6分钟前
开拖拉机的医学僧完成签到 ,获得积分10
6分钟前
wang完成签到,获得积分10
6分钟前
如意的馒头完成签到 ,获得积分10
6分钟前
科研佟完成签到 ,获得积分10
6分钟前
无名草0502完成签到 ,获得积分10
7分钟前
高分求助中
中国国际图书贸易总公司40周年纪念文集 大事记1949-1987 2000
TM 5-855-1(Fundamentals of protective design for conventional weapons) 1000
草地生态学 880
Threaded Harmony: A Sustainable Approach to Fashion 799
Basic Modern Theory of Linear Complex Analytic 𝑞-Difference Equations 510
中国有机(类)肥料 500
Queer Politics in Times of New Authoritarianisms: Popular Culture in South Asia 500
热门求助领域 (近24小时)
化学 医学 生物 材料科学 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 基因 遗传学 催化作用 物理化学 免疫学 量子力学 细胞生物学
热门帖子
关注 科研通微信公众号,转发送积分 3059669
求助须知:如何正确求助?哪些是违规求助? 2715529
关于积分的说明 7445380
捐赠科研通 2361181
什么是DOI,文献DOI怎么找? 1251224
科研通“疑难数据库(出版商)”最低求助积分说明 607711
版权声明 596466