Large language models: a new frontier in paediatric cataract patient education

可读性 误传 医学 阅读(过程) 等级 利克特量表 理解力 质量(理念) 病人教育 家庭医学 医学教育 数学教育 计算机科学 心理学 发展心理学 哲学 计算机安全 认识论 政治学 法学 程序设计语言
作者
Qais A. Dihan,Muhammad Z. Chauhan,Taher K. Eleiwa,Andrew D. Brown,Amr K. Hassan,Mohamed M. Khodeiry,Reem H. ElSheikh,Isdin Oke,Bharti R. Nihalani,Deborah K. VanderVeen,Ahmed B. Sallam,Abdelrahman M. Elhusseiny
出处
期刊:British Journal of Ophthalmology [BMJ]
卷期号:: bjo-325252 被引量:4
标识
DOI:10.1136/bjo-2024-325252
摘要

Background/aims This was a cross-sectional comparative study. We evaluated the ability of three large language models (LLMs) (ChatGPT-3.5, ChatGPT-4, and Google Bard) to generate novel patient education materials (PEMs) and improve the readability of existing PEMs on paediatric cataract. Methods We compared LLMs’ responses to three prompts. Prompt A requested they write a handout on paediatric cataract that was ‘easily understandable by an average American.’ Prompt B modified prompt A and requested the handout be written at a ‘sixth-grade reading level, using the Simple Measure of Gobbledygook (SMOG) readability formula.’ Prompt C rewrote existing PEMs on paediatric cataract ‘to a sixth-grade reading level using the SMOG readability formula’. Responses were compared on their quality (DISCERN; 1 (low quality) to 5 (high quality)), understandability and actionability (Patient Education Materials Assessment Tool (≥70%: understandable, ≥70%: actionable)), accuracy (Likert misinformation; 1 (no misinformation) to 5 (high misinformation) and readability (SMOG, Flesch-Kincaid Grade Level (FKGL); grade level <7: highly readable). Results All LLM-generated responses were of high-quality (median DISCERN ≥4), understandability (≥70%), and accuracy (Likert=1). All LLM-generated responses were not actionable (<70%). ChatGPT-3.5 and ChatGPT-4 prompt B responses were more readable than prompt A responses (p<0.001). ChatGPT-4 generated more readable responses (lower SMOG and FKGL scores; 5.59±0.5 and 4.31±0.7, respectively) than the other two LLMs (p<0.001) and consistently rewrote them to or below the specified sixth-grade reading level (SMOG: 5.14±0.3). Conclusion LLMs, particularly ChatGPT-4, proved valuable in generating high-quality, readable, accurate PEMs and in improving the readability of existing materials on paediatric cataract.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
DRYAN完成签到,获得积分10
刚刚
羽羽完成签到,获得积分20
刚刚
哒哒哒哒完成签到,获得积分10
1秒前
朴实的悲发布了新的文献求助10
1秒前
楼藏鸟完成签到,获得积分10
1秒前
xiaohu6311完成签到,获得积分20
2秒前
monica发布了新的文献求助10
2秒前
iNk应助丿小智灬采纳,获得10
2秒前
2秒前
miraitowa发布了新的文献求助10
3秒前
张杨发布了新的文献求助10
3秒前
halo完成签到,获得积分10
3秒前
balmy完成签到 ,获得积分10
3秒前
含糊的路人完成签到,获得积分10
3秒前
4秒前
flyfish发布了新的文献求助10
4秒前
PWG完成签到,获得积分10
4秒前
赘婿应助zhiping采纳,获得10
4秒前
柒玖完成签到,获得积分10
4秒前
5秒前
Nero发布了新的文献求助10
5秒前
zhangsudi完成签到,获得积分20
5秒前
5秒前
orixero应助jim_hacker采纳,获得10
5秒前
serendipty完成签到,获得积分10
6秒前
我有一个超能力完成签到 ,获得积分10
6秒前
里里完成签到,获得积分10
6秒前
aurora完成签到,获得积分10
7秒前
上官若男应助婷1223采纳,获得10
7秒前
橘寄完成签到,获得积分10
7秒前
7秒前
热舞特发布了新的文献求助10
8秒前
请叫我风吹麦浪应助Fu付采纳,获得10
8秒前
yar应助monica采纳,获得10
9秒前
那个966发布了新的文献求助10
9秒前
hangfengzi发布了新的文献求助10
10秒前
飞云发布了新的文献求助10
10秒前
Carly发布了新的文献求助10
10秒前
思念需要什么完成签到,获得积分10
11秒前
高分求助中
A new approach to the extrapolation of accelerated life test data 1000
Cognitive Neuroscience: The Biology of the Mind 1000
Technical Brochure TB 814: LPIT applications in HV gas insulated switchgear 1000
ACSM’s Guidelines for Exercise Testing and Prescription, 12th edition 500
Nucleophilic substitution in azasydnone-modified dinitroanisoles 500
不知道标题是什么 500
A Preliminary Study on Correlation Between Independent Components of Facial Thermal Images and Subjective Assessment of Chronic Stress 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 遗传学 基因 物理化学 催化作用 冶金 细胞生物学 免疫学
热门帖子
关注 科研通微信公众号,转发送积分 3968934
求助须知:如何正确求助?哪些是违规求助? 3513835
关于积分的说明 11170238
捐赠科研通 3249167
什么是DOI,文献DOI怎么找? 1794650
邀请新用户注册赠送积分活动 875278
科研通“疑难数据库(出版商)”最低求助积分说明 804755