Evolution Through Large Models

Python(编程语言) 计算机科学 人工智能 遗传程序设计 背景(考古学) 地形 领域(数学分析) 强化学习 编码(集合论) 机器学习 程序设计语言 地理 数学分析 地图学 数学 考古 集合(抽象数据类型)
作者
Joel Lehman,Jonathan Gordon,Shawn Jain,Kamal Ndousse,Cathy Yeh,Kenneth O. Stanley
出处
期刊:Genetic and evolutionary computation 卷期号:: 331-366 被引量:20
标识
DOI:10.1007/978-981-99-3814-8_11
摘要

This chapter pursues the insightInsight that large language modelsLarge language models (LLMs) trained to generate code can vastly improve the effectiveness of mutation operators applied to programs in genetic programming (GP). Because such LLMs benefit from training data that includes sequential changes and modifications, they can approximate likely changes that humans would make. To highlight the breadth of implications of such evolution through large models (ELM), inEvolution through Large Models the main experiment ELM combined with MAP-ElitesMAP-Elites generates hundreds of thousands of functional examples of Python programs that output working ambulating robots in the SodaraceSodarace domain, which the original LLM had never seen in pretraining. These examples then help to bootstrapBootstrap training a new conditional language model that can output the right walker for a particular terrain. The ability to bootstrapBootstrap new models that can output appropriate artifacts for a given context in a domain where zero training data was previously available carries implications for open-endednessOpen-endedness, deep learning, and reinforcement learningReinforcement Learning. These implications are explored here in depth in the hope of inspiring new directions of research now opened up by ELM.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
2秒前
Ryan完成签到,获得积分10
3秒前
General完成签到 ,获得积分10
3秒前
谦让汝燕完成签到,获得积分10
5秒前
wellyou完成签到,获得积分10
6秒前
mint完成签到,获得积分10
8秒前
afli完成签到 ,获得积分0
11秒前
12秒前
Yy完成签到 ,获得积分10
15秒前
Nayvue发布了新的文献求助10
17秒前
feng完成签到,获得积分10
17秒前
淡淡的小蘑菇完成签到 ,获得积分10
20秒前
G_Serron完成签到,获得积分10
21秒前
swordshine完成签到,获得积分10
21秒前
Anonymous完成签到,获得积分10
25秒前
medzhou完成签到,获得积分10
29秒前
儒雅的千秋完成签到,获得积分10
37秒前
普鲁卡因发布了新的文献求助10
40秒前
小雯完成签到,获得积分10
41秒前
搞怪梦寒完成签到,获得积分20
42秒前
喵了个咪完成签到 ,获得积分10
43秒前
mc完成签到 ,获得积分10
45秒前
量子星尘发布了新的文献求助10
48秒前
49秒前
49秒前
虚幻谷波完成签到,获得积分10
51秒前
ruochenzu发布了新的文献求助10
54秒前
小马甲应助搞怪梦寒采纳,获得10
56秒前
firewood完成签到 ,获得积分10
57秒前
天天快乐应助普鲁卡因采纳,获得10
59秒前
orixero应助NXK采纳,获得10
59秒前
bjr完成签到 ,获得积分10
1分钟前
研友_LwlAgn完成签到,获得积分10
1分钟前
陈昊完成签到,获得积分10
1分钟前
1分钟前
tian发布了新的文献求助10
1分钟前
1分钟前
1分钟前
龙舞星完成签到,获得积分10
1分钟前
1分钟前
高分求助中
【提示信息,请勿应助】关于scihub 10000
Les Mantodea de Guyane: Insecta, Polyneoptera [The Mantids of French Guiana] 3000
徐淮辽南地区新元古代叠层石及生物地层 3000
The Mother of All Tableaux: Order, Equivalence, and Geometry in the Large-scale Structure of Optimality Theory 3000
Handbook of Industrial Diamonds.Vol2 1100
Global Eyelash Assessment scale (GEA) 1000
Picture Books with Same-sex Parented Families: Unintentional Censorship 550
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 遗传学 基因 物理化学 催化作用 冶金 细胞生物学 免疫学
热门帖子
关注 科研通微信公众号,转发送积分 4038128
求助须知:如何正确求助?哪些是违规求助? 3575831
关于积分的说明 11373827
捐赠科研通 3305610
什么是DOI,文献DOI怎么找? 1819255
邀请新用户注册赠送积分活动 892655
科研通“疑难数据库(出版商)”最低求助积分说明 815022