arrow
返回

ComplexAgents: Complex Code Generation Framework Based on Multi-agents and Large Language Model

delete2026-01-01
delete0
PRE
AI
S
Shan Gao
Z
Zhiping Cai *
Y
Yu Wang
DOI:10.1007/978-3-031-93254-0_11delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
快速发展的生成式大语言模型(LLMs)已被用于代码生成。然而,现有的基于LLMs的代码生成方法虽然在简单任务上有效,但在需要复杂推理和理解的复杂任务(如APPS+数据集)上往往表现不佳。受软件开发的团队协作范式启发,我们提出了ComplexAgents,一个基于LLMs的多智能体代码生成框架,以解决复杂代码生成不令人满意且效率低下的问题。具体而言,ComplexAgents率先将典型的人类工作流程(瀑布模型)融入复杂代码生成中。通过为不同智能体分配不同角色,ComplexAgents有效地将复杂任务分解为一系列可管理的子任务并高效整合,从而提升代码生成的准确性和效率。实验结果表明,ComplexAgents在HumanEval和MBPP任务上相对于基础LLM智能体(GPT-4-Turbo)的Pass@1分别提升了40.1%和1.4%。此外,在APPS+等复杂代码生成任务上,ComplexAgents在入门级、面试级和竞赛级三个难度类别中分别达到了70.4%、49.6%和20.6%的Pass@1,而当时最先进技术(sota)仅达到59.7%、23.5%和8.6%,这表明我们的方法在现实世界代码生成中具有显著前景。
Keyword:
Large Language Models
Multi-Agents
Code Generation

期刊

C
COLLABORATIVE COMPUTING: NETWORKING, APPLICATIONS AND WORKSHARING, COLLABORATECOM 2024, PT II
IF:
0
论文数:
16
被引数:
0

机构

H
hunan university of arts & science
学者数:
743
论文数: 665
被引数: 0
N
national university of defense technology - china
学者数:
1.8W
论文数: 1.4W
被引数: 9
引用论文

引用论文

CERT: Continual Pre-training on Sketches for Library-oriented Code Generation
err2022-07-01
err0
errOAAI
errDaoguang Zan; Bei Chen; Dejian Yang; Zeqi Lin; Minsu Kim; Bei Guan; Yongji Wang; Weizhu Chen; Jian-Guang Lou
err分享
err收藏
CodeBERT: A Pre-Trained Model for Programming and Natural LanguagesCodeBERT: 编程和自然语言的预训练模型
err2020-01-01
err0
errOAAI
errZhangyin Feng; Daya Guo; Duyu Tang; Nan Duan; Xiaocheng Feng; Ming Gong; Linjun Shou; Bing Qin; Ting Liu; Daxin Jiang; Ming Zhou
err分享
err收藏
err分享
err收藏
err分享
err收藏
没有更多内容