arrow
返回

Comparing Large Language Models and Human Programmers for Generating Programming Code

delete2024-12-30
delete0
delete
OA
AI
W
Wenpin Hou
Z
Zhicheng Ji
DOI:10.1002/advs.202412279delete
delete原文链接
delete分享
delete收藏
摘要

摘要

En 中文
对七种大型语言模型(LLMs)在采用不同提示策略、编程语言和任务难度生成编程代码方面的性能进行了系统评估。GPT-4显著优于其他LLMs,包括Gemini Ultra和Claude 2。GPT-4的编码性能因不同的提示策略而显著变化。在本次研究中评估的大多数LeetCode和GeeksforGeeks编程竞赛中,采用最优提示策略的GPT-4在竞争环境中超越了85%的人类参与者,其中许多人是有中等编程经验的学生和专业人士。GPT-4在将代码翻译成不同编程语言以及从过去的错误中学习方面表现出强大的能力。GPT-4生成的代码的计算效率与人类程序员相当。GPT-4还能够处理更广泛的编程任务,包括前端设计和数据库操作。这些结果表明,GPT-4有潜力作为编程代码生成和软件开发中的可靠助手。基于最优提示策略设计了一个编程助手,以促进LLMs在编程中的实际应用。
Keyword:
artificial intelligence
computer programming
human-computer interaction
large language models

期刊

Advanced Science 封面图
Advanced Science
IF:
14.1
论文数:
1.8W
被引数:
11.5W

机构

暂无机构信息
引用论文

引用论文

Pelvic, Perineal and Genital Reconstructions
err2013-03-01
err0
PREAI
errM. Kolehmainen; S. Suominen; E. Tukiainen
err分享
err收藏
err分享
err收藏
Variable effects of temperature on insect herbivory温度对昆虫食草的可变影响
err2014-05-06
err0
errOAAI
errNathan P. Lemoine; Deron E. Burkepile; John D. Parker
err分享
err收藏
The development and validation of the HIV/AIDS Stigma Instrument – Nurse (HASI-N)
err2009-02-19
err0
errOAAI
errLeana R. Uys; William L. Holzemer; Maureen L. Chirwa; Priscilla S. Dlamini; Minrie Greeff; Thecla W. Kohi; Lucia N. Makoae; Anita L. Stewart; Joseph Mullan; René D. Phetlhu; Dean J. Wantland; Kevin L. Durrheim; Yvette P. Cuca; Joanne R. Naidoo
err分享
err收藏
没有更多内容