ChatGPT调试能力强大 聊天互动提升成功率

现在越来越多人使用人工智能聊天机器人程序ChatGPT进行各种文书工作,甚至能撰写专业的论文,甚至通过大学不同学科的考试。而近日有团队研究ChatGPT的Debug(调试) 能力,发现其能力比想象中强大。

德国美因茨大学(Johannes Gutenberg University)与英国伦敦大学(University College London)的研究人员将40条错误程序代码放入不同Debug软件,其中包括Codex、CoCoNut、Standard APR,以及ChatGPT。

研究发现,ChatGPT在首次测试中只修复了19个问题,甚至比另一个Debug软件Codex修复了21个错误少,但ChatGPT在回答初始问题后,其Debug能力便渐渐提升,最终不但可以修复31个问题,还提供更多解答。

研究人员于报告表示,ChatGPT通过对话要求提供有关问题和错误的更多资料。例如当研究人员希望ChatGPT转换计算程序,ChatGPT会回应:如果没有更多相关资讯,无法判断程序是否有错误。但在研究人员提供更多提示后,ChatGPT便会发现问题所在。

(图片来源:pcmag)

另外,研究人员也发现由于ChatGPT和Codex都是来自同一个训练语言模型,因此答案十分类似。

数据源:pcmag