ChatGPT编程语言错误率超过50% 还可能误导三分之一的提问者
发布日期: 2023-08-09 12:27:10 来源: 中关村在线


(资料图)

自生成式人工智能ChatGPT问世以来,众多开发者试图将其应用于编程辅助工具。然而,近期美国普渡大学的一项研究发现,ChatGPT在回答编程问题时的错误率超出预期。 据了解,ChatGPT在回答软件编程问题时的错误率超过了50%,且这些错误巧妙到足以误导三分之一的提问者。研究团队对ChatGPT在Stack Overflow网站上回答的517个问题进行了分析,评估了其正确性、一致性、全面性和简洁性,并对12名志愿者进行了问卷调查。 研究结果显示,尽管ChatGPT的回答语言风格良好,但52%的回答是错误的,77%的回答过于冗长。同时,只有在回答中存在明显错误时,参与实验的志愿者才能察觉到问题,而在其他情况下,他们往往会被AI的友好且细致的语言风格所误导。 这一发现无疑表明,对于开发者来说,当前阶段的生成式AI作为编程辅助工具还有很长的路要走,甚至可能产生反效果。然而,值得注意的是,OpenAI早前已在官网上告知用户,AI的回答可能会产生关于人、地点或事实的不准确信息。

关键词:

相关文章

  • ChatGPT编程语言错误率超过50% 还可能误导三分之一的提问者

  • 绿债仍是绿色资金的主要来源 偏好投向低碳交通及建筑领域

  • 江西到2025年油茶综合产值突破千亿元

  • 闰土课文笔记(闰土课文)

  • 苹果强制换用快充 第三方苹果充电器将价格上涨

  • 斯巴鲁将派遣俄罗斯翼豹和XV进行维修

  • 《孤注一掷》今日上映,票房突破7亿 刷新暑期档票房纪录

  • 三字词语大全6000个ABB(三字词语大全)

  • 快速推动城中村改造下的“精细化”思考

  • 昆明安居集团拟发行至多5.65亿元中票 用于偿还到期债务

  • 吉林:全力恢复正常生产生活秩序 积极应对台风“卡努”

  • NYMEX原油短线下看80.79美元

  • 发售三年半后 《碧蓝幻想Versus》全球销量突破100万

  • 欧美零部件巨头押注中国,这是大势所趋

  • 邮报:霍伊伦背部伤势基本上为应力性骨折,完全恢复至少还需六周

  • 大涨超20%!猪价显著回暖,反弹能否延续?

  • 一些国家创新推进文化遗产保护与开发(国际视点)

  • 国家标准委等六部门联合印发《氢能产业标准体系建设指南(2023版

  • 前湖人球员:AD有点像德克,又有点像卡尔-马龙

  • 「雷龙科技」完成数千万B轮融资,助推大型产业数字化升级

热点图集