尽管这项研究仅检视了ChatGPT功能的一个方面，
在5月初举行的大学电脑-人交互大会上，这些程式设计师并没有意识到ChatGPT提供了错误的研究答案 。无疑是揭示计错一个重大的警示信号 。深入检查了ChatGPT回答的式设517个Stack Overflow问题，普渡大学研究小组提交了一份报告 ，误率这项研究对于依赖生成式人工智慧的高达程式设计师来说 ，在39%的普渡情况下，认为其内容更全面且语言表达清晰 。大学但它明确指出，研究然而 ，揭示计错保持谨慎和批判性思维的式设重要性 。惊人地发现其错误率竟然高达52% 。误率
研究结果显示 ，生成式人工智慧机器人仍然容易出现大量错误 ，这项研究结果强调了在使用AI工具时 ，人类程式设计师在35%的情况下更偏好ChatGPT的答案 ，而这些错误可能无法被人类程式设计师发现。