研究人员表示,ChatGPT在回答快速问题甚至帮助你开始撰写博客文章方面可能很棒,但它还需要提高编码技能。
普渡大学的一项研究调查了ChatGPT如何回答来自Stack Overflow(SO)的517个不同的问题,结果相当平淡。研究人员在论文中写道:“我们的检查显示,ChatGPT的答案中有52%包含错误,77%是冗长的。”这篇论文没有经过同行评议,并发布在印刷前的网站上。
更令人担忧的是,研究发现,聊天机器人犯下的错误中有54%似乎来自于它不理解被问问题的概念。在它确实理解这个问题的情况下,它经常难以提供正确的答案,这突显了事实核查ChatGPT答案的重要性。
“在许多情况下,我们看到ChatGPT在没有预见或没有考虑结果的情况下给出了解决方案、代码或公式,”他们说。
聊天机器人在编码方面并非完全毫无用处。根据一份内部文件,今年2月,谷歌向ChatGPT提出了编程面试问题,并根据人工智能的答案确定将聘用该公司担任一个三级工程职位。
据Insider报道,今年,亚马逊的一名工程师使用ChatGPT回答了该公司一份软件编程工作的面试问题,机器人回答了所有问题。
尽管聊天机器人可能不是最好的程序员,但它预计将对美国就业市场造成冲击,并可能颠覆19%的职业。OpenAI 3月份的一项研究发现,这项技术可以取代人工笔译和口译员。从长远来看,它还可能影响作家和作家、数学家、税务筹备员、会计师和审计师等职业。
该研究还指出,ChatGPT有编造答案的倾向,所以即使它可能能够处理通常由人类完成的工作,人类也需要监督这项工作,以确保它是正确的–至少目前是这样。
有话要说...