<ul id="ouw02"></ul>
  • 首頁 > 技術(shù) > 正文

    聊天機器人ChatGPT能力波動:質(zhì)數(shù)識別準確率下降

    2023-09-08 08:04:14來源:中關(guān)村在線  


    (資料圖)

    斯坦福大學(xué)的一項新研究發(fā)現(xiàn),熱門生成式人工智能(AI)聊天機器人ChatGPT的能力在幾個月內(nèi)有所波動。研究人員評估了ChatGPT在幾個月內(nèi)如何處理不同的任務(wù),發(fā)現(xiàn)ChatGPT的能力隨時間推移而出現(xiàn)不一致。目前,ChatGPT有兩個版本,免費的GPT-3.5模型和更智能、更快速的付費GPT-4版本。研究人員發(fā)現(xiàn),GPT-4在3月份能夠有效地解決數(shù)學(xué)問題,識別質(zhì)數(shù)的準確率為97.6%。但三個月后,其準確率下降到了2.4%。而另一方面,GPT-3.5卻變得更好,從7.4%的準確率提高到了86.8%。研究人員還注意到,在編寫代碼和視覺推理方面也有類似的波動。斯坦福大學(xué)計算機科學(xué)教授James Zou表示:“當我們調(diào)整一個大型語言模型來提高它在某些任務(wù)上的表現(xiàn)時,那可能會有很多意想不到的后果,可能會損害這個模型在其他任務(wù)上的表現(xiàn)……這個模型回答問題的方式有各種各樣的相互依賴性,這可能導(dǎo)致我們觀察到的一些惡化行為。”研究人員認為,結(jié)果并不能真正反映ChatGPT性能的準確性狀態(tài),而是顯示了微調(diào)模型帶來的意外后果。本質(zhì)上,當修改模型的一部分來改善一個任務(wù)時,其他任務(wù)可能會受到影響。為什么會這樣很難確定,因為沒有人知道ChatGPT是如何運作的,而且它的代碼也不是開源的。隨著時間的推移,研究人員注意到,ChatGPT的回答不僅變得不太準確,而且還停止了解釋其推理過程。由于ChatGPT的運作方式,要研究和衡量其表現(xiàn)可能很困難。這項研究強調(diào)了觀察和評估驅(qū)動ChatGPT等工具的大型語言模型(LLM)性能變化的必要性。該研究已經(jīng)在arXiv上發(fā)布,并正在等待同行評審。

    標簽:

    相關(guān)閱讀

    精彩推薦

    相關(guān)詞

    推薦閱讀

    好看的亚洲黄色经典| jlzzjlzz亚洲乱熟在线播放| 亚洲国产精品13p| 亚洲日本在线电影| 亚洲大香人伊一本线| 亚洲人成在线观看| 亚洲AV无码一区二区乱孑伦AS| 亚洲乱码无码永久不卡在线| 亚洲色精品88色婷婷七月丁香| 激情综合色五月丁香六月亚洲| 国产亚洲精品免费视频播放| 亚洲午夜无码久久久久| 在线亚洲精品自拍| 亚洲色欲色欲www在线丝| 亚洲深深色噜噜狠狠爱网站| 亚洲情综合五月天| 亚洲国产精品无码久久久不卡 | 亚洲精品456人成在线| 狠狠色伊人亚洲综合网站色| 一本色道久久88—综合亚洲精品 | 一本色道久久88—综合亚洲精品| 亚洲中文字幕精品久久| 亚洲国产成人久久精品大牛影视| 亚洲色成人网站WWW永久四虎 | 亚洲乱码无人区卡1卡2卡3| 亚洲AV无码成人精品区日韩 | 18禁亚洲深夜福利人口| 亚洲国产成人精品无码久久久久久综合| 亚洲第一区精品日韩在线播放| 精品国产香蕉伊思人在线在线亚洲一区二区 | 亚洲国产人成网站在线电影动漫| 久久久久久亚洲AV无码专区| 亚洲视频免费在线播放| 久久亚洲精品专区蓝色区| 亚洲gay片在线gv网站| 亚洲无线一二三四区手机| 亚洲日产无码中文字幕| 亚洲电影国产一区| 亚洲成AV人综合在线观看| 中国亚洲呦女专区| 亚洲XX00视频|