讓眾人瘋狂的網(wǎng)紅 AI ChatGPT,原來(lái)也有明顯的短板?
一段“網(wǎng)友調(diào)教這只 AI”的聊天記錄,在網(wǎng)上傳開(kāi)了。
可以看到,AI 起初居然說(shuō) 27 是個(gè)質(zhì)數(shù)。
在網(wǎng)友向其提出質(zhì)疑后,AI 仍嘴硬稱(chēng)“27 不能被 3 整除”。
網(wǎng)友不得不和 AI“大戰(zhàn)幾百回合”,最后在人類(lèi)鍥而不舍的教導(dǎo)下,AI 才終于終于低頭認(rèn)錯(cuò)。
有一說(shuō)一,AI 的認(rèn)錯(cuò)態(tài)度倒是很好。
有圍觀者看完后調(diào)侃:AI 不是都要統(tǒng)治世界了嗎,怎么會(huì)輸給一道簡(jiǎn)單的數(shù)學(xué)題?
不過(guò),也有很多人為 ChatGPT 說(shuō)話(huà):這么坦誠(chéng)的認(rèn)錯(cuò)態(tài)度,不比某些人強(qiáng)多了。
數(shù)學(xué)水平拉胯,還賊固執(zhí)
具體事情是這樣的:
網(wǎng)友在和 ChatGPT 互動(dòng)的過(guò)程中發(fā)現(xiàn),這只 AI 數(shù)學(xué)水平過(guò)于拉胯,連 27 是不是質(zhì)數(shù)這種簡(jiǎn)單問(wèn)題都能搞錯(cuò) —— 而且還是在知道質(zhì)數(shù)定義的情況下……
于是網(wǎng)友讓 ChatGPT 證明它給出的結(jié)論,沒(méi)想到,AI 居然說(shuō) 27 不能被 3 整除。
網(wǎng)友表示無(wú)語(yǔ),但還是耐著性子又問(wèn)了一遍,結(jié)果 AI 依然嘴硬,偏把 9 說(shuō)成是 9.0。
無(wú)奈,網(wǎng)友只能搬出代碼,試著用 Python 來(lái)教會(huì) AI。
結(jié)果 AI 還真學(xué)會(huì)了!而且人家還主動(dòng)承認(rèn)了剛才的錯(cuò)誤。
有意思的是,我們剛才也去問(wèn)了 ChatGPT“27 是不是質(zhì)數(shù)”,發(fā)現(xiàn)它已經(jīng)改過(guò)來(lái)了。
然后我們又拿了幾個(gè)數(shù)字去問(wèn) AI,結(jié)果在這一回合中,它都正確地判斷了一個(gè)數(shù)到底是不是質(zhì)數(shù)。
不過(guò)仔細(xì)一看,AI 并沒(méi)提到 35 能被 7 整除,于是我們又專(zhuān)門(mén)問(wèn)了一遍。然鵝……
這豈不是一本正經(jīng)地胡說(shuō)八道嘛?
于是我們也只好搬出 Python 教教它,但這回,連 python 似乎也沒(méi)能讓 AI 承認(rèn)自己的錯(cuò)誤……
所以這只 AI 為啥算術(shù)水平如此堪憂(yōu),而且還如此固執(zhí)?
其中一個(gè)重要的原因就是,ChatGPT 是個(gè)語(yǔ)言大模型,根據(jù) Open AI 的 GPT-3.5 的模型微調(diào)而成,它擅長(zhǎng)邏輯推理,但并不能執(zhí)行標(biāo)準(zhǔn)的計(jì)算機(jī)算法。
而且與搜索引擎不同,它目前也沒(méi)有網(wǎng)頁(yè)瀏覽功能,無(wú)法調(diào)用在線(xiàn)計(jì)算器。
此前,ChatGPT 其實(shí)已經(jīng)向用戶(hù)坦言,它不懂算術(shù)。兩位數(shù)的乘法或許還湊乎,但遇到三位數(shù)的乘法,人家直接不干了。
我們也去問(wèn)了一遍,現(xiàn)在 AI 到是直接給了個(gè)答案,不過(guò)是錯(cuò)的。(正確答案為 186524)
另外,ChatGPT 一般不會(huì)根據(jù)用戶(hù)的反饋來(lái)糾正自己的答案,但如果用戶(hù)提出了額外的信息,有時(shí)也能輔助 AI 優(yōu)化答案。
所以,我們暫時(shí)沒(méi)有成功地“教育”AI,大概也許可能是運(yùn)氣不太好……
除了數(shù)學(xué)其他都很全能
盡管 ChatGPT 有時(shí)會(huì)展現(xiàn)出“人工智障”的一面,但不得不說(shuō),大多數(shù)時(shí)候它的表現(xiàn)還是很優(yōu)秀的。
比如,哥倫比亞大學(xué)教授、谷歌工程師 Kenneth Goodman 就分享,ChatGPT 已經(jīng)做好成為律師的準(zhǔn)備了!
在律師執(zhí)業(yè)考試中,ChatGPT 的正確率高達(dá) 70%(35/50)。
不僅是法律方面,Goodman 還讓 ChatGPT 參加了其他不同領(lǐng)域的各種考試,都取得了很高的成績(jī)。
包括美國(guó)醫(yī)師執(zhí)照考試(USMLE),拿掉其中的圖像選擇題后,ChatGPT 同樣做到了 70% 的正確率。
為了防止 ChatGPT 的訓(xùn)練數(shù)據(jù)中包含這些題目,Goodman 還特意選取了紐約州 2022 年 8 月最新化學(xué)注冊(cè)考試:
去除 5 個(gè)圖片選擇題,ChatGPT 的正確率為 77.7%(35/45)。
同樣批次的英語(yǔ)考試中,ChatGPT 的正確率甚至達(dá)到了 91.6%(22/24)
有網(wǎng)友已經(jīng)開(kāi)始預(yù)測(cè),或許我們每個(gè)人都將擁有自己的律師 AI 了,咨詢(xún)律師的費(fèi)用也會(huì)大大下降。接下來(lái)就是醫(yī)生 AI、營(yíng)養(yǎng)師 AI……
怎么樣,你看好 ChatGPT 的未來(lái)應(yīng)用嗎?(或者你有讓它學(xué)好數(shù)學(xué)的建議嗎?)
參考鏈接:
[1]https://weibo.com/7095186006/Mj6LVF0zS#comment
[2]https://twitter.com/TonyZador/status/1601316732689604608
[3]https://twitter.com/pythonprimes/status/1601664776194912256
本文來(lái)自微信公眾號(hào):量子位 (ID:QbitAI),作者:Alex 羿閣
廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。