12月5日，微軟投資的美國(guó) AI 實(shí)驗(yàn)室 OpenAI 創(chuàng)始人兼CEO Sam Altman在社交媒體上宣布，其11月30日發(fā)布的聊天機(jī)器人模型ChatGPT，上線(xiàn)短短五天，用戶(hù)已經(jīng)突破了100萬(wàn)。

ChatGPT的技術(shù)原理

整體技術(shù)路線(xiàn)上，ChatGPT在效果強(qiáng)大的GPT 3.5大規(guī)模語(yǔ)言模型（LLM，Large Language Model）基礎(chǔ)上，引入“人工標(biāo)注數(shù)據(jù)+強(qiáng)化學(xué)習(xí)”（RLHF，Reinforcement Learning from Human Feedback ，這里的人工反饋其實(shí)就是人工標(biāo)注數(shù)據(jù)）來(lái)不斷Fine-tune預(yù)訓(xùn)練語(yǔ)言模型，主要目的是讓LLM模型學(xué)會(huì)理解人類(lèi)的命令指令的含義（比如給我寫(xiě)一段小作文生成類(lèi)問(wèn)題、知識(shí)回答類(lèi)問(wèn)題、頭腦風(fēng)暴類(lèi)問(wèn)題等不同類(lèi)型的命令），以及讓LLM學(xué)會(huì)判斷對(duì)于給定的prompt輸入指令（用戶(hù)的問(wèn)題），什么樣的答案是優(yōu)質(zhì)的（富含信息、內(nèi)容豐富、對(duì)用戶(hù)有幫助、無(wú)害、不包含歧視信息等多種標(biāo)準(zhǔn)）。

ChatGPT能否取代Google、百度等傳統(tǒng)搜索引擎

針對(duì)外界認(rèn)為ChatGPT能否取代Google、百度等傳統(tǒng)搜索引擎的討論。既然看上去chatGPT幾乎無(wú)所不能地回答各種類(lèi)型的prompt，那么一個(gè)很自然的問(wèn)題就是：ChatGPT或者未來(lái)即將面世的GPT4，能否取代Google、百度這些傳統(tǒng)搜索引擎呢？我個(gè)人覺(jué)得目前應(yīng)該還不行，但是如果從技術(shù)角度稍微改造一下，理論上是可以取代傳統(tǒng)搜索引擎的。

ChatGPT自己卻給出了“否定”回答：ChatGPT并不是搜索引擎。它的目的不是提供信息搜索。相對(duì)于搜索引擎通過(guò)索引網(wǎng)頁(yè)并匹配搜索詞來(lái)提供信息，ChatGPT則是通過(guò)對(duì)自然語(yǔ)言問(wèn)題的回答來(lái)幫助用戶(hù)解決問(wèn)題。因此，它們之間沒(méi)有直接的競(jìng)爭(zhēng)關(guān)系，并不能相互顛覆。

ChatGPT偏任務(wù)型的多輪對(duì)話(huà)或問(wèn)答系統(tǒng)，定位于“通用型 AI 技術(shù)助理”。相比蘋(píng)果Siri 和小愛(ài)同學(xué)的“訂餐、訂票、訂賓館”，ChatGPT更多執(zhí)行開(kāi)放域任務(wù)，即問(wèn)答、閱讀理解、推理、頭腦風(fēng)暴、寫(xiě)作文、改錯(cuò)等，可以說(shuō)是“AI 版的知乎”。

主要有三點(diǎn)原因：首先，對(duì)于不少知識(shí)類(lèi)型的問(wèn)題，chatGPT會(huì)給出看上去很有道理，但是事實(shí)上是錯(cuò)誤答案的內(nèi)容?？紤]到對(duì)于很多問(wèn)題它又能回答得很好，這將會(huì)給用戶(hù)造成困擾：如果我對(duì)我提的問(wèn)題確實(shí)不知道正確答案，那我是該相信ChatGPT的結(jié)果還是不該相信呢？此時(shí)你是無(wú)法作出判斷的。這個(gè)問(wèn)題可能是比較要命的。

其次，ChatGPT目前這種基于GPT大模型基礎(chǔ)上進(jìn)一步增加標(biāo)注數(shù)據(jù)訓(xùn)練的模式，對(duì)于LLM模型吸納新知識(shí)是非常不友好的。

新知識(shí)總是在不斷出現(xiàn)，而出現(xiàn)一些新知識(shí)就去重新預(yù)訓(xùn)練GPT模型是不現(xiàn)實(shí)的，無(wú)論是訓(xùn)練時(shí)間成本還是金錢(qián)成本，都不可接受。

其三，ChatGPT或GPT4的訓(xùn)練成本以及在線(xiàn)推理成本太高，導(dǎo)致如果面向真實(shí)搜索引擎的以?xún)|記的用戶(hù)請(qǐng)求，假設(shè)繼續(xù)采取免費(fèi)策略，OpenAI無(wú)法承受，但是如果采取收費(fèi)策略，又會(huì)極大減少用戶(hù)基數(shù)，是否收費(fèi)是個(gè)兩難決策，當(dāng)然如果訓(xùn)練成本能夠大幅下降，則兩難自解。以上這三個(gè)原因，導(dǎo)致目前ChatGPT應(yīng)該還無(wú)法取代傳統(tǒng)搜索引擎。

ChatGPT的結(jié)果令人印象深刻。該模型已經(jīng)完成了各種各樣的任務(wù)，包括提供代碼反饋、寫(xiě)詩(shī)、用不同的音調(diào)解釋技術(shù)概念、為生成人工智能模型生成提示。

然而，該模型也容易出現(xiàn)類(lèi)似大型語(yǔ)言模型（LLM）所犯的那種錯(cuò)誤，例如引用不存在的論文和書(shū)籍，誤解直觀的物理學(xué)，以及在組合性方面失敗。

基本上，OpenAI創(chuàng)造了一個(gè)強(qiáng)大的人工智能工具，但具有明顯的缺陷。它現(xiàn)在需要?jiǎng)?chuàng)建正確的開(kāi)發(fā)工具生態(tài)系統(tǒng)，以確保產(chǎn)品團(tuán)隊(duì)能夠利用ChatGPT的力量。GPT-3為許多不可預(yù)測(cè)的應(yīng)用開(kāi)辟了道路，因此了解ChatGPT的庫(kù)存會(huì)很有趣。

文章綜合鈦媒體、夕小瑤的賣(mài)萌屋、51CTO