chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI專家:GPT-3的性能令人驚嘆,但存在規(guī)模和缺乏透明度等問(wèn)題

如意 ? 來(lái)源:讀芯術(shù)微信公眾號(hào) ? 作者:讀芯術(shù)微信公眾號(hào) ? 2020-09-18 16:31 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

算法像人一樣寫(xiě)作,是人工智能研究實(shí)驗(yàn)室OpenAI多年來(lái)一直追尋的夢(mèng)想。其最新研究成果是語(yǔ)言生成算法模型GPT-3,現(xiàn)已被用于生成讓人難以分辨的偽文章,其所寫(xiě)博客騙過(guò)了黑客新聞(Hacker News)的發(fā)布者,甚至成為網(wǎng)站熱門文章。

那個(gè)帖子是這樣的:“要想把事情做好,也許我們根本不需要想太多。這似乎有悖常理,但我相信有時(shí)想得多了反而會(huì)阻礙我們的創(chuàng)造力?!?/p>

OpenAI之所以可以實(shí)現(xiàn)如此高效的算法,是因?yàn)樗軌蛟L問(wèn)巨額計(jì)算量和數(shù)據(jù),且此算法本身的容量遠(yuǎn)大于已有的所有算法:最大版本的GPT-3有1750億個(gè)參數(shù),這種方程式能幫算法做出更精準(zhǔn)預(yù)測(cè)。GPT-2只有15億個(gè)參數(shù)。

雖然OpenAI曾公布過(guò)它的算法,但這次它選擇讓GPT-3保持神秘。該公司表示,對(duì)大多數(shù)操作者來(lái)說(shuō),GPT-3實(shí)在是太大了,對(duì)其收費(fèi),就能讓OpenAI從中獲利。

在過(guò)去的一年里,OpenAI變革公司結(jié)構(gòu),使其更能吸引投資者。它放棄了“限制利潤(rùn)”模式的非盈利定位,這樣如果OpenAI獲利,投資者就能獲得回報(bào)。它還與微軟達(dá)成了10億美元的合作協(xié)議,開(kāi)啟了兩家公司之間的合作,該協(xié)議還允許OpenAI優(yōu)先訪問(wèn)微軟的云計(jì)算平臺(tái)。

研究人員說(shuō),他們對(duì)OpenAI不公布算法表示質(zhì)疑,稱這違背了基本科學(xué)原則,且對(duì)該公司聲明的核實(shí)變得愈發(fā)困難。

Facebook人工智能研究(FAIR)的聯(lián)合董事暨Facebook蒙特利爾人工智能研究實(shí)驗(yàn)室負(fù)責(zé)人喬埃爾?皮諾(Joelle Pineau)在一封電子郵件中說(shuō)到:“我對(duì)目前為止對(duì)諸如GPT-2/GPT-3和AlphaGo這類代碼不共享的所有爭(zhēng)論持懷疑態(tài)度。在人工智能領(lǐng)域,有很多類似情況?!?/p>

GPT-3的核心是個(gè)非常強(qiáng)大的英語(yǔ)寫(xiě)作工具。GPT-3最重要的是它的規(guī)模,它通過(guò)分析45萬(wàn)億字節(jié)的數(shù)據(jù)學(xué)會(huì)了寫(xiě)作。報(bào)道稱這個(gè)訓(xùn)練過(guò)程在云計(jì)算上花費(fèi)了數(shù)百萬(wàn)美元,它見(jiàn)證了人類數(shù)以億計(jì)的書(shū)寫(xiě)組合。

這是OpenAI長(zhǎng)期戰(zhàn)略的關(guān)鍵部分。多年來(lái),該公司一直表示,深度學(xué)習(xí)算法的規(guī)模越大越好。數(shù)據(jù)越多,計(jì)算能力越強(qiáng),算法的能力就越強(qiáng)。OpenAI就是因?yàn)榫邆渫瑫r(shí)在數(shù)百個(gè)GPU上訓(xùn)練算法的能力,才在《刀塔2》中擊敗了職業(yè)電子競(jìng)技玩家。

OpenAI的領(lǐng)導(dǎo)曾表示,OpenAI的政策主管杰克·克拉克(Jack Clark)認(rèn)為算法越大,則“越有條理,越有創(chuàng)造力,也越可靠”。在談到《刀塔2》機(jī)器人需要的訓(xùn)練量時(shí),首席技術(shù)官格雷格·布羅克曼表示:“等運(yùn)氣耗盡,我們期待一場(chǎng)棋逢對(duì)手的比賽。”

GPT-3采用了類似方法。OpenAI認(rèn)為,算法更大意味著參數(shù)更多,就能進(jìn)行更普遍的操作。例如,GPT-3最基本的功能是自動(dòng)補(bǔ)全,給它一個(gè)詞或句子,它就會(huì)逐字逐句地生成它認(rèn)為接下來(lái)該出現(xiàn)的詞句。不必對(duì)算法進(jìn)行任何修改,它也能回答問(wèn)題,甚至進(jìn)行翻譯。這與只能處理一項(xiàng)任務(wù)的專項(xiàng)微調(diào)算法不同。

有人認(rèn)為,這向人工智能的圣杯——通用智能邁出了一步,它意味著算法可以像人類一樣學(xué)習(xí)和適應(yīng);而另一些人則表示,算法仍不能真正理解它生成的話語(yǔ)。

OpenAI發(fā)布了一篇詳細(xì)的研究報(bào)告,解釋了該算法的架構(gòu)和它所取得的結(jié)果,而當(dāng)涉及到GPT-3的功能研究時(shí),其他人工智能研究人員只能選擇相信OpenAI。這家研究公司最近不再以非盈利為定位,開(kāi)始籌集資金開(kāi)發(fā)商業(yè)產(chǎn)品,它不再像過(guò)去一樣公布算法。

2019年2月,OpenAI宣稱,前一最大版本GPT-2算法有可能生成錯(cuò)誤信息或虛假新聞,太過(guò)危險(xiǎn)不便發(fā)布,這一聲明引來(lái)了很多質(zhì)疑。公司先行發(fā)布了簡(jiǎn)易版的GPT-2,并未發(fā)現(xiàn)濫用跡象,才最終發(fā)布了最大版本算法?,F(xiàn)在,與其說(shuō)GPT-3太危險(xiǎn),不如說(shuō)它似乎太有利可圖而不能發(fā)行。

GPT-3只能通過(guò)OpenAI運(yùn)行的API訪問(wèn),這與亞馬遜、谷歌和微軟等公司的算法變現(xiàn)方式相類似。開(kāi)發(fā)者可以編寫(xiě)程序向GPT-3發(fā)送特定指令,GPT-3在OpenAI的云端中生成響應(yīng)并回傳結(jié)果。雖然API在內(nèi)測(cè)期間免費(fèi),但OpenAI正在考慮長(zhǎng)期定價(jià)。這意味著研究人員只能向算法發(fā)送特定命令,而OpenAI可以隨時(shí)取消訪問(wèn)權(quán)限。

OpenAI將這種做法歸結(jié)于對(duì)安全和規(guī)模的考慮。如果該公司發(fā)現(xiàn)有人濫用API做了諸如支持假新聞網(wǎng)站的事情,那么它可以取消該開(kāi)發(fā)者的訪問(wèn)權(quán)限。

該公司還表示,這些算法規(guī)模龐大,運(yùn)行成本高昂,更別提開(kāi)始訓(xùn)練后的花銷。“這使得任何除大公司以外的使用者都很難從底層技術(shù)中獲益。我們希望API能讓小型企業(yè)和組織更容易地使用強(qiáng)勁的人工智能系統(tǒng)?!?/p>

由于云計(jì)算的計(jì)價(jià)方式,OpenAI訓(xùn)練和操作算法的確切成本很難核算。租賃GPU的成本根據(jù)特定服務(wù)器區(qū)域的地理鄰近程度,以及基于項(xiàng)目規(guī)模的協(xié)議費(fèi)率等因素的不同,差別很大。由于OpenAI為完成任務(wù)將其中部分資金用于建造自己的超級(jí)計(jì)算機(jī),它可能從與微軟的10億美元合作中受益。

但是這些限制,即規(guī)模和缺乏透明度,使得其他科學(xué)家很難復(fù)制和驗(yàn)證該算法的有效性。

盡管涉及風(fēng)險(xiǎn)投資和企業(yè)利益,人工智能仍然是研究計(jì)算機(jī)科學(xué)的一個(gè)途徑,且這種科學(xué)方法仍然適用。最好的科學(xué)實(shí)驗(yàn),比如建立一個(gè)算法來(lái)成功完成一項(xiàng)任務(wù)并證明一個(gè)假設(shè),是可以復(fù)制的。

皮諾是可復(fù)制計(jì)算機(jī)科學(xué)的熱心支持者,她認(rèn)為像GPT-3和AlphaGo這樣尚未公布的算法是“科學(xué)文物”。她在電子郵件中說(shuō)到:“這有點(diǎn)像挖出的恐龍骨頭,它為你提供了支持某些理論的證據(jù),但與實(shí)際進(jìn)行實(shí)驗(yàn)是不一樣的?!逼ぶZ表示,這些“文物”有助于提出未來(lái)的研究假設(shè),但它們?nèi)匀徊荒芴娲_鑿的知識(shí)。

很多人擔(dān)心,通過(guò)限制對(duì)代碼和受訓(xùn)算法的訪問(wèn),人工智能的“民主化”,即任何人都可使用人工智能,會(huì)受OpenAI威脅?!笆褂萌斯ぶ悄堋边@一用語(yǔ)是多層面的,意思是使用計(jì)算能力、數(shù)據(jù)集以及算法本身。諸如谷歌的TensorFlow和臉書(shū)的PyTorch這類開(kāi)源框架使得算法易于構(gòu)建和共享,還存在其他很多開(kāi)源數(shù)據(jù)集。

然而,計(jì)算能力來(lái)自硬件,是一種有限的物理資源,大公司和像OpenAI這樣資金充足的研究機(jī)構(gòu)更容易獲得該資源。

如果OpenAI的實(shí)驗(yàn)被證明是人工智能的發(fā)展方向,同時(shí)算法的擴(kuò)大轉(zhuǎn)化為性能的提高,那么消費(fèi)不起先進(jìn)人工智能的人就無(wú)法使用它了。這還會(huì)允許擁有資源的大公司制定規(guī)則,決定誰(shuí)有權(quán)使用某些人工智能算法。例如,他們可以利用API進(jìn)行設(shè)置,并對(duì)訪問(wèn)和使用算法進(jìn)行收費(fèi)。

喬治亞理工學(xué)院(Georgia Institute of Technology)研究自然語(yǔ)言處理的人工智能教授馬克·瑞德?tīng)枺∕ark Riedl)表示:“如果確信實(shí)現(xiàn)更好人工智能的方法實(shí)際上是實(shí)現(xiàn)更大規(guī)模,那么誰(shuí)能擁有更優(yōu)人工智能就由OpenAI決定了?!?/p>

瑞德?tīng)枌?duì)OpenAI是否會(huì)監(jiān)視其新API的所有使用情況,以確定是否被用于惡意目的表示質(zhì)疑,OpenAI曾花了大量精力來(lái)思考它的算法會(huì)如何被濫用?!癘penAI是否會(huì)查看輸出,以判斷他們的技術(shù)是否得到恰當(dāng)使用?鑒于其宗旨,以及這與他們新盈利模式相沖突,這似乎很關(guān)鍵。他們能做到大規(guī)模監(jiān)控嗎?”

并非所有人都認(rèn)同OpenAI“越大越好”的方法是人工智能的發(fā)展方向。例如,自然語(yǔ)言處理研究人員梅拉妮·米歇爾(Melanie Mitchell)就對(duì)GPT-3進(jìn)行了“模仿”測(cè)試,要求算法識(shí)別特定字母序列的變化模式。如果“abc”變?yōu)椤癮bd”,那么“efg”會(huì)變成什么?

上世紀(jì)80年代,米歇爾開(kāi)發(fā)了一種算法來(lái)解決這類人類一直以來(lái)所進(jìn)行類比的微型模擬測(cè)試。要正確地進(jìn)行類比,必須理解所有組件之間的關(guān)系。在字母表的例子中,算法必須了解字母表的順序和每個(gè)字母的位置。雖然該算法在眾多測(cè)試中表現(xiàn)良好,但米歇爾發(fā)現(xiàn),它也無(wú)法掌握其他算法數(shù)十年前已掌握的一些簡(jiǎn)單概念。

米歇爾說(shuō):“在研究方面,我個(gè)人認(rèn)為,在一個(gè)問(wèn)題上投入過(guò)多的計(jì)算和參數(shù)可能會(huì)把人工智能逼進(jìn)死胡同。如果我們的目標(biāo)是制造強(qiáng)大、具有普遍智能的機(jī)器,我認(rèn)為這無(wú)法取得真正的進(jìn)展?!?/p>

她承認(rèn),在制造需要深度學(xué)習(xí)的人工智能產(chǎn)品時(shí),龐大的計(jì)算能力讓科技巨頭獲得優(yōu)勢(shì),但反之并不是所有現(xiàn)代問(wèn)題都需要高能耗的深度學(xué)習(xí)算法,不是解決每個(gè)問(wèn)題都需要達(dá)到GTP-3的規(guī)模。

米切爾在測(cè)試該算法時(shí)寫(xiě)道:“GPT-3的性能令人驚嘆,但它也和當(dāng)今最先進(jìn)的人工智能系統(tǒng)中的很多情況類似:似乎很智能的性能中夾雜著一些非人類錯(cuò)誤,而且我們搞不清楚它表現(xiàn)好或犯錯(cuò)誤的原因?!?br /> 責(zé)編AJX

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 算法
    +關(guān)注

    關(guān)注

    23

    文章

    4710

    瀏覽量

    95407
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    280055
  • GPT
    GPT
    +關(guān)注

    關(guān)注

    0

    文章

    368

    瀏覽量

    16098
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    7個(gè)令人驚嘆的樹(shù)莓派應(yīng)用,讓你大開(kāi)眼界!

    許多人認(rèn)為樹(shù)莓派只適合在家做些簡(jiǎn)單的業(yè)余項(xiàng)目。實(shí)際上,樹(shù)莓派遠(yuǎn)不止于此——它是一臺(tái)潛力巨大的微型計(jì)算機(jī)。在本文中,我將分享全球范圍內(nèi)樹(shù)莓派最令人難以置信的應(yīng)用。樹(shù)莓派的應(yīng)用場(chǎng)景廣泛,從水下到太空
    的頭像 發(fā)表于 07-16 16:51 ?162次閱讀
    7個(gè)<b class='flag-5'>令人驚嘆</b>的樹(shù)莓派應(yīng)用,讓你大開(kāi)眼界!

    利用NVIDIA 3D引導(dǎo)生成式AI Blueprint控制圖像生成

    AI 賦能的圖像生成技術(shù)突飛猛進(jìn),從早期模型會(huì)生成手指過(guò)多的人類圖像,到現(xiàn)在能創(chuàng)造出令人驚嘆的逼真視覺(jué)效果。即使取得了如此飛躍,仍然存在一個(gè)挑戰(zhàn):實(shí)現(xiàn)創(chuàng)意掌控。
    的頭像 發(fā)表于 06-05 09:24 ?389次閱讀

    InfiSight 智睿視界,擁抱 AI 做更落地的 ToB 生意

    的反應(yīng)速度令人驚嘆,沒(méi)有任何一家科技公司能在這股 AI 浪潮的沖擊下置身事外, 協(xié)創(chuàng)數(shù)據(jù)(SHARETRONIC) 也不例外。 ? 集團(tuán)創(chuàng)立至今,已先后成立了多個(gè)圍繞 AIoT 開(kāi)展的事業(yè)部,從服務(wù)器再制造到 AIoT 智能終端,協(xié)創(chuàng)數(shù)據(jù)一直在
    的頭像 發(fā)表于 05-14 18:20 ?248次閱讀

    采用微米級(jí)三角形橫截面柵線,實(shí)現(xiàn)99.86%透明度與低電阻,引領(lǐng)前接觸技術(shù)革新與應(yīng)用

    設(shè)計(jì)一種既能減少光損失又能保持高導(dǎo)電性的前接觸結(jié)構(gòu)。采用微米級(jí)三角形橫截面柵線,通過(guò)光散射原理實(shí)現(xiàn)了99.86%的光學(xué)透明度和低至4.8Ω/sq的薄層電阻。三角形柵線設(shè)
    的頭像 發(fā)表于 03-12 09:02 ?408次閱讀
    采用微米級(jí)三角形橫截面柵線,實(shí)現(xiàn)99.86%<b class='flag-5'>透明度</b>與低電阻,引領(lǐng)前接觸技術(shù)革新與應(yīng)用

    AI模型思維鏈功能升級(jí),提升透明度與可信度

    透明度。 值得注意的是,此次更新發(fā)生在DeepSeek-R1推理模型發(fā)布之后。作為OpenAI的競(jìng)爭(zhēng)對(duì)手,DeepSeek-R1同樣具備展示其反應(yīng)背后思維過(guò)程的能力。兩大模型在這一功能上的不謀而合,無(wú)疑彰顯了AI領(lǐng)域?qū)τ谔嵘龥Q策透明度
    的頭像 發(fā)表于 02-10 09:06 ?545次閱讀

    騰訊混元3D AI創(chuàng)作引擎正式發(fā)布

    AI技術(shù),能夠根據(jù)用戶提供的提示詞或圖片,直接生成高質(zhì)量的3D模型。這一功能極大地降低了3D內(nèi)容創(chuàng)作的門檻,使得即使是缺乏專業(yè)3D建模技能
    的頭像 發(fā)表于 01-23 10:33 ?598次閱讀

    《算力芯片 高性能 CPUGPUNPU 微架構(gòu)分析》第3篇閱讀心得:GPU革命:從圖形引擎到AI加速器的蛻變

    CPU、GPU的演進(jìn)歷程,AI專用芯片或?qū)⒁I(lǐng)未來(lái)計(jì)算平臺(tái)的新方向。正如愛(ài)因斯坦所說(shuō):\"想象力比知識(shí)更重要\" —— 在芯片設(shè)計(jì)領(lǐng)域,創(chuàng)新思維帶來(lái)的突破往往令人驚嘆。
    發(fā)表于 11-24 17:12

    葡萄酒俱樂(lè)部計(jì)劃部署RFID技術(shù)以提高供應(yīng)鏈的透明度

    來(lái)提高葡萄酒供應(yīng)鏈的透明度和效率。 該解決方案是基于區(qū)塊鏈和RFID技術(shù)來(lái)跟蹤每瓶酒在運(yùn)輸、儲(chǔ)存、購(gòu)買和消費(fèi)過(guò)程中的信息。該系統(tǒng)記錄了每瓶葡萄酒的數(shù)字標(biāo)識(shí)、生活故事以及周圍的條件,一直到消費(fèi)者手中。 通過(guò)將 超高頻RFID標(biāo)簽 嵌入到瓶子
    的頭像 發(fā)表于 11-23 16:18 ?462次閱讀

    英偉達(dá)預(yù)測(cè)機(jī)器人領(lǐng)域或迎“GPT-3時(shí)刻”

    未來(lái)2-3年內(nèi),機(jī)器人基礎(chǔ)模型的研究將迎來(lái)重大突破,這一時(shí)刻被形象地比喻為機(jī)器人領(lǐng)域的“GPT-3時(shí)刻”。
    的頭像 發(fā)表于 09-20 17:05 ?1078次閱讀

    動(dòng)態(tài)代理IP的匿名性和透明度,為主要考慮關(guān)鍵!

    動(dòng)態(tài)代理IP的匿名性和透明度是用戶選擇代理服務(wù)時(shí)需要考慮的關(guān)鍵因素。根據(jù)用戶的需求和場(chǎng)景,可以選擇不同匿名級(jí)別和透明度的代理服務(wù)來(lái)平衡隱私保護(hù)和網(wǎng)絡(luò)訪問(wèn)的需求。
    的頭像 發(fā)表于 09-20 07:36 ?599次閱讀
    動(dòng)態(tài)代理IP的匿名性和<b class='flag-5'>透明度</b>,為主要考慮關(guān)鍵!

    Jim Fan展望:機(jī)器人領(lǐng)域即將迎來(lái)GPT-3式突破

    英偉達(dá)科學(xué)家9月19日,科技媒體The Decoder發(fā)布了一則引人關(guān)注的報(bào)道,英偉達(dá)高級(jí)科學(xué)家Jim Fan在近期預(yù)測(cè),機(jī)器人技術(shù)將在未來(lái)兩到三年內(nèi)迎來(lái)類似GPT-3在語(yǔ)言處理領(lǐng)域的革命性突破,他稱之為機(jī)器人領(lǐng)域的“GPT-3時(shí)刻”。
    的頭像 發(fā)表于 09-19 15:13 ?950次閱讀

    Arm Kleidi加速AI發(fā)展

    在持續(xù)快速發(fā)展的人工智能 (AI) 時(shí)代,我們堅(jiān)定地支持全球數(shù)百萬(wàn)開(kāi)發(fā)者,確保他們能夠獲得所需的性能、工具和軟件庫(kù),從而順利打造下一波令人驚嘆AI 體驗(yàn)。
    的頭像 發(fā)表于 09-14 09:46 ?733次閱讀

    加州立法推動(dòng)AI透明度,生成式人工智能迎來(lái)數(shù)據(jù)披露新紀(jì)元

    的數(shù)據(jù)使用與透明度問(wèn)題也逐漸成為公眾關(guān)注的焦點(diǎn)。8月28日,美國(guó)加州立法機(jī)構(gòu)的一項(xiàng)重大舉措——人工智能訓(xùn)練數(shù)據(jù)透明度法案的通過(guò),標(biāo)志著該州在推動(dòng)AI行業(yè)健康發(fā)展、保障公眾權(quán)益方面邁出了堅(jiān)實(shí)的一步。
    的頭像 發(fā)表于 08-28 16:20 ?939次閱讀

    開(kāi)源 KiCad/AD 查看器 + AI Copilot?

    線、焊盤、敷銅透明度 查看網(wǎng)絡(luò) 3D 預(yù)覽 查看 BOM AI Copilot 在查看器的右側(cè),切換到 AI 面板,可以直接提出您的問(wèn)題: 也可以在原理圖中,選中任意器件,然后
    發(fā)表于 08-18 22:41

    LED透鏡的顏色與透明度基本概念

    如果 LED燈 有透鏡顏色,則無(wú)論透鏡透明度如何,LED 在開(kāi)和關(guān)時(shí)都會(huì)顯示該顏色。如果透鏡顏色為白色或無(wú)色,則 LED 有可能發(fā)出白色,另一種顏色或各種顏色的光,然后在關(guān)狀態(tài)下返回白色或無(wú)色。
    的頭像 發(fā)表于 07-25 09:34 ?925次閱讀