首個(gè)大規(guī)模使用工具的大模型來(lái)了：伯克利發(fā)布Gorilla

通過(guò)讓 LLM 具備使用工具的能力，我們可以讓其有能力訪問(wèn)更大范圍的和不斷變化的知識(shí)庫(kù)，進(jìn)而完成復(fù)雜的計(jì)算任務(wù)。具體來(lái)說(shuō)，如果為 LLM 提供搜索技術(shù)和...

2023-05-29 標(biāo)簽：API數(shù)據(jù)庫(kù)語(yǔ)言模型 844 0

可商用多語(yǔ)言聊天LLM開(kāi)源，性能直逼GPT-4

在針對(duì)英語(yǔ)、中文、法語(yǔ)、阿拉伯語(yǔ)、西班牙語(yǔ)、印度語(yǔ)這 6 種語(yǔ)言的評(píng)測(cè)中，GPT-4 的勝率為 54.75%，BLOOMChat 的勝率為 45.25%...

2023-05-25 標(biāo)簽：開(kāi)源語(yǔ)言模型數(shù)據(jù)集 1191 0

一樣媲美GPT-4、Bard，Meta發(fā)布650億參數(shù)語(yǔ)言模型LIMA

該研究使用了一個(gè) 65B 參數(shù)的 LLaMa 模型（該模型稱為 LIMA）在 1000 個(gè)精選樣本上進(jìn)行有監(jiān)督學(xué)習(xí)，在完全沒(méi)使用 RLHF 方法的情況下...

2023-05-24 標(biāo)簽：AI語(yǔ)言模型GPT 1051 0

研究人員提出了一種全新的語(yǔ)言模型推理框架——「思維樹(shù)」（ToT）

那么，這樣一個(gè)簡(jiǎn)單的機(jī)制能否足以建立一個(gè)通向「解決通用問(wèn)題的語(yǔ)言模型」？如果不是，哪些問(wèn)題會(huì)挑戰(zhàn)當(dāng)前的范式，真正的替代機(jī)制應(yīng)該是什么？

2023-05-24 標(biāo)簽：語(yǔ)言模型GPTDeepMind 1549 0

中科院針對(duì)NL2Code任務(wù)，調(diào)研了27個(gè)大模型，并指出5個(gè)重要挑戰(zhàn)

關(guān)于NL2Code的發(fā)展，其實(shí)和自然語(yǔ)言理解的發(fā)展類似，一開(kāi)始，基本都是基于專家規(guī)則進(jìn)行算法設(shè)計(jì)，但是此類方法需要對(duì)不同編程語(yǔ)言進(jìn)行設(shè)計(jì)，泛化性差；隨著...

2023-05-18 標(biāo)簽：語(yǔ)言模型python自然語(yǔ)言 1516 0

大模型及ChatGPT核心技術(shù)論文

從Transformer提出到“大規(guī)模預(yù)訓(xùn)練模型”GPT（Generative Pre-Training）的誕生，再到GPT2的迭代標(biāo)志Open AI成...

2023-05-16 標(biāo)簽：AI語(yǔ)言模型ChatGPT 1098 0

Android Studio引入AI編程助手Studio Bot

谷歌在昨晚的 Google I/O 2023 大會(huì)上發(fā)布了用于 Android Studio 的 AI 編程助手 Studio Bot—— 支持生成代碼...

2023-05-12 標(biāo)簽：AndroidAI語(yǔ)言模型 2244 0

OpenAI最新突破性進(jìn)展：語(yǔ)言模型可以解釋語(yǔ)言模型中的神經(jīng)元

這項(xiàng)工作是對(duì)齊研究方法的第三個(gè)支柱的一部分：希望使對(duì)齊研究工作本身自動(dòng)化。這種方法的一個(gè)有前途的方面是它可以隨著人工智能發(fā)展的步伐而擴(kuò)展。隨著未來(lái)的模型...

2023-05-12 標(biāo)簽：神經(jīng)元語(yǔ)言模型OpenAI 994 0

多模態(tài)GPT：國(guó)內(nèi)發(fā)布一款可以在線使用的多模態(tài)聊天機(jī)器人！

基于開(kāi)源多模態(tài)模型 OpenFlamingo，作者使用公開(kāi)數(shù)據(jù)集創(chuàng)建了各種視覺(jué)指令數(shù)據(jù)，包括視覺(jué)問(wèn)答、圖像字幕、視覺(jué)推理、文本 OCR 和視覺(jué)對(duì)話。此外...

2023-05-12 標(biāo)簽：開(kāi)源語(yǔ)言模型聊天機(jī)器人 1370 0

“伶荔”(Linly) 開(kāi)源大規(guī)模中文語(yǔ)言模型

Linly-Chinese-LLaMA：中文基礎(chǔ)模型，基于 LLaMA 在高質(zhì)量中文語(yǔ)料上增量訓(xùn)練強(qiáng)化中文語(yǔ)言能力，現(xiàn)已開(kāi)放 7B、13B 和 33B ...

2023-05-04 標(biāo)簽：cpu人工智能開(kāi)源 1367 0

AI大語(yǔ)言模型的原理、演進(jìn)及算力測(cè)算專題報(bào)告

GPT是基于Transformer架構(gòu)的大語(yǔ)言模型，近年迭代演進(jìn)迅速。構(gòu)建語(yǔ)言模型是自然語(yǔ)言處理中最基本和最重要的任務(wù)之一。GPT是基于Transfor...

2023-04-28 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)AI語(yǔ)言模型 1311 0

160億參數(shù)，新增多項(xiàng)能力，復(fù)旦MOSS開(kāi)源了

團(tuán)隊(duì)同時(shí)表示，由于模型參數(shù)量較小和自回歸生成范式，MOSS 仍然可能生成包含事實(shí)性錯(cuò)誤的誤導(dǎo)性回復(fù)或包含偏見(jiàn) / 歧視的有害內(nèi)容，請(qǐng)謹(jǐn)慎鑒別和使用 MO...

2023-04-27 標(biāo)簽：開(kāi)源語(yǔ)言模型ChatGPT 1079 0

一套開(kāi)源的大型語(yǔ)言模型（LLM）—— StableLM

對(duì)于任何沒(méi)有額外微調(diào)和強(qiáng)化學(xué)習(xí)的預(yù)訓(xùn)練大型語(yǔ)言模型來(lái)說(shuō)，用戶得到的回應(yīng)質(zhì)量可能參差不齊，并且可能包括冒犯性的語(yǔ)言和觀點(diǎn)。這有望隨著規(guī)模、更好的數(shù)據(jù)、社區(qū)...

2023-04-24 標(biāo)簽：語(yǔ)言模型數(shù)據(jù)集GitHub 2778 0