應(yīng)用于任意預(yù)訓練模型的prompt learning模型—LM-BFF

最近又出了個比較吸引人眼球的Prompt Learning，甚至該方法還被稱之為NLP的“第四范式”，具體有哪幾項請參考以下鏈接： 綜述文章：https...

2021-08-16 標簽：LMGPTnlp 4925 0

知識圖譜與BERT相結(jié)合助力語言模型

感謝清華大學自然語言處理實驗室對預(yù)訓練語言模型架構(gòu)的梳理，我們將沿此脈絡(luò)前行，探索預(yù)訓練語言模型的前沿技術(shù)，紅框中為已介紹的文章，綠框中為本期介紹的模型...

2021-05-19 標簽：編碼器自然語言nlp 4076 0

詞匯知識融合可能是NLP任務(wù)的永恒話題

得益于BERT的加持，Encoder搭配CRF的結(jié)構(gòu)在中文NER上通常都有不錯的表現(xiàn)，而且BERT使用方便，可以迅速微調(diào)上線特定服務(wù)；在好的基準條件下，...

2021-05-08 標簽：深度學習nlp 2847 0

Transformer深度學習架構(gòu)的應(yīng)用指南介紹

近年來，自然語言處理（Natural Language Processing， NLP）模型在文本分類、機器翻譯、認知對話系統(tǒng)、自然語言理解（Natur...

2021-05-06 標簽：機器學習深度學習nlp 4884 0

知識圖譜是NLP的未來嗎？

我的看法：知識圖譜不是NLP的未來，因為知識圖譜是另外一種與NLP有很多交集的技術(shù)。在目前所有已知的發(fā)展方向中，知識圖譜是最有可能長期和NLP互利共生的技術(shù)。

2021-04-15 標簽：模型nlp知識圖譜 3918 0

當云計算飛向深空 全面的太空及衛(wèi)星互聯(lián)還需等風來

我們多次說起過，當下的“上云”浪潮，源自無數(shù)來自于扎實產(chǎn)業(yè)土地的真實需求：工廠需要AI，機器人需要算力，城市需要智慧，流媒體需要高清低時延的體驗…… 照...

2021-04-03 標簽：云計算AI智慧城市 1.1萬 0

口語語言理解在任務(wù)型對話系統(tǒng)中的探討

1.1 研究背景與任務(wù)定義 口語語言理解在任務(wù)型對話系統(tǒng)中扮演了一個非常重要的角色，其目的是識別出用戶的輸入文本中蘊含的意圖和提及到的槽位，一般被分為意...

2021-03-31 標簽：模型nlp 2649 0

2021年機器深度學習還有哪些坑比較好挖？

從做框架的角度看到幾個方向，供參考： 1、AI與科學計算結(jié)合 AI技術(shù)，特別是深度學習/強化學習/圖神經(jīng)網(wǎng)絡(luò)等方法，基于實驗或者計算產(chǎn)生的數(shù)據(jù)對所求解的...

2021-03-30 標簽：AICV多模 2757 0

基于人工智能的自監(jiān)督學習詳解

自監(jiān)督學習讓 AI 系統(tǒng)能夠從很少的數(shù)據(jù)中學習知識，這樣才能識別和理解世界上更微妙、更不常見的表示形式。

2021-03-30 標簽：AI人工智能nlp 6359 0

21個經(jīng)典深度學習句間關(guān)系模型

鴿了很久的NLP入門系列終于在我的努力下又更新了。 上次聊了分類任務(wù)的模型與技巧，今天我們就來聊聊句間關(guān)系任務(wù)。句間關(guān)系的輸入是一對文本，輸出是文本間的...

2021-03-29 標簽：深度學習nlp 3454 0

兩個NLP模型的預(yù)測分析

圖數(shù)據(jù)的天然優(yōu)勢是為學習算法提供了豐富的結(jié)構(gòu)化信息，節(jié)點之間鄰接關(guān)系的設(shè)計成為了重要的先驗信息和交互約束。然而，有一部分邊上的消息是可以忽略的，論文首先...

2021-04-04 標簽：人工智能nlp 2507 0