近日，由創(chuàng)新工場、搜狗、美團點評、美圖公司聯(lián)合主辦的“2018 AI Challenger 全球 AI 挑戰(zhàn)賽”正式開賽。

AI Challenger 號稱是“中國版 ImageNet”，今年已經(jīng)是第二屆。本屆 AI Challenger 的主題為“用AI挑戰(zhàn)真實世界的問題”，整體獎金規(guī)模達到 300 余萬人民幣。

在 2017 年的首屆大賽中，AI Challenger 發(fā)布了從百萬到千萬量級的 4 個數(shù)據(jù)集、6 個兼具學(xué)術(shù)前沿性和產(chǎn)業(yè)應(yīng)用價值的競賽。在今年的 AI Challenger 大賽里，數(shù)據(jù)集規(guī)模進一步擴大，新增 10 余個高質(zhì)量數(shù)據(jù)集。

▌5 個主賽道 + 5 個實驗賽道

今年比賽共有 5 個主賽道，5個實驗賽道。其中，5 個主賽道的數(shù)據(jù)集包括：業(yè)界最大規(guī)模觀點型問題閱讀理解數(shù)據(jù)集、業(yè)界最大規(guī)模細(xì)粒度用戶評論情感分析數(shù)據(jù)集、業(yè)界最大規(guī)模英中文本機器翻譯、業(yè)內(nèi)首個多標(biāo)簽短視頻分類數(shù)據(jù)集、以及世界龐大、最復(fù)雜的自動駕駛數(shù)據(jù)集。這 5 個主賽道的競賽分別是：

觀點型問題閱讀理解競賽：機器閱讀理解是讓機器讀懂人類語言、和人類更好交流互動的重要領(lǐng)域。此技術(shù)可廣泛應(yīng)用于智能搜索、智能客服、智能音箱、語音控制等場景，用AI實現(xiàn)基于文字、語音的人機智能互動。數(shù)據(jù)集包含 30 萬問題以及相關(guān)文章與答案的語料集合，為業(yè)界最大。

細(xì)粒度用戶評論情感分析競賽：自然語言情感分析是機器理解人類表達和意圖的重要領(lǐng)域。此技術(shù)可廣泛應(yīng)用于零售、電商、餐飲、服務(wù)等用戶評價場景，用AI對用戶反饋進行智能分析，監(jiān)測用戶喜好、滿意度等。數(shù)據(jù)集包含 15 萬條餐飲用戶評論、6 大類 20 個細(xì)粒度要素標(biāo)簽，為業(yè)界最大。

英中文本機器翻譯賽道競賽：機器翻譯正越來越成為人們跨越語言障礙的重要工具，應(yīng)用于各種領(lǐng)域。數(shù)據(jù)集在 2017 年數(shù)據(jù)集的基礎(chǔ)上，總量達到 1300 萬句對，為業(yè)界最大；且其中具有上下文情景的中英雙語數(shù)據(jù)達到 300 萬句對，為機器翻譯的研究提供了更多探索空間。

短視頻實時分類賽道：近幾年發(fā)展極快的短視頻行業(yè)具有明顯的娛樂性和流行性，深受人們喜愛；基于短視頻機器分類的技術(shù)還可以廣泛用于視頻內(nèi)容分析、編輯與生產(chǎn)，監(jiān)控、安防等領(lǐng)域。數(shù)據(jù)集包含 20 萬條短視頻、涵蓋 63 類流行元素，為業(yè)內(nèi)首個多標(biāo)簽短視頻分類數(shù)據(jù)集。

無人駕駛視覺感知賽道：自動駕駛技術(shù)即將改變我們的出行和生活方式。本次大賽的自動駕駛競賽采用了 UC Berkeley DeepDrive（BDD）2018 年最新發(fā)布的 BDD 100K 數(shù)據(jù)集，這是全世界最龐大、最復(fù)雜的自動駕駛數(shù)據(jù)集，包含原始圖片 1.2 億張、標(biāo)注圖片 10 萬張，涵蓋多樣天氣和晝夜光照條件。

除 5 個主賽道之外，AI Challenger 2018 還開放 5 個實驗賽道競賽和相應(yīng)的數(shù)據(jù)集，包括基于北京氣象局3年氣象數(shù)據(jù)的天氣預(yù)報競賽，世界上首個農(nóng)作物病害檢測競賽和數(shù)據(jù)集，國內(nèi)首個眼底病變醫(yī)學(xué)圖像檢測競賽和數(shù)據(jù)集，以 3D 虛擬圖像訓(xùn)練機器“認(rèn)識”真實世界物品的競賽和數(shù)據(jù)集，讓機器借助輔助知識學(xué)習(xí)從未見過的新概念的首個國際性零樣本學(xué)習(xí)競賽和數(shù)據(jù)集。

▌競賽日程

AI Challenger 2018 的競賽主要分為三個階段。第一階段比賽從 2018 年 8 月 29 日至 11 月 4 日，參賽隊基于訓(xùn)練集、驗證集、測試集 A，進行算法設(shè)計、模型訓(xùn)練及評估，并提交預(yù)測結(jié)果，系統(tǒng)會按照評測指標(biāo)實時反饋分?jǐn)?shù)，并更新榜單排名。個別競賽采取參賽隊提交代碼、docker 的形式進行比賽。期間進行雙周賽排名和評獎。

第二階段比賽從 2018 年 11 月 6 至 8 日，開放測試集 B；各競賽提交結(jié)果的時限不同。結(jié)果提交后即進入評分、排名、代碼驗證環(huán)節(jié)，個別比賽還將考察參賽隊的算法運行效率。參賽選手在測試集 B 上的預(yù)測結(jié)果表現(xiàn)，將作為進入決賽的排名依據(jù)。

第三階段于 12 月 18、19 日進行競賽的總決賽答辯。