機(jī)器人領(lǐng)域的新興力量正在崛起。NVIDIA最新一批的“Jetson”高中實(shí)習(xí)生們花了8周的時(shí)間,利用深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)搭建機(jī)器人。有朝一日,這些機(jī)器人將可能真正用于校園中。
這些才華橫溢的高中生將他們對于機(jī)器人學(xué)的熱情帶到我們的嵌入式部門。該小組專注于機(jī)器人和無人機(jī)等智能機(jī)器的研發(fā)。
三組實(shí)習(xí)生團(tuán)隊(duì)基于Jetson搭建機(jī)器人,并在商業(yè)設(shè)施內(nèi)展示各種功能。三個(gè)項(xiàng)目分別涉及類人型機(jī)器人、投影燈和2D激光測距儀。
“神經(jīng)忍者”團(tuán)隊(duì)
來自“神經(jīng)忍者“團(tuán)隊(duì)(Team Neural Ninja)的Maddie Waldie、Nikhil Suresh和Jackson Moffet為一個(gè)類人型機(jī)器人編制程序,使其能夠識別手勢(如揮手)并作出反應(yīng)。為了讓機(jī)器人正確識別目標(biāo)對象,該團(tuán)隊(duì)共訓(xùn)練了超過 300 個(gè)神經(jīng)網(wǎng)絡(luò)。
據(jù) Nikhil 稱,該項(xiàng)目最困難的部分是——找到能夠識別手勢并忽視背景噪音的正確的神經(jīng)網(wǎng)絡(luò)。經(jīng)歷數(shù)小時(shí)的試錯(cuò)之后,他們最終取得了成功:機(jī)器人現(xiàn)在可以識別出手勢語中的“對不起”、代表否定的手臂姿勢 "X" 和代表肯定的手臂姿勢 "Y"。此外,它還可以說話并移動(dòng),比如輕輕拍打,這讓許多過路人驚嘆不已。
“我們經(jīng)歷過很難的時(shí)刻,尤其是在一遍遍的訓(xùn)練之后得到了新數(shù)據(jù),卻發(fā)現(xiàn)它并不起作用。不過,我們最終得出了效果良好的網(wǎng)絡(luò),那一刻大家都很開心,”Maddie說道,“一旦取得了成功,那么一切的付出都是值得的?!?/p>
CCCC (ForeSee) 團(tuán)隊(duì)
CCCC 團(tuán)隊(duì)的任務(wù)是為機(jī)器人編制程序,以使其避開復(fù)雜障礙物。他們花了8周的時(shí)間學(xué)習(xí)計(jì)算機(jī)視覺與深度學(xué)習(xí)的交叉學(xué)科知識。
機(jī)器人經(jīng)常對諸如網(wǎng)狀欄桿之類的障礙物“感到困惑”,因?yàn)檫@些障礙物不能被使用反射或2D激光測距儀的傳感器檢測到。大部分的解決方案均耗資不菲,而Rahul Amara、Josh Hejna、Mokshith Voodarla和Anish Singhani則開發(fā)了一種利用廉價(jià)攝像頭即可實(shí)現(xiàn)的深度學(xué)習(xí)技術(shù)解決方案。
為了給機(jī)器人編制程序,使其能夠穿過任意兩點(diǎn)并成功避開所有障礙物,CCCC 團(tuán)隊(duì)利用欄桿和樓梯等物體的圖像對深度神經(jīng)網(wǎng)絡(luò)進(jìn)行了訓(xùn)練。
他們面臨的挑戰(zhàn)是設(shè)計(jì)一款既高效又準(zhǔn)確的軟件。借助NVIDIA的開發(fā)平臺,這四位成員成功找到了一種可以優(yōu)化這兩個(gè)參數(shù)的網(wǎng)絡(luò)。
“在NVIDIA工作的一大優(yōu)勢在于,我們可以與開發(fā)相關(guān)項(xiàng)目并擁有多年經(jīng)驗(yàn)的人進(jìn)行交流,”Rahul說道,“每當(dāng)遇到問題,我們可以向一大幫人尋求幫助,并向他們學(xué)習(xí)。”
GreenMachine 團(tuán)隊(duì)
GreenMachine 團(tuán)隊(duì)由Shruthi Jaganathan、Isaac Wilcove和Karly Hou三位成員組成,他們開發(fā)了一款由Jetson TX2提供支持的垃圾分類機(jī)器人,以指導(dǎo)NVIDIA員工放置各種剩菜、餐具、杯子和盤子。
該機(jī)器人由移動(dòng)小推車和其頂部的投影儀頭組成,計(jì)劃在圣克拉拉辦公室的咖啡館投入使用。投影儀可閃爍不同顏色的燈光:紫色為可重復(fù)使用、藍(lán)色為可回收、綠色為可降解、橙色為垃圾,從而告訴用戶應(yīng)該把垃圾投入何處。
據(jù)Shruthi稱,攝像頭校正是項(xiàng)目中難度最大的部分。傳感器經(jīng)常會受到投影儀燈光顏色的干擾,從而加大了檢測物體紋理的難度。例如,照射在塑料盤上的紫色燈光會讓攝像頭錯(cuò)誤地將盤子辨認(rèn)成可降解材料。不過,通過利用數(shù)百張有顏色的圖像訓(xùn)練網(wǎng)絡(luò),該團(tuán)隊(duì)最終得到了成功的模型。
“我真的要感謝自己在NVIDIA的兩年實(shí)習(xí)經(jīng)歷,我知道的關(guān)于深度學(xué)習(xí)的知識,都是在這里學(xué)到的?!盜saac如是說,“現(xiàn)在我的目標(biāo)很明確,就是在將來從事這方面的工作?!?/p>
所有以上項(xiàng)目均可在GitHub上找到。
-
機(jī)器人
+關(guān)注
關(guān)注
213文章
29640瀏覽量
212267 -
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4812瀏覽量
103269 -
深度學(xué)習(xí)
+關(guān)注
關(guān)注
73文章
5557瀏覽量
122675
原文標(biāo)題:NVIDIA高中實(shí)習(xí)生鉆研深度學(xué)習(xí)技術(shù),化身機(jī)器人開發(fā)“小能手”
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
評論