利用NLP感知世界 Facebook開(kāi)源機(jī)器人開(kāi)發(fā)平臺(tái)

近日，F(xiàn)acebook宣布開(kāi)源旗下Droidlet機(jī)器人開(kāi)發(fā)平臺(tái)，其特點(diǎn)是能夠利用自然語(yǔ)言處理(NLP)和計(jì)算機(jī)視覺(jué)(CV)技術(shù)來(lái)感知周?chē)氖澜纭?/p>

據(jù)了解，F(xiàn)acebook宣稱(chēng)該平臺(tái)能夠簡(jiǎn)化機(jī)器學(xué)習(xí)算法在機(jī)器人項(xiàng)目中的集成，并促進(jìn)快速的軟件原型設(shè)計(jì)。盡管當(dāng)前機(jī)器人已能夠通過(guò)編程來(lái)執(zhí)行舞蹈等特定應(yīng)用，但還是缺乏可在更深層次上處理信息的能力。

不過(guò)，Droidlet并不是所有問(wèn)題的萬(wàn)能解決方案，而是一種測(cè)試不同NLP和CV處理模型的方法。

該平臺(tái)允許開(kāi)發(fā)者構(gòu)建能夠在現(xiàn)實(shí)世界中，或《我的世界》和Facebook的Habitat等模擬環(huán)境里完成相關(guān)任務(wù)的系統(tǒng)。開(kāi)發(fā)者可按需更換組件，來(lái)支持可在不同機(jī)器人上使用的相同系統(tǒng)。

另外，Droidlet平臺(tái)提供了一個(gè)儀表板，方便開(kāi)發(fā)者添加調(diào)試與可視化小部件和相關(guān)工具，以及一個(gè)用于糾錯(cuò)和注釋的界面。

據(jù)悉，除了用于測(cè)試針對(duì)機(jī)器人設(shè)置進(jìn)行微調(diào)的視覺(jué)模型的環(huán)境之外，Droidlet還附帶了用于將機(jī)器學(xué)習(xí)模型連接到機(jī)器人的封包器。

Facebook指出，這些模塊中的每一個(gè)都可進(jìn)一步分解為可訓(xùn)練或啟發(fā)式的組件，且相關(guān)模塊與儀表板支持在Droidlet之外的生態(tài)系統(tǒng)中使用。