多模態(tài)感知,完成數(shù)據(jù)對(duì)齊及環(huán)境動(dòng)態(tài)捕捉,實(shí)現(xiàn)長期空間記憶
嵌入物理規(guī)則約束,完成結(jié)構(gòu)化三維語義地圖建模,突破環(huán)境感知局限,滿足精準(zhǔn)化、策略化作業(yè)要求
從單一編程到意圖驅(qū)動(dòng),完成復(fù)雜任務(wù)分層推理與規(guī)劃,實(shí)現(xiàn)任務(wù)執(zhí)行泛化能力
打通物理與數(shù)字世界的“次元壁”,將數(shù)字規(guī)則映射到物理行為,實(shí)現(xiàn)人機(jī)交互及多機(jī)協(xié)作
隨著AI技術(shù)的飛速發(fā)展,服務(wù)機(jī)器人正以前所未有的速度融入人類生活的各個(gè)角落。從酒店到餐廳,從超市到醫(yī)院,服務(wù)機(jī)器人的身影無所不在。然而在享受這些智能伙伴帶來便利的同時(shí),一個(gè)核心問題始終擺在人們面前——安全。
安全能力,不僅是確保服務(wù)機(jī)器人能夠穩(wěn)定、可靠執(zhí)行任務(wù)的基石,更是保障人員與場景安全的防線。與工業(yè)機(jī)器人所處的結(jié)構(gòu)化、相對(duì)簡單的工作環(huán)境不同,服務(wù)機(jī)器人需要直面更多復(fù)雜多變的非結(jié)構(gòu)化場景。這里人員密集、環(huán)境復(fù)雜且多變,隨時(shí)可能出現(xiàn)各種意想不到的狀況,這無疑對(duì)機(jī)器人的安全能力提出了極高的要求。
從產(chǎn)品設(shè)計(jì)角度來看,提升機(jī)器人安全性的方式多種多樣,例如增強(qiáng)結(jié)構(gòu)穩(wěn)定性、配置安全防護(hù)裝置、優(yōu)化制動(dòng)系統(tǒng)、提升傳感器性能等。然而,在這些方法中,提升機(jī)器人的避障能力無疑是重中之重。
它不僅決定了機(jī)器人的安全性能,還直接影響機(jī)器人的作業(yè)效率、自主性、智能性以及可應(yīng)用的場景范圍和維護(hù)成本。
而隨著應(yīng)用場景從常見的大型商用場景不斷深入到越來越多的零售小場景,場景的復(fù)雜度與多樣性持續(xù)攀升,對(duì)機(jī)器人安全能力的要求還在持續(xù)提高。機(jī)器人不僅要避的快、避的穩(wěn)、避的準(zhǔn),還要一定程度上實(shí)現(xiàn)主動(dòng)避障。
避免碰撞應(yīng)是機(jī)器人的基本功,機(jī)器人不僅要能夠精準(zhǔn)規(guī)避常規(guī)物體,如玻璃、鏡面等高反光障礙物,地插、桌椅底座等低矮障礙物,以及桌面、警戒線等全高障礙物,同時(shí),機(jī)器人還要能智能識(shí)別并靈敏規(guī)避行人、動(dòng)物、拋物等動(dòng)態(tài)物體。
而在此之上,面對(duì)復(fù)雜多變的作業(yè)場景,機(jī)器人越來越需要具備“預(yù)見風(fēng)險(xiǎn)”的能力,除了穩(wěn)定“避免碰撞”,還要能實(shí)時(shí)判斷潛在風(fēng)險(xiǎn),提前做出規(guī)避策略,實(shí)現(xiàn)主動(dòng)安全。

要實(shí)現(xiàn)這種技術(shù)目標(biāo),不同廠商有著不同的答案,而JS Game走向了視覺路線。
目前,大多數(shù)機(jī)器人采用激光、ToF、結(jié)構(gòu)光、雙目等傳感器采集場景點(diǎn)云信息,構(gòu)建柵格地圖進(jìn)行避障。雖然這些方案能夠滿足基本需求,但仍存在諸多局限性:對(duì)傳感器依賴嚴(yán)重、成本較高,且無法有效檢測所有動(dòng)靜態(tài)、低矮及懸空障礙物。尤其是主流的激光雷達(dá)方案,由于信息豐富度不足,難以結(jié)合深度學(xué)習(xí)實(shí)現(xiàn)智能化避障。
為了實(shí)現(xiàn)從"避免碰撞"向"預(yù)見風(fēng)險(xiǎn)"進(jìn)化,JS Game開發(fā)了全新的視覺技術(shù)方案。通過融合多項(xiàng)前沿技術(shù),JS Game研發(fā)了一套系統(tǒng)化的安全決策體系,不僅實(shí)現(xiàn)智能避障,還賦予機(jī)器人主動(dòng)安全能力。
1.感知升維,視覺多模態(tài)融合架構(gòu)
自研異構(gòu)數(shù)據(jù)融合算法,能夠靈活融合雙目視覺模組、Lidar、ToF、跌落傳感器、碰撞傳感器等多種傳感器,實(shí)現(xiàn)時(shí)空同步,全面提升信息獲取能力。
2. 認(rèn)知進(jìn)化,從AI識(shí)別到語義地圖構(gòu)建
基于ToF、camera、Lidar等傳感器數(shù)據(jù),結(jié)合獨(dú)有識(shí)別算法,能夠精準(zhǔn)識(shí)別物體及場景信息。同時(shí)在此基礎(chǔ)上,根據(jù)識(shí)別得到的語義信息結(jié)合機(jī)器人位姿信息,還能夠?qū)崟r(shí)構(gòu)建環(huán)境語義地圖,且支持地圖實(shí)時(shí)更新(場景格局變化)。
3. 決策升級(jí),類腦決策引擎
基于設(shè)備端、云端智能決策平臺(tái)及大數(shù)據(jù)平臺(tái),模仿“人腦”決策,對(duì)語義地圖疊加決策屬性信息,執(zhí)行安全決策。同時(shí),通過關(guān)鍵數(shù)據(jù)不斷優(yōu)化算法模型,持續(xù)提升場景處理與問題應(yīng)對(duì)能力。
基于獨(dú)有的視覺識(shí)別技術(shù)和JS Game微秒級(jí)的安全決策,機(jī)器人能夠穩(wěn)定檢測各類障礙物。
靜態(tài)避障:支持低矮障礙物、高反光障礙物、全高障礙物的精準(zhǔn)檢測與避障,確保機(jī)器人在復(fù)雜環(huán)境中的安全運(yùn)行。

動(dòng)態(tài)避障:實(shí)時(shí)檢測并規(guī)避拋物、行人、快速移動(dòng)物體。
主動(dòng)安全:基于風(fēng)險(xiǎn)預(yù)測機(jī)制,主動(dòng)判斷潛在風(fēng)險(xiǎn),并根據(jù)風(fēng)險(xiǎn)分類,執(zhí)行相應(yīng)規(guī)避策略,實(shí)現(xiàn)主動(dòng)安全。
JS Game的視覺技術(shù)方案不僅為服務(wù)機(jī)器人提供了卓越的避障能力,還通過智能化決策與多傳感器融合,全面提升了機(jī)器人的安全性能。在復(fù)雜多變的商用場景中,這一技術(shù)為機(jī)器人賦予了更高的自主性、智能性與可靠性。
目前,JS Game視覺技術(shù)已推出標(biāo)準(zhǔn)化技術(shù)方案,商用機(jī)器人AI Kit,并獲得ICE、空客等多家國內(nèi)外頭部廠商的合作。