摘要:針對(duì)果園作業(yè)機(jī)器人使用單目相機(jī)進(jìn)行遙操作時(shí),,僅用二維視頻獲取環(huán)境信息缺乏臨場(chǎng)感的問(wèn)題,設(shè)計(jì)了一套基于臨場(chǎng)感增強(qiáng)的果園環(huán)境信息可視化系統(tǒng),,用于果園機(jī)器人遙操作,。系統(tǒng)由計(jì)算服務(wù)器、云服務(wù)器,、網(wǎng)絡(luò)攝像頭,、激光雷達(dá),、嵌入式開(kāi)發(fā)平臺(tái)等組成。計(jì)算服務(wù)器采用T7920工作站,,并在其上部署Tensorflow計(jì)算框架和Open3D點(diǎn)云算法庫(kù),,計(jì)算服務(wù)器在接收到云服務(wù)器轉(zhuǎn)發(fā)來(lái)的環(huán)境圖像和點(diǎn)云數(shù)據(jù)后,分別對(duì)圖像進(jìn)行導(dǎo)航信息增強(qiáng),,對(duì)點(diǎn)云進(jìn)行曲面重建,;嵌入式開(kāi)發(fā)平臺(tái)可以收集來(lái)自于網(wǎng)絡(luò)攝像頭和激光雷達(dá)的原始數(shù)據(jù),并上傳至云服務(wù)器,;在云服務(wù)器部署了以ZeroMQ為基礎(chǔ)的消息中轉(zhuǎn)程序和HTML5后臺(tái)服務(wù),,提供跨互聯(lián)網(wǎng)的消息通信服務(wù)和可移動(dòng)的遙操作環(huán)境信息可視化服務(wù)。測(cè)試結(jié)果表明,,部署在計(jì)算服務(wù)器的導(dǎo)航信息提取模型平均提取導(dǎo)航線時(shí)間86ms,,提取導(dǎo)航線平均精度16°,均優(yōu)于對(duì)比模型結(jié)果,。點(diǎn)云重建算法可以有效建立場(chǎng)景輪廓,平均精度4.9cm,,平均重建時(shí)間24ms,。壓縮圖像傳輸及增強(qiáng)處理時(shí)延不超過(guò)230ms,點(diǎn)云的傳輸時(shí)延不超過(guò)400ms,。各項(xiàng)參數(shù)可以滿足遙操作機(jī)器人進(jìn)行果園作業(yè)的基本要求,,相比僅有單目相機(jī)的遙操作,臨場(chǎng)感明顯增強(qiáng),,可為果園機(jī)器人遙操作提供參考,。