大聯(lián)大旗下友尚推出基于英特爾(Intel)NCS2神經(jīng)計算棒的視覺(jué)系統方案,適用于智能機械手臂。![]() 圖示1-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺(jué)系統方案的展示板圖 機械手臂是一種能夠靈活代替人類(lèi)手和臂工作的機器,通常用以按固定程序抓取、搬運物件或操作工具的自動(dòng)操作裝置。隨著(zhù)機器視覺(jué)、AI等技術(shù)的不斷突破,智能機械手臂的發(fā)展也日益壯大。大聯(lián)大友尚基于Intel NCS2神經(jīng)計算棒的視覺(jué)系統方案,應用于機械手臂中,可精準識別物體,讓抓取、搬用等過(guò)程更加智能。 ![]() 圖示2-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺(jué)系統方案的場(chǎng)景應用圖 本方案的核心原理是利用D435識別到彩色影像結合深度學(xué)習的物件定位算法YOLOv3找到物品位置(X,Y)。當CPU算力不足時(shí),可使用Intel GPU或VPU(NCS2)加速計算,再通過(guò)D435識別到深度影像所對應位置的深度(Z)信息,即可實(shí)現讓機械手臂正確地伸到正確的空間位置(XYZ)夾取并抓取物品。 ![]() 圖示3-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺(jué)系統方案的方塊圖 Intel NCS2是一款具有神經(jīng)計算引擎的VPU(視覺(jué)處理單元),可提供比前一代產(chǎn)品高出八倍的性能。諸如Caffe,Tensor Flow或MXNet等深度學(xué)習神經(jīng)網(wǎng)絡(luò )可以直接與NCS2上的OpenVINO工具包集成。并且這些機器學(xué)習框架還針對全新的深度神經(jīng)網(wǎng)絡(luò )(DNN)推理引擎進(jìn)行優(yōu)化。借助電腦和Intel NCS2,開(kāi)發(fā)人員可以快速啟動(dòng)AI和計算機視覺(jué)應用的開(kāi)發(fā)。 NCS2可在USB 3.0上運行,不需要其他硬件,從而使用戶(hù)能夠將其在電腦上訓練好的模型,無(wú)縫部署到各種邊緣設備而不需連網(wǎng)或連云。無(wú)論是開(kāi)發(fā)智能相機,具有手勢識別功能的無(wú)人機,工業(yè)機器人,還是下一代智能家居設備,NCS2都能為開(kāi)發(fā)人員提供快速原型所需的功能。 核心技術(shù)優(yōu)勢: Intel RealSense D435 camera: 低成本的3D雙目深度相機; 提供完整SDK可以快速與系統整合; 可快速掃瞄,提供點(diǎn)云資訊; 可透過(guò)ROS整合開(kāi)發(fā)自主創(chuàng )新功能; 智能化3D物件辨識。 Intel OpenVino Toolkit: 可最佳化訓練好的模型; 支援業(yè)界、學(xué)界常用的訓練框架; 可快速部屬到Intel的硬體平臺如CPU、GPU、VPU、FPGA; 提供常用的預訓練模型如SSD、YOLO等; 提供C++與Python的應用范例,縮短程式開(kāi)發(fā)周期。 Intel Neural Compute Stick 2(Intel NCS2): 在英特爾MovidiusMyriad X視覺(jué)處理單元(VPU)上提供卓越的每瓦每美元效能進(jìn)行構建和擴展; 支援Windows10,Ubuntu*或macOS*上快速開(kāi)發(fā); 在通用框架和開(kāi)箱即用的范例應用程式上進(jìn)行開(kāi)發(fā); 在不需連云情況下進(jìn)行操作; 在低成本的邊緣設備(例如Raspberry Pi*3和其他ARM*主機設備)端開(kāi)發(fā)原型。 方案規格: 3D相機:Intel RealSense D435 Camera; 作業(yè)系統:Windows 10; Intel NUC Rugged Board with Core i3/i5 Processor; AI推論套件:Intel OpenVino Toolkit 2020.03; 內存:4GB以上; 傳輸界面:USB 3.0; 神經(jīng)計算棒:Intel Neural Compute Stick 2 (Intel NCS2)。 |