不論是機器人還是智能設備,都需要與人、與周圍環境進行交互,這些應用場景都需要應用到機器視覺。在機器設備自動化、智能化發展的趨勢下,機器視覺正步入新的發展階段,對于三維深度感知能力的需求也在不斷增加。
人工智能2.0時代,3D視覺迎來發展春天
銀牛微電子聯合創始人兼首席戰略官白逸先生近期在接受維科網機器人采訪時表示,傳統的2D機器視覺,不僅提供的數據質量有限,還缺乏空間感,大大影響了現有的人工智能技術的發展。因此,在全新的人工智能2.0時代,傳統的2D機器視覺亟需快速向3D機器視覺升級。
白逸表示,3D視覺能夠產生2D系統不能產生的深度立體信息,因此其使用范圍更廣,可以測量與深度相關的特征,例如物體平直度,表面積和體積,能夠提供更真實的空間感,獲得更精確的相對位置。在工業應用場景中,3D視覺的出現正是硬迎合了機器人向智能化進階的趨勢。
3D視覺感知技術是高端制造和智能機器人的關鍵技術,它賦予了機器人“眼睛和大腦”的三維感知能力,使機器人具備精準感知、敏捷運動、自主決策等能力,是構建AI智能機器生態的重要一環。
隨著技術的不斷升級迭代和落地,以及受疫情以及勞動力緊缺等因素的影響,智能機器人迎來爆發前夜,與之相關的3D機器視覺技術風口正起。
3D機器視覺+AI技術,助力機器人行業變革
白逸表示,完整的3D感知和AI異構計算平臺,是機器視覺未來的發展趨勢。作為一家專注3D和AI芯片、模組及產品設計的高新科技企業,銀牛微電子的目標是向3D視覺應用市場提供全球領先的底層技術,構建AI進入3D機器視覺時代后的異構計算平臺以及平臺之上的生態系統。
2020年11月,銀牛微電子完成對全球領先的3D視覺芯片設計企業以色列Inuitive的投資入股。Inuitive的核心技術高度集成了3D視覺深度引擎技術、SLAM及AI功能,模擬人腦+人眼,為客戶提供前沿的實時3D感知、計算到系統一體化的解決方案。
此外,銀牛的芯片及模組已在全球范圍內應用在智能機器人、元宇宙、輔助駕駛、3D交互、3D人臉識別、無人機、醫美、工業檢測等多個前沿3D視覺應用領域的龍頭企業產品中。
銀牛微電子面向機器人市場已推出兩款實現量產的、顛覆創新產品—3D機器視覺模組C158和R132,可高效應用于機器人避障,物體識別、SLAM空間定位等。白逸表示,銀牛3D機器視覺模組R132基于全球領先、高度集成的3D人工智能異構計算平臺芯片NU4000設計。由于該芯片采用12nm工藝,多核架構,單芯片集成3D深度感知、SLAM實時定位建圖引擎、人工智能及通用CPU于一體,可實現從3D感知、計算到系統一體化的解決方案,不僅能夠幫助機器人實現智能升級,還能大大降低機器人客戶的系統成本。
銀牛微電子新推出的R132模組具備眾多亮點:強大的3D深度感知引擎:深度分辨率1080x720@60fps,感知距離0.15m-3m,精度誤差;更大FOV深度視場角88°×58°,讓機器人擁有更寬廣的視野;RGB攝像頭FOV完全覆蓋深度FOV:RGB分辨率1600×1200,視場角90°×73°,實時檢測識別跟蹤多目標物體,對實現RGBD多傳感器的融合提供方便;強勁的NU4000綜合AI運算能力和靈活配置,通用ARM核支持不同應用,可獨立運行系統,減少主控芯片和系統的負擔,提高實時性;低功耗,更小尺寸:90mm×25mm×25mm,功耗低至1.4W;板載IMU:內外參數完整標定的板載IMU。R132模組目前聚焦服務機器人行業應用,未來還可以拓展到無人機、直播設備、3D掃描、智能家居、機器視覺等行業應用。
破解3D視覺應用瓶頸,助力行業生態圈健康發展
銀牛微電子的產品和解決方案不僅具備復雜SOC(芯片級系統)的能力,還具備業界少有的雙目機器視覺技術。據白逸介紹,銀牛3D機器視覺模組采用的是主動雙目立體視覺技術。雙目立體視覺成像具有高分辨率、高精度的3D成像、抗強光干擾性能強、識別距離遠等優勢。隨著3D機器視覺技術的發展,對于精度、FPS、分辨率、識別距離的要求會越來越高的,這也是雙目立體視覺技術的最大優勢,未來甚至可以達到與人眼接近的水平,大大擴展了3D視覺機器人的應用場景。
談及整個行業的推廣和應用瓶頸時,白逸認為,一方面提高開發設計的效率,另一方面要降低成本,3D視覺機器人才能迎來爆發式的增長。銀牛微電子的集成解決方案不僅擁有自主的深度學習算法以及高度集成的硬件系統,大大降低客戶企業的開發周期,還采用了豐富成熟穩定的軟件開發系統,即SDK軟件開發環境,提升了解決方案的穩定性和適用性,更加方便于軟硬件的升級迭代。這一系列的優勢,能夠大大降低行業的應用成本,讓終端客戶和市場創造更多的價值,有利于3D視覺機器人的行業生態圈更好更快的發展。
如今,機器人產業正處在行業爆發期,銀牛攜全球領先的3D機器視覺技術和解決方案賦能機器人產業,實際解決機器人避障、3D重構、實時定位等問題,為機器人客戶創造更多價值。面對充滿無限潛力的未來,在采訪的最后,白逸表示,銀牛微電子將一如既往地持續推動3D機器視覺及AI技術的研發和產品迭代,致力于成為全球3D人工智能時代異構計算平臺的引領者,通過更全面的產品和服務助力中國機器人產業升級,推動行業生態健康發展。