工業技術研究院   人工智慧範疇類   編輯

智慧視覺機器人系統

 

產品介紹

工研院所開發的「智慧視覺機器人系統」(Intelligent Vision System for Companion Robots),運用他的「眼睛」和手倒咖啡、「看見」對手棋路,與人下西洋棋。智慧視覺機器人結合深度視覺感測技術,運用人工智慧(AI)學習西洋棋戰術,並透過3D視覺感測辨識,讓機器人能夠辨識出每個棋子的不同,連結後端的人工智慧技術,控制手臂做肢體動作與人對弈。包括下西洋棋、倒咖啡等動作,所有動作都是機器人自己完成,整個運作過程不需要外人介入。

西洋棋盤的棋格範圍不大,每顆棋子的形狀、高度各不相同,因此機器人是否具有 3D 深度視覺感測系統就顯得相當重要,能加以辨識棋子空間位置、形狀高度,判斷夾爪夾取位置。根據視覺所得到的資訊快速判斷並採取回應,同時自主決定應驅動哪隻手臂夾取、執放與移動棋子,強調「眼手協調」運用,每個動作都相當精準不閃失。

產品圖片

產品影片

  1. 快速AI辨識技術:在極短的時間內透過整合機器學習與機器視覺辨識西洋棋子
  2. 精確的3D姿態估測計算
  3. 透過機器視覺可彈性偵測杯子任意擺放的位置並控制機器人倒飲料
  4. 無標記式液面偵測

工研院「智慧視覺機器人系統」在電光系統所帶領下整合跨領域團隊,包括機械所、巨資中心、產經中心及清大師生等跨領域專長的人才。其中最主要的核心技術-深度視覺感測技術,係整合過去電光系統所應用於頭戴式顯示器之凌空觸控技術、手持式3D掃描器、無線行動3D掃描器(mScan)、可攜式投影互動裝置(iNTERPLAY)及虛擬鋼琴(Virtual Piano)之經驗,現在又運用於機器人。

結合深度視覺感測技術,運用人工智慧(AI)學習西洋棋戰術,讓機器人能夠與人對弈。透過視覺系統偵測棋盤、看見對手棋路,根據視覺所得到的資訊快速判斷並採取回應,同時自主決定應驅動哪隻手臂夾取、執放與移動棋子,強調「眼手協調」運用,每個動作都相當精準不閃失。

面對人工智慧時代的來臨,資料的取得是了解分析各個應用領域的基礎。透過各式的通訊裝置、系統或基地台讓訊息得以流通。訊息的傳送與回饋大幅的提升了生活及工作的便利性及智能化。這樣的發展使決策更彈性、即時、個人化。為了要能夠獲取這些訊息,都需要複雜繁瑣的系統架設,讓系統與裝置之間得以溝通。對於無法產生通訊能力的物品,譬如生活中看得到的桌子、椅子,或工廠內生產加工中的工件本身,智慧視覺系統是一個完整的解決方案,如同人用眼睛看並且觀察這個世界,即可知道如何判斷回應。

視覺系統如何變得智慧?關鍵在於資料(data)的取得。透過大量的資料蒐集、高度完整的分析歸納,再將這些智慧的結晶灌輸到智能環境系統、自動化製造系統、或甚至機器人系統成為大腦,進行各式決策的判斷。在人工智慧時代來臨之際,各式資料的蒐集與建立成為最為重要的科技基石,也是重要資產。

智慧視覺系統以完整的解決方案提供了重要的外觀資訊,並予以分析集結成智慧結晶,作為自動化或機器人系統的決策大腦。智慧視覺系統的應用,不只是發生在製造工廠,而是與日常生活息息相關。以服務型機器人為例,隨著老人照護需求增加,可智慧添茶倒水、陪伴下棋、或家事服務等智慧視覺系統都是觸動人工智慧決策的重要資訊來源。延伸至移動系統、陪伴、生活輔助、或醫療等,對未來的生活,都會產生重大的改變且深遠的影響。

透過智慧視覺系統的導入,物體的外觀資訊大量的被累積下來。不論是外形、尺寸、高低、顏色等都能夠快速地被記錄分析,產生可以做為控制判斷的資訊基礎。以生產加工為例,在每一個加工的過程中,可能會產生尺寸的偏差,或不如原有設定的加工尺寸而產生的數據資料。在這個資料擷取與分析的過程中,物件的外觀就是完整的訊號,讓智慧視覺系統看到瑕疵的地方予以修正。更進一步將這些累積下來的資料進行分析,加工的流程及作法都可依照資料所提供的訊息作為基礎得以改善優化。

除此之外,智慧視覺系統也同時提供了空間資訊,讓自動化系統在空間中的位置資訊得以被了解,進而動態的變換產線滿足生產需要。在工業領域,隨機取樣、產線組裝拆解、無人搬運車(AGV)系統等都需要智慧視覺系統的協助,目前也已經廣泛應用於一些工業領域。

標題:
詢問內容:
E-mail:
確認代碼: 驗證圖碼 換一張圖