科技部AI創新研究中心專案計畫
由人類動作演示引導機器人學習之方法與系統的研究─演示學習型機器人研發(2/4)
MOST 108-2634-F-003-003
計畫年度

 

 
 

亮點三:AI 晶片之智慧機器人應用

重點項目
項目一:完成 AI 晶片開發板並進行驗證 (已完成)
此開發板乃為因應 AI 晶片的推廣,且讓新的使用者可以立刻的實際體驗。目前已進入批量生產階段。除了開發板之外,團隊更開發了一套協助使用者快速進行模型建立,並可簡易燒錄的軟體輔助工具,從資料集的建立、模型的訓練、模型的推論表現測試等等,都有支援,如此讓使用者能夠進行完整的開發流程。

項目二:訓練物體辨識與植入 AI 晶片實驗測試 (已完成)
團隊年度目標為將此 AI 晶片應用於機器人上,一開始先以較單純的物體辨識功能做應用,搭配機器手臂作手勢命令的判別、物體判別與物體移動學習。物體辨識模型的訓練流程完成後,將其輸入模型至AI晶片以實際進行實驗測試。

項目三:機械手臂控制與 AI 晶片開發板之硬體整合 (已完成)
團隊使用 Arduino Leonardo 板作為AI晶片與 PC 的橋接。PC 將指令由序列埠 (serial port) 傳給 Arduino 板,接著Arduino 板由 I2C 埠發出指令給 AI 晶片並接收回傳的資訊,最後再將此資訊以特定格式經由序列埠回傳給 PC。PC 則依此回傳資訊決定程序階段,再經由路由器傳送控制命令給機器手臂控制器。

項目四:搭配 AI 晶片軟體應用於機器人 (已完成)
目前機器人常搭載體積大、成本高且耗電之 GPU 或 FPGA 來進行影像處理,本團隊年度目標預計將此 AI 晶片取代傳統的 GPU 與 FPGA 搭載於機器人上。我們先進行“人臉識別”來確認操作者是否擁有操作權限,接著以“手勢識別”接收操作命令,如此降低 GPU 的負載,使得程式運作能更快速流暢。

項目五:探討 AI 晶片於擬人型雙手臂機器人之取放 (pick-and-place) 應用 (已完成)

由於108年度預定進行雙手臂機器人之實作應用,因此我們先針對雙手臂機器人來探討相關技術的理論與實務成效。目前已著手整合項目一至項目四以進行 AI 晶片於擬人型雙手臂機器人之取放 (pick-and-place) 之實驗。
成果影片

 

電話: (02)7749-3539, 傳真: (02)2351-5092, E-mail: andychien265@gmail.com

校址: 臺北市和平東路一段129-1號, 國立臺灣師範大學(圖書館校區) 科技與工程學院大樓4樓TA410研究室

Copyright © Computational Intelligence and Robotics Lab at NTNU. All rights reserved.