項目一:完成 AI 晶片開發板並進行驗證 (已完成) 此開發板乃為因應 AI 晶片的推廣,且讓新的使用者可以立刻的實際體驗。目前已進入批量生產階段。除了開發板之外,團隊更開發了一套協助使用者快速進行模型建立,並可簡易燒錄的軟體輔助工具,從資料集的建立、模型的訓練、模型的推論表現測試等等,都有支援,如此讓使用者能夠進行完整的開發流程。
項目二:訓練物體辨識與植入 AI 晶片實驗測試 (已完成) 團隊年度目標為將此 AI 晶片應用於機器人上,一開始先以較單純的物體辨識功能做應用,搭配機器手臂作手勢命令的判別、物體判別與物體移動學習。物體辨識模型的訓練流程完成後,將其輸入模型至AI晶片以實際進行實驗測試。
項目三:機械手臂控制與 AI 晶片開發板之硬體整合 (已完成) 團隊使用 Arduino Leonardo 板作為AI晶片與 PC 的橋接。PC 將指令由序列埠 (serial port) 傳給 Arduino 板,接著Arduino 板由 I2C 埠發出指令給 AI 晶片並接收回傳的資訊,最後再將此資訊以特定格式經由序列埠回傳給 PC。PC 則依此回傳資訊決定程序階段,再經由路由器傳送控制命令給機器手臂控制器。
項目四:搭配 AI 晶片軟體應用於機器人 (已完成) 目前機器人常搭載體積大、成本高且耗電之 GPU 或 FPGA 來進行影像處理,本團隊年度目標預計將此 AI 晶片取代傳統的 GPU 與 FPGA 搭載於機器人上。我們先進行“人臉識別”來確認操作者是否擁有操作權限,接著以“手勢識別”接收操作命令,如此降低 GPU 的負載,使得程式運作能更快速流暢。
項目五:探討 AI 晶片於擬人型雙手臂機器人之取放 (pick-and-place) 應用 (已完成) 由於108年度預定進行雙手臂機器人之實作應用,因此我們先針對雙手臂機器人來探討相關技術的理論與實務成效。目前已著手整合項目一至項目四以進行 AI 晶片於擬人型雙手臂機器人之取放 (pick-and-place) 之實驗。