指導老師:林偉川 開發團隊:鄭雅云、劉翔文、陳柏文、李依璇 德明財經科技大學資訊科技系 2015/12/11

Slides:



Advertisements
Similar presentations
四川财经职业学院会计一系会计综合实训 目录 情境 1.1 企业认知 情境 1.3 日常经济业务核算 情境 1.4 产品成本核算 情境 1.5 编制报表前准备工作 情境 1.6 期末会计报表的编制 情境 1.2 建账.
Advertisements

主编:邓萌 【点按任意键进入】 【第六单元】 教育口语. 幼儿教师教育口 语概论 模块一 幼儿教师教育口语 分类训练 模块二 适应不同对象的教 育口语 模块三 《幼儿教师口语》编写组.
第一組 加減法 思澄、博軒、暐翔、寒菱. 大綱 1. 加減法本質 2. 迷思概念 3. 一 ~ 七冊分析 4. 教材特色.
海南医学院附 院妇产科教室 华少平 妊娠合并心脏病  概述  妊娠、分娩对心脏病的影响  心脏病对妊娠、分娩的影响  妊娠合病心脏病的种类  妊娠合并心脏病对胎儿的影响  诊断  防治.
植树节的由来 植树节的意义 各国的植树节 纪念中山先生 植树节的由来 历史发展到今天, “ 植树造林,绿化祖国 ” 的热潮漫卷 了中华大地。从沿海到内地,从城市到乡村,涌现了多少 造林模范,留下了多少感人的故事。婴儿出世,父母栽一 棵小白怕,盼望孩子和小树一样浴光吮露,茁壮成长;男 女成婚,新人双双植一株嫩柳,象征家庭美满,幸福久长;
客户协议书 填写样本和说明 河南省郑州市金水路 299 号浦发国际金融中 心 13 层 吉林钰鸿国创贵金属经营有 限公司.
浙江省县级公立医院改革与剖析 马 进 上海交通大学公共卫生学院
第二章 环境.
教师招聘考试 政策解读 讲师:卢建鹏
了解语文课程的基本理念,把握语文素养的构成要素。 把握语文教育的特点,特别是开放而有活力的语文课程的特点。
北台小学 构建和谐师生关系 做幸福教师 2012—2013上职工大会.
福榮街官立小學 我家孩子上小一.
第2期技職教育再造方案(草案) 教育部 101年12月12日 1 1.
企业员工心态管理培训 企业员工心态管理培训讲师:谭小琥.
历史人物的研究 ----曾国藩 组员: 乔立蓉 杜曜芳 杨慧 组长:马学思 杜志丹 史敦慧 王晶.
教育部高职高专英语类专业教学指导委员会 刘黛琳 山东 • 二○一一年八月
淡雅诗韵 七(12)班 第二组 蔡聿桐.
第七届全国英语专业院长/系主任高级论坛 汇报材料
小數怕長計, 高糖飲品要節制 瑪麗醫院營養師 張桂嫦.
制冷和空调设备运用与维修专业 全日制2+1中等职业技术专业.
会计信息分析与运用 —浙江古越龙山酒股份有限公司财务分析 组员:2006级工商企业管理专业 金国芳 叶乐慧 魏观红 徐挺挺 虞琴琴.
第六章 人体生命活动的调节 人体对外界环境的感知.
芹菜 英语051班 9号 黄秋迎 概论:芹菜是常用蔬菜之一,既可热炒,又能凉拌,深受人们喜爱。近年来诸多研究表明,这是一种具有很好药用价值的植物。 别名:旱芹、样芹菜、药芹、香芹、蒲芹 。 芹菜属于花,芽及茎类。
2012年 学生党支部书记工作交流 大连理工大学 建工学部 孟秀英
北京市职业技能鉴定管理中心试题管理科.
2014吉林市卫生局事业单位招聘153名工作人员公告解读
功能科工作环境介绍 铜仁职业技术学院医学影像教研室.
各類所得扣繳法令 與申報實務 財政部北區國稅局桃園分局 103年9月25日
初級游泳教學.
爱国卫生工作的持续发展 区爱卫办 俞贞龙.
第八章 数学活动 方程组图象解法和实际应用
本课内容提要 一、汇率的含义 二、汇率变化与币值的关系 三、汇率变化的影响. 本课内容提要 一、汇率的含义 二、汇率变化与币值的关系 三、汇率变化的影响.
散文鉴赏方法谈.
比亚迪集成创新模式探究 深圳大学2010届本科毕业论文答辩 姓名:卓华毅 专业:工商管理 学号: 指导老师:刘莉
如何撰写青年基金申请书 报 告 人: 吴 金 随.
点击输 入标题 点击输入说明性文字.
國際志工海外僑校服務 越南 國立臺中教育大學 2010年國際志工團隊.
第六章健康教育 神木职教中心医学系.
痰 饮.
學分抵免原則及 學分抵免線上操作說明會.
教 学 查 房 黄宗海 南方医科大学第二临床医学院 外科学教研室.
评 建 工 作 安 排.
“十二五”国家科技计划经费管理改革培训 概预算申报与审批 国家科学技术部 2012年5月.
“十二五”国家科技计划经费管理改革培训 概预算申报与审批 国家科学技术部 2012年5月.
首都体育学院 武术与表演学院 张长念 太极拳技击运用之擒拿 首都体育学院 武术与表演学院 张长念
现行英语中考考试内容与形式的利与弊 黑龙江省教育学院 于 钢 2016, 07,黄山.
第5讲:比较安全学的创建 吴 超 教授 (O)
彰化縣西勢國小備課工作坊 新生入學的班級經營 主講:黃盈禎
重庆市西永组团K标准分区基本情况介绍.
西貢區歷史文化 清水灣 鍾礎營,楊柳鈞,林顥霖, 譚咏欣,陳昭龍.
所得稅扣繳法令與實務 財政部北區國稅局桃園分局 102年12月19日 1 1.
角 色 造 型 第四章 欧式卡通造型 主讲:李娜.
走进校园流行 高二15班政治组 指导老师:曾森治老师.
医院文化建设 广东省中医院 2011年3月26日.番禺.
案例:海底捞模式 ——把服务做到极致.
医疗法律法规培训 连云港市东辛农场医院 周卫平 二0一四年十二月.
史泰博出货检验员面试中·········
09英本2班 罗芬.
个人所得税 扣缴申报表填报讲解.
实习报告 本次实习由马旭洲老师带队,成员莫文泓,陈宁悦,和永 杏,高启共4人 实习时间:42天 实习单位:杭州市农科院水产研究所.
3/19/2017 项目三 西餐厅服务 管理 餐饮服务与 高安市职教中心.
分享交流.
簡介內容 校長的話 創校簡史 校訓 辦學理念 辦學特色 未來展望 優質校園 全新設備 優秀師資 優質學習環境 辦學績效 體育績優
中鸣虚拟搜救比赛项目 (一人) 现场主题创作(40%)(一人) 3D虚拟搜救(60%)(一人).
香草小鲜社会化产业扶贫项目 香草养殖模式打造农业全产业链,带动产业扶贫再升级 香草小鲜农业科技有限公司 2016年9月20日.
教務行政資訊系統 簡介 資訊科技中心 資訊系統組 徐振琦
足球竞赛规则.
歹徒透過通訊軟體詐騙手法1-冒用身份 若被害人通訊軟體「允許被加入好友」為開啟狀態 駭侵Google帳戶取得通訊錄
美和科技大學資訊科技系 助理教授 美和科技大學資訊科技系 學生士
歹徒透過通訊軟體詐騙手法1-冒用身份 若被害人通訊軟體「允許被加入好友」為開啟狀態 駭侵Google帳戶取得通訊錄
Presentation transcript:

指導老師:林偉川 開發團隊:鄭雅云、劉翔文、陳柏文、李依璇 德明財經科技大學資訊科技系 2015/12/11 教育部資通訊軟體創新人才推升推廣計畫 「智慧終端與人機互動創作專題競賽」報告 指導老師:林偉川 開發團隊:鄭雅云、劉翔文、陳柏文、李依璇 德明財經科技大學資訊科技系 2015/12/11

大綱 作品動機與簡介 需求分析 系統設計 系統測試

作品動機與簡介 開發動機 作品簡介 系統範圍

作品動機與簡介-開發動機 機器人被應用的層面越來越廣泛。 例如:清潔機器人、工廠的機器手臂等。 解決傳統遙控器或是一般的控制介面無法完成的動作。 設計出利用體感操控機器人

作品動機與簡介-作品簡介 機器人動作偵測回應系統利用和Kinect偵測使用者的動作結合智慧型人型機器人來達到控制機器人的目的。使用者可以在螢幕上看到Kinect偵測到的動作骨架,然後藉由藍牙將動作傳輸給機器人進行操控,並透過網路攝影機偵測機器人的動作來監控機器人是否有正常運作 Kinect體感技術結合機器人,讓機器人能偵測人的動作而做出同樣的動作,希望藉此雛型能驗證藉由體感互動技術操控機器人。

作品動機與簡介-系統範圍 當Kinect感測到有使用者時,Kinect影像鏡頭和深度鏡頭會將感測到的使用者關節節點之X、Y、Z軸座標給電腦,我們用這些節點繪製成骨架,再用公式去計算出骨架之間的角度,並換算成控制伺服馬達的數據並可上傳到資料庫 透過Wi-Fi將數據傳給Arduino,Arduino再將接收到的數據透過HC-05藍牙模組傳給機器人RQ-Huno的藍牙,讓機器人做出使用者的動作。 當機器人動作時,IP Cam會截圖並將路徑上傳資料庫,並利用顏色過濾來判斷動作的四肢。 使用者利用介面按鈕進行動作錄製後,電腦可從資料庫取回使用者的動作紀錄進行回播,並可利用手機APP控制機器人動作紀錄及撥放,以指揮機器人做出人先前所作的同樣動作。

需求分析 需求功能說明 系統效能、可用性系統軟硬體架構說明

需求分析-需求功能說明 使用者只須站在Kinect前面展示動作,不需任何機器操作 使用者可使用動作錄製與回播功能 監控者可利用遠端方式進行監控 監控者可利用查詢頁面查看動作紀錄 使用者可利用APP回播動作

需求分析 -系統效能、可用性 系統效能:動作資料傳輸時間延遲在1秒以內、機器人動作正確率60%以上、IP Cam偵測正確率60%以上 可用性:除了記錄動作與回播動作外,使用者完全無須在身上穿戴任何套件,無須用按鈕操控機器人,只需在Kinect能偵測到的範圍內做出動作,就可使機器人動作。

需求分析 -系統軟硬體架構說明

需求分析 -系統軟硬體架構說明 體感互動子系統 利用Kinect體感互動系統偵測使用者並繪製出使用者的骨架,當使用者做出動作後,藉由使用者骨架間的角度換算成數據透過筆電藍牙裝置傳給機器人系統。 機器人子系統 當體感互動系統感測到使用者的動作,並將數據傳給機器人系統,機器人系統控制伺服馬達讓機器人做出相對應的動作。 遠端監控子系統 透過網路監控機器人與使用者的現況。當機器人動作異常或是延誤的時,透過網路攝影機IP Cam讓觀測者可以取得即時影像。

系統設計

系統設計 -介面設計 Kinect 連接介面 Comport選擇及連接 十六個關節馬達 人體骨架顯示畫面 按鈕功能- 預設: 記錄:開始錄製動作 停止:停止錄製動握 播放:回播已錄製之動作 清除:清除動作資料

系統設計 -介面設計 監控介面 偵測狀態顯示畫面 啟動連接及移動偵測 顏色選擇器 文字顯示偵測狀態

系統設計 -資料庫設計

系統測試

系統測試-動作感應測試(1)

系統測試-動作感應測試(2)

系統測試-監控端移動偵測(真人)

系統測試-監控端移動偵測(機器人)

系統測試-監控端顏色偵測 項目/判定 距離 測得次數/測試次數 正確率 說明 右手(藍色) 50cm 10/10 100%   顏色過濾之移動正確率較低之因素:機器人非真人比例之尺寸,使得機器人執行動作幅度較小,加上距離影響與光線影響顏色變化,使動作之移動程度皆在程式判斷的可容忍範圍內,故1公尺以上之距離的偵測反應程度較低甚至無偵測反應。 1m 7/10 70% 2m 3/10 30% 左手(紅色) 9/10 90% 6/10 60% 1/10 10% 右腳(綠色) 左腳(黃色) 8/10 80% 0/10 0%

系統測試-Kinect與IP Cam整合測試 左上為IP Cam顏色過濾畫面,右方為Kinect介面,左下為側錄畫面。

系統功能說明展示 體感互動子系統 遠端監控子系統 資料查詢 Android APP端

體感互動子系統 選好Com Port後按下Start Video就會出現Kinect的攝影畫面和用程式繪製出的骨架圖,按下StartConnect後即可控制機器人。 人體骨架 實測畫面

體感互動子系統 選好Com Port後按下Start Video就會出現Kinect的攝影畫面和用程式繪製出的骨架圖,按下StartConnect後即可控制機器人。 人體骨架 實測畫面

遠端監控子系統 移動偵測

四肢顏色偵測

資料查詢 我們提供一個能讓使用者檢視已存入資料庫中的資料。 首先要先登入(如左圖),選擇要查詢的時間範圍,就可檢視資料庫的資料(如右圖)

Android APP端 在IP的地方打上IP Address後按下確認後,按下start或stop可以開始錄製或是停止錄製,按下play可以讓機器人撥放使用者所錄製的動作,按下showimage可以顯示IP Cam存進資料庫的影像

顯示圖片展示

Thank you