这么建模型,你就错了 演讲者:俞如富 职位 :BI主管 来自公司:富士通(福建).

Slides:



Advertisements
Similar presentations
元大京華證券 組員名單 : A 楊之奇 A 廖本揚 A 宋俊承 A 陳冠廷 A 郭峻瑋 A 指導教授 : 許素華 副教授.
Advertisements

達悟族報告 作者 : 林琪崴, 許原碩 座號 :13 號,14 號 原碩負責 : 簡介, 傳說, 圖驣, 達悟族飛魚季, 琪崴 : 地理位置, 土地利用方式, 飲食文化, 豐收祭.
主讲:张天明 影像艺术工程师. 声音的聆听 指出听到的是什么物体发出的声音,这一 声音是在什么样的空间环境中传播的。 一、 答案: 1 、打气筒打气的声音 2 、手打打气筒给足球打气的声音 3 、手打打气筒给自行车轮胎打气的声音 4 、七次(七声)打气筒打气的声音 5 、(气流)摩擦的声音 6 、猪在发急时的叫声.
概念導向命題技巧與試題分析 臺灣師大地理系 陳國川. 教學評量是一種『抽樣調查』 實施教學評量時,需具備二項條件: 其一,瞭解命題的理論及其實踐的方法; 其二,瞭解各種題型的功能與命題方式。 壹、前言.
第十八章 林肯大郡 第十八章 林肯大郡災變緊急搶救應變措施 1997 年 8 月 18 日溫妮颱風襲台,汐止鎮 的林肯大郡山崩,遭崩場土石撞擊 1997 年 8 月 18 日溫妮颱風襲台,汐止鎮 的林肯大郡山崩,遭崩場土石撞擊造成二十八人罹難八十戶住宅倒塌的慘劇 此災變要喚起國人的重視 本章介紹搜救行動緊急應變措施。
高峰植物園行前解說 2005/12/07 By 羽明. 陽性先驅物種 陽性植物 --- 陽光需求量大 陰性 ( 或耐蔭性 ) 植物 --- 陽光需求量少, 或 日照太強反而無法生存 先驅植物 --- 森林大火或土石流地震後產生的 裸露空地, 先生長出來的植物.
報 告 人 : 胡 嘉 琪 ˙ˇ˙ 、 王 紫 庭 = ˇ = 台灣夜市文化 作者: 郭明澤‧私立明道高中‧綜二 4 班 馬炯修‧私立明道高中‧綜二 4 班.
5 ˙ 1 第五章 生物的協調作用 5 ‧ 1 神經系統. 5 ˙ 1 人體的神經系統 1. 協調動物生理反應的系統: 神經 系統、 內分 泌 系統。 2. 神經系統負責 統整 和 協調 。分為 中樞 神經 和 周圍 神經。 (1) 中樞神經包括 腦 和 脊髓 。 (2) 周圍 神經包括 腦神經 和.
从《西游》看大学生的成长 主讲人:颜廷学 时间: 地点:演艺大楼流行剧场.
新员工培训 设计部 思安新能源股份有限公司 主讲人: 韩少华 时 间:
前言:河流的主要功能 1. 交通運輸 優點-運費低廉,維護費用低 缺點-速度慢,裝載費時,不能到達生產區或消費區 的末端,需要轉載。 尚受到河流網路,河口位置,水量變化,河床 狀況,冰封時期 2. 水資源系統.
幽夢影~張潮 小佑子工作室 關於《幽夢影》 作者張潮,記寫他個人對人生世事之體驗透悟的 書。 書中文字,全為「語錄」形式,屬於格言,也是 最精鍊的隨筆。 全書可分為九卷:論才子佳人、論人與人生、論 朋友知己、論讀書、論閒情逸趣、論立身處世、 談文論藝、論四時佳景、論花鳥蟲魚。
成人高考高起点 语文 冲刺班 主讲老师:邓君媚. 复习指导 高考语文含四大块内容: 语言知识和语言表达,古代诗文阅读,现 代文阅读,写作。 在全面复习的前提下,按照《考试大纲》 的要求,要做好思路整理,建立高考的整体框 架的工作。认真归纳整理基础知识、培养基本 能力,复习做到有的放矢。 复习指导.
老师,我可以不 爱 吗? 山东省淄博市张店区实验中学 杜桂兰 星期一的早晨,我紧张而又兴奋,因为 我的赛教课就要开始了。 这是一次级别很 高 的竞赛。
C A D C D.
财政部 国家税务总局 中国人民银行(央行) 银监会 证监会 保监会. 法定存款准备金率 利率 税率 政府投资 楼继伟,周小川,易纲.
油蔴菜籽 指導老師:陳瑜霞 學生: 商設一甲 謝旻璇 車輛三乙 許勝傑 工管四甲 彭凱雲. 作者介紹: 廖輝英( 1948 年生)臺大中文系畢業。 從初三開始寫作,早期作品多以散文為主,大四 畢業時才暫時封筆。畢業後進了廣告界,成為廣 告文案好手,後為企畫主管,在廣告界縱橫十餘 年,也曾任職於建設公司,辦過社區報高雄一周。
蘭嶼情人洞傳說 林庭羽製 林庭羽製. 台灣的蘭花特別多,台灣有個蘭 嶼島,島上面的蘭花更多.所以 叫蘭嶼.這裡留下了動人的傳說。
職業訪談報告. 成員 : 鐘怡君 劉沛君 謝明達 賴映辰.
南台科大幼保實習課程 見習幼兒園心得報告 夜四技幼保四甲 998i0021 黃欣婷.
第一章 生殖 1‧2 無性生殖.
高教三十条 — 科技创新能力提升 科技创新能力提升工程方案起草小组 2013年7月4日.
你不可不知之 十二年國教二三事 教務主任:傅瑞琪.
鞋 楦 的 材 質.
最古怪的15種動物.
走! 一起去拜訪筏子溪.
台灣文學館之旅.
單車環島之旅 組員: 495D0072 胡閎智 495D0074 何冠緯 495D0020 王怡雯 495D0047 葉亭君
 耕地分割 及 執 行 內政部地政司 視察:林玲女.
~完備、周密、迅速 ~ 行政院農業部畜產試驗所
建筑设计基础讲义 (02-1) 建筑水彩渲染.
現代文學導讀 (中國現代散文發展的歷史軌道)
谨以此文—— 送给所有的人.
方 孝 孺 指喻.
保護地球人人有責:我能做的事 若想讓地球、人類社會明天會更好的話,可以考慮日常生活中採取什麼綠色行動,逐步恢復按上天設計大自然規定的方式做人,從而減少個人的「生態足印」,爭取可以延續的未來。 
小 王 子 <第六組> 組長: 謝汶芳 組員: 劉佳蓉 曹展愛 陳建妏
據說: 烏鴉有四種--- 巨烏 祥烏 鳳烏 慈烏~ 知恩 感恩 報恩.
桃園傅小弟遭刺青施虐事件 指導老師:高家斌 班級:幼保四甲 姓名與學號: 496I0004 程千芸、496I0010 林昀嫻
北科大學士學位 冷凍空調 甲、乙、丙 級技術士 三年工作經驗 大一階段 專精訓練 大三階段 回流訓練.
9.2.2 会计基本法律制度 一、会计机构和会计人员制度 二、会计核算制度
指導教授:林劭仁老師 組員:范紋綺、王宣惠、蔡雅玲 王思樺、陳可馨、吳芷容.
歡欣鼓舞過新年之四-跟年有關的故事 蘇澳國小 三年三班導師 張怡玲.
淺談中醫養生保健之道 國立中正大學醫務室 中醫科 楊明穎 醫師 中國醫藥學院 醫學士中醫師 高雄醫學院 藥學士藥師
只要有心 機器都可以成為食神 機電三甲  陳保翔  宓芳頡  雷家翔.
北極熊 華德學校 姓名:黄景山.
數學家 阿基米德 6C 李俊熙.
一般情况碰撞 1 完全弹性碰撞 动量和机械能均守恒 2 非弹性碰撞 动量守恒,机械能不守恒 3 完全非弹性碰撞 动量守恒,机械能不守恒.
目錄 99年『 84電腦及相關服務』案件統計 機關端:資訊服務價格資料登錄流程 機關端及廠商端:資訊服務價格資料查詢流程
十堰管理部党委中心组“三严三实” 第三阶段专题学习
公共選擇理論 實踐大學 指導老師:林信雄.
日期: 六 福 村.
孩子的心,我懂 怀仁全人发展中心 任兆璋 着.
第7章 行政执行.
春末闲谈 鲁迅.
小寶寶家庭保健護理小常識 講師:郭洽利老師
校园信息管理系统 河北科技大学网络中心 2000/4/10.
徵收苗栗市福全段147、1588及文心段10、11地號等4筆土地之
第五章 病因病机.
评价是为了促进 学生发展的评价。. 评价是为了促进 学生发展的评价。 语言有温度,字词知冷暖.
讲 义 大家好!根据局领导的指示,在局会计科和各业务科室的安排下,我给各位简要介绍支付中心的工作职能和集中支付的业务流程。这样使我们之间沟通更融洽,便于我们为预算单位提供更优质的服务。 下面我主要从三方面介绍集中支付业务,一是网上支付系统,二是集中支付业务流程及规定等,
中鸣虚拟搜救比赛项目 (一人) 现场主题创作(40%)(一人) 3D虚拟搜救(60%)(一人).
全球暖化 想知道全球暖化的嚴重性嗎? 那就繼續看下去吧!! 組員:陳儀君60524 蘇鈺祺60526 于玉琳60528 林宥嫻60521.
中国人民公安大学经费管理办法(试行) 第一章总则 第四条:“一支笔” “一支笔”--仅指单位主要负责人。负责对本 单位的经费进行审核审批。
翰林自然 六年級上學期 第二單元 聲音與樂器.
作品基本信息 作品名称: 广告主名称: 活动起始时间: 广告主服务年限:.
第六章 安全衛生工作守則 6-1 前 言  6-2 訂定依據相關法令規定  6-3 工作守則製作程序及製作前應注意事項  6-4 如何訂定適合需要之安全衛生工作守則  6-5 結 論.
微信商城系统操作说明 色卡会智能门店.
創造不一樣的人生 -如何與身心障礙者接觸 新竹教育大學 薛明里.
大綱 一.受試者之禮券/禮品所得稅規範 二.範例介紹 三.自主管理 四.財務室提醒.
手机淘宝“变形”产品—微淘 操作流程指南 (内测版).
Presentation transcript:

这么建模型,你就错了 演讲者:俞如富 职位 :BI主管 来自公司:富士通(福建)

研讨 模型建设中的问题有哪些? 时间:3分钟 (可结合案例)

摘要 案例简述及分享案例目标 案例背景及隐藏问题 怎么做? 尝试办法及RIO分析 案例启示 1 2 3 4 5

案例:智慧社区数据中心建设项目 案例分享目标 2个月 完成数据建模 1个月 完成ETL建设 108张报表分析需求 案例分享目标 案例简述 智慧社区数据中心建设项目,要求在3个月内建设完成包括数据建模及ETL建设,并在完成数据中心一期建设后,2个月内完成100多张的数据分析报表需求。 分享目标:结合场景案例及当时遇到的困难和问题和对策解决过程来分享建模过程中的一些经验。主要目标体现在以下两点: 1.了解并进一步认识在不同的应用场景中建模型需要考虑的要素及问题 2.能结合案例掌握如何在需求变化、业务数据发展中调整建模的策略和思路 进一步认识在不同的应用场景中建模型需要考虑的要素及问题 能结合案例掌握如何在需求变化、业务数据发展中调整建模的策略和思路

摘要 案例简述及分享案例目标 案例背景及隐藏问题 怎么做? 尝试办法及RIO分析 案例启示 1 2 3 4 5

需求变化频繁 设计变化频繁 临时性任务多 案例背景及隐藏问题 1.用户无法提出明确需求 2.要分析的数据维度信息变化大 ETL建设因DB表设计变化频繁,导致经常加班改ETL相关代码 设计变化频繁 临时性报表查询分析需求多,建了一堆的表,数据“增长”额外加了60%以上 临时性任务多 案例背景及隐藏问题

摘要 案例简述及分享案例目标 案例背景及隐藏问题 怎么做? 尝试办法及RIO分析 案例启示 1 2 3 4 5

数据模型建设计划甘特图

怎么做到的 1.双向沟通方面 注重用户和软件开发人员的有效沟通,尤其在业务需求分析需要注意。 2.建模方法方面 利用维度建模建设思路应对将来可能的分析需求,结合PD建模工具(早期有借助ERWin建模工具) 3.抓重点,理顺优先级 做好对建模过程的痛点分析,在进度赶,投入少的情况下,我们要重点解决业务的痛点问题,才能产生最大的价值。

实践1. 如何更高效的做好业务需求分析? 方向思路: 1.改变用户参与度不够的问题,意识->态度->行为的改变. 2.建立业务领域模型之间的关系,超越“功能需求”,做好开发与用户对实际问题的抽象。 3.用做产品的心态来做项目 具体措施: 1.用户访谈、调查调研 2.用户使用场景梳理,明确问题在哪里?怎么发生的问题 3.利用原型法来确定或引导用户需求,评估项目中可能的问题 概念模型设计举例

数据模型的框架(概要) 参与者主题域是指系统的所有用户,覆盖:政府、社区管理者、志愿者、电信/运营商、商家、居委会/物业、居民等; 服务主题域是指由参与者提供的所有服务,覆盖:服务、商品、产品等; 内容主题域是指系统内的所有内容信息,覆盖:新闻、通知公告、文档、图片、媒体等; 交互主题域是指参与者之间所关联的事件,覆盖:交易、共享、沟通、信息推送等; 地域主题域是指自然要素与人文因素作用形成的综合体,覆盖:地域空间;

3.结合应用设计好维的层次设计(年/季/月/旬/周/日 ?) 实践2. 维度建模的技巧 1.保留历史信息应对历史记录分析 2.预留扩展设计,应对维度应用扩展,保证模型关系完整性 3.结合应用设计好维的层次设计(年/季/月/旬/周/日 ?)

2.1缓慢变化维的3种类型如何选择? 返回 ID:111 ID:111 添加新的记录 Name:老王 Address:Addr1 Version:1 ID:111 Version:2 添加新的记录 Name:老王 Address:Addr1 Name:老王 Address:Addr2 Name:老王 Address:Addr1 Effective Start Date:2007-4-21 Effective End Date:Now Name:老王 Address:Addr2 Effective Start Date:Now Effective End Date:Null 更新为 ID:111 ID:111 ID:111 Version:1 返回 1.保留历史信息应对历史记录分析 Name:老王 Current Address:Addr1 Old Address:Null Name:老王 Current Address:Addr2 Old Address:Addr1 Name:老王 Address:Addr1 Effective Start Date:2007-4-21 Effective End Date:Null

参与人概念模型设计 参与人概念模型 参与人自然化 组织多样化(支持各种行业) 家庭聚类化 角色权限参数化 用户多样化(支持不同平台)

添加内容

摘要 案例简述及分享案例目标 案例背景及隐藏问题 怎么做? 尝试办法及RIO分析 案例启示 1 2 3 4 5

为了建模而赶模型 为了进度而赶进度 And曾经尝试的办法及问题 团队曾走过的弯路: 1.见招拆招 需求多变,不考虑新增需求与过去需求的业务关联性,建一堆的表来应对 2.自以为是 不跟更多的与用户的深入沟通、调查和确认,忽略业务专家和数据分析专家的建议来建模,以开发方便快捷为出发解决问题。 尝试后的问题: 投入了时间精力、人工成本,但最后付出了高成本、低质量、无法满足后续的扩展性需求,表面是刚开始事情做少了,简单了,实际是复杂了问题,也让后续的维护时间、维护成本及开发工作量成倍增加。 为了建模而赶模型 为了进度而赶进度 核心问题

案例ROI分析 1.因该项目分两期,第一期遇到的问题在第一期形成了规范并做了经验和教训总结,在第二期的改进中, ETL的开发成本节省了50%。 2.把业务建模部分放到最重要的位置,也就是以用户业务问题为核心,构建模型,先慢后快,模型的稳定性和可读性和完整性二期比一期好,模型设计效率比一期快了40%左右,人工成本也在一期的基础上节省30%左右。 3.新增需求的响应速度情况,二期比一期的响应速度提升200%,满意度提高到90%以上。

摘要 案例简述及分享案例目标 案例背景及隐藏问题 怎么做? 尝试办法及RIO分析 案例启示 1 2 3 4 5

案例启示 提炼出该案例(或项目)的哲理、方法论。 数据建模,许多人都过分关注建模的速度及建模技术,而缺少对需求建模,需求也是需要建模的,而且需求分析的原型,将直接影响模型的复杂度、可扩展性及灵活性。 在ETL建设过程中,工程师最怕的就是针对数据模型经常随业务变化,ETL就要经常改代码,返工等。其实我们的ETL也可以建模,而且ETL的模型建设得好,可以快速适应业务模型的变化,甚至许多时候在业务模型变化的时候,我们只需要控制ETL的输入变量来管理,有效的节省ETL的工作量。 许多公司做不好数据建模,有时是因为主动性不够,怕流程牵涉众多生产线麻烦,怕跟领导同事沟通被评价很LOW,怕被领导骂,在三怕的基础上,又被要求在极短的时间内要做好数据分析、要有数据挖掘的价值体现,于是许多模型就做得不叫模型,没有思想,也没有规律,纯粹为了迎合老板的“需求”而建了一堆没用的表。  满足用户的需求,并在使用上去引导用户。同时,也要明确不是所有需求都能在模型中实现,要考虑分阶段,分期实现的可能性。

对建模过程的3种过程方法进行比较总结 方法1:数据驱动 方法2:业务驱动 方法3:数据和业务一起进行 优势 1.先有数据整合可对数据选择和准备做更好的管理,在数据质量管理方面有优势 2.数据的维度信息都有准备,可快速进行分析应用的扩展 因为面对应用,因此分析应用可立竿见影,快速满足需求 1.逐步深化的建设方法,兼顾了效率和可扩展性 2.分析应用也可快速见效 挑战 1.数据整合投入较大,短期内投入产出比没有太大优势 2.需要具备符合业务规则且成熟的数据标准和数据模型 1.一般能满足的用户群体狭窄,普遍都是部门集,缺少全局的考虑,更多偏向功能的开发。 2.数据质量无法保障 1.团队的有效分工与协作要求更高 2.业务规划方向需统一一致 适用 方向 数据基础较好 有成熟数据建模经验 业务简单或是业务应用需求非常明确 业务线复杂,数据基础水平不一,应用需求层次不同

不以解决用户业务问题的模型建设都是耍流氓 模型建设是集业务、技术和数据分析应用于一体的脑力活 不以解决用户业务问题的模型建设都是耍流氓 诚谢大家的关注和聆听!