漫談大數據的應用與工具 黃文楨 wenh@nkfust.edu.tw.

Presentation on theme: "漫談大數據的應用與工具 黃文楨 wenh@nkfust.edu.tw."— Presentation transcript:

1 漫談大數據的應用與工具 黃文楨

2 學經歷 Ph.D. in Computer Science & Engineering, University of South Florida, Florida, USA MS in Computer Science, University of Louisville, Kentucky, USA 中興大學 應用數學系 資訊組 高雄第一科大 圖資館 雲端應用組 組長 與大數據中心 主任 高雄第一科大 資訊管理系 教授 智邦科技 高級軟體工程師 ACNilsen Software Engineer, Engineering Department, Florida, USA

3 大綱 雲端運算平台簡介 大數據的應用與影響 Open data 第一科大 大數據中心 資料收集工具介紹 – 八爪魚
資料搜尋工具介紹 - Splunk 資料視覺化工具介紹 – Tableau R-web 資料分析與導引系統 IR 視覺化範例

4

5 大數據的特徵 多類型 (Variety) 文字、聲音、視頻、圖像數據等 數據量大 (Volume) 環境、生物、網路資料等
高速 時效 (Velocity) 感測器網路、金融股票資料等 價值 (Value)

6 Information & intelligence as a Service Infrastructure as a Service
雲端運算產業類型 IIaaS I2aaS Information & intelligence as a Service SaaS Software as a Service PaaS Platform as a Service IaaS Infrastructure as a Service

7

8 Data Mining包含六大領域 Database systems, Data Warehouses, OLAP
Machine learning Visualization Mathematical programming High performance computing Data Mining Statistical and data analysis methods

9

10

11 使用公有雲 (google, amazon, azure)
私有雲 (自建) 混合雲 ?

12

13

14

15

16

17

18

19 公共大數據開放挖寶

20

21 支援本校IR(Institute Research)，工業4.0計劃
第一科大 大數據中心建置與營運 提供大數據之研究與教學環境 大數據通用課程與綜合解決方案 支援本校IR(Institute Research)，工業4.0計劃 建置雲端虛擬教室 兩岸四地大數據採集與分析競賽 舉辦大數據處理教育訓練 兩岸四地知名企業參觀交流活動 大數據專家分享行業案例 購置大數據處理軟體與教育訓練

22 購置大數據處理軟體與教育訓練： Tableau可視覺化平台 10套 八爪魚採集器 100授權 Splunk IT Data管理搜尋平台 500MB*2 大數據通用課程與綜合解決方案

23

24

25

26

27

28 硬體架構 2.4GHz/8-core/20MB *2 128G RAM 200GB SSD 900GB HD 1.2 T SSD
6.3T HD 硬體架構 17.4TB 1152G RAM HP StoreVirtual 4335 Hybrid Storage HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server 20Gbps HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server HP 5820X-24XG-SFP+ Switch HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server HP ProLiant DL380 Gen9 8SFF Server

29 2015年7月, 臺灣有120所大學校院向教育部提出成立IR辦公室的計畫。
議題的探討: 1. 評估學生學習成效 2. 課業輔導和學習成效整合 3. 教師升等制度和學習成效整合 4. 學生畢業及就業。

30

31

32 大數據影響下的未來生活

33

34

35

36 八爪魚採集器

37

38

39

40

41