联想证券极速交易解决方案 联想金融行业 王永超 高贵君.

Slides:



Advertisements
Similar presentations
第 3 章操作系统基础 3.1 操作系统概述 3.2 操作系统的功能模块 3.3 典型操作系统概述.
Advertisements

Information Resource Management
信息技术在教学中的应用 信息技术应用于教学的整体观、系统观 信息技术应用于教学的整体观、系统观 对信息技术整合的理解——教师的视角
Microsoft Exchange 针对 EMC 存储的最佳做法和设计指导方针
存储基础知识 V1.1.
第二章 微型计算机系统 第一节 基本术语和基本概念 第二节 计算机系统的基本构成 第三节 微机系统的硬件组成 第四节 微机系统的软件组成.
联想ThinkCLoud LIM 智能统一监控解决方案
华为2路机架服务器产品售前培训 作者:陈星颖/
IT原理与应用(1)-电脑系统 IT Principles and Applications (1) - Computer System
简化 IT,促进创新 — 为现代企业带来新生机
Please delete this page before you present to customer
思科Oracle RAC解决方案 Starry Wu UCS -GC.
对存储系统发挥特殊作用的文件系统 2006年5月 - 北京.
广德二中2006届高考 英语专题复习 单项填空 答题指导.
加快数据中心运转速度 — 加速业务发展 约翰•福勒 甲骨文公司系统事业部执行副总裁. 加快数据中心运转速度 — 加速业务发展 约翰•福勒 甲骨文公司系统事业部执行副总裁.
Network Storage and System Virtualization Technology
联想RISC to IA —IT基础架构优化解决方案
操作系统结构.
思科统一计算 Cisco思科 UCS.
                            Oracle 并行服务器介绍
寻找适合您的工业4.0 Dell/曾峰.
商業智慧與資料倉儲 課程簡介 靜宜大學資管系 楊子青.
大数据在医疗行业的应用.
Unit 5 Dialogues Detailed Study of Dialogues (对话) Exercises(练习)
Unit 4 I used to be afraid of the dark.
联想DSS并行存储 张莫穷, 联想HPC团队
HDS 資料保護解決方案更新.
2006年10月 面向数据处理的高端系统 胡雷钧 浪潮公司.
Good Afternoon. 威世智中国员工及 组织化赛事介绍 WotC China Staff and Organized Play Instruction Shane Xu
Alibaba 数据库高可用架构 Alibaba
NEC Express5800 Fault Tolerant Server Introduction
TPC-C标准及实验平台.
虚拟化平台的使用.
初二英语写作课 课件 福建省闽清县第一中 王国豪
ThinkServer RD540/RD640 新品品鉴
等滲透傳輸系統原理與優勢 ISOTONIc
淘宝核心系统数据库组 余锋 利用新硬件提升数据库性能 淘宝核心系统数据库组 余锋
不断变迁的闪存行业形势 Memory has changed, especially serial - from a low cost, low pin count, slow memory to an advanced, high performance memory solution to save.
从UNIX到Windows的 电信软件移植实践
C H A P T E R 10 存储器层次.
我祝願你足夠 背景音樂-星空下的小喇叭【電影:亂世忠魂】 AUTO.
Smarter Storage – 價值主張及實戰案例 Dennis Dai Storage Technical Consultant.
Flash数据管理 Zhou da
Isilon中国区技术经理 杨峰 虚拟天文台年会 存储技术交流 Isilon中国区技术经理 杨峰 Isilon Proprietary and Confidential.
Remember the five simple rules to be happy 快樂的五個簡單常規
微软新一代云计算 面向企业的 Office 365 客户培训大纲
重點 資料結構之選定會影響演算法 選擇對的資料結構讓您上天堂 程式.
第4章(1) 空间数据库 —数据库理论基础 北京建筑工程学院 王文宇.
IBM SWG Overall Introduction
資料庫 靜宜大學資管系 楊子青.
Remember the five simple rules to be happy 快樂的五個簡單常規
BORROWING SUBTRACTION WITHIN 20
中国科学技术大学计算机系 陈香兰 2013Fall 第七讲 存储器管理 中国科学技术大学计算机系 陈香兰 2013Fall.
虚 拟 仪 器 virtual instrument
中国科学技术大学计算机系 陈香兰 Fall 2013 第三讲 线程 中国科学技术大学计算机系 陈香兰 Fall 2013.
高考应试作文写作训练 5. 正反观点对比.
Smart grid Name:牟传强.
Remember the five simple rules to be happy 快樂的五個簡單常規
Remember the five simple rules to be happy 快樂的五個簡單常規
第10章 存储器接口 罗文坚 中国科大 计算机学院
计算机问题求解 – 论题1-5 - 数据与数据结构 2018年10月16日.
Remember the five simple rules to be happy 快樂的五個簡單常規
立足语境,放眼词块,螺旋上升 年温州一模试卷题型分析 及相应的二轮复习对策 by Sue March 14,2013.
动词不定式(6).
中国区部分高性能计算行业用户名单 中石油北京勘探开发 研究院 中海油南方基地 中石化物探研究院 中石油东方物探(BGP) 中科院数学所
Hospitality English 酒店商务英语 讲师:罗云利 工商与公共管理学院.
ADX series Configuration
ppt宝藏提供 中国银行业信息化系统建设研讨会
陳情表之外     with 三仁 三樂 歐陽宜璋製於 /10/23.
Presentation transcript:

联想证券极速交易解决方案 联想金融行业 王永超 高贵君

新常态下的核心交易系统 互联网金融写入十八大政府工作报告 沪港通、网上非现场开户、资产管理等新业务不断涌现 两市成交量突破2万亿,某券商日委托交易量达到800W笔 “一人多户”政策出炉,周开户数突破200万 券商与互联网企业和传统金融行业的融合与竞争

CPU处理时间 VS IO等待 The I/O Wait % is the time that is spent waiting for data from the storage system. App % is the time that is spent running user instructions in a program. System % is time that is spent managing database locks, shared memory, context switches in memory, and other elements, in support of user programs. For more information, see IBM Information on Demand 2010 by Barton and Lebutsch, May 2010. 3

谁在拖慢系统速度? 过去的十年里 CPU Performance 8 - 10x increase DRAM Speed 7- 9x Network Speed 100x Bus Speed 20x Disk Speed 1.2x 差距悬殊,太慢了…… Source: IBM and Industry Estimates

从延时上看出根源 Flash 特性:非易失性存储 - 可以作为缓存(Cache) - 可以作为数据存储 Flash 存储 Latency : 10μs级别 数十倍/百倍 性能提升 速度快104 速度快102 仅延时消耗的时间 达到内存处理数据时间 的106倍 CPU 内存 传统机械硬盘 Latency 2ms 时钟频率 时钟周期 1GHz 1.0ns DDR III 1600 核心频率 200 MHz - ns级别

理想的核心交易系统 极致性能(满足万亿量级交易额需求) 稳健可靠(持续运行,持续稳定的性能表现) 灵活弹性(交易所又测试了?新版本上线?) 价值投资(当新业务上线的时候你打算花多少人天优化性能?是否可以临时增加运维人员?)

重点推荐 联想能提供的闪存解决方案 服务器闪存 (DIMM) 服务器闪存 (PCIe) 全闪存阵列 服务器闪存 (SSD) 数据服务 性能 基本 功能强大 高 (1-3 ms) 极好 (< 100 µs) 重点推荐 极高IO/性能 线性扩展/极低延迟 服务器闪存 (DIMM) 极高性能 /最高 IO/最低延迟 服务器闪存 (PCIe) 全闪存阵列 性能更高并且易于管理 本地缓存性能 易于管理和集成 服务器闪存 (SSD) 混合阵列(cache/分层) 支持数据块和文件协议 可扩展的成熟数据服务 良好的成本和性能平衡 混合阵列 应用程序 数据仓库 OLTP 数据库 云部署 服务器加速方案 存储加速方案

服务器闪存加速方案

IT系统整体架构——交易系统 核心交易系统

联想闪存加速方案——服务器加速 Lenovo 闪存加速方案 X880 X6 X3950 X6 144Cores,12TB内存 联想性能优化方案介绍: 联想性能加速方案可将服务器内的的Flash存储灵活作为普 通存储的闪速缓存或高速存储空间,消除原有IT架构IO瓶颈,极 大缩短其延迟、极大提高其IOPS和吞吐,帮助客户承载更多的 虚拟机,更多的业务; Lenovo 闪存加速方案 X880 X6 X3950 X6 Value Position(定位) 高性能:提高性能和吞吐量,同样服务器可承载3倍以上的业务 高可靠性:业界领先的高业务连续性,与小型机相当 高可扩展性:120Core 12TB内存 高性价比:整体成本节约43%,减少软硬件需求 eXFlash DIMM 144Cores,12TB内存 小型机相当的高可靠性 CINT2006 Rates 性能 IBM Power 780 (3.44 GHz, 16*6core ) 3560 IBM Power 780 (3.86 GHz, 8*8core, RedHat) 2740 IBM System x3950 X6 (Intel Xeon E7-8857 v2, 3.60 GHz 8*12 Core) 3240 IBM System x3950 X6 (Intel Xeon E7-8893 v2, 3.40 GHz 8*6Core) 2380 通过服务器和存储器整合实现的成本节约43%,包括降软件许可1/2,所需硬件降低1/3 Why Lenovo(效果) 联想可提供软硬件一体化的解决方案能力 联想在金融行业众多的成功案例 联想在证券、保险、银行等金融行业客户有丰富的服务经验 证券行业客户面对的挑战: 性能不满足业务发展的需要 满足证券行业特点:高可靠性,高业务连续性 满足将在线交易需要:低延迟、高效率

X6支持所有基于Flash存储的解决方案 –领先的最佳性能解决方案 内存加速 其中eXFlash DIMM技术为其最先采用,并且研究最为深刻

FLASH Cache性能测试 通过增配8块200G SSD并开启FlashCache,虚拟机数量增长3倍

通过增配8块200G SSD并开启FlashCache,读带宽增长3倍, CPU使用效率增长4倍

稳定可靠的硬件平台——联想X3950X6/880 源于IBM POWER和大机的设计理念,将高端技术下移, 将广为认同的IBM 企业计算的能力融入工业标准的 System x 产品线 易用性 工业标准技术 System x™ System z™ System Storage™ PureFlex POWER Systems™ iDataPlex™ 虚拟化技术 高可扩展性 高可靠性 高效率 高可用性 Flex system

核心交易系统的首选 稳定可靠的硬件平台——联想X3950X6 最高性能——相当于高端UNIX服务器 最大扩展——144内核,12TB内存 最高稳定性——RAS特性源于大型机 CINT2006 Rates 性能 IBM Power 780 (3.44 GHz, 16*6core ) 3560 IBM Power 780 (3.86 GHz, 8*8core, RedHat) 2740 IBM System x3950 X6 (Intel Xeon E7-8857 v2, 3.60 GHz 8*12 Core) 3240 IBM System x3950 X6 (Intel Xeon E7-8893 v2, 3.40 GHz 8*6Core) 2380 通过服务器和存储器整合实现的成本节约43%,包括降软件许可1/2,所需硬件降低1/3 核心交易系统的首选

稳定可靠的硬件平台——联想X3950X6 + 3X 43% 延迟缩短3倍 成本节省

源于大型机技术的X6平台,设计出高于行业标准的RAS技术 稳定可靠的硬件平台——联想X3950X6 业务连续性:高于行业标准,与Unix相当 Lenovo System x稳定性与Power相当,仅次于IBM大机 ITIC 2014-2015 Global Server Hardware, Server OS Reliability Survey 1 ITIC 2014-2015 可靠性报告, 2014年9月更新 -- http://public.dhe.ibm.com/common/ssi/ecm/en/xsl03126usen/XSL03126USEN.PDF 源于大型机技术的X6平台,设计出高于行业标准的RAS技术

将整个硬件和软件堆栈集合在一起,X6能够提供类似大型机的RAS功能 稳定可靠的硬件平台——联想X3950X6 ☆最大限度地延长应用工作时间 ☆易于维护性能够降低支持成本 ☆可轻松集成在虚拟环境中 将整个硬件和软件堆栈集合在一起,X6能够提供类似大型机的RAS功能 X6 通过添加平台级RAS来达到更高的可用性 X6 集成了软件堆栈,以便提供解决方案级的 RAS 管理 处理器故障自动切换 管理固件自动备份 内存页完整性自动筛选 内存页隔离 处理器事务高级恢复 IBM 独有的向上集成模块(Upward Integrated Modules) 滚动升级虚拟机群的固件 RAS UIM 支持 VMware 和 Hyper-V Intel® Run Sure Technology 允许在Intel® Xeon® E7系列处理器拥有企业级的RAS特性 MCA Recovery Execution Path MCA Recovery Non Execution Path MCA I/O Enhanced MCA Gen1 SDDC+1 DDDC+1 Lenovo System x稳定性与Power相当,仅次于IBM大机

☆同一机箱支持多代技术 ☆模块化设计减少运维时间 System x3950 X6模块化设计——易维护 ☆同一机箱支持多代技术 ☆模块化设计减少运维时间 存储模块 每个存储模块最多可支持6.4TB的1.8” eXFlash SSD或12.8TB 的2.5”SAS 每个计算模块中包含1个处理器及24个内存槽 每个x3850 X6中包含 4个计算模块 最多支持2类IO模块:半长和全长 每个IO模块可另外提供3个Pcle插槽 主I/O模块 支持IMM、PCIe插槽及专用Mezz-LOM解决方案 最多提供6TB内存或12.8TB eXFlash内存通道存储容量当内存或处理器更新换代时,客户可将计算模块直接拔出

☆联想高端服务器在中国x86市场占据绝对领先地位 联想高端服务器市场领袖地位 ☆联想高端服务器在中国x86市场占据绝对领先地位 连续17个季度 中国x86高端服务器市场No. 1

存储闪存加速方案

VNX1、VNX2 和 VNXe:2011 年 1 月到 2014 年第 4 季度 系统发货量 >120,000 运行小时数 >1,780M >460K SSD 发货量 >8,600 PB 发货量 >870 PB 级以上的客户 51% 附带闪存 Garter报告,2014年SSA市场比2013年增长了一倍,达14.3亿美金。 服务器虚拟化、OLTP、VDI依然是SSA的TOP3应用场景。 今年预计分析会成为第四大场景。 VNX1、VNX2 和 VNXe:2011 年 1 月到 2014 年第 4 季度

Next-Gen VNX: From Q32013 through Q42014 >23,000 >89.5M 运行小时数 系统发货量 >2,300 >215K PB 发货量 SSD 发货量 >390 ~80% PB 级以上的客户 附带闪存 Next-Gen VNX: From Q32013 through Q42014

LENOVO|AFA性能和容量线性扩展 最大可达172TB 无需调试。 横向扩展 丰富的数据服务。 延迟低于 1 毫秒。 90 万混合 IOPS 150 万读取 IOPS 延迟低于 1 毫秒 15 万混合 IOPS 25 万读取 IOPS 入门级 5 TB

读写比1:1场景性能

只读场景性能

除了性能,其他益处 为下一代核心交易选择存储 在任何交易峰值下,稳定的性能输出 股民满意 立等可取的快照复制功能,应对频繁的开发、测试、上线迭代 无需任何性能调优,大大减轻运维人员的压力 提供系统监控软件 提供数据复制技术增强保护 大大提升清算和跑批效率 去重、压缩、瘦供给功能,理想的性价比 同样性能,比传统阵列节省占地和耗电 股民满意 软件开发人员满意 运维工程师满意 业务和财务满意

重要业务系统混合阵列方案--LENOVO|VNX 存储系统 SSD做cache: 扩大缓存 实时提速 应用服务器 VNX阵列 业界唯一支持SSD做读、写缓存的中端存储 SSD固态盘 FAST Suite SSD做存储分层: 阶段性移动数据 数据按照性能需要放在合理的介质 高性价比 两个功能也可彼此互为补充 有助于提高性能和降低TCO

高性价比 聚合机械式驱动器 闪存优化的存储池 闪存锁定 5% 的利用率,中等成本 存储池 90% 的利用率,但比较昂贵 短行程和条带化 存储池 5% 闪存 95% 磁盘 数据 非活动 活动 数据 磁盘 5% 的利用率,中等成本 闪存锁定 闪存 90% 的利用率,但比较昂贵 条带化 Mechanical drives are not fast enough To get the most disk performance, utilization is sacrificed As the need business transactions increase, more and more drives must be striped FLASH drives are up to 100 times faster than mechanical disks – but expensive Almost the entire drive can be used, so fewer FLASH drives are needed Only the most critical data can justify the manual move to expensive FLASH Flash optimized: All data activity is constantly tracked High activity data moved to FLASH Low activity to low cost disk Applications now enjoy lowest response time possible for data VNX FAST Cache and FASTVP automatically tune your storage to match your workload requirements saving up to 80% of the time it would take to manually balance workloads. 90% 的利用率、最低成本、较少调整

举例:针对SQL Server的加速 4 倍 81% 基准 启用 FAST VP 启用 FAST Cache 延迟不到 3 ms 利 用 率 TPS Here is what this would look like at the DB level. You can see that the baseline performance delivers around 1,100 transactions per second while disks are utilized at around 78% from a performance perspective. These are 15K SAS drives capable of delivering around 180IOPS per drive. Once I enable FAST VP and let the relocation of 1GB slices take place some of workloads are absorbed by the available Flash drives which are capable of delivering 2,500 IOPS per drive. Immediately transactions increase to over 2,300 per second. This relocation also frees up headroom on the 15K drives which means they can now be more utilized for capacity. When we enable FAST Cache in addition to FAST VP the performance increases even more driving transactions north of the 4,400 mark. At the same time drive utilization of the 15K drives is down to around 15%. So now they can accommodate more capacity without impacting performance. In essence we deliver 4x the transaction while freeing up valuable drive overhead to accommodate data. That’s delivering better $/GB and $/IOPS at the same time! 磁盘利用率 - SAS 延迟不到 3 ms

举例:提高 Oracle 性能 利用 FAST SUITE, 利用 FAST SUITE, 读延迟改进 5.2 倍 TPS 改进 2.2 倍 42% 63% 每 秒 事 务 处 理 数 38% 读 延 迟 67% So we’ve seen how the FAST Suite boosts SQL performance, VMware Horizon View and Citrix XenDesktop, now let’s look at how VNX with the FAST Suite improves Oracle…..but with a difference. Because VNX is so versatile, supporting mixed workloads, supporting virtual and physical environments and supporting both block (SAN) and file (NAS) environments, I thought it a good idea to show you just how good the FAST suite is for virtualized Oracle dNFS – i.e. Oracle direct NFS. As you can see from both graphics VNX with the FAST Suite supercharges your Oracle dNFS environment. On the left, you can see the benefits of FAST VP and then the added benefit of FAST Cache on read latency. FAST VP alone has a 42% benefit on read latency and add to that the 67% benefit from FAST Cache resulting in a cumulative benefit of over 5x improvement on read latency. Likewise, on the right hand graphic, you can see the benefits of FAST VP and then the added benefit of FAST Cache on Transactions Per Second (TPS). FAST VP alone has a 38% benefit on TPS and add to that the 63% benefit from FAST Cache resulting in a cumulative benefit of over 2.2x improvement on TPS. Now imagine what it can do for your block environment. Note to Presenter (competitive differentiation):The unified design of VNX enables users to simplify Oracle provisioning and management by deploying on NFS, not available from HP 3Par or HDS HUS. These waterfall charts also demonstrate how VNX offers a fully flash-enabled solution. NetApp as well as emerging competitors such as Nimble provide flash as cache, but lack both the intelligent control used by VNX to focus on performance-centric data and an available flash tier to selectively maintain performance of continuously hot data. IBM V7000, HP 3Par and HDS HUS utilize autotiering, but lack the response advantage of FAST Cache.

这些产品是世界上最好的 而且 联想能够提供所有的加速方案 联想闪存解决方案的优势 All Flash FAST Cache FAST VP 阵列缓存及分层 PCIe SSD SDD硬盘 Flash DIMM 全闪存阵列 而且 这些产品是世界上最好的 基于