基于XCP和puppet的虚拟化云平台建设

Slides:



Advertisements
Similar presentations
LSF系统介绍 张焕杰 中国科学技术大学网络信息中心
Advertisements

上海地面通云主机产品 产品介绍 通信成就梦想 未来你我把握
Linux基礎學習 課本:Ubuntu Linux 管理與架站實務 博碩文化出版發行.
武汉自由软件协会 叶炜 2007年12月.
Introduction to CloudStack’s System VM
基于解释性语言的手机跨平台架构 Sloan Yi. Qt MTK.
何娜 求职经验交流 何娜
企业级云计算 A Enterprise Cloud Serivce
J2EE与中间件技术 ——Lab.
Information & Security System in China China North Eastern Air Traffic Control Bureau (CAAC) Customer Background Subsidiary of General Administration of.
羅東高中邱柏翰 虛擬機器軟體與作業系統安裝 羅東高中邱柏翰
Xen基础架构安全性分析 云朋
Linux.
高级软件工程 云计算 主讲:李祥 QQ: 年12月.
雲端運算虛擬主機技術的發展.
Kvm异步缺页中断 浙江大学计算机体系结构实验室 徐浩.
LSF系统介绍 张焕杰 中国科学技术大学网络信息中心
K/3 Cloud云之家集成 K/3 Cloud 基础系统部.
Windows 8 more simple more powerful more free.
虛擬化基本概念.
SVN的基本概念 柳峰
第二讲 搭建Java Web开发环境 主讲人:孙娜
学习目标 1、Linux(这里用的是Centos)下mysql5.7的基本安装 2、课后习题.
R in Enterprise Environment 企业环境中的R
中国科学技术大学 肖 明 军 《网络信息安全》 中国科学技术大学 肖 明 军
从现在做起 彻底改变你自己 Sanjay Mirchandani EMC公司高级副总裁、首席信息官.
存储系统.
作業系統 家庭和小型企業網路– 第二章.
大学计算机基础 典型案例之一 构建FPT服务器.
SVN服务器的搭建(Windows) 柳峰
Jul 2014 HEAT部署Hadoop集群
基于OpenStack的散裂中子源计算环境概述 —CSNS私有云环境现状
伺服器探索營 Day 1 指導老師: 張啟中 (JohnAxer) 教學助理:
第3章 Linux免安裝版學習與操作 課前指引
第11章:一些著名开源软件介绍 第12章:服务安装和配置 本章教学目标: 了解当前一些应用最广泛的开源软件项目 搭建一个网站服务器
大数据管理技术 --NoSQL数据库 HBase 陈 辉 大数据分析技术.
PostgreSQL 8.3 安装要点 四川大学计算机学院 段 磊
Windows网络操作系统管理 ——Windows Server 2008 R2.
格物资讯开放ICON库 V0R2.
第17章 网站发布.
《手把手教你学STM32》 主讲人 :正点原子团队 硬件平台:正点原子STM32开发板 版权所有:广州市星翼电子科技有限公司 淘宝店铺:
PaPaPa项目架构 By:Listen 我在这.
ENS 10.1安装配置指南 王俊涛 | SE.
Windows 7 的系统设置.
VSS使用简介 王树升
用event class 从input的root文件中,由DmpDataBuffer::ReadObject读取数据的问题
DevDays ’99 The aim of this mission is knowledge..
宁波市高校慕课联盟课程 与 进行交互 Linux 系统管理.
三:基于Eclipse的集成开发环境搭建与使用
Unit 11.Operating System 11.1 What’s OS 11.2 Related Courses
新一代无盘技术 在图书馆电子阅览室的应用 报告人:张智翔 /4/9.
程序设计工具实习 Software Program Tool
SOA – Experiment 2: Query Classification Web Service
第5章 网站服务器搭建与管理.
雲端虛擬化 Cloud Virtualization
C语言程序设计 主讲教师:陆幼利.
雲端運算的基石(1) 虛擬化技術簡介
Web安全基础教程
第四章 团队音乐会序幕: 团队协作平台的快速创建
Cassandra应用及高性能客户端 董亚军 来自Newegg-NESC.
实验七 安全FTP服务器实验 2019/4/28.
计算机网络与网页制作 Chapter 07:Dreamweaver CS5入门
JSP实用教程 清华大学出版社 第2章 JSP运行环境和开发环境 教学目标 教学重点 教学过程 2019年5月7日.
iSIGHT 基本培训 使用 Excel的栅栏问题
Touch Github = Touch the World
Python 环境搭建 基于Anaconda和VSCode.
虚拟化技术 VMware ESXI 南京市玄武中等专业学校 胡刚强.
使用Fragment 本讲大纲: 1、创建Fragment 2、在Activity中添加Fragment
JUDDI安装手册.
Primary introduction to docker
Presentation transcript:

基于XCP和puppet的虚拟化云平台建设 演讲人:刘 斌 Email: liu1983bin@gmail.com Tel: 010-65778797 北二外图书馆技术部

主要概要: puppet介绍 XCP介绍 OVCP开源虚拟化云平台 OVCP高级内容 4 2 1 3 服务器虚拟化

0.服务器虚拟化 1959年,克里斯托弗在报告《大型高速计算机中的时间共 享》第一次提到虚拟化技术概念。 1965年,IBM公司第一次商业上实现了虚拟化。 1999年,VMware在X86平台上实现了虚拟化,并发布了 VMware Workstation。 2001年,VMware发布了VMware ESX server进入服务器 虚拟化市场。 1990年,由Keir和Ian Pratt等人在剑桥大学成立了Xenoserver研究项目。 2002年,Xen Hypervisor开源化。 2006年,Citrix公司获取Xen并发布了XenServer。 2009年,Xen.org发布Xen Cloud Platform(XCP)。

虚拟化带来了什么?

商用服务器虚拟化之三国争霸 60% 25% 6%

为什么需要开源服务器虚拟化? Xen开源虚拟化方案 VMware虚拟化方案 资金 性能功能 管理和维护 功能扩展 免费 价格较高 HVM和PVM性能都很高 缺乏迁移和HA等重要功能 方案很成熟,功能相当完善 但PVM性能不是很高 管理和维护 需要对xen虚拟化非常精通 的人才可以进行管理和维护 缺乏商业支持。 有商业支持,不需要精通虚 拟化了解即可管理和维护 功能扩展 开放源代码,开发人员可 以添加新的功能如支持加密 狗,OpenvSwitch等 很难进行功能扩展

OVCP虚拟化云平台解决方案 XCP BISU OVCP 开源虚拟化云平台 puppet Openfiler OVCP:OpenSource Virtualization Cloud Platfrom 基于Xen开源虚拟化平台 商业的XenServer开源实现 XCP BISU OVCP 开源虚拟化云平台 puppet Openfiler 开源的服务器自动化部署和配置管理工具 开源的存储管理平台 可用于iscsi和NAS

1.XCP介绍 Xen Cloud Platform (简称XCP) 开源的企业级服务器虚拟化平台 源自Citrix XenServer, 由Xen.org维护 遵循GPL v2 协议 具有Resource Pool和Live Migration等高级特性

Xen的基本概念 Control Domain :Dom0 Dom0 kernel with drivers Xen Management Toolstack Trusted Computing Base Guest Domains Your apps E.g. your cloud management stack Driver/Stub/Service Domain(s) A “driver, device model or control service in a box” De-privileged and isolated Lifetime: start, stop, kill

XCP云计算中应用

XCP vs Ctrix XenServer

XCP 历史版本比较

XCP源码及源程序

2.puppet介绍 什么是puppet 数据中心自动化配置和管理软件 可用于管理Linux、Unix、Mac和Windows 遵循GPL v2 协议* (2.7.0), 基于ruby 语言开发 简单易懂的语言表达系统,用库实现配置 基于C/S架构,配置客户端和服务端,也可以独立运行 puppet 对于系统管理员是抽象,只依赖于ruby与facter. *注:2.7.0以后遵循Apache2.0协议 成功案例 2007年,goole使用puppet管理超过6000台mac电脑 开源社区Fedora使用puppet管理服务器 国内外各大知名IT企业逐步从cfengine转移到puppet上 facter是获取puppet管理的主机信息的系统分析工具

puppet整体架构 puppet服务器保存着所有对客户端服务器的配置代码,在puppet里叫manifest,客户端下载之后,可以根据manifest对服务器进行配置, 例如软件包管理,用户管理和文件管理等。 puppet可以用来管理文件、服务、软件包、用户、组、计划任务crontab、SSH密钥、Nagios配置

puppet master 目录结构

puppet的语法 puppet使用ruby编写,语法上也与ruby类似 e.g. 安装gcc和make e.g. 创建文件test 编写manifest文件/tmp/1.pp 执行puppet /tmp/1.pp 执行结果 1、/tmp目录下生成test文件 2、安装gcc,make软件包

puppet基于web管理工具Dashboard

puppet开源版和企业版对比 开源版 企业版 用户图形接口 内置Ec2模块 内置Vmware vms 配置管理-发现和克隆 配置管理-操作系统 配置管理-用户账户管理 管理应用 内置300+模块 统一跨平台组件安装 自动配置审记,依赖包在一个目录下 业务流程自动化 网络技术社区支持 7*24 小时技术支持,平滑升级和维护支持

3.OVCP开源虚拟化云平台 XCP BISU OVCP 开源虚拟化云平台 puppet Openfiler OVCP (OpenSource Virtualization Cloud Platfrom) 完全基于开源软件建设的虚拟化云平台。 基于Xen开源虚拟化平台 XenServer开源版本 XCP BISU OVCP 开源虚拟化云平台 puppet Openfiler 开源的服务器自动化配置和管理工具 开源的存储管理平台 SAN和NAS开源实现 遵循GPLv2协议开源 可升级为商业版本 产品成熟,文档齐全

3.1 OVCP虚拟化云平台整体结构图

开源虚拟化云平台硬件和软件配置 硬件 软件 服务器 HP ProLiant DL580 G5*3 操作系统 Debian 6.0 CPU Xeon X7460 (2.4GHZ)*4 虚拟化平台 XCP 1.0 (XenServer 5.6.1) 内存 4GB*16/4GB*16/2GB Xen版本 Xen 3.4.2 硬盘 73GB*2/73GB*2/146GB*8 puppet版本 puppet 2.7 facet,dashboard 网络 NC373i 1000MB*2 其他软件 XenCenter 5.6.1 XVP、XenWebManager 使用三台HP 580 服务器 一台作为核心存储,另两台作为XCP虚拟化资源池

3.2 安装和管理 XCP

修改xapi使用XenCenter代替XCP自带Web管理接口 修改xapi的shell脚本

用XenCenter建立和管理XCP资源池

3.3 建立核心存储 Openfiler开源的能把标准x86/64架构的系统变成一个强大的NAS、SAN存储和IP存储网关, 为管理员提供一个强大的管理平台,并能能应付未来的存储需求。 依赖如VMware,Virtual Iron和Xen服务器虚拟化技术,Openfiler也可部署为一个虚拟机。 可以选用 openfiler 或 FreeNAS Openfiler对于iscsi支持的更好,管理也很方便,因此选择Openfiler

在XCP资源池中使用iSCSI

3.4 云模式管理XCP XVP: 基于 VNC 和Web 管理 Citrix XenServer 和Xen Cloud Platform的平台 xvappliance xvp xvpviewer xvpweb xvpdiscover xvptag 1.广泛的浏览器支持 2.支持Active Directory 3.基于Web安全可靠 XVP(Xen VNC Platform) 基于VNC和Web的虚拟机应用管理平台 该平台包括xvpappliance、xvp、xvpviewer、xvpweb和xvpdiscover和xvptag等组件(图4为XVP平台的架构)。使用XVP最简单的方法是直接导入预先建好的xvpappliance虚拟应用。具体步骤如下: 从官方网站下载xvpappliance虚拟应用文件:   Http://www.xvpsource.org/xvpappliance-1.9.2-1.zip 解压缩,使用XenCenter导入到已建立好的XCP pool中 启动xvpappliance虚拟应用,就可以通过xvpappliance命令来管理XVP了(具体设置请参考官方网站[28])。 https://ipaddress/ 来访问XVP管理平台。

XVP管理XCP

XenWebManager是使用Python实现的基于Web 的XenCenter的开源实现。 使管理员在为未安装XenCenter的windows和Linux环境上方便的管理XCP服务器。通过XenWebManager就可以使用浏览器来管理虚拟化服务器。XenWebManager安装方法有很多,详见参考官方文档[29]。由于已经在XCP资源池中建立XVP应用,而其操作系统为CentOS5,就将XenWebManager安装到这台虚拟服务器上。具体步骤如下: ① 更新源中加入第三方更新源:RPMforge, ② 运行如下命令安装xenwebmanager:        yum install --enablerepo=rpmforge install xenwebmanager       ③ 使用如下命令启动和停止xenwebmanager服务:        service xenwebmanager start        service xenwebmanager stop ④ 修改iptables防火墙规则,将TCP端口8080、8081和8082打开 ⑤ 使用http://ipaddress:8080访问xenwebmanager管理平台(如图所示)。

3.5 自动部署和管理虚拟机 10+VM 想象一下未来更行服务器补丁,安装应用不用再登入到服务器中,通过puppet可以自动完成这些工作

puppet自动化部署虚拟机 配置相关信息 配置初始网络 从网络安装Ubuntu

修改pp脚本实现自动化部署 设置Ubuntu更新用的镜像站点 设置时钟和ntp服务器 设置登入root用户密码 parman分区信息设置

puppet自动化管理虚拟机 site.pp class webserver{ include apache } class dbserver{ include mysql class mailserver{ include postfix site.pp package{ ["postfix"]: ensure=>install; } site.pp package { [apache]: ensure=>install; } site.pp package{ ["mysql"]: ensure=>install; }

4.OVCP高级内容 XCP 物理机和虚拟机的迁移 XCP 半虚拟化Unix系统 puppet puppet集群式架构

4.1物理机和虚拟机的迁移 迁移Linux物理机 linux 使用XenServer install CD

迁移Windows物理机和虚拟机 XenConvert tools可以将OVF,VHD甚至整个虚拟机转化成XVA或者XenServer(VHD2XVA)

4.2半虚拟化Unix系统 半虚拟化Solaris目的:为Sun小机Solaris10系统上Metalib甚至Aleph迁移到OVCP平台上铺平道路。

Solaris 10 半虚拟化安装效果

Solaris10全虚拟化和半虚拟化性能比较

4.3puppet集群式架构 Puppet 集群核心思想: 1).puppetmaster 集群 - 分担puppetmaster来自于客户端的请求压力,可以 采取Active ,Active 模式. - 采取反向代理模式,将来自于8140的端口请求分 散到多台puppetmaster 2).puppet ssl 证书集群 puppet CA -分担puppetmaster来自于客户端ssl证书的请求压 力, 采取Active,Standby模式.

puppetmaster 集群架构图

未来工作 1.将OVCP云平台从实验环境升级为生产环境,主要 是网络环境和存储的改造 2.将Metalib从Sun小机上迁移到OVCP云平台上 3.将XCP1.0->XCP1.6 (XenServer 6.1,Xen4.1.2) 4.更加深入研究和使用puppet,如将其加入到基于 Web的云平台管理中,使用puppet来管理 Windows和Linux物理服务器,使用puppet来管理 Windows和Mac桌面电脑

参考文献 《基于XCP的虚拟化云平台建设研究》 《精通puppet配置管理工作》(《Pro. puppet》) 《puppet 2.7 Cookbook》 《puppet Docs》 http://www.xen.org/ http://www.openfiler.com/ http://puppetlabs.com/

推广开源软件 萧伯纳曾经说过:如果你有一个苹果,我有一个苹果,交换你我都只有一个苹果; 但你有一种思想,我也有一种思想,交换我们将每人有两种思想。 开源软件就是这样一种交换思想的方式

Thank You! Q&A