您的位置:首页 > 大数据 > 云计算

云计算第一周

2019-07-29 09:16 836 查看

                                                                 第一天:

传统的:Facility,基础硬件。

数据中心:是在这两层之上有系统软件。应用开发和部署软件,应用软件,行业应用。

标准机柜:一种是42U,一种是47U。

华为服务起产品耗能计算器(可以通过这个计算器来预计服务器的耗能)。

BOQ(采购清单)     cooling(散热)

在机房中现实能看到的基础硬件:服务器,防火墙,路由器,交换机,存储。

FusionStorage(软件定义存储):底层是服务器(云存储)。

异构服务器一般做GPU功能。

昆仑和Taishan一般是重要节点服务器。

存储分为本地存储和共享存储。

本地存储是指服务器自带的存储。

共享存储是指IP SAN,FC SAN,FusionStorage。

园区网推荐使用CE系列交换机。

S系列交换机不知处vxlan和堆叠。

堆叠:将两台物理交换机通过堆叠线缆加堆叠配置合成一台逻辑交换机,主要是用于灾备。

堆叠体现出的就是了云计算的可靠性。

淘宝,京东:应用开发和部署软件。

电子政务:------平安城市,智慧城市。

云服务:IaaS(基础设施级服务),PaaS(平台级服务)------业务编排-------基于已有服务进行2次开发编写脚本。

Saas软件级服务。

云服务的三层服务不一定同时都有,只要Iaas层也是可以正常工作的。

交易模式:交付验收:核心产品+服务集成

核心产品--------à云平台+数据库。

服务集成:---------à非核心产品(华为产品+第三方的合作)。

IOE(IBM(服务器),oracle(数据库),EMC(提供存储))。

快速供应并释放(指的是资源)。

京东618使用的就是混合云。

传统的IT架构:业务上线周期长,维护服务器得单独维护,且维护人员多。

云计算架构:资源保障组,云计算组,开发项目组,业务部门。

虚拟化软件:DRS(分布式资源调度程序)。

数据中心的一体化管控主要是由FM或OC来完成的。

FM大概只有OC的三分之一的功能。

计算资源:cpu,内存,网卡。

计算节点和存储节点分离的原因是(提高可靠性):虚拟机进行迁移时只用迁移计算节点。

迁移分为:只迁移主机,只迁移存储,存储和主机一起迁移。

定制化服务器和存储。

数据中心的安全性。

高密度,低成本的10GE(CE6800---à光模块)互联,网络的集成。

智能化功耗管理-àDPM。

Scale up(传统):增加和换新会断电导致业务中断。

集群:功能相同或相似的服务器放在一起。

集群管理功能(DRS):当识别到新的服务器加入集群时,会自动将业务分配到新服务器上。

集群管理功能:会根据服务器来均衡分布式业务。

虚拟机热迁移完全根据(DRS)来的,根据设置的使用阈值来决定虚拟机是否迁移。

HA:将坏掉的服务器上的业务在集群内的其他服务器上重启起来。

热迁移不中断业务。

HA:会中断(有3分钟的中断时间)。

业务编排将原来的物理设备的服务抽象成虚拟服务的概念,对用户屏蔽具体的物理形态,针对具体的业务,将业务流量引流到相应的服务节点上。

板载网卡:服务器本身自带的网卡。

PCIE卡:外置网卡。

网卡模式:一托二(一张网卡,2个网口),一托四(一张网卡,4个网口)。

PCIE:2*10GE*2,2个一托二的PCIE卡。

管理,业务(计算),存储平面。

管理平面:经过管理交级换机的流量,只负责管理组件任务的平面,承担集群内虚拟机的迁移流量。

业务平面:经过业务交换机流量负责业务虚拟机任务的流量。

VRM01----à管理虚拟机(除管理虚拟机外全是业务虚拟机)。

存储平面:经存储交换机的流量负责存储业务。

必须知道管理和业务平面的规则。

作IP SAN等支持两种存储对接(存储池和LUN)。

Server SAN(分布式存储):fusionStorage---à华为的server SAN。

FusionStorage利用DSware软件将服务器本地硬盘组成资源池。

云计算中主机是指服务器。

集群中节点是指服务器

2288v3最大槽位是25个。

SAS性能是在NL-SAS和SSD之间。

FusionStorage有副本机制和2副本的情况下。12G的硬盘只有6G的空间可以供用户使用。

紧耦合DC以南北向流量为主。

云计算DC以东西向流量为主。

虚拟化:资源复用率和资源利用率高。

虚拟化------à将资源抽象成共享资源池。

Guest OS----à在OM上的OS。

Guset Machine----à虚拟出的VM。

Hypervisor---à:VMM(是XEN架构)。

Host OS:运行在真机上的OS。

Host Machine:物理机。

2288 V5服务器不支持XEN架构。

虚拟化的特点:分区,隔离,封装,相对于硬件独立。

分区:可运行多个VM。

隔离:不同VM之间相互隔离。

封装:封装成一个文件。

相对于硬件独立:软硬件解耦。

虚拟化是云计算的技术手段之一。

BMS-------à裸金属-----à直接建立在硬件之上的。

裸金属可以是一个单独的服务器---à不会去作虚拟机的资源复用,并且裸金属适用于对性能要求比较高的业务(如:数据读业务)。

虚拟化的推荐值是一比三。

虚拟化技术是云计算在IaaS层具有高可用价值的基础。

云计算不依赖虚拟化(虚拟化不是云计算必须的)。

4核---à核指的是可以同时跑的任务数(物理核)。

超线程技术(HT)不是虚拟化技术。

逻辑核:通过超线程技术,将一个物理核拆分成两个逻辑核。

Vcpu对CPU的调度是以逻辑核为单位。

虚拟机的vcpu使用率大于30%时不建议开启CPU复用。

虚拟机的vcpu使用率在20%到30%之间,建议虚拟化利用率是100%~200%(虚拟利用率)。

虚拟机的vcpu使用率小于等于20%时,建议虚拟化利用率是200%~300%。

集群内迁移的预留值1/n(n是指集群内虚拟机的数量)。

当虚拟机的份额与预留冲突时,以预留为主。

Openstack---à时云操作系统的内核。

Ecs:弹性云服务器(云主机)。

OpenStack不是虚拟化,只是操作系统的控制面(cps)----à只看到控制面。

Openstack不包括系统的数据面组件,如Hypervisor,存储和网络设备。

Openstack是构建云的关键组件。

元数据:描述数据的数据,关键性重要数据。

块存储于对象存储的区别:块存储是将元数据与数据不分开存放的是放在一起的,而对象存储试讲元数据与对象数据分开存放的。

Glance:镜像服务(社区版的openstack的镜像是直接存在Glance服务中(在社区版的openstack是有存储空间的))。

Cinder:块存储,系统之中除C盘以外的数据盘。

华为的FusionSphereOpenStack中Glance是将镜像放入swift之中。

Swift给glance中的镜像提供存储空间。

Cinder:给云主机提供数据盘的功能。

Ceilometer:进行监控计费。

Heat:进行业务编排,可根据业务需要进行编排。

华为的Openstack:Gauss DB/Mongo  DB。

Ironic裸金属--àopenStack特有的。

华为的用CPS来实现Dashboard。

身份认证(identity)很重要。

南向对接的是物理硬件(兼容多家厂商设备)。

V5:kvm------6.3。

V6:XEN,kvm-----6.1。

FC的web界面有VRM支持。

FusionStorage底层架构是服务器。

VM通过上行链路访问外网。

上行链路属于虚拟化层内的。

在一块网卡上配多个ip时要考虑带宽的限制。

eBackup只能备份虚拟机的系统盘。

cv专门做数据库和数据盘的备份。

FusionManager统一资源管理。

FC只能管理FC上的资源。

若有第三方管理架构平台的情况下用FusionManager来管理。

北向接口:开放的API对接各种第三方应用。

PXE从网络启动。

FC的功能虚拟机的动态调整。

FM可以统一管理资源,可查看虚拟机状态。

FM兼容不同虚拟化资源统一管理。

FC是有VRM来的。

FC的管理界面是VRM提供的。

CNA还在VRM故障,业务还能运行,因为资源还在,已有业务不会影响,不能新增业务。

传言openstackOC替代FM。

弹性IP:要的是分配,不要是回收。

弹性伸缩:在服务器上会自动发放VM,不用试回收(删除)。

FusionNetDoctor:检测网络断流的检测。

块存储的接口(FusionStorage):SCSI接口(小型计算机接口),iSCSI接口。

将通用的X86服务器的本地HDD,SSD通过分布式技术组织大规模存储资源池。

SSD主要是做缓存,在v3R6的服务器中必须有SSD作缓存,V3R5不要求SSD。

缓存是一个概念,内存是真实存在的物理设备。

缓存可以是一块硬盘,也可以在内存条中。

对非虚拟化环境的上层应用和虚拟机提供业界标准的SCSI接口和iSCSI接口。

iSCSI:ip+SCSI(封装到网络中以网络的形式传输)。

FusionStorage:由三台及三台以上的服务器组成集群。

FSM与FC功能类似。

FSM提供告警,监控日志,配置等维护操作,一般是主备。

FS单集群最多由4096个节点。

FSM故障不会影响现有业务,不能新增业务。

CAN(compute Node Agent):计算节点代理:通过ISO内核功能实现(硬件与VM之间资源沟通)。

 

FC集群里最多支持128个节点。

FSA:实现各节点与FSM通信。部署在多节点上,根据不同的要求分别在不同节点上启用不同进程组合未完成特定的功能。

默认一块磁盘部署一个OSD进程。

VBS:负责元数据的管理,提供分布式集群接入点服务,是计算资源能通过VBS访问分布式存储资源,每个节点上默认部署一个VBS进程,形成VBS集群,节点上也可以通过部署多个VBS来提升I/O性能。

MDC:元数据控制,实现对分布式集群的状态。(对数据规则的控制的数据的重建(硬盘换掉的情况下))。

在I/O过程中没有MDC参与。

分布式存储有副本机制。

分布式存出的数据重构比企业存储块。

MDC监控OSD的运行状态,控制数据块写入那个OSD中。

MDC,VBS,OSD三种:计算,管理,存储节点

MDC用zk集群来操作。

Zk是以2n+1的形式存在,部署MDC最少3个节点,以单数形式存在,可以是3,5,7个节点。

FS支持windows和Linux的操作系统。

一个服务器最少25块盘。

计算:cpu/内存/网卡。       存储:磁盘。

HA(高可用性):将计算与存储分离。

两台服务器要实现迁移必须连在同一个共享存储上。

在标准解决方案中直接在CAN中安装FSA再安装MDC等进程来组成存储。

云中除了VRM外都用共享存储。

VRM是装在RAID卡中的。

融合部署适用于不打算扩容的环境。

集群要考虑到可靠性(节点不能再同一个机柜)。

存储:前端跑业务,后端与存储介质相连。

Fusionstorage中是创建卷。

FS的底层只要是X86架构的服务器就行。

企业存储更适合于数据库。

企业存储(IP SAN,FC SAN)--------------à18000系列的存储。

桌面云,kvm淘汰全内存。

光纤交换机丢包率低,(灾备是要求用光纤交换机)。

桌面云:安全可控,移动,简单运维,快速故障恢复,减少业务中断时间。

桌面组是相同类型的桌面(用同一个模板发放的桌面)。

虚拟机组是用户自认为相同的类型的虚拟机。

AD-------------à用户认证。

AD(access  Domain)。

AD和DHCP Server 管理虚拟机。

vAG/vLB:(虚拟网关/虚拟负载均衡)。

HDC(Huawei Desktop Controler):华为桌面控制。

HDC:华为桌面云的核心组件。

Licence是允许同时登陆的最大用户数。

ITA(IT适配器):最终呈现是在网页中。

DB(Guass DB)

Backup Server:只备份FA管理组件的数据。

TCM:可有可无。

这之上的都是FA的管理组件(以虚拟机的形式来呈现的)。

TCM使用MySQL数据库。

HDA和HDP是虚拟机与外部交互的组件。

vAG/vLB------------à使用的是升腾的处理器。

共享网盘:可读可写和只读。

SC(soft client):软客户端。

SVN:华为安全网关和负载均衡产品。

桌面云:标准桌面云和桌面云一体机。

Fusioncube:虚拟化超融合解决方案。

Fusioncube(至少三台服务器):底层是服务器(可以在这上安装fusionSphere)

FusionCube Center(FusionCube提供维护)。

Fusioncube出厂自带1台CE5800(千兆口:服务器的BMC口是千兆口(以太网口))交换机做管理口,和2台CE6800座业务口(光纤口)。

WI的端口8081或8448(ITA的体现)。

AD用户和计算机添加用户和用户组。

Vdsadmin在链接克隆是使用。

15:向HDC请求用户拥有的虚拟机。

16:查询用户虚拟机信息

这两步很重要。

23:DB查询到DB有VM注册信息后你会返回给HDC是否有 注册信息,再向VM返回预登陆信息。

25步后请求获取策略文件后由HDC向DB请求再有DB返回给HDC是否获取到策略文件。

策略:------------à打印机功能。

Licence是根据需要同时在线的用户数来进行购买的。

获取虚拟机IP是从DB中获取的。

HDC只是一个控制器,没有存储空间。

35 获取用户名IP是从DB中获取的。

39 上报虚拟机登录状态(记录日志,故障维护)从HDC中去查询。

虚拟机启动风暴:(服务器同时登录的数量过多),vLB反映是负载不好。

AD里的鉴权不成功---------------------à虚拟机登录一直转圈圈。

完整复制第一台比链接克隆块,第二台开始就会比链接克隆慢。

CT5100:瘦终端型号。

线性扩展--------à快速适应业务发放------------àscale out。

ManageOne:是公有云和私有云共有的。(可以给多个数据中心做容灾备份)

Map-Reduce-----à大数据组件。

纯虚拟:小企业。

DCI(数据中心二层互联)。

融合设施(FusionCube)。

SDC(软件定义 计算)。     SDS(软件定义存储)。

华为云存储:FusionStorage,OceanSor9000。

FusionStorage是华为定义的Server SAN。

SAN---------àLUN。

NAS-------à文件系统。

LUN要求文件系统必须与服务器一致。

NAS要求文件系统不一定与服务器一致。

标准化的存储是SAN存储,NAS是非标准化存储。

FusionSphereType1 (软SDN):

ServiceOM已配好外部网络。(此组件是直接对接外部网络)

SC要发放成功,必须ServiceOM对接外部网络物理性成功。

级联管理-----à大型环境。

硬SDN比软SDN多了个SDN控制器。

Type 1最复杂,Type2 硬SDN,Type无SDN没有三层网络。

ManageOne用于服务申请和租户自助操作门户。

云服务保障:DC拓扑,原因分析,告警性能,实时监控,性能报表。

VDC只要是实现资源配额的功能。

VDC(虚拟数据中心)就是一个区域。

SC(运营管理门户:主要是运营管理):组织管理,租户管理,产品目录管理,流程审批,计量计费。

OC:运维管理。

IAM是ManageOne的身份验证。

云计算的三种解决方式:服务器虚拟化,桌面云解决方案,fusioncloud私有解决方案。

如果提到了用户数量------------à使用桌面云。

服务器数量多,重复购买严重------------à资源扩展性差。

开源的Glance有存储空间。

私有云的镜像分为:公共镜像,私有镜像,共享镜像。

私有镜像:自己自定义镜像。

共享镜像:别人共享给你的镜像。

这些镜像都是存在swift里的。

所有组件都经过keystone鉴权。

Nova:基于RestAPI,支持大容量水平扩展,支持多种主流虚拟化平台(不依赖厂商)。

FC的兼容性没有openstack好。

Nova-API:提供API接口。

Nova-schduler:选择合适主机(根据cpu和内存的权重来决定)。

Nova-Conducter:数据库操作和复杂流程控制-----à功能类似HDC。

Nova-compute:虚拟机生命周期管理和资源管理。

Nova-novncproxy:novnc访问虚拟机代理。

Nova-consolecuth:novnc访问虚拟机鉴权。

Nova-compute:管理的是业务虚拟机。

Nova-compute:3+n的模式3指的是最少3台服务器,n指的是计算节点。

华为的MQ叫Rabbit MQ(异步消息队列)。

异步消息队列的意思是不是API发出消息conducter就马上接受,而是conducter通过周期性的扫描消息队列来接受消息。

HAproxy:将资源平均分给3个nova节点。

FusionCloud的登录界面:

CPS:openstack/对接存储/虚拟化比例。

Serverce OM:对接资源池/网络创建/规格/镜像。(网络创建主要是为了外部镜像)

SC:VDC/申请产品目录/云服务/各种管理。

OC:监控日志。

可用分区(AZ):物理上相互隔离的分区。

同一个Region的不同AZ之间不能相互访问。

HostAggregat:主机组--------à分为手动和自动创建。

如果是手动创建的话:在主机组内服务器的cpu,内存型号不同会失败。

卷是有FusionStorage创建。

Flavor:规格。

虚拟机先创建规格,再有镜像,在镜像导进去。

Keypairs:密钥对:安全性更高的登入方式。

HLD:高阶段设计(售前)。

LLD:底阶段设计。

cps==FusionSpher OpenStack。

cps:做openstack的对接作关键组件的配置(磁盘管理)。

一般3个RAID卡。

系统和镜像    RAID1。(高斯DB)

Swift:RAID1

Image-cache,image:RAID10 .

RAID0:1块。

RAID1:2块

RAID10:偶数块磁盘。

ECS(弹性云主机):虚拟服务器,弹性云服务器,计算实例。

Server metadata:云服务器(虚拟机)的元数据。

Flavor:在OM中创建(规格)---------------à给云主机使用。

Quota配额:资源上限(是指定给租户使用)。

HostAggregate:一个HA内的若干host,一个HA 内的物理主机之间相互隔离。

ServerGroup:虚拟机的亲和性(绑定)/反亲和性(互斥)

Openstack的镜像格式是qcow2--------------à存在swift中。

Nova-API:有合法性检验的功能。

Nova-conducte:是从G版后的。

Nova-schedule:chance(Random),Filter-schdule(正在用)----à默认是以内存权重,支持CPU权重。

Nova-compute:占一半的作用(云主机用的磁盘,网络都是由nova-compute来提供)。

持久化存储(fusionstorage)。

 

通过驱动的方式接入不同种类的后端存储(IP SAN,本地等)。

Cinder从F版本开始。

Cinder的核心功能是对卷的管理。

Cinder-api:接口。

Cinder-scheduler:选择存储。

Cinder-volume:负责后端与存储对接,要有驱动。

Cinder-backup:备份后磁盘空间的组件。

VBS(volume BackupServer):单个磁盘的备份(单独备份数据盘)。

ECS的主要备份是为了节省备份时间

VBS和云主机备份会冲突,不能同时进行。

Nova向Neutron申请网络。

Cinder对接的后端存储(不一定是华为厂商的,可以是第三方厂商提供的)。

IP SAN,FC SAN--------à企业存储,OceanSor。

FusionStorage---------》只支持SAN存储。

Cinder3个节点起配,3个cinder一起跑以负载均衡的模式向3个节点分发任务。

第一步配置HAproxy,(代理的IP)是将多个cps节点融合到代理上。

计算节点上安装ECS。

异步:发送者只发送接收者周期性扫描。

控制器是华为的硬件设备。

第一台cps默认为网页的登录IP地址。

第一台cps默认为代理。

服务也要孔家,nova-compute只是一个服务。

Ultrapath(华为存储多路径)是安装到服务器的。

IP SAN --------à单交换机和双交换的情况。

A控和B控之间是相互独立的(不是主备的关系)。

多路径是为了实现在A控坏了的情况下,将A控的业务转到B控上来。

有业务在服务器上跑就叫主机或节点。

Upadmin--------à验证多路径安装是否成功。

OpenstackOM==ServiceOM

运营:申请云主机。

云服务:容灾备份等为用户提供的模式。

Scheduler与compute之间通信主要是通过RabbitMQ通信。

Glance本身不带存储。

Glance先到swift下载镜文件,再由Glance上传VM。

Glance和swift之间有个image-cache(加快glance的下载速度)。

内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: