自我介绍
吕毅
?链家网架构师
?曾供职于新浪平台架构部、百度移动云事业部
?参与项目新浪SAE，百度移动搜索、手机百度APP
?2015年9月加入链家网
?2015.10~2016.8，负责链家网平台服务建设
?2016.8至今，负责链家网大数据平台建设
目录
?链家网与存储架构变迁
?一场持续半年的存储改造工作?我们所熟悉的AWS S3
?Q&A
链家网与存储架构变迁
链家网线上业务历程
链家地产成立
链家在线、HERP 系统上线运营 “楼盘字典”项目启动
2001年 2007年
2008年
2012年 链家提出“真房源”
SE(Sales Effectiveness)系统上线
TE(Transaction Effectiveness)系统上线
“掌上链家”APP 发布
“链家在线”更名为“链家网”
域名变更为https://www.doczj.com/doc/2e7145458.html,
着手重建to C 业务
着手自研SE 、TE 系统
2014年 2016年
SE 、TE 合并为Link 系统
“楼盘字典”项目积累6000万房产信息
链家网存储架构变迁
链家地产成立 链家在线、HERP 系统上线运营 “楼盘字典”项目启动
2001年 2007年
2008年
2012年 链家提出“真房源”
SE(Sales Effectiveness)系统上线
TE(Transaction Effectiveness)系统上线
“掌上链家”APP 发布 2014年 2016年 SE 、TE 合并为Link 系统 “楼盘字典”项目积累6000万房产信息
传统文件系统
FastDFS Ceph
AWS S3 “链家在线”更名为“链家网” 域名变更为https://www.doczj.com/doc/2e7145458.html, 着手重建to C 业务 着手自研SE 、TE 系统
链家网存储服务相关数据
总存储文件： 8270万+ 总存储容量： 43TB 房源实勘图
66% 其他图片
15% 音视频
13% 文件备份
4%
其他 2%
一场持续半年的存储改造工作
为什么要改造?
使用Ceph遇到了问题：
容量不够
维稳成本
数据备份
使用Ceph 遇到了问题：
容量不够
维稳成本 数据备份
使用S3不需要操心的事： 容量规划 存储管理 数据备份
维修硬件
为什么选用AWS S3?
云存储为何选用S3? (1/2)
十年 S3
云存储为何选用S3? (2/2)
11个9的持久性
链家网存储架构 2015年
corporate data center AWS Direct Connect ELB (internal) EC2 （Web Services ）
ELB
(public)
Ceph
Business group Business A Business B
Projects
(Web services)
80% 20%
链家网基于AWS S3的存储架构
corporate data center
AWS Direct
Connect
Projects
(internal)
ELB
(internal)
EC2
(auto scaling)
ELB
(public)
S3Redshift
Cache
security group
Availability Zone
存储架构改造中遇到的问题
存量与增量的问题
业务方迁移成本
写入数据双写
数据迁移
我们所熟悉的AWS S3
关于Bucket
Bucket名全球唯一
可以建立Huge Bucket
关于文件检索与统计
使用数据库存储文件Meta信息供检索
关于存储成本
冷数据使用AWS Glacier存储
云计算数据中心建设运营分析 摘要：通过对现在云计算数据中心的建设成本、市场业务发展和综合管理等方面的详细分析，建立云计算数据中心的建设运营模型，结合现阶段国内外云计算发展情况，给出企业、政府及电信运营商建设运营云计算数据中心的建议和意见。 1 云计算数据中心的定义 1.1 云计算与云计算数据中心 云计算的发展与云计算数据中心的建设发展没有必然的联系，是一种松耦合的关系。这一点目前是业界人士对云计算和云计算数据中心的认识有混淆的地方。云计算技术和业务的发展可以基于传统的数据中心和传统的网络架构上发展，只是在此种基础和架构之上，云计算的发展较为缓慢，并且不能发挥云计算的最大优势。而云计算数据中心实际上是为达到数据中心的最大效能，设计出的符合云计算发展模式的数据中心，是一种后匹配方式。那么，在云计算时代我们怎样看待云计算和云计算数据中心的关系呢？ 这里我们还是先回归到云计算的本质的思考。云计算本质从2个角度来讲，一是资源分配和分布格局的转变的方式。资源包括计算资源、存储资源和带宽资源。二是向客户提供服务的模式的转变。 从技术角度来讲，云计算是资源分配与分布格局转变的方式。传统IT发展模式下，资源(包含计算、存储等资源)分布是独立小系统的。虽然有可能很多IT 设备是在一个数据中心内部，但是他们之间各自用各自的CPU、内存和存储，绝对不会跨域使用资源。而云计算使得大家能共享计算资源，共享的层级可以是对应用系统而言，也可以是对客户而言，甚至在运营商整网而言都存在着共享。对大部分系统而言，共享提高效率是不争的事实。
从客户提供服务的模式角度来看，云计算所提供的是自动化的，高度细化和个性化的服务。这与传统的IT服务的差别也是较大的。传统的IT服务是现成的套餐，除非付出较高的代价，否则无法获得细化及个性化的服务。当然，对于云计算，很多用户会有关于共享的安全性、数据的保密性等顾虑。这里面有一些观念需要大家重新认识，打个简单的比喻，大家都放心把现金存进银行，为什么会不放心把数据存进运营商呢？ 一个企业要做云计算，如果这个企业本身就是信息服务提供者，那么她或许更看重的是在技术层面的云计算的先进性，而如果企业本事是客户服务提供者，那么她更可能看重的是云计算服务本身带给客户的价值。后者就是云服务了。 1.2 云服务与云计算数据中心 云服务的实现比云计算的实现要难很多。事实上，一种新型的服务对服务提供者和被服务者都有一定的要求。也就是说，云服务接受对象必须具备一定的IT 设施或者IT信息化程度基础之上，才能较好接受云服务，其中信息化程度也包括客户对IT信息化的接受程度、依赖程度和认知程度等相关软性要素。 云服务的实现程度决定了提供云服务的运营商建设云计算数据中心的积极性、能力要求和规模等。众所周知，云计算数据中心具有双重发展方向，一个是云服务，一个是企业内部私有云。前者主要面向客户，产生新收入；后者主要面向企业本身，节省原成本。但是，殊途同归，云计算数据中心的建设运营与其发展方向关系并不大。对于承载主要面向企业内部的私有云的云计算数据中心，是否需要有运营可能会被质疑。从宏观层面考虑，或者说从整个企业角度来考虑，内部私有云实际也是在“创造价值”。因此，运营目标是一致的。 从上面的分析我们可以看出，要想真正提供云服务，云计算数据中心是必不可少的基础。 1.3 云计算数据中心定义要素
F5助力云计算数据中心 大家好，我是F5公司的李欣，今天很高兴能跟大家共享一下F5在云计算数据中心里面的经验。 其实我相信，经过去年和今年，云计算的不断宣传。我相信，大家对云计算的基本概念已经有了相当的了解，在这儿，我跟大家一起回顾一下云计算的基本概念。云计算就是一种资源的交付和使用模式，它是通过网络把大量的硬件、平台和软件所构成的资源池中的资源以按需服务的形式交付给用户。其实这个几年听起来有点绕口。为什么这个技术称之为云计算呢？有两方面的原因。一个是云计算的鼻祖亚马逊给自己的云计算平台称之为弹性运，后来云计算就由此得名。第二个，云计算确实是像天空的云一样，自由的伸缩，并不受物理的控制，所以由此称之为云计算。 云计算有自己的特点，它可以是按需服务的模式，并且它具有高度的可控性和高度的虚拟化。 云计算基于它的部署模式和服务模式，有不同的服务平台。基于云计算，如果它部署在整个的互联网，为所有的公众企业和公众用户提供服务的话，称之为公用云。如果放在企业的内网，把自己的信息做整合，作为一个技术平台，就称之为私有云，主要是给企业内部服务的。一个企业部署了私有云之后，业务能力不够，可能会再租用和建设一些私有云，对企业来说就是混合云，既包括了私有云和公有云。 IAS（InforSuite Application Server）就是基础架构服务，企业会把自己企业内部的基础的IT资源，比如说计算资源、存储资源、网络资源，甚至包括软件资源，它把这种资源以按需服务的形式发布出来，提供给用户使用。那么对于使用者来说，他们看到的就是纯粹的裸资源，他们可以按照这些资源区做自己的应用程序，去做自己的部署。这个就是IAS基础架构服务。
云计算平台设计参考架构 在私有云当中，主要包含以下几个组件：物理基础架构、虚拟化层、服务自动化层、服务门户、安全体系、云API和可集成的其它功能。（如图私有云参考架构） 图3.4 私有云参考架构 a) 物理基础架构 物理架构的定义是组成私有云的各种计算资源，包括存储、计算服务器、网络，无论是云还是传统的数据中心，都必须基于一定的物理架构才能运行。
在私有云参考架构中的物理基础架构其表现形式应当是以资源池模式出现，也就是说，所有的物理基础架构应当是统一被管，且任一设备可以看成是无状态，或者说并不与其它的资源，或者是上层应用存在紧耦合关系，可以被私有云根据最终用户的需求，和预先定制好的策略，对其进行改变。 b) 虚拟化层 虚拟化是实现私有云的前提条件，通过虚拟化的方式，可以让计算资源运行超过以前更多的负载，提升资源利用率。虚拟化让应用和物理设备之间采用松耦合部署，物理资源状态的变更不影响到虚拟化的逻辑计算资源。且可以根据物力基础资源变化而动态调整，提升整体的灵活性。 c) 服务自动化层 服务自动化层实现了对计算资源操作的自动化处理。它可以集中的监控目前整体计算资源的状态，比如性能、可用性、故障、事件汇总等等，并通过预先定义的自动化工作流进行
相关的处理。 服务自动化层是计算资源与云计算服务门户相关联的重要部件，服务自动化层拥有自动化配置和部署功能，可以进行服务模板的制定，并将服务内容和选择方式在云计算服务门户上注册，用户可以通过服务门户上的服务目录来选择相应的计算资源请求，由服务自动化层实现服务交付。 d) 云API 云应用开发接口提供了一组方法，让云服务门户和不同的服务自动化层进行联系，通过云API，可以在一个私有云当中接入多个不同地方的计算资源池，包括不同架构的计算资源，并通过各自的服务自动化体系去进行服务交互。 e) 云服务门户 云服务门户是用户使用私有云计算资源的接口，云服务门户上提供了所有可用服务的目录，并提供了完善的服务申请流程，用户可以执行申请、变更、退回等计算资源使用服务。
“数据中心”是人类上世纪在IT组织应用推广模式方面的一大发明，标志着IT应用的规范化和组织化。今天，几乎所有大中型机构（政府部门、企业、科教院校…）都建立了自己的数据中心，全面管理本机构的IT系统。覆盖全球的Internet和无数机构的业务实际上是在大量数据中心支持下运转的。各种数据中心已经成为交通、能源一样的经济基础设施。当前的形势是，人类社会在得益于数据中心的同时、也受到利用传统技术建立起来庞大数据中心资产的种种困扰，在成本、因变速度、安全、能源消耗等方面面临着一系列严峻挑战。人们普遍的共识是：传统的数据中心已经不适应全球化时代对IT技术的许多新要求，必须进行革新，否则就会走向反面，成为阻碍 IT发展的因素。 因此，建设新一代数据中心。这成为人们普遍关心的热点问题。许多人都在问：为什么要革新现有的数据中心、建设新一代数据中心？什么是新一代数据中心？怎样建设新一代数据中心？人们从国内外许多媒体上都可以感受到对这三个问题的普遍关注。这三个问题融合在一起就成为一个关乎IT产业和应用全局的问题：“推动数据中心革命、建设新一代数据中心”。 令人欣慰的是，有关的理论和实践正在逐步成熟，惠普公司最近组织出版的《新一代数据中心建设理论和实践》一书[1]就是一个实例。我们的系列文章也将以此为范本，探讨新一代数据中心的起源、设计思想、建设规划和方法，并介绍多个帮助应对挑战的实施解决方案。 现有数据中心面临的困难和挑战 随着企业全球性竞争的加剧，传统数据中心设计理念的局限性也逐步暴露无遗，使它们面临一系列严峻挑战，在许多方面已经不适应全球化时代对IT技术的新要求，
1.降低成本的挑战 当前低迷的经济和剧烈的竞争要求企业大幅度降低成本，而许多数据中心的运行成本却反而在不断攀升。据专家分析，在今后的五年中，企业在管理和运作IT系统方面的成本将是其直接购买系统成本的三倍；使人们更加难以忍受的是许多服务器未能得到充分的利用。在很多企业的数据中心中，CPU使用率均低于25%；IT资源利用率也仅为20%左右。显然，如何降低人力成本，如何降低IT总体拥有成本，如何提高IT 的投资回报，是摆在企业CEO、CIO们面前的重要课题和当务之急。 2.加快应变速度的挑战 目前企业业务变革的速度正在日益提升，一方面变革产生的各种风险随之增加，因而IT系统以更快的响应速度和更有效的应对措施，来降低这类风险也就变得愈加重要。另一方面，变革速度的加快给企业数据中心带来时间上更大的压力，这也迫使企业IT系统提高响应速度。 3.业务连续性和灾难恢复的挑战 局部的突发性灾难事件，如地震、洪水、飓风、火灾或者恐怖活动等，都可能对企业或机构的业务产生重大影响，导致公司收入减少，利润下降甚至失去客户。而重大灾难事件则很可能导致公司一蹶不振乃至倒闭。根据权威统计，在经历突发性的重大灾害后，有大约43% 的公司倒闭，还有另外51% 的公司也会在两年之内倒闭。
云计算数据中心与传统数据中心的区别 云计算数据中心与传统数据中心的区别主要集中在虚拟化程度、计算存储及网络资源的松耦合程度、自动化管理程度、绿色节能程度等几个要素。 传统数据中心基本没有实现虚拟化，而云计算数据中心最基本的是其内所有服务器、存储都是经过虚拟化的，此举比同规格传统数据中心机房内IT设备利用效率提高60%以上(满负荷情况)。 传统数据中心计算、存储及网络资源是紧耦合的，也就是说其内的IT建设是烟囱式的，根据客户需求一个项目建设一套系统，扩展起来要对系统进行重新设计。而云计算数据中心的所有计算、存储及网络资源都是松耦合的，可以根据数据中心内各种资源的消耗比例而适当增加或减少某种资源的配置。这样能使得数据中心的管理具有较大的灵活性，使得资源配置优化，按照客户需求进行配置。 云计算数据中心的模块化扩展能力也解决了传统数据中心扩容难的问题。传统数据中心在扩展受到系统设计、机房设计及网络设计的影响，对于机房扩容来说是一个系统性的工程，特别是在空间和电力能源有限的情况下，要实现扩容是无法完成的事情，然后，云计算数据中心可以在总体空间和电力提供不变的情况通过提高单机架的容纳能力及降低PUE等方式实现“扩容”。此种能力具有很强的优势，特别是在土地紧张和电力紧张的城市。 自动化管理是传统数据中心没有的功能。云计算数据中心的自动化管理使得在规模较大的情况下，实现较少工作人员对数据中心的高度智能管理。此特性一方面能降低数据中心的人工维护成本，另一方面能提高管理效率，提升客户体验。
至于绿色节能，一般情况，传统数据中心的PUE在1.8-2.5左右，而云计算数据中心一般低于1.6，目前世界上最先进的云计算数据中心可以低达1.1甚至以下。对于规模化的数据中心，能源成本是其持续运营要考虑的非常重要的因素。 云计算数据中心的建设成本要素 事实上要建设一个云计算数据中心的成本其实与建设一个传统的数据中心也是有一定 区别的。传统数据中心(以IDC为例，不考虑企业自用数据中心)的建设成本包括以下几个方面： 土地成本：购置土地相关成本，其中要考虑数据中心的位置、交通及周边环境、未来发展等方面。 土建成本：一般数据中心的机房建设标准都是较高等级的，特别是抗震、防火、防水、防风等方面的等级要求是很高的。 电力电源设施：电力引入是数据中心需要考虑的重大因素，也是其位置选择的一个重要参考指标。电力电源设施的购置、建设成本在整个数据中心建设当中只有相当大的比例。 基础网络、网络安全设施建设：网络引入是数据中心(特别是IDC)建设需考虑的非常重要的因素。很多数据中心建设地点一般都选在能最接近各电信运营商的骨干节点附近。这对运营性数据中心来说是其未来市场的一个重要保证。网络安全设施也是机房安全的重要保证。 空调及消防设施建设：空调及消防对于数据中心的持续运营有着重要作用，其效能也影响着数据中心的运营成本。
一、业务挑战 无锡华夏计算机技术有限公司于2000年1月成立，是无锡软件出口外包骨干企业。公司主要以面向日本的软件外包开发为中心，致力于不断开拓国内市场、为客户提供优质的系统集成等业务。随着企业的发展，IT投入不断加大，随之而来的PC管理问题也越来越突出。 华夏目前PC总拥有数1000台，主要用于研发和测试，由于项目多、任务紧，一台PC经常要用于不同的项目开发，而每次更换都要对PC系统进行重新安装和环境搭建。根据实际统计，华夏一个员工平均每年参与4个项目的开发，也就是每年要重新搭建四次开发环境，对测试人员来说这个数量还要更多；平均每次更换环境花费时间10个小时，华夏每年大约花费4万小时用于PC系统和环境搭建，按照人均工资15元/小时，每年花费在60万左右。 除此之外，由于PC的使用寿命较短，更新升级频繁，大量的PC就意味着每年都要有很多PC需要淘汰和更新，现在这个数字大约是10台/月，而随着华夏的发展壮大，这个数字会进一步增加，这就意味着华夏每年花在PC升级和更新的费用最少在50~60万。与此同时，大量的PC也是的企业的能源消耗巨大，电力花费居高不下；按照平均180W/台，一台PC工作8小时/天，工业用电0.9元/度，华夏每年的电费就将近15万元。 与巨大的IT投入相对应的就是IT资源利用率较低，PC分布在企业各个项目小组的开发人员手中，很难进行统一的管理调度，也无从得知PC的使用情况。软件开发的各个阶段对IT的需求都是不同的，我们无法得知某个正在进行的项目使用的PC资源是否有多余，无法将项目完成用不到的PC资源及时收回，以便给下一个项目小组使用，造成大量的IT资源浪费。
云计算数据中心与智慧城市建设 导读：云计算是一种基于网络的支持异构设施和资源流转的服务供给模型，它提供给客户可自治的服务。云计算支持异构的基础资源和异构的多任务体系，可以实现资源的按需分配、按量计费，达到按需索取的目标，最终促进资源规模化，促使分工专业化，有利于降低单位资源成本，促进网络业务创新。 一、前言 云计算是一种基于网络的支持异构设施和资源流转的服务供给模型，它提供给客户可自治的服务。云计算支持异构的基础资源和异构的多任务体系，可以实现资源的按需分配、按量计费，达到按需索取的目标，最终促进资源规模化，促使分工专业化，有利于降低单位资源成本，促进网络业务创新。 智慧城市是以多应用、多行业、复杂系统组成的综合体。多个应用系统之间存在信息共享、交互的需求。各个不同的应用系统需要共同抽取数据综合计算和呈现综合结果。如此众多繁复的系统需要多个强大的信息处理中心进行各种信息的处理。 要从根本上支撑庞大系统的安全运行，需要考虑基于云计算的网络架构，建设智慧城市云计算数据中心。在满足上述需求的同时，云计算数据中心具备传统数据中心、单应用系统建设无法比拟的优势：随需应变的动态伸缩能力（基于云计算基础架构平台，动态添加应用系统）以及极高的性能投资比（相对传统的数据中心，硬件投资至少下降30％以上）。
二、云计算应用于智慧城市的优势 （一）平台层的统一和高效能 通过架构即服务（Iaas）的构建模式，将传统数据中心不同架构、不同品牌、不同型号的服务器进行整合，通过云操作系统的调度，向应用系统提供一个统一的运行支撑平台。 同时，借助于云计算平台的虚拟化基础架构，可以有效地进行资源切割、资源调配和资源整合，按照应用需求来合理分配计算能力和存储资源，实现效能最优化。 （二）大规模基础软硬件管理 基础软硬件管理，主要负责大规模基础软件、硬件资源的监控和管理，为云计算中心操作系统的资源调度等高级应用提供决策信息，是云计算中心操作系统资源管理的基础。基础软件资源，包括单机操作系统、中间件、数据库等。基础硬件资源，则包括网络环境下的三大主要设备：计算（服务器）、存储（存储设备）和网络（交换机、路由器等设备）。基础软硬件管理中心，可以对基础软件、硬件资源进行资产管理；可以实现基础硬件的状态监控和性能监控；能够对异常情况触发报警，提醒用户及时维护问题设备；能够对基础软硬件资源进行长期的统计分析，为高层次的资源调度提供决策依据。 （三）业务/资源调度管理 云计算数据中心的突出特点是具备大量的基础软硬件资源，实现
云计算的总体架构、应用及模式探讨 1.引言： 云计算，是一种可用于商业化运作的技术架构。云计算是新一代的IT （计算机技术）模式，是IT发展历程的回归，自乔布斯创新PC（个人电脑）分散应用以来的IT领域第一次大集中应用。云计算的诞生，仍然得遵循经济规律，利用技术上的创新实现需求的增长和运营成本的降低。面对大量资源利用率不足的计算机，通过云的形式，利用富裕的已存在性能资源，使其虚拟成池以提供服务满足社会各方面的信息软件化需求，这是目前IT业大举进攻的目标市场。云计算是技术，有自身的技术架构，通过对云计算架构中功能模块的解析和架构应用实例的列举，阐述了云计算实现的基本模型，并对云计算的商业模式进行了分类展望。 2.云架构： 云计算经过初期的摸索，架构渐渐清晰，主流是分为两部分：服务和管理。 云架构的总体结构框如图1： 图1 云架构系统框图 服务分三层：SaaS（软件即服务）、PaaS（平台即服务）和IaaS（基础设施即服务）。 SaaS是出现最早，最普遍的云计算服务。随着互联网的高速发展，基础网络条件的日益成熟，用户通过浏览器联网即能用云上的软件服务。SaaS最靠近用户，只需按需付费就能享受云计算服务商提供的软件服务，用户因此省去了前期软硬件和后期维护的资金投入，这种高体验性服务，促成了SaaS产品在云计算产品中的高市场份额。SaaS包含以下常见技术： （1）、HTML（超文本标记语言）。Web（网站）页面标准技术，现主流是HTML4，逐步会过渡至HTML5，视频的高品质需求体验是其推动力。 （2）、JavaScript（物件导向语言）。用于丰富Web页面功能的动态描述语言，提高人机交互时的动画体验。 （3）、CSS(级联样式表)。控制Web页面的外观，例如链接文字的变化，
由于云计算分为IaaS、PaaS和SaaS三种类型，不同的厂家又提供了不同的解决方案，目前还没有一个统一的技术体系结构，对读者了解云计算的原理构成了障碍。为此，本文综合不同厂家的方案，构造了一个供商榷的云计算体系结构。这个体系结构如图3所示，它概括了不同解决方案的主要特征，每一种方案或许只实现了其中部分功能，或许也还有部分相对次要功能尚未概括进来。 图3 云计算技术体系结构 云计算技术体系结构分为4层：物理资源层、资源池层、管理中间件层和SOA构建层，如图3所示。物理资源层包括计算机、存储器、网络设施、数据库和软件等；资源池层是将大量相同类型的资源构成同构或接近同构的资源池，如计算资源池、数据资源池等。构建资源池更多是物理资源的集成和管理工作，例如研究在一个标准集装箱的空间如何装下2000个服务器、解决散热和故障节点替换的问题并降低能耗；管理中间件负责对云计算的资源进行管理，并对众多应用任务进行调度，使资源能够高效、安全地为应用提供服务；SOA构建层将云计算能力封装成标准的Web Services服务，并纳入到SOA体系进行管理和使用，包括服务注册、查找、访问和构建服务工作流等。管理中间件和资源池层是云计算技术的最关键部分，SOA构建层的功能更多依靠外部设施提供。 云计算的管理中间件负责资源管理、任务管理、用户管理和安全管理等工作。资源管理负责均衡地使用云资源节点，检测节点的故障并试图恢复或屏蔽之，并对资源的使用情况进行监视统计；任务管理负责执行用户或应用提交的任务，包括完成用户任务映象(Image)的部署和管理、任务调度、任务执行、任务生命期管理等等；用户管理是实现云计算商业模式的一个必不可少的环节，包括提供用户交互接口、管理和识别用户身份、创建用户程序的执行环境、对用户的使用进行计费等；安全管理保障云计算设施的整体安全，包括身份认证、访问授权、综合防护和安全审计等。 基于上述体系结构，本文以IaaS云计算为例，简述云计算的实现机制，如图4所示。 用户交互接口向应用以Web Services方式提供访问接口，获取用户需求。服务目录是用户可以访问的服务清单。系统管理模块负责管理和分配所有可用的资源，其核心是负载均衡。配
Oracle 云计算平台架构分析 摘要: 对于Oracle的云计算策略，其内部人士表示，公司的目标就是确保云计算完全是企业级的，Oracle既支持私有云，也支持公有云，可以由用户的需求来选择。IT界曾有观点指出在云计算领域可以提供全线云计算产品的两家供应商 ... 对于Oracle的云计算策略，其内部人士表示，公司的目标就是确保云计算完全是企业级的，Oracle既支持私有云，也支持公有云，可以由用户的需求来选择。首先看看这张出自Oracle官方的云计算平台及管理产品示意图。 Oracle云计算平台及管理产品示意图(图来自CIOAge) 从图中可以看出，Oracle在云计算架构中IaaS、PaaS领域都拥有的技术产品。从底层的存储、服务器、虚拟化及操作系统到数据库、中间件、开发环境的架构中，我们可以看到Oracle的产品在各个环节的分布;右侧对应的是Oracle 的云计算管理产品，包括物理与虚拟系统管理、应用程序性能管理、生命周期管理、配置管理等等。据悉，云计算运营商Amazon就是Oracle的一个合作伙伴，Oracle已经认证许可在Amazon EC2上运行，而Amazon也是Oracle支持的第一个公共的IaaS提供商。 其实，上图没有体现Oracle云计算架构的全部产品，在最上面一层的SaaS 领域Oracle还拥有ERP、CRM等众多应用软件。下面就是Oracle云平台的典型物理架构和逻辑架构图：
图1 Oracle云计算平台典型物理架构(图来自CIOAge) 图2 Oracle云计算平台典型逻辑架构(图来自CIOAge) IT界曾有观点指出在云计算领域可以提供全线云计算产品的两家供应商一个是IBM，另一个就是Oracle。Oracle在云计算市场的前景如何，让我们拭目以待。 一：数字出版产品形态分析
云计算数据中心建设方案 2020年10月10日
目录 第一章项目概述 (1) 1.1.现状分析 (1) 1.2.工程概述说明 (2) 1.3.建设意义 (2) 第二章总体方案设计 (4) 2.1.建设原则 (4) 2.2.总体框架设计 (6) 2.2.1.总体架构设计 (6) 2.2.2.资源池逻辑架构设计 (6) 2.2.3.资源池分域设计 (8) 2.2.4.资源池分层设计 (8) 2.2.5.资源池模型设计 (10) 第三章机房硬件及服务器建设 (11) 3.1.网络方案 (11) 3.1.1.需求分析 (11) 3.1.2.网络虚拟化技术 (12) 3.1.3.网络设计 (13) 3.2.存储资源规划 (16) 3.2.1.设计需求 (16) 3.2.2.存储池化技术 (16) 3.2.3.存储设计 (20) 3.3.服务器域规划 (22) 3.3.1.服务器虚拟化技术 (23) 3.3.2.物理主机 (26) 3.4.中间件与数据库域设计 (27) 3.4.1.设计需求 (27) 3.4.2.虚拟机模板技术 (27) 3.5.安全服务域设计 (28)
3.5.1.设计需求 (28) 3.5.2.网络安全 (28) 3.5.3.主机安全 (31) 3.5.4.租户和权限隔离 (32) 3.5.5.虚拟机安全 (32) 第四章机房环境建设 (33) 4.1.装饰装修工程 (33) 4.1.1.机房的平面布局和功能室的划分 (33) 4.1.2.装修材料的选择 (33) 4.1.3.机房装饰的特殊处理 (37) 4.2.供配电系统（UPS系统） (38) 4.2.1.供配电系统设计指标 (38) 4.2.2.供配电系统技术说明 (40) 4.2.3.供配电设计 (41) 4.2.4.电池 (42) 4.3.通风系统（新风和排风） (43) 4.3.1.设计依据 (43) 4.3.2.设计目标 (43) 4.3.3.设计范围 (43) 4.3.4.新风系统 (43) 4.3.5.排烟系统 (44) 4.3.6.风幕机系统 (44) 4.4.精密空调系统 (45) 4.4.1.机房设备配置分析 (45) 4.5.防雷接地系统 (46) 4.5.1.需求分析 (46) 4.5.2.系统设计 (46) 4.6.综合布线系统 (48) 4.6.1.系统需求分析 (48)
云计算数据中心架构 胡经国 本文作者的话 本文是根据有关文献和资料编写的《漫话云计算》系列文稿之一。现作为云计算学习笔录，奉献给云计算业外读者进一步学习和研究的参考。希望能够得到大家的指教和喜欢！ 下面是正文 对于云计算而言，应着重从高端服务器、高密度低成本服务器、海量存储设备和高性能计算设备等基础设施领域，提高云计算数据中心的数据处理能力。 云计算要求基础设施具有良好的弹性、扩展性、自动化、数据移动、多租户、空间效率和对虚拟化的支持。那么，云计算环境下的数据中心基础设施各部分的架构，应该是什么样的呢？ 一、云计算数据中心总体架构 云计算数据中心总体架构，分为服务和管理两大部分。 1、服务部分 服务部分主要以提供给用户的基于云的各种服务为主。它包括以下3个层次（服务模式）：基础设施即服务IaaS、平台即服务PaaS、软件即服务SaaS。 2、管理部分 管理部分主要以云的管理层为主。它的功能是：确保整个云计算中心能够安全、稳定地运行，并且能够被有效管理。 云计算数据中心总体架构包括：中心机房架构、网络系统架构、主机系统架构、储存系统架构和应用平台架构。 二、云计算数据中心机房架构 根据多年的经验，为满足云计算服务弹性的需要，云计算数据中心机房采用标准化、模块化的机房设计架构。模块化机房包括：集装箱模块化机房和楼宇模块化机房。 1、集装箱模块化机房 集装箱模块化机房，在室外无机房场景下应用。减轻了建设方在机房选址方面的压力，帮助建设方将原来半年的建设周期缩短到两个月；而能耗仅为传
统机房的50％；可适应沙漠炎热干旱地区和极地严寒地区的极端恶劣环境。 2、楼宇模块化机房 楼宇模块化机房，采用冷热风道隔离、精确送风、室外冷源等领先制冷技术；可适用于大中型数据中心的积木化建设和扩展。 三、云计算数据中心网络系统架构 1、设计理念 网络系统总体架构规划，应坚持区域化、层次化、模块化的设计理念，使网络层次更加清楚、功能更加明确。 2、规划内容 数据中心网络，根据业务性质或网络设备的作用进行区域划分，可从以下几方面的内容进行规划。 ⑴、按照传送数据业务性质和面向用户的不同，网络系统可以划分为：内部核心网、远程业务专网、公众服务网等区域。 ⑵、按照网络结构中设备作用的不同，网络系统可以划分为：核心层、汇聚层、接入层。 ⑶、从网络服务的数据应用业务的独立性、各业务的互访关系及业务的安全隔离需求综合考虑，网络系统在逻辑上可以划分为：存储区、应用业务区、前置区、系统管理区、托管区、外联网络接入区、内部网络接入区等。 3、Fabric网络架构 此外，还有一种Fabric网络架构。在数据中心部署云计算之后，传统的网络架构有可能使网络延迟问题成为一大瓶颈。这就使得在服务器之间的低延迟通信和更高的双向带宽的需要，变得更加迫切。这就需要网络架构向扁平化方向发展。最终的目标是：在任意两点之间尽量减少网络架构的数目。 Fabric网络架构的关键之一，就是“消除网络层级”的概念。Fabric网络架构，可以利用阵列技术来扁平化网络；可以将传统的三层结构压缩为二层；并最终转变为一层；通过实现任意点之间的连接，来消除复杂性和网络延迟。 例如，在服务超过10亿用户的情况下，需要重新设计网络架构。而使用新的Fabric网络架构目的就在于，保证在社交网络流量不断扩张的情况下，网站能够保持正常运行。不过，Fabric这个新技术，目前还没有统一的标准。其推广应用还有待更多的实践。 链接：Fabric Fabric是IBM公司推出的企业级区块链。2017年，IBM公司将其贡献给了Hypherlegder项目。Fabric和Sawtooth是Hypherlegder的两个重要企业级项目。
云时代需要怎样的数据中心架构？ 云计算要求基础设施具有良好的弹性、扩展性、自动化、数据移动、多租户、空间效率和对虚拟化的支持。那么，云计算环境下的数据中心基础设施各部分的架构应该是什么样的呢? 1、云计算数据中心总体架构 云计算架构分为服务和管理两大部分。在服务方面，主要以提供用户基于云的各种服务为主，共包含3个层次：基础设施即服务IaaS、平台即服务PaaS、软件即服务SaaS.在管理方面，主要以云的管理层为主，它的功能是确保整个云计算中心能够安全、稳定地运行，并且能够被有效管理。 2、云计算机房架构 根据长城电子公司多年的经验，为满足云计算服务弹性的需要，云计算机房采用标准化、模块化的机房设计架构。模块化机房包括集装箱模块化机房和楼宇模块化机房。 集装箱模块化机房在室外无机房场景下应用，减轻了建设方在机房选址方面的压力，帮助建设方将原来半年的建设周期缩短到两个月，而能耗仅为传统机房的50%,可适应沙漠炎热干旱地区和极地严寒地区的极端恶劣环境。楼宇模块化机房采用冷热风道隔离、精确送风、室外冷源等领先制冷技术，可适用于大中型数据中心的积木化建设和扩展。 3、云计算网络系统架构 网络系统总体结构规划应坚持区域化、层次化、模块化的设计理念，使网络层次更加清楚、功能更加明确。数据中心网络根据业务性质或网络设备的作用进行区域划分，可从以下几方面的内容进行规划。 1)按照传送数据业务性质和面向用户的不同，网络系统可以划分为内部核心网、远程业务专网、公众服务网等区域。 2)按照网络结构中设备作用的不同，网络系统可以划分为核心层、汇聚层、接入层。 3)从网络服务的数据应用业务的独立性、各业务的互访关系及业务的安全隔离需求综合考虑，网络系统在逻辑上可以划分为存储区、应用业务区、前置区、系统管理区、服务器托管、外联网络接入区、内部网络接入区等。
1.云计算参考架构 在私有云当中，主要包含以下几个组件：物理基础架构、虚拟化层、服务自动化层、服务门户、安全体系、云API和可集成的其它功能。（如图私有云参考架构） 图3.4 私有云参考架构 a) 物理基础架构 物理架构的定义是组成私有云的各种计算资源，包括存储、计算服务器、网络，无论是云还是传统的数据中心，都必须基于一定的物理架构才能运行。 在私有云参考架构中的物理基础架构其表现形式应当是以资源池模式出现，也就是说，所有的物理基础架构应当是统一被管，且任一设备可以看成是无状态，或者说并不与其它的资源，或者是上层应用存在紧耦合关系，可以被私有云根据最终用户的需求，和预先定制好的策略，对其进行改变。 b) 虚拟化层 虚拟化是实现私有云的前提条件，通过虚拟化的方式，可以让计算资源运行超过以前更
多的负载，提升资源利用率。虚拟化让应用和物理设备之间采用松耦合部署，物理资源状态的变更不影响到虚拟化的逻辑计算资源。且可以根据物力基础资源变化而动态调整，提升整体的灵活性。 c) 服务自动化层 服务自动化层实现了对计算资源操作的自动化处理。它可以集中的监控目前整体计算资源的状态，比如性能、可用性、故障、事件汇总等等，并通过预先定义的自动化工作流进行相关的处理。 服务自动化层是计算资源与云计算服务门户相关联的重要部件，服务自动化层拥有自动化配置和部署功能，可以进行服务模板的制定，并将服务内容和选择方式在云计算服务门户上注册，用户可以通过服务门户上的服务目录来选择相应的计算资源请求，由服务自动化层实现服务交付。 d) 云API 云应用开发接口提供了一组方法，让云服务门户和不同的服务自动化层进行联系，通过云API，可以在一个私有云当中接入多个不同地方的计算资源池，包括不同架构的计算资源，并通过各自的服务自动化体系去进行服务交互。 e) 云服务门户 云服务门户是用户使用私有云计算资源的接口，云服务门户上提供了所有可用服务的目录，并提供了完善的服务申请流程，用户可以执行申请、变更、退回等计算资源使用服务。 云服务门户收到最终用户的请求时，将根据预先定义好的策略对该请求进行立刻供应、预留或者排队。 不同的用户通过同一个云服务门户当中，将会看到只属于自己的应用、计算资源和服务目录，这是云计算当中的多租户技术，用户使用的资源在后台集中，但是在前端是完全的逻
云计算和大数据中心项目可行性研究报告 中咨国联出品
目录 第一章总论 (9) 1.1项目概要 (9) 1.1.1项目名称 (9) 1.1.2项目建设单位 (9) 1.1.3项目建设性质 (9) 1.1.4项目建设地点 (9) 1.1.5项目负责人 (9) 1.1.6项目投资规模 (10) 1.1.7项目建设规模 (10) 1.1.8项目资金来源 (12) 1.1.9项目建设期限 (12) 1.2项目建设单位介绍 (12) 1.3编制依据 (12) 1.4编制原则 (13) 1.5研究范围 (14) 1.6主要经济技术指标 (14) 1.7综合评价 (16) 第二章项目背景及必要性可行性分析 (18) 2.1项目提出背景 (18) 2.2本次建设项目发起缘由 (20) 2.3项目建设必要性分析 (20) 2.3.1促进我国云计算和大数据中心产业快速发展的需要 (21) 2.3.2加快当地高新技术产业发展的重要举措 (21) 2.3.3满足我国的工业发展需求的需要 (22) 2.3.4符合现行产业政策及清洁生产要求 (22) 2.3.5提升企业竞争力水平，有助于企业长远战略发展的需要 (22) 2.3.6增加就业带动相关产业链发展的需要 (23) 2.3.7促进项目建设地经济发展进程的的需要 (23) 2.4项目可行性分析 (24) 2.4.1政策可行性 (24) 2.4.2市场可行性 (24) 2.4.3技术可行性 (24) 2.4.4管理可行性 (25) 2.4.5财务可行性 (25) 2.5云计算和大数据中心项目发展概况 (25) 2.5.1已进行的调查研究项目及其成果 (26) 2.5.2试验试制工作情况 (26) 2.5.3厂址初勘和初步测量工作情况 (26)
云计算不仅是技术，更是服务模式的创新。云计算之所以能够为用户带来更高的效率、灵活性和可扩展性，是基于对整个IT领域的变革，其技术和应用涉及硬件系统、软件系统、应用系统、运维管理、服务模式等各个方面。 IaaS(基础架构即服务)作为云计算的三大部分之一，将基础架构进行云化，从而更好的为应用系统的上线、部署和运维提供支撑，提升效率，降低TCO。同时，由于IaaS包含各种类型的硬件和软件系统，因此在向云迁移过程中也面临前所未有的复杂性和挑战。那么，云基础架构包含哪些组件?主要面临哪些问题?有哪些主要的解决方法呢? 一、云基础架构 如图1所示，传统的IT部署架构是“烟囱式”的，或者叫做“专机专用”系统。 图1传统IT“烟囱”模式部署架构 在这种架构中，新的应用系统上线的时候需要分析该应用系统的资源需求，确定基础架构所需的计算、存储、网络等设备规格和数量，这种部署模式主要存在的问题有以下两点： l硬件高配低用。考虑到应用系统未来3～5年的业务发展，以及业务突发的需求，为满足应用系统的性能、容量承载需求，往往在选择计算、存储和网络等硬件设备的配置时会留有一定比例的余量。但硬件资源上线后，应用系统在一定时间内的负载并不会太高，使得较高配置的硬件设备利用率不高。 l整合困难。用户在实际使用中也注意到了资源利用率不高的情形，当需要上线新的应用系统时，会优先考虑部署在既有的基础架构上。但因为不同的应用系统所需的运行环境、对资源的抢占会有很大的差异，更重要的是考虑到可靠性、
稳定性、运维管理问题，将新、旧应用系统整合在一套基础架构上的难度非常大，更多的用户往往选择新增与应用系统配套的计算、存储和网络等硬件设备。 这种部署模式，造成了每套硬件与所承载应用系统的“专机专用”，多套硬件和应用系统构成了“烟囱式”部署架构，使得整体资源利用率不高，占用过多的机房空间和能源，随着应用系统的增多，IT资源的效率、扩展性、可管理性都面临很大的挑战。 云基础架构的引入有效解决了传统基础架构的问题(如图2所示)。 图2云计算融合模式部署架构 云基础架构在传统基础架构计算、存储、网络硬件层的基础上，增加了虚拟化层、云层： 虚拟化层：大多数云基础架构都广泛采用虚拟化技术，包括计算虚拟化、存储虚拟化、网络虚拟化等。通过虚拟化层，屏蔽了硬件层自身的差异和复杂度，向上呈现为标准化、可灵活扩展和收缩、弹性的虚拟化资源池; 云层：对资源池进行调配、组合，根据应用系统的需要自动生成、扩展所需的硬件资源，将更多的应用系统通过流程化、自动化部署和管理，提升IT效率。 相对于传统基础架构，云基础架构通过虚拟化整合与自动化，应用系统共享基础架构资源池，实现高利用率、高可用性、低成本、低能耗，并且通过云平台层的自动化管理，实现快速部署、易于扩展、智能管理，帮助用户构建IaaS(基础架构即服务)云业务模式。
智慧***城县云计算数据中心项目 解 决 方 案
目录 第1章概述 (2) 1.1 项目背景 (2) 1.2 建设目标 (2) 1.3 需求分析 (4) 第2章资源池建设方案 (6) 2.1 总体架构 (6) 2.2 网络架构设计 (8) 2.3 设备选型原则 (10) 第3章云平台功能设计 (12) 3.1 云主机服务 (12) 3.2 云存储服务 (16) 3.3 云负载均衡服务 (22) 3.4 虚拟路由器服务 (23) 第4章数据安全保障方案 (24) 4.1 云平台自身对数据的保护 (24) 4.2 灾备方案 (25) 4.3 灾难等级划分 (26) 4.4 灾难恢复 (27) 第5章云平台运维体系设计 (28) 5.1 自动监控系统 (28) 5.2 自动告警系统 (28) 5.3 资源管理系统 (29) 第6章业务系统迁移指导 (30) 6.1 迁移规划 (30) 6.2 迁移管理流程 (31) 6.3 迁移实施方法 (31) 6.4 应用梳理 (32) 6.5 迁移方式 (33)
第1章概述 1.1 项目背景 根据项目实际情况编制。 1.2 建设目标 1.2.1 建立一套全新的弹性云平台 自购服务器进行应用系统搭建的方式已经不能满足信息化的要求，不仅浪费了大量的资源而且也不能满足向服务型部门转变的要求。因此，本项目通过在 *** 机房中放置足够的计算资源，利用利用虚拟化技术，能够很好的面对未来智慧***城县管理综合指挥中心服务平台业务发展的挑战。 1.2.2 建立一套完整的云平台运维体系 目前政府的信息系统由于过度分散很难建立起一套有效的运维管理体系，信息系统存在资源使用不均衡的情况比较突出，业务系统运行效率不高。对目前设备运行情况也没有一个完整的考量，通过在搭建云平台的契机，借助云平台的高效的智能化运维管理系统，能够有效的提高政府的运维管理能力。通过云平台所建立一套运维管理体系，能够很好的对未来政府的信息化发展提供一个运维管理框架。 1.2.3 迁移服务 云平台建成后政府需要在一段时间内完成现有的信息系统整体搬迁。整个搬迁的过程包含数据完整性保护、数据迁移、业务系统迁移、硬件系统迁移。应用系统可以预先在智慧***城县云计算数据中心服务平台机房中搭建的云平台中预先部署，利用历史数据既可以衡量业务系统部署的完整性，数据的完整性保护以及数据的迁移服务是整个信息系统整体搬迁的重点，如何能够在一定时间内完成数据的迁移而保证数据的完整性是整个信息系统搬迁的难点。
云计算数据中心建设运营分析精选文档 TTMS system office room 【TTMS16H-TTMS2A-TTMS8Q8-
云计算数据中心建设运营分析 摘要：通过对现在云计算数据中心的建设成本、市场业务发展和综合管理等方面的详细分析，建立云计算数据中心的建设运营模型，结合现阶段国内外云计算发展情况，给出企业、政府及电信运营商建设运营云计算数据中心的建议和意见。 1 云计算数据中心的定义 云计算与云计算数据中心 云计算的发展与云计算数据中心的建设发展没有必然的联系，是一种松耦合的关系。这一点目前是业界人士对云计算和云计算数据中心的认识有混淆的地方。云计算技术和业务的发展可以基于传统的数据中心和传统的网络架构上发展，只是在此种基础和架构之上，云计算的发展较为缓慢，并且不能发挥云计算的最大优势。而云计算数据中心实际上是为达到数据中心的最大效能，设计出的符合云计算发展模式的数据中心，是一种后匹配方式。那么，在云计算时代我们怎样看待云计算和云计算数据中心的关系呢？ 这里我们还是先回归到云计算的本质的思考。云计算本质从2个角度来讲，一是资源分配和分布格局的转变的方式。资源包括计算资源、存储资源和带宽资源。二是向客户提供服务的模式的转变。 从技术角度来讲，云计算是资源分配与分布格局转变的方式。传统IT发展模式下，资源(包含计算、存储等资源)分布是独立小系统的。虽然有可能很多IT设备是在一个数据中心内部，但是他们之间各自用各自的CPU、内存和存储，绝对不会跨域使用资源。而云计算使得大家能共享计算资源，共享的层级可以是对应用系统而言，也可以是对客户而言，甚至在运营商整网而言都存在着共享。对大部分系统而言，共享提高效率是不争的事实。
云计算数据中心建设项目建设模式探讨 由于在公安网建设和发展过程中，网络及相关系统从简单互联变得庞大和复杂，建设和维护的难度均在不断增加。建设和维护模式也由原来单一的自建自维向代维代建逐步转变。参考当前主要政府单位的网络建设模式一般为自行建设或代为建设，运维模式则有自行维护和代为维护。不同的建设模式和维护模式实际上各有利弊，因此在新建公安相关网络和云计算数据中心时应当结合自身实际情况，选择适合的方式。以下是不同建设和运维方式的比较： 优点缺点 自建 能够按照自身的需 求去选择相对较好的产 品和方案来组网 规划周期较长，单次 采购成本较高，一次性 投入较大 代建 规划周期相对自建 较短，相比自建一次性 投入的方式，可以采用 每年固定服务费的方式 向代建方3~5年支付完 毕 由于代建需要集成 商垫资，目前能够提供 代建能力的集成商相对 较少 由于集成商考虑到 建设成本，所选择的产 品可能不符合最初的建 设初衷
对于建设方案，目前有部分省级政府单位均采用代建加考核的方式，即集成商代为建设，然后按年向集成商支付服务费用，并对集成商的服务能力进行考核。但是在代建项目中，需要对代建提出详见的方案和产品要求，否则建成的网络无法达到最初的预期值。 优点缺点 自维 能够锻炼和培养自 身的信息化队伍和信息 化水平 能够对自身的业务 和系统有清晰的理解 由于公安IT系统包 含了大量的硬件，包括 网络、安全、服务器、 存储等，且采购是一个 延续的过程，品牌多且 繁杂，采用自维的方式 需要投入大量的人力和 物力 代维 弥补公安信息化人 力不足，故障相应速度 较快 代维公司人员的技 术能力参差不齐且人员 流动性较大，仅能够处 理简单故障 对于运维方式，由于一套IT系统三分建设，七分管理，后期运维建议还是采用代维加原厂商配合的方式，即有专门的系统集成公司技术人员长期驻场维护，实现基础的设备调