主要技术选型方案 项目在体系结构、软件产品、数据共享交换等方面，贯彻"标准和开放"的原则，保证系统具备良好的互连性、扩充性，使得最广泛的软件可以被采用；系统采用通用的平台产品技术和开放的体系结构，使具有较好的互操作性、可移植性、档次皆宜性和易获得性，使得最广泛的社会人才可以加入新系统的开发、管理、培训、使用和维护，最广泛的Internet新技术可以最先采用，同时拥有最短的开发周期；系统要能够支持多种服务器平台、多种网络传输协议，同时又能适应新技术的发展。 一、遵循国际标准规范协议 本项目将遵循国际上成熟的、通用的标准、规范和协议，如TCP/IP、XML等。以XML应用为例，XML数据交换格式和标准：以XML为基础，定义了数据标识、数据传递、数据操作、数据存储映射等内容。针对不同的业务可以定义其业务协议。 支持跨平台运行的体系架构，系统兼容各种主流操作系统与应用平台。数据交换方面将遵循SOAP协议，SOAP协议是HTTP 加XML为一种跨平台组件调用协议，用于系统之间的服务请求和数据交换。支持国际主流标准：Portlet（JSR168）、XML、WSRP、JAAS、JNDI、JCA等。认证和授权支持LDAP、NIS、JAAS、JNDI、ADSI接口，用户还可自行扩充。
二、利用XML技术实现数据间的传输交换 系统基于XML技术实现各业务数据的交换接口，并实现与第三方软件的应用集成。本系统中数据在界面展示、系统间传输、数据存储等应用中都利用了XML技术。利用XML技术将丰富的功能与HTML的易用性结合到Web的应用中，以一种开放的自我描述方式定义了数据结构，在描述数据内容的同时能突出对结构的描述，从而体现出数据之间的关系。这样所组织的数据对于应用程序和用户都是友好的、可操作的。 XML的优势之一是它允许各个组织、个人建立适合自己需要的置标集合，并且这些置标可以迅速地投入使用。这一特征使得XML可以在电子商务、政府文档、司法、出版、CAD/CAM、保险机构、厂商和中介组织信息交换等领域中一展身手，针对不同的系统、厂商提供各具特色的独立解决方案。 XML的最大优点在于它的数据存储格式不受显示格式的制约。一般来说，一篇文档包括三个要素：数据、结构以及显示方式。对于HTML来说，显示方式内嵌在数据中，这样在创建文本时，要时时考虑输出格式，如果因为需求不同而需要对同样的内容进行不同风格的显示时，要从头创建一个全新的文档，重复工作量很大。此外HTML缺乏对数据结构的描述，对于应用程序理解文档内容、抽取语义信息都有诸多不便。 XML把文档的三要素独立开来，分别处理。首先把显示格式从数据内容中独立出来，保存在样式单文件（Style Sheet）中，
大数据处理平台及可视化架构设计说明书 版本：1.0 变更记录
目录 1 1. 文档介绍 (3) 1.1文档目的 (3) 1.2文档范围 (3) 1.3读者对象 (3) 1.4参考文献 (3) 1.5术语与缩写解释 (3) 2系统概述 (4) 3设计约束 (5) 4设计策略 (6) 5系统总体结构 (7) 5.1大数据集成分析平台系统架构设计 (7) 5.2可视化平台系统架构设计 (11) 6其它 (14) 6.1数据库设计 (14) 6.2系统管理 (14) 6.3日志管理 (14)
1 1. 文档介绍 1.1 文档目的 设计大数据集成分析平台，主要功能是多种数据库及文件数据；访问；采集；解析，清洗，ETL，同时可以编写模型支持后台统计分析算法。 设计数据可视化平台，应用于大数据的可视化和互动操作。 为此，根据“先进实用、稳定可靠”的原则设计本大数据处理平台及可视化平台。 1.2 文档范围 大数据的处理，包括ETL、分析、可视化、使用。 1.3 读者对象 管理人员、开发人员 1.4 参考文献 1.5 术语与缩写解释
2 系统概述 大数据集成分析平台,分为9个层次，主要功能是对多种数据库及网页等数据进行访采集、解析，清洗，整合、ETL，同时编写模型支持后台统计分析算法，提供可信的数据。 设计数据可视化平台 ,分为3个层次，在大数据集成分析平台的基础上实现大实现数据的可视化和互动操作。
3 设计约束 1.系统必须遵循国家软件开发的标准。 2.系统用java开发，采用开源的中间件。 3.系统必须稳定可靠，性能高，满足每天千万次的访问。 4.保证数据的成功抽取、转换、分析，实现高可信和高可用。
目录 1方案整体规划 1.1整体拓扑 方案划分为五个功能区： 线路接入区：包含互联网线路，市局、各委办局、采集点等专线接入 网络纵深防御区：包含各种网络安全、审计设备，符合等保3级规范要求
核心交换区：包含万兆核心交换集群及汇聚交换设备 网管、客服区：包含网管平台及客户终端 计算、存储区：包含云计算机平台和分布式存储系统。 1.2设计依据 传统计算中心观念是根据功能需求的变化实现对应的硬件功能盒子堆砌而构建的，这非常类似于传统软件开发的组件堆砌，被已经证明为是一种较低效率的资源调用方式，而如果能够将整个网络的构建看成是由封装完好、相互耦合松散、但能够被标准化和统一调度的“服务”组成，那么业务层面的变更、物理资源的复用都将是轻而易举的事情。因此提出支撑业务运行的底层基础设施也应当向“面向服务”的设计思想转变，构造“面向服务的数据中心”（ServiceOrientedDataCenterSODC）。 具体而言SODC,应形成这样的资源调用方式：底层资源对于上层应用就像由服务构成的“资源池”，需要什么服务就自动的会由网络调用相关物理资源来实现，管理员和业务用户不需要或几乎可以看不见物理设备的相互架构关系以及具体存在方式。SODC的框架原型如下所示： 在图中，隔在基础架构和用户之间的“交互服务层”实现了向上提供服务、向下屏蔽复杂的物理结构的作用，使得网络使用者看到的网络不是由复杂的基础物理功能实体构成的，而是一个个智能服务——安全服务、移动服务、计算弹性服务、分布式存储服务等，至于这些服务是由哪些实际存在的物理资源所提供，管理员和上层业务都无需关心，交互服务层解决了一切资源的调度和高效复用问题。 SODC构成的数据中心IT架构必将是整个数据中心未来发展的趋势，虽然实现真正理想的SODC融合的架构将是一个长期的历程，但在向该融合框架迈进的每一步实际上都将会形成对网络灵活性、网络维护、资源利用效率、投资效益等方面的巨大改
大数据平台建设方案 （项目需求与技术方案） 一、项目背景 “十三五”期间，随着我国现代信息技术的蓬勃发展，信息化建设模式发生根本性转变,一场以云计算、大数据、物联网、移动应用等技术为核心的“新 IT”浪潮风起云涌，信息化应用进入一个“新常态”。***（某政府部门）为积极应对“互联网+”和大数据时代的机遇和挑战，适应全省经济社会发展与改革要求，大数据平台应运而生。 大数据平台整合省社会经济发展资源，打造集数据采集、数据处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数据平台，以信息化提升数据化管理与服务能力，及时准确掌握社会经济发展情况，做到“用数据说话、用数据管理、用数据决策、用数据创新”，牢牢把握社会经济发展主动权和话语权。 二、建设目标 大数据平台是顺应目前信息化技术水平发展、服务政府职能改革的架构平台。它的主要目标是强化经济运行监测分析，实现企业信用社会化监督，建立规范化共建共享投资项目管理体系，推进政务数据共享和业务协同，为决策提供及时、准确、可靠的信息依据，提高政务工作的前瞻性和针对性，加大宏观调控力度，促进经济持续健康发
展。 1、制定统一信息资源管理规范，拓宽数据获取渠道，整合业务信息系统数据、企业单位数据和互联网抓取数据，构建汇聚式一体化数据库，为平台打下坚实稳固的数据基础。 2、梳理各相关系统数据资源的关联性，编制数据资源目录，建立信息资源交换管理标准体系，在业务可行性的基础上，实现数据信息共享，推进信息公开，建立跨部门跨领域经济形势分析制度。 3、在大数据分析监测基础上，为政府把握经济发展趋势、预见经济发展潜在问题、辅助经济决策提供基础支撑。 三、建设原则 大数据平台以信息资源整合为重点，以大数据应用为核心，坚持“统筹规划、分步实施，整合资源、协同共享，突出重点、注重实效，深化应用、创新驱动”的原则，全面提升信息化建设水平，促进全省经济持续健康发展。
某航空公司虚拟化解决方案 行业航空业 用户名称某航空公司 项目需求服务器虚拟化 建设需求服务器虚拟化建设 项目目的IT系统必须要能满足随需应变的业务需求，随需应用的IT架构具有良好的扩展能力和柔性化，能快速地适应企业需求变化，并根据业务需要动态分配资源，从而提高业务 响应能力;能降低维护成本，提高运行效率;能够降低企业应用集成的复杂性，节省系统 整体成本。 解决方案为用户提供强大的虚拟化支持，VMware vSphere 是业界第一款云操作系统，通过将IT 基础架构转变为私有云（根据需要与外部云建立联邦的内部云集合）从而将IT 基 础架构作为可轻松访问的服务来交付。利用成本效益更高的云计算功能，打造灵活、 可靠的下一代IT 服务，对服务级别获得超强的控制力。 背景： 某航空有限责任公司(以下简称“某航”)成立于1992年11月，1993年9月17日正式开航，主要经 营航空客、货、邮运输业务。自开航以来，某航保持了16年安全飞行和15年持续盈利，成为中国民航界 赫赫有名的资产最为优良、主业最为突出、人机比例最低、最具活力和生机的航空公司之一，曾先后荣获“**市市长质量奖”、“中国最具价值品牌”、“中国十大雇主品牌”等荣誉。 用户需求及目标 IT架构需要优化 作为目前国内五大航空集团之一，某航深知，航空企业的发展离不开信息化建设，只有信息化能够帮 助某航在国内激烈的民航竞争中立于不败之地。自成立以来，某航在信息化建设上持续投入，不仅实现了 主要业务如订票系统、离港系统、货运系统、飞行运行管理系统、行李查询系统、财务系统、结算系统、 飞行部门编排航班、机组排班等业务的全部计算机化，而且还在移动办公、生产控制和服务营销等方面实 现了全方位的移动信息化。如今，某航信息化水平在国内航空公司中处于领先地位，为某航的成功发挥着 保驾护航的作用。 在成绩面前，某航没有骄傲，他们清醒地认识到，要让某航在这个充满变化的时代保持企业高速稳定 的发展，IT系统必须要能满足随需应变的业务需求，随需应用的IT架构具有良好的扩展能力和柔性化，能 快速地适应企业需求变化，并根据业务需要动态分配资源，从而提高业务响应能力;能降低维护成本，提高
1.技术实现框架 1.1大数据平台架构 1.1.1大数据库是未来提升业务能力的关键要素 以“大数据”为主导的新一波信息化浪潮正席卷全球，成为全球围加速企业技术创新、推动政府职能转变、引领社会管理变革的利器。目前，大数据技术已经从技术研究步入落地实施阶段，数据资源成为未来业务的关键因素。通过采集和分析数据，我们可以获知事物背后的原因，优化生产/生活方式，预知未来的发展动态。 经过多年的信息化建设，省地税已经积累了丰富的数据资源，为下一步的优化业务、提升管理水平，奠定了坚实的基础。 未来的数据和业务应用趋势，大数据才能解决这些问题。 《1.巨杉软件SequoiaDB产品和案例介绍 v2》P12 “银行的大数据资产和应用“，说明税务数据和业务分析，需要用大数据解决。 《1.巨杉软件SequoiaDB产品和案例介绍 v2》P14 “大数据与传统数据处理”，说明处理模式的差异。 1.1.2大数据平台总体框架 大数据平台总体技术框架分为数据源层、数据接口层、平台架构层、分析工具层和业务应用层。如下图所示：
（此图要修改，北明） 数据源层：包括各业务系统、服务系统以及社会其它单位的结构化数据和非结构化数据； 数据接口层：是原始数据进入大数据库的入口，针对不同类型的数据，需要有针对性地开发接口，进行数据的缓冲、预处理等操作； 平台架构层：基于大数据系统存储各类数据，进行处理？； 分析工具层：提供各种数据分析工具，例如：建模工具、报表开发、数据分析、数据挖掘、可视化展现等工具； 业务应用层：根据应用领域和业务需求，建立分析模型，使用分析工具，发现获知事物背后的原因，预知未来的发展趋势，提出优化业务的方法。例如，寻找服务资源的最佳配置方案、发现业务流程中的短板进行优化等。 1.1.3大数据平台产品选型 针对业务需求，我们选择巨杉数据库作为大数据基础平台。
VMware vSphere常见问题汇总(十七) 170. Vmdk 的重做日志已损坏解题思路 [vmware-]环境：， 故障问题：执行storage vmotion之后，虚拟机出现了报错。 报错信息： is off the virtual machine. If the problem still persists, discard the redo log. 解提思路： 【故障原因】 由于快照之间的关系出现异常，导致vm启动失败： :2013-01-14t08:36:| vmx| disklib-chain : "/vmfs/volumes/50f13506-075ed29b-86b5-5ef3fd359eab/è3 184/" : failed to open (the parent virtual disk has been modified :2013-01-14t08:36:| vmx| disklib-lib : failed to open '/vmfs/volumes/50f13506-075ed29b-86b5-5ef3fd359eab/è3 184/' with flags 0xa the parent virtual disk has been modified since the child was created. The content id of the parent virtual disk does not match the corresponding parent content id in the child (18). :2013-01-14t08:36:| vmx| disk: cannot open disk "/vmfs/volumes/50f13506-075ed29b-86b5-5ef3fd359eab/è3 184/": the parent virtual disk has been modified since the child was created. The content id of the parent virtual disk does not match the corresponding parent content id in the child (18). :2013-01-14t08:36:| vmx| msg_post: error :2013-01-14t08:36:| vmx| [ cannot open the disk '/vmfs/volumes/50f13506-075ed29b-86b5-5ef3fd359eab/è3 184/' or one of the snapshot disks it depends on. :2013-01-14t08:36:| vmx| [ reason: the parent virtual disk has been modified since the child was created. The content id of the parent virtual disk does not match the corresponding parent content id in the child. :2013-01-14t08:36:| vmx| module diskearly power on failed. 【快照之间的联系】
Vmware虚拟化完整配置VSPHERE 6.7虚拟化搭建及配置 kenny
目录 一、安装环境介绍 (3) 二、安装与配置vmware vsphere 6.7 (4) 1、安装vsphere 6.7 (4) 2、配置密码 (4) 3、配置DNS、主机名和IP地址 (5) 三、配置Starwind V8 (7) 四、安装vcenter server 6.7 (10) 1、安装vcenter server(自带嵌入式数据库) (10) 2、配置外部数据库SQL SERVER 2008 (15) 3、使用外部数据库安装Vcenter server (19) 五、创建数据中心和群集HA (24) 1、新建数据中心 (24) 2、创建群集HA (24) 六、添加ESXI主机和配置存储、网络 (26) 1、添加ESXI主机到群集中 (26) 2、配置存储 (28) 3、添加网络 (30) 七、创建虚拟机 (32) 1、上传镜像至共享存储 (32) 2、新建虚拟机 (33) 3、将虚拟机克隆为模板 (37) 4、通过模板部署新虚拟机 (39) 八、物理机迁移至ESXI（P2V） (44) 1、迁移windows物理机 (44) 2、迁移Linux物理机 (49) 九、vmotion迁移测试 (51) 十、HA高可用测试 (53) 十一、VMware vSphere FT双机热备 (54) 十二、vSphere Data Protection配置部署 (57)
1、部署VDP模板 (57) 2、配置VDP (62) 3、创建备份作业 (68) 十三、附录 (72)
云平台建设方案简介 2015年11月
目录
云平台总体设计 总体设计方案 设计原则 ?先进性 云中心的建设采用业界主流的云计算理念，广泛采用虚拟化、分布式存储、分布式计算等先进技术与应用模式，并与银行具体业务相结合，确保先进技术与模式应用的有效与适用。 ?可扩展性 云中心的计算、存储、网络等基础资源需要根据业务应用工作负荷的需求进行伸缩。在系统进行容量扩展时，只需增加相应数量的硬件设备，并在其上部署、配置相应的资源调度管理软件和业务应用软件，即可实现系统扩展。 ?成熟性 云中心建设，要考虑采用成熟各种技术手段，实现各种功能，保证云计算中心的良好运行，满足业务需要。 ?开放性与兼容性 云平台采用开放性架构体系，能够兼容业界通用的设备及主流的操作系统、虚拟化软件、应用程序，从而使得云平台大大降低开发、运营、维护等成本。 ?可靠性 云平台需提供可靠的计算、存储、网络等资源。系统需要在硬件、网络、软件等方面考虑适当冗余，避免单点故障，保证云平台的可靠运行。 ?安全性 云平台根据业务需求与多个网络分别连接，必须防范网络入侵攻击、病毒感染；同时，云平台资源共享给不同的系统使用，必须保证它们之间不会发生数据泄漏。因此，云平台应该在各个层面进行完善的安全防护，确保信息的安全和私密性。 ?多业务性 云平台在最初的规划设计中，充分考虑了需要支撑多用户、多业务的特征，保证基础资源在不同的应用和用户间根据需求自动动态调度的同时，使得不同的业务能够彼此隔离，保证多种业务的同时良好运行。 ?自主可控 云平台建设在产品选型中，优先选择自主可控的软硬件产品，一方面保证整个云计算中心的安全，另一方面也能够促进本地信息化产业链的发展。 支撑平台技术架构设计 图支撑平台技术架构 支撑平台总体技术架构设计如上，整个架构从下往上包括云计算基础设施层、云计算平台资源层、云计算业务数据层、云计算管理层和云计算服务层。其中： ?云计算基础设施层：主要包括云计算中心的物理机房环境； ?云计算平台资源层：在云计算中心安全的物理环境基础上，采用虚拟化、分布 式存储等云计算技术，实现服务器、网络、存储的虚拟化，构建计算资源池、 存储资源池和网络资源池，实现基础设施即服务。
大数据平台框架选型分析 一、需求 城市大数据平台，首先是作为一个数据管理平台，核心需求是数据的存和取，然后因为海量数据、多数据类型的信息需要有丰富的数据接入能力和数据标准化处理能力，有了技术能力就需要纵深挖掘附加价值更好的服务，如信息统计、分析挖掘、全文检索等，考虑到面向的客户对象有的是上层的应用集成商，所以要考虑灵活的数据接口服务来支撑。 二、平台产品业务流程
城市犬数据平台 載据集成敬據仓库平會骨理决彙支持 上曉应用集虎 三、选型思路 必要技术组件服务： ETL >非/关系数据仓储> 大数据处理引擎> 服务协调> 分析BI >平台监管 元蜀据扎卑—— socket 文件导入 DE cctiect ^eb^erv-ce 数据清洗 tT. 定制分析 统ii■分析、N 「定市牛外乱歡据海 权限扱边据接 口■ 生成领导仪表 fi —元花琳 标准［匕入嘩「
丹址“￡ Ar Sa:城曲犬董拯选童实饕恿善 「 四、选型要求 1 ?需要满足我们平台的几大核心功能需求，子功能不设局限性。如不满足全部， 需要对未满足的其它核心功能的开放使用服务支持 2 ?国内外资料及社区尽量丰富，包括组件服务的成熟度流行度较高 3?需要对选型平台自身所包含的核心功能有较为深入的理解，易用其API或基于源码开发 4 ?商业服务性价比高，并有空间脱离第三方商业技术服务
5?—些非功能性需求的条件标准清晰，如承载的集群节点、处理数据量及安全机 制等 五、选型需要考虑 简单性：亲自试用大数据套件。这也就意味着：安装它，将它连接到你的Hadoop安装, 集成你的不同接口（文件、数据库、B2B等等），并最终建模、部署、执行一些大数据作业。 自己来了解使用大数据套件的容易程度一一仅让某个提供商的顾问来为你展示它是如何工作是远远不够的。亲自做一个概念验证。 广泛性：是否该大数据套件支持广泛使用的开源标准——不只是Hadoop和它的生态系统，还有通过SOAF和REST web服务的数据集成等等。它是否开源，并能根据你的特定问题易于改变或扩展？是否存在一个含有文档、论坛、博客和交流会的大社区？ 特性：是否支持所有需要的特性？Hadoop的发行版本（如果你已经使用了某一个）？ 你想要使用的Hadoop生态系统的所有部分？你想要集成的所有接口、技术、产品？请注意过多的特性可能会大大增加复杂性和费用。所以请查证你是否真正需要一个非常重量级的解决方案。是否你真的需要它的所有特性？ 陷阱：请注意某些陷阱。某些大数据套件采用数据驱动的付费方式（“数据税”）， 也就是说，你得为自己处理的每个数据行付费。因为我们是在谈论大数据，所以这会变得 非常昂贵。并不是所有的大数据套件都会生成本地Apache Hadoop代码，通常要在每个 Hadoop集群的服务器上安装一个私有引擎，而这样就会解除对于软件提供商的独立性。还要考虑你使用大数据套件真正想做的事情。某些解决方案仅支持将Hadoop用于ETL来填充 数据至数据仓库，而其他一些解决方案还提供了诸如后处理、转换或Hadoop集群上的大数 据分析。ETL仅是Apache Hadoop和其生态系统的一种使用情形。 六、方案分析
Vmware 虚拟化完整配置VSPHERE 6.7虚拟化搭建及配置 kenny
目录 一、安装环境介绍 (3) 二、安装与配置vmware vsphere 6.7 (4) 1、安装 vsphere 6.7 (4) 2、配置密码 (4) 3、配置 DNS、主机名和 IP 地址 (5) 三、配置 Starwind V8 (6) 四、安装 vcenter server 6.7 (9) 1、安装 vcenter server( 自带嵌入式数据库) (9) 2、配置外部数据库SQL SERVER 2008 (14) 3、使用外部数据库安装Vcenter server (17) 五、创建数据中心和群集HA (21) 1、新建数据中心 (21) 2、创建群集 HA (21) 六、添加 ESXI主机和配置存储、网络 (23) 1、添加 ESXI主机到群集中 (23) 2、配置存储 (24) 3、添加网络 (26) 七、创建虚拟机 (28) 1、上传镜像至共享存储 (28) 2、新建虚拟机 (29) 3、将虚拟机克隆为模板 (33) 4、通过模板部署新虚拟机 (35) 八、物理机迁移至ESXI（ P2V） (40) 1、迁移 windows 物理机 (40) 2、迁移 Linux 物理机 (45) 九、 vmotion 迁移测试 (47) 十、 HA 高可用测试 (49) 十一、 VMware vSphere FT 双机热备 (50) 十二、 vSphere Data Protection 配置部署 (52) 1、部署 VDP模板 (52)
2、配置 VDP (57) 3、创建备份作业 (63) 十三、附录 (68)
VmwarevSphere常见问题汇总 1、启用客户机操作系统和远程控制台之间的复制和粘贴操作 解决方法：要在客户机操作系统和远程控制台之间进行复制和粘贴，必须使 用 vSphere Client 启用复制和粘贴操作。 步骤 a、使用 vSphere Client 登录到 vCenter Server 系统并选择虚拟机。 b、在摘要选项卡中，单击编辑设置。 c、选择选项 > 高级 > 常规，然后单击配置参数。 d、单击添加行，并在“名称”和“值”列中键入以下值。 名称值 isolation.tools.copy.disable false isolation.tools.paste.disable false 注意这些选项将替代在客户机操作系统的 VMware Tools 控制面板中做出的任何设置。 e、单击确定以关闭“配置参数”对话框，然后再次单击确定以关闭“虚拟机属性”对话框。 f、重新启动虚拟机。 2、sco系统迁移过去之后找不到启动列表 解决方法：目前解决方法：使用软驱制作应急盘，通过应急盘来找到启动列表，如果不行的话，只能使用，现成的虚拟镜像导入vmware中，但是这种方法，要自己设置与自己相关的应用。 3、linux做迁移时手动添加的逻辑分区（LVM卷），迁移过去之后找不到这些分区 解决方法：：给虚拟机额外添加硬盘后融合，然后将数据重新拷入加入的硬盘中。 4、安装esxi的时候找不到万兆网卡 解决方法：解决方法：安装各个厂商OEM的esxi版本。 5、迁移时提示vss原卷不能克隆
解决方法：解决方法：查看是否有额外的设备插在服务器上，如usb设备。 6、Windows迁移之后，配置网卡的时候，会提示“IP已经被分配给其他的适配器” 解决方法：打开命令行窗口（运行cmd），输入： （1）、set DEVMGR_SHOW_NONPRESENT_DEVICES=1 （2）、devmgmt.msc 在弹出的“设备管理器”窗口。选择“查看（V）”---“显示隐藏的设备（W）”，然后展开“网络适配器”子项，可以看到一些透明图标显示的网卡信息，这些信息是源服务器的物理网卡信息。然后选择透明的设备卸载，RAS同步适配器为系统正常设备，不需要将其卸载。 7、Asianux3.0迁移之后不能显示图形化界面 解决方法：解决方法：cp /etc/X11/xorg.conf /etc/X11/xorg.conf.bak vi /etc/X11/xorg.conf 将xorg.conf文件中的selection “Devices”字段中Driver对应的值修改为“vmware”即可，修改完成后通过startx启动图形化界面。 8、迁移域控主机后发生当虚拟机开启后，物理机就断网 解决方法：单播和多播的问题 9、在VC中虚拟机的鼠标全屏之后，不能控制整个屏幕 解决方法：当时安装的是esxi 4.1，将esxi4.1升级到esxi4.1upd01 ，同时要将VC client也升级到对应的版本。 10、迁移过去的win2003的系统，隔段时间之后会蓝屏或重启 解决方法：查看系统日志，有可能是杀毒软件的原因，将杀毒软件卸载重装。 11、使用FT功能需同时具备以下条件 解决方法：1 所有ESX必须为4.0以上，Build版本相同，以及在同一个HA Cluster中 2 服务器的CPU要求是同一系列(并且要求是AMD Barcelona+, Intel Penryn+的CPU) 3 BIOS中要启用VT及禁用Hyperthreading（超线程）,最好同时禁用电源管理 4 每个VM只能分配1颗vCPU 5 要有专门的千兆网络负责FT
云平台 云平台建设原则 1、标准化 当前云服务在整个信息产业中还不够成熟,相关的标准还没有完善。为保障方案的前瞻性,在设备选型上力求充分考虑对云服务相关标准的扩展支持能力,保证良好的先进性,以适应未来的信息产业化发展。 2、高可用 为保证数据业务网的核心业务的不中断运行,在网络整体设计与设备配置上都就是按照双备份要求设计的。在网络连接上消除单点故障,提供关键设备的故障切换。关键设备之间的物理链路采用双路冗余连接,按照负载均衡方式或active-active方式工作。关键主机可采用双路网卡来增加可靠性。全冗余的方式使系统达到电信级可靠性。要求网络具有设备/链中故障毫秒的保护倒换能力。 具有良好扩展性,网络建设完毕并网后应可以进行大规模改造、服务器集群、软件功能模块应可以不断扩展。 良好的易用性。简化系统结构,降低维护量。对突发数据的吸附,缓解端口拥塞压力,能保证业务的流畅性等。 3、增强二级网络 云平台下,虚拟机迁移与集群式两种典型的应用模型,这两种模型均需要二层网络支持。随着云计算资源池的不断扩大,二层网络的范围正在逐步扩大,甚至扩展到多个数据中心内,大规模部署二层网络则带来一个必然的问题就就是二层环路问题。采用传统的STP+VRRP技术部署二层网络时会带来部署复杂、链路利用率低、网络收敛时间慢等诸多问题,因此网络方案的设计需要重点考虑增强二级网络技术(如IRF/VSS、TRILL等)的应用,以解决传统技术带来的问题。 4、虚拟化 虚拟资源池化就是网络发展的重要趋势,将可以大大提高资源利用率,降低运营成本。应有效开展服务器、存储的虚拟资源池技术建设,网络设备的虚拟化也应进行设计实现。服务器、存储器、网络及安全设备应具备虚拟化功能。
车联网大数据平台架构设计-软硬件选型 1.软件选型建议 数据传输 处理并发链接的传统方式为：为每个链接创建一个线程并由该线程负责所有的数据处理业务逻辑。这种方式的好处在于代码简单明了，逻辑清晰。而由于操作系统的限制，每台服务器可以处理的线程数是有限的，因为线程对CPU的处理器的竞争将使系统整体性能下降。随着线程数变大，系统处理延时逐渐变大。此外，当某链接中没有数据传输时，线程不会被释放，浪费系统资源。为解决上述问题，可使用基于NIO的技术。 Netty Netty是当下最为流行的Java NIO框架。Netty框架中使用了两组线程：selectors与workers。其中Selectors专门负责client端（列车车载设备）链接的建立并轮询监听哪个链接有数据传输的请求。针对某链接的数据传输请求，相关selector会任意挑选一个闲置的worker线程处理该请求。处理结束后，worker自动将状态置回‘空闲’以便再次被调用。两组线程的最大线程数均需根据服务器CPU处理器核数进行配置。另外，netty内置了大量worker 功能可以协助程序员轻松解决TCP粘包，二进制转消息等复杂问题。 IBM MessageSight MessageSight是IBM的一款软硬一体的商业产品。其极限处理能力可达百万client并发，每秒可进行千万次消息处理。 数据预处理 流式数据处理 对于流式数据的处理不能用传统的方式先持久化存储再读取分析，因为大量的磁盘IO操作将使数据处理时效性大打折扣。流式数据处理工具的基本原理为将数据切割成定长的窗口并对窗口内的数据在内存中快速完成处理。值得注意的是，数据分析的结论也可以被应用于流式数据处理的过程中，即可完成模式预判等功能还可以对数据分析的结论进行验证。 Storm Storm是被应用最为广泛的开源产品中，其允许用户自定义数据处理的工作流（Storm术语为Topology），并部署在Hadoop集群之上使之具备批量、交互式以及实时数据处理的能力。用户可使用任意变成语言定义工作流。 IBM Streams IBM的Streams产品是目前市面上性能最可靠的流式数据处理工具。不同于其他基于Java 的开源项目，Streams是用C++开发的，性能也远远高于其他流式数据处理的工具。另外IBM 还提供了各种数据处理算法插件，包括：曲线拟合、傅立叶变换、GPS距离等。 数据推送 为了实现推送技术，传统的技术是采用‘请求-响应式’轮询策略。轮询是在特定的的时间间隔（如每1秒），由浏览器对服务器发出请求，然后由服务器返回最新的数据给客户端的浏览器。这种传统的模式带来很明显的缺点，即浏览器需要不断的向服务器发出请求，然而HTTP request 的header是非常长的，里面包含的数据可能只是一个很小的值，这样会占用很多的带宽和服务器资源。
VMware虚拟化平台 运维手册
文档编辑记录 版本记录 术语和缩写 为了方便阅读，特将文中提及的术语及缩写列示如下： 本文中所有内容均属XX公司和xx公司的商业秘密。未经允许，不得作任何形式的复制和传播。
目录 1.概述错误!未指定书签。 1.1目的错误!未指定书签。 1.2现状描述错误!未指定书签。 1.2.1软件版本错误!未指定书签。 1.2.2用户名及密码错误!未指定书签。 2.管理虚拟机错误!未指定书签。 2.1登录vCenterserver错误!未指定书签。 2.2新建虚拟机错误!未指定书签。 2.3编辑虚拟机错误!未指定书签。 2.4挂载镜像错误!未指定书签。 2.5安装VMwareTools错误!未指定书签。 2.6删除虚拟机错误!未指定书签。 2.7模板部署虚拟机错误!未指定书签。 2.8克隆虚拟机错误!未指定书签。 2.9虚拟机快照错误!未指定书签。 2.10删除虚拟机快照错误!未指定书签。 3.监控虚拟化平台错误!未指定书签。 3.1性能监控错误!未指定书签。 3.2任务和事件错误!未指定书签。 3.2.1任务错误!未指定书签。 3.2.2事件错误!未指定书签。 3.3警报错误!未指定书签。 3.4日志错误!未指定书签。 概述 1.1目的 本手册针对VMware虚拟化平台提供日常维护操作的指导。 1.2现状描述 本项目由28台物理主机和一台VC组成,另部署一套VCOPS和VDPA。 1.2.1软件版本 物理主机：VMware-ESXi-5.5.0 Vcenter：VMware-vCenter-Server-Appliance-5.5.0 Vcops: Vdpa: 1.2.2用户名及密码 管理虚拟机 1.3登录vCenterserver
最高院执行项目 技术架构选型方案Fantasy 2011年8月25日
目录 总体架构!2整体系统描述 2架构选型!4 JDK选型（JDK1.6_22 32位） 4 IOC容器选型（Spring3.0.5.RELEASE） 5 ORM选型（MyBatis） 6 MVC选型（SpringMVC） 7认证和权限选型（shiro1.1 + ralasafe 1.1） 8前台组件选型 11案件导入导出架构设计!12总体架构设计 12客户端功能结构 13技术实现方式 14
总体架构 整体系统描述 系统架构图总揽 展示层 ：主要面向B/S架构，展示层主要由web资源文件组成，包括JSP，JS 和大量的界面控件，同时还采用了AJAX和Flex等RIA技术，负责向用户展现丰富的界面信息，并执行用户的命令 控制层：负责展示层请求的转发、调度和基础验证，同时自动拦截后台返回 的Runtime异常信息。 领域层：是系统最为丰富的一层，主要负责处理整个系统的业务逻辑。这一 层包括业务服务和领域对象，同时负责系统的事务管理。其中业务服务可以提供本地调用和共享远程服务的功能。
数据访问控制层：数据访问层的目的很明确,主要作为提供数据持久化的功 能，包括数据的读取和写入，操作数据库的方法可以有两种方式ORM方式，ralasafe封装的方式。 公共基础设施层：可以包括Common通用模块，IOC模块，Logging日志模块， Exception异常模块和单元测试模块。
架构选型 1.JDK选型（JDK1.6_22 32位） JDK1.5、JDK1.6和JDK1.7选型 测试 1.增加5百万条String数据 测试 2.增加5百万数据到ArrayList
1.云计算参考架构 在私有云当中，主要包含以下几个组件：物理基础架构、虚拟化层、服务自动化层、服务门户、安全体系、云API和可集成的其它功能。（如图私有云参考架构） 图3.4 私有云参考架构 a) 物理基础架构 物理架构的定义是组成私有云的各种计算资源，包括存储、计算服务器、网络，无论是云还是传统的数据中心，都必须基于一定的物理架构才能运行。 在私有云参考架构中的物理基础架构其表现形式应当是以资源池模式出现，也就是说，所有的物理基础架构应当是统一被管，且任一设备可以看成是无状态，或者说并不与其它的资源，或者是上层应用存在紧耦合关系，可以被私有云根据最终用户的需求，和预先定制好的策略，对其进行改变。 b) 虚拟化层 虚拟化是实现私有云的前提条件，通过虚拟化的方式，可以让计算资源运行超过以前更
多的负载，提升资源利用率。虚拟化让应用和物理设备之间采用松耦合部署，物理资源状态的变更不影响到虚拟化的逻辑计算资源。且可以根据物力基础资源变化而动态调整，提升整体的灵活性。 c) 服务自动化层 服务自动化层实现了对计算资源操作的自动化处理。它可以集中的监控目前整体计算资源的状态，比如性能、可用性、故障、事件汇总等等，并通过预先定义的自动化工作流进行相关的处理。 服务自动化层是计算资源与云计算服务门户相关联的重要部件，服务自动化层拥有自动化配置和部署功能，可以进行服务模板的制定，并将服务内容和选择方式在云计算服务门户上注册，用户可以通过服务门户上的服务目录来选择相应的计算资源请求，由服务自动化层实现服务交付。 d) 云API 云应用开发接口提供了一组方法，让云服务门户和不同的服务自动化层进行联系，通过云API，可以在一个私有云当中接入多个不同地方的计算资源池，包括不同架构的计算资源，并通过各自的服务自动化体系去进行服务交互。 e) 云服务门户 云服务门户是用户使用私有云计算资源的接口，云服务门户上提供了所有可用服务的目录，并提供了完善的服务申请流程，用户可以执行申请、变更、退回等计算资源使用服务。 云服务门户收到最终用户的请求时，将根据预先定义好的策略对该请求进行立刻供应、预留或者排队。 不同的用户通过同一个云服务门户当中，将会看到只属于自己的应用、计算资源和服务目录，这是云计算当中的多租户技术，用户使用的资源在后台集中，但是在前端是完全的逻
很详细的系统架构图--专业推荐 2013.11.7
1.1.共享平台逻辑架构设计 如上图所示为本次共享资源平台逻辑架构图，上图整体展现说明包括以下几个方面： 1 应用系统建设 本次项目的一项重点就是实现原有应用系统的全面升级以及新的应用系统的开发，从而建立行业的全面的应用系统架构群。整体应用系统通过SOA面向服务管理架构模式实现应用组件的有效整合，完成应用系统的统一化管理与维护。 2 应用资源采集 整体应用系统资源统一分为两类，具体包括结构化资源和非机构化资源。本次项目就要实现对这两类资源的有效采集和管理。对于非结构化资源，我们将通过相应的资源采集工具完成数据的统一管理与维护。对于结构化资源，我们将通过全面的接口管理体系进行相应资源采集模板的搭建，采集后的数据经过有效的资源审核和分析处理后进入到数据交换平台进行有效管理。 3 数据分析与展现 采集完成的数据将通过有效的资源分析管理机制实现资源的有效管理与展现，具体包括了对资源的查询、分析、统计、汇总、报表、预测、决策等功能模块的搭建。 4 数据的应用 最终数据将通过内外网门户对外进行发布，相关人员包括局内各个部门人员、区各委办局、用人单位以及广大公众将可以通过不同的权限登录不同门户进行相关资源的查询，从而有效提升了我局整体应用服务质量。 综上，我们对本次项目整体逻辑架构进行了有效的构建，下面我们将从技术角度对相
关架构进行描述。 1.2.技术架构设计 如上图对本次项目整体技术架构进行了设计，从上图我们可以看出，本次项目整体建设内容应当包含了相关体系架构的搭建、应用功能完善可开发、应用资源全面共享与管理。下面我们将分别进行说明。 1.3.整体架构设计 上述两节，我们对共享平台整体逻辑架构以及项目搭建整体技术架构进行了分别的设计说明，通过上述设计，我们对整体项目的架构图进行了归纳如下：
什么是VMware vSphere？ 2011-12-14 13:32 《降云:VMware vSphere 4云操作系统搭建配置入门与实战》本书共有10章，为了让许多刚接触vMware虚拟化的读者能很快进入状态，除了第1章和第10章，其余每一章，笔者都借用"云"来比喻，以一朵朵小云的形容方式，每完成一章会开出一朵云，共八朵云(ESX／ESXi、vCenter Servet、vNetwrok、vStorage、Virtual Machine、Resource Management、vMotion／DRS、VMware HA)环绕在整个VMware vSphere为基础的数据中心，让读者在不知不觉当中，从无到有，感受站上云端的滋味。本节为大家介绍什么是VMware vSphere。 什么是VMware vSphere？ VMware 于2001 年正式推出了企业级虚拟化产品ESX，到了现在，历经了四代演进。而整个架构功能经过不断扩展，也越来越充足。前面介绍过云与虚拟化之间的关系，就现阶段而言，VMware 是目前业界提供最齐全功能的，架构也最完整的，所以到了vSphere，号称是业界第一套云的操作系统。 而自从ESX 2.5 后，VMware 就有了喜欢为产品名称改名的习惯，随着虚拟架构完整度的提高，后续推出的版本不叫ESX3，而是顺势改名为VI3（Virtual Infrastructure3），让ESX 成了VI3 的一环，以强大的完整性与稳定度再次震撼整个IT 业界，掀起了数据中心虚拟化的风潮。 下面是VI3（含3.5）功能的提升： VMware HA enhancements：避免全部鸡蛋放在同一个篮子里的风险，当实体服务器发生硬件故障时，会将虚拟机重启在其他的服务器上面。并且已经可以保护到操作系统发生死机，即使硬件没有发生故障也能检测到OS 没有回应，自动重启虚拟机。 DRS/DPM：动态的资源负载平衡，当某实体服务器的资源不足较忙碌时，以VMotion 技术将虚拟机动态迁移到另一实体服务器上面。DPM 是DRS 的功能之一，搭配实体服务器的IPMI 或iLO 设备进行电源管理，当某段时间处于较不忙碌的状态时，会关闭某些实体服务器，将虚拟机集中，等到忙碌时，再启动服务器进行动态资源的负载平衡。 EVC：让原本受到CPU 限制的vMotion 功能兼容性提高。vMotion 的条件限制在第8 章会说明。 Guided Consolidation：自动评估、分析实体服务器的资源使用率，并提出建议，提供适合P2V 环境的报告。 Update Manager：修补漏洞的功能，不仅针对Windows 和Linux，就连COS与VMkernel 都可以通过Update Manager 来作补丁。 Storage vMotion：有别于vMotion 是在实体服务器中移动，Storage vMotion可以动态搬迁存储设备里的虚拟机文件，转移到新的存储设备中。我们在第6章会有Storage vMotion 的操作练习。 通过图1-5 的VI3 虚拟架构示意，可以看到底层的服务器、存储设备与网络设备全部被抽象化了，对用户而言，根本不需要去管服务来自何方，对虚拟机而言，也不用去管硬件资源怎么应用，一切都是可以被分配、移动、控制的。这种充满弹性的企业数据中心，用户是不是很有腾云驾雾的感觉呢？ 图1-5 图片来源：VMware 网站 Q：上面的图是否就是所谓的私有云？那公用云指的是什么？ 很多组织单位已经在尝试对各种云下定义。例如美国国家标准局（NIST）的云345 解