Oracle数据库高级管理与集群环境搭建最佳实践
一、培训收益
通过此次课程培训，可使学习者获得如下收益：
1.深入了解Oracle数据库的体系结构、逻辑结构；
2.数据库启停控制和参数维护；
3.网络配置，数据库的动态注册和静态注册；
4.数据库空间大小估算、REDO和UNDO设置；
5.数据库用户权限管理；
6.数据库并发管理，阻塞状态和死锁处理；
7.使用RMAN完成数据库备份及恢复，RMAN备份过程监控、优化；
8.数据库性能分析和优化方法；
9.Data Guard使用场景，物理Data Guard环境搭建；
10.使用Data Guard Broker控制switchover和failover；
11.Oracle Clusterware的原理讲解及安装配置实战；
12.Oracle RAC的原理及安装配置实战；
13.客户端连接高可用；
14.集群环境的节点添加和删除。
二、培训特色
1.本课程培训时长4天；
2.课程全过程贯穿实战项目的演示实验，使学员更好的掌握所学内容。
杨老师ORACLE顶级专家，曾就职甲骨文公司8年以上，ORACLE技术的研究者与倡导者，
国家信息技术紧缺技术人才培养工程NITE特约培训师，计算机软件与理论专业博士生导师，中国计算机学会高级会员，政府信息化建设评审专家与技术顾问，曾在大型上市企业从事MIS/ERP/KSS技术开发与研究，致力于企业级软件技术的推广应用，擅长大型数据中心的设计与调优，具有丰富的软件工程开发经验和工程实施背景。目前担任多家企业数据中心技术顾问，为国内多个行业进行Oracle数据库课程培训，全国巡讲上百场，深受广大学员好评。
贾老师博士、Oracle学者，国内第一代Oracle专家级用户，长期致力于Oracle技术研究与推广，从事OLTP/ERP/DSS产品开发与研究，擅长大型数据中心的设计、调优与数据保障等。
陈老师OCP、OCM，高级Oracle数据库专家，精通Oracle数据库体系结构，数据库设计/架构，数据库管理、调优、RAC等高级应用，丰富的Oracle实施、部署及数据保障经验。
袁老师计算机应用技术专家，精通Oracle数据库，丰富的大型项目数据库部署实施经验，丰富的性能调优经验。
Cloudera大数据平台环境搭建（CDH5.13.1版）
目录
基础环境 软件环境 本文将介绍Centos7.4离线安装CDH和ClouderaManager过程，软件版本如下： 配置规划 本次安装共5台服务器，服务器配置及用途如下： 所需要的软件资源 1)JDK环境： JDK版本：51 jdk-8u151-linux-x64.rpm 下载地址： 2)CM包： CM版本：5.13.1 下载地址： 3)CDH包 CDH版本：5.13.1， ； .sha1； manifest.json 下载地址： 4)JDBC连接jar包： jar包版本：5.1.43， mysql-connector-java-5.1.43.jar 下载地址： 修改机器名（所有节点） 这种方式，在Centos7中可以永久性改变主机名称。
内容都改为： 设置防火墙（所有节点） 注：为了简便，可以先关闭防所有节点火墙，安装完成后，再按照下面步骤设置。 防火墙常用命令： 便，安装完毕后可以根据需要设置防火墙策略，保证集群安全。 配置免密码登录SSH 将子节点设置为从主节点ssh无密码登陆（主节点访问从节点需要无密码互通，否则后面会出现问题） 一路回车，生成无密码的密钥对。 把公钥拷贝至node169服务器上?： 登录到node169服务器上： 然后在node169服务器上，把公钥的内容追加到authorized_keys文件末尾（这个文件也在隐藏文件夹.ssh下，如果没有可以新建）：
在node168节点出现下面表示成功登录node169节点： 以同样的方式将公钥拷贝至其他节点服务器上。 关闭SELINUX（所有节点） 关闭linuxSELINUX安全内核 （在Centos7中遇到SELINUX无法关闭的问题，重新启动机器恢复正常） 修改Linux内核参数（所有节点） 为避免安装过程中出现的异常问题，首先调整Linux内核参数。 1)设置swappiness，控制换出运行时内存的相对权重，Cloudera建议将swappiness设置为 10： 自CentOS6版本开始引入了TransparentHugePages(THP)，从CentOS7版本开始，该特性默认就会启用。尽管THP的本意是为提升内存的性能，不过某些数据库厂商还是建议直接关闭THP，否则可能会导致性能出现下降。 表示已禁用：
南宁海关信息系统基础平台数据库群集实施报告 2016年9月13号
目录 1 MS SQL数据库群集 ................................................................. 错误!未定义书签。 项目概述.............................................................................. 错误!未定义书签。 SQL群集拓朴图................................................................. 错误!未定义书签。 运行网SQL群集拓朴图............................................ 错误!未定义书签。 管理网SQL群集拓朴图.............................................. 错误!未定义书签。 SQL群集配置信息............................................................. 错误!未定义书签。 运行网SQL群集配置表............................................ 错误!未定义书签。 管理网SQL群集配置.................................................. 错误!未定义书签。 SQL群集安装配置............................................................. 错误!未定义书签。 网络配置...................................................................... 错误!未定义书签。 两台服务器功能及角色安装...................................... 错误!未定义书签。 Win2008集群验证和配置.......................................... 错误!未定义书签。 添加MSDTC的集群资源.......................................... 错误!未定义书签。 添加SP1功能 .............................................................. 错误!未定义书签。 优化网络配置................................................................ 错误!未定义书签。 安装SQLServer2008集群.................................................... 错误!未定义书签。 安装第一个集群节点.................................................... 错误!未定义书签。 添加第二个集群节点.................................................... 错误!未定义书签。 验证SQL2008群集.................................................... 错误!未定义书签。2Oracle RAC高可用群集........................................................ 错误!未定义书签。 项目概述.............................................................................. 错误!未定义书签。 Oracle群集拓朴图 ...................................................... 错误!未定义书签。 Oracle群集配置信息.......................................................... 错误!未定义书签。 系统及数据库版本........................................................ 错误!未定义书签。 主机IP地址................................................................ 错误!未定义书签。 共享存储配置................................................................ 错误!未定义书签。 安装目录配置................................................................ 错误!未定义书签。
Oracle RAC 12C安装文档 目录 Oracle RAC 12C安装文档 (1) 1 Rac 安装 (2) 1.1 规划介绍 (2) 1.1.1 集群示意图（内部和外部交换机为同一交换机） (2) 1.1.2 硬件环境： (2) 1.1.3 软件列表： (3) 1.1.4 集群规划 (3) 1.2 环境搭建配置 (5) 1.2.1 多路径设置 (5) 1.2.2 关闭iptables (6) 1.2.3 关闭Selinux (6) 1.2.4 删除DNS数据 (6) 1.2.5 必须的安装包利用yum安装 (6) 1.2.6 上传软件包 (7) 1.2.7 配置安装环境 (7) 1.3 Cluster软件安装 (13) 1.3.1 解压软件包 (13) 1.3.2 安装图示 (14) 1.3.3 安装失败解决 (31) 1.4 ASM磁盘组分为两大部分一个用于数据文件存储一个用于闪回空间 (31) 1.4.1 ASMCA调起 (31) 1.4.2 安装图示 (31) 1.5 数据库软件安装 (33) 1.5.1 解压数据库安装包，运行runInstaller (33) 1.5.2 安装图示 (34) 1.6 数据库安装 (40) 1.6.1 运行dbca (40) 1.6.2 安装图示 (40) 1.7 查看集群是否正常 (48) 1.8 redo 在线日志信息 (49) 1.8.1 日志设置列表（实际生产环境时填写位置，以下设置都按照填写中配置） 49 1.8.2 查看目前日志情况确认在共享存储放置位置执行节点：rac1 (49) 1.8.3 删，添加在线日志。执行节点：rac1、rac2、rac3、rac4 (49) 1.8.4 查看目前日志情况确认建立成功执行节点：rac1 (51) 1.9 多控制文件设置 (51) 1.10 设置归档 (51) 1.10.1 归档日志路径 (51)
运行环境： centos6.1 Mysql版本： MySQL-cluster-gpl-7.2.6-linux2.6-x86_6 下载地 址：https://www.doczj.com/doc/217959873.html,/Downloads/MySQL-Cluster-7.2/mysql-cluster-gpl-7.2.6-linux2. 6-x86_64.tar.gz 对于这第一个MySQL数据库的集群，它由1个单一的MySQL服务引擎（mysqlds）、两个数据节点（ndbd）和一个单一的管理节点（ndb_mgmd）共同组成，所有的节点都运行在同一台主机上。 为配置文件和数据文件创建必要的存储文件夹，分别要建立如下几个文件夹： ① /home/mysql/my_cluster ② /home/mysql/my_cluster/ndb_data ③ /home/mysql/my_cluster/mysqld_data ④ /home/mysql/my_cluster/mysqld_data/mysql ⑤ /home/mysql/my_cluster/mysqld_data/ndbinfo ⑥ /home/mysql/my_cluster/conf 具体安装步骤： 1. 添用加户与组mysql [plain]view plaincopy 1.shell> groupadd mysql 2.shell> useradd -r -d /home/mysql -g mysql mysql [plain]view plain copy 1.shell> groupadd mysql 2.shell> useradd -r -d /home/mysql -g mysql mysql 2. 切换到mysql用户权限下 [plain]view plaincopy 1.shell> su - mysql [plain]view plain copy 1.shell> su - mysql
甲骨文最高可用性架构 骨 最高 用性架构 Maximum Availability Architecture
议程表
? ? ? ? ? 甲骨文简介 高可用性介绍 传 高 用性分析 传统高可用性分析 甲骨文高可用性方案介绍(MAA) 客户成功案例分享
2
Oracle公司概揽
总揽
? ? ? ? ? ? 从08财年收入$22.4B，11财年收入35.6B 在40多项产品或市场领域占据业界第一 320,000客户跨越145国家 10W员工规模 (1 in i 3 joined j i df from acquisition) i iti ) Oracle在线社区上有超过五百万开发者 34年从业经验
革新和创新
? 超过3,000 3 000个产品，拥有 个产品 拥有2,000 2 000多个专利 ? 09财年投入$3B 研发和测试资金 ? 7,500 售后支持人员, 支持27国语言
3
今天的甲骨文公司
? 全球最大的企业软件供应商 ? 数据库市场占有率第一 ? 中间件市场占有率第一 ? 应用软件市场占有率第一 ? 服务器市场占有率第三 ? 开源产品的领军者 ? 虚拟化产品的竞争者 ? 云计算方案供应商
FAST?=?FusionMiddleware Applications System Tech
4
议程表
? ? ? ? ? 甲骨文简介 高可用性介绍 传 高 用性分析 传统高可用性分析 甲骨文高可用性方案介绍(MAA) 客户成功案例分享
5
IRE cDAS安装手册部署指导
目录 第一节：平台概述 (1) 1.1软件版本 (1) 1.2IP地址规划 (1) 第二节：配置前准备工作 (2) 2.1关闭相关服务 (2) 2.2NTP服务配置 (2) 2.3环境变量设定 (4) 第三节：安装GRID服务 (5) 第四节：创建ASM磁盘组 (19) 第五节：安装数据库软件 (22) 第六节：创建数据库实例 (28) 第七节:附A:用户环境变量 (36)
第一节：平台概述 本手册用于指导技术人员用于cDAS平台搭建； 1.1 软件版本 表1.1 1.2 IP地址规划 表1.2
第二节：配置前准备工作 为保证cDAS部署过程快捷、正确，推荐部署系统前进行如下准备工作; 2.1关闭相关服务 关闭iptables（防火墙）、NetworkManager（网络管理器）、selinux服务；#service iptables stop #service NetworkManager stop #chkconfig iptables off #chkconfig NetworkManager off #setenforce 0 2.2NTP服务配置 NTP时间同步服务是Server/Client架构的服务，所以实现时间同步的方法是：或者作为client端，寻找NTP server进行同步；或者作为Server端，配置集群内其它主机与本机同步。为了简化cDAS配置，建议采用UI管理节点作为NTP的server端，其它计算服务器与管理端进行同步；本次实验采用本地NTP 服务器，规划用UI管理节点作为NTP服务器端。 NTP 服务器端配置 安装NTP相关软件包并将NTP服务加入开机自启动列表 #yum install ntp #chkconfig ntpd on #vi /etc/ntp.conf 注释与internet通信的server端地址，示例如下： #server https://www.doczj.com/doc/217959873.html,
3台机器搭建集群环境 1. 集群配置如下 （3台机器） 管理节点：192.168.6.134 数据节点1：192.168.6.135 数据节点2：192.168.6.136 sql节点1：192.168.6.135 sql节点2：192.168.6.136 我使用3台机器进行配置，其中两台机器上的数据节点与sql节点在一起 2. 管理节点安装（192.168.6.134) 安装 1.shell> groupadd mysql 2.shell> useradd mysql -g mysql 3.shell> mv mysql-cluster-gpl-7.2.6-linux2.6-x86_6 4.tar.gz /usr/local/ 4.shell> cd /usr/local/ 5.shell> tar zxvf mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz /usr/local/ 6.shell> mv mysql-cluster-gpl- 7.2.6-linux2.6-x86_64 mysql 7.shell> chown -R mysql:mysql mysql 8.shell> cd mysql 9.shell> scripts/mysql_install_db --user=mysql 配置管理节点 1.shell> mkdir /var/lib/mysql-cluster 2.shell> cd /var/lib/mysql-cluster vi config.ini 添加以下内容 1.[ndbd default] 2.NoOfReplicas=2 3.DataMemory=80M 4.IndexMemory=18M 5.[ndb_mgmd]
虚拟机软件Vmware的安装 1、概述 在进行分布式架构的学习前，首先需进行基础环境准备。众所周知，在单机运算能力无法满足处理海量数据的运算能力时，人们普遍开始考虑使用分布式运算来代替单机运算，这也成为了大数据分析和小数据分析最显著的区别之一，即使用的工具不同。当前大数据行业标准是使用Hadoop及其生态组件来执行分布式处理，这也是我们后续文章的主要内容。 分布式集群的主要目的在于连接多台的物理机，以达到整合运算能力线性增长的效果，在学习过程中，我们仍然可以在单台物理机上模拟搭建和运行分布式集群。通常来说，单台物理机上模拟分布式集群有两种方法，其一是利用Hadoop进行分进程的分布式模拟，即一般意义上的伪分布式，通常用于实验和测试；其二则是利用虚拟化软件，将一台物理机分为三台虚拟物理机，然后搭建分布式集群。其中后者与实际工作情景无异，只不过在物理机本身运算能力上有所差别，企业多用服务器级物理机，而在学习过程中个人电脑性能可能稍差。后续文章将针对两种分布式集群搭建方法进行教学，同时也将更加侧重分布式集群的搭建。
注：这里推荐个人计算机配置：硬盘空间大于100G、内存大于等于8G、CPU大于两核。 尽管Apache Hadoop可适用于Windows、Linux和Mac OS操作系统，但就其稳定性而言，我们首推Linux系统或Mac OS系统，而二者相比选择Linux系统适用面更为广泛，因此后续文章我们将在Linux系统中安装Hadoop。由于个人用户普遍使用Windows或Mac OS系统，我们需要在当前操作系统中虚拟一个Linux系统，因此，虚拟化工具就是我们需要掌握和使用的第一个软件。除此之外，由于将要多个虚拟机的统一管理和多个终端的操作，因此我们还需要掌握一些终端管理软件和文件传输软件的基本操作方法。这些软件将在后续使用过程中进行详细介绍。 2、虚拟机软件 2.1虚拟机软件简介 就目前而言，VMware Workstation是使用最为广泛、功能最为强大的虚拟机软件，主要用于IT开发和系统管理等商业环境，而开源虚拟软件Oracle VM VirtualBox，则在所有免费虚拟机软件中表现较为突出，成为大多数教学、实验等非商业环境中的首选。后续文章主要将采用VMware Workstation作为虚拟机软件安装虚拟机，而关于Virtual Box的下载和安装方法，也会在后续文章中单独介绍已满足各位同学的不同需求。今天我们介绍VMware Workstation的安装使用方法。 2.2VMware Workstation下载安装 1）VMware WorkStation下载 2）VMware WorkStation安装 双击安装文件，开始安装，在安全警告窗口点击“运行”
Oracle数据库高级管理与集群环境搭建最佳实践 一、培训收益 通过此次课程培训，可使学习者获得如下收益： 1.深入了解Oracle数据库的体系结构、逻辑结构； 2.数据库启停控制和参数维护； 3.网络配置，数据库的动态注册和静态注册； 4.数据库空间大小估算、REDO和UNDO设置； 5.数据库用户权限管理； 6.数据库并发管理，阻塞状态和死锁处理； 7.使用RMAN完成数据库备份及恢复，RMAN备份过程监控、优化； 8.数据库性能分析和优化方法； 9.Data Guard使用场景，物理Data Guard环境搭建； 10.使用Data Guard Broker控制switchover和failover； 11.Oracle Clusterware的原理讲解及安装配置实战； 12.Oracle RAC的原理及安装配置实战； 13.客户端连接高可用； 14.集群环境的节点添加和删除。 二、培训特色 1.本课程培训时长4天； 2.课程全过程贯穿实战项目的演示实验，使学员更好的掌握所学内容。
杨老师ORACLE顶级专家，曾就职甲骨文公司8年以上，ORACLE技术的研究者与倡导者，
国家信息技术紧缺技术人才培养工程NITE特约培训师，计算机软件与理论专业博士生导师，中国计算机学会高级会员，政府信息化建设评审专家与技术顾问，曾在大型上市企业从事MIS/ERP/KSS技术开发与研究，致力于企业级软件技术的推广应用，擅长大型数据中心的设计与调优，具有丰富的软件工程开发经验和工程实施背景。目前担任多家企业数据中心技术顾问，为国内多个行业进行Oracle数据库课程培训，全国巡讲上百场，深受广大学员好评。 贾老师博士、Oracle学者，国内第一代Oracle专家级用户，长期致力于Oracle技术研究与推广，从事OLTP/ERP/DSS产品开发与研究，擅长大型数据中心的设计、调优与数据保障等。 陈老师OCP、OCM，高级Oracle数据库专家，精通Oracle数据库体系结构，数据库设计/架构，数据库管理、调优、RAC等高级应用，丰富的Oracle实施、部署及数据保障经验。 袁老师计算机应用技术专家，精通Oracle数据库，丰富的大型项目数据库部署实施经验，丰富的性能调优经验。
Mysql集群架构文档 MySQL Cluster 是MySQL适合于分布式计算环境的高实用、高冗余版本。它采用了NDB Cluster 存储引擎，允许在1个Cluster 中运行多个MySQL服务器。在MyQL 5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了该存储引擎。（注意，要想获得MySQL Cluster 的功能，必须安装mysql-server 和mysql-max RPM）。 目前能够运行MySQL Cluster 的操作系统有Linux、Mac OS X和Solaris（一些用户通报成功地在FreeBSD上运行了MySQL Cluster ，但MySQL AB公司尚未正式支持该特性）。 一、MySQL Cluster概述 MySQL Cluster 是一种技术，该技术允许在无共享的系统中部署“内存中”数据库的Cluster 。通过无共享体系结构，系统能够使用廉价的硬件，而且对软硬件无特殊要求。此外，由于每个组件有自己的内存和磁盘，不存在单点故障。 MySQL Cluster 由一组计算机构成，每台计算机上均运行着多种进程，包括MySQL服务器，NDB Cluster 的数据节点，管理服务器，以及（可能）专门的数据访问程序。关于Cluster 中这些组件的关系，请参见下图：
所有的这些节点构成一个完成的MySQL集群体系。数据保存在“NDB存储服务器”的存储引擎中，表（结构）则保存在“MySQL服务器”中。应用程序通过“MySQL服务器”访问这些数据表，集群管理服务器通过管理工具(ndb_mgmd)来管理“N DB存储服务器”。 通过将MySQL Cluster 引入开放源码世界，MySQL为所有需要它的人员提供了具有高可用性、高性能和可缩放性的Cluster 数据管理。 二．安装环境 1.Linux操作系统版本：CentonOS 4.7 2.Mysql数据库版本：mysql-max-5.0.24-linux-i686.tar.gz 共三台机器安装了CentonOS4.7版本，首先保证把系统中没有一个包带有mysql的，有的话
大数据环境软件 操作系统 CentOS 7 #zip unzip 命令安装 yum install zip unzip #netstat 等命令网络工具包安装 yum install net-tools 软件安装包 -rw-r--r--. 1 root root 20985335 4月30 10:14 apache-storm-0.9.3.tar.gz -rw-r--r--. 1 root root 153512879 5月26 16:15 jdk-7u79-linux-x64.tar.gz drwxr-xr-x. 10 root root 4096 7月10 11:55 jzmq -rw-r--r--. 1 root root 71503892 4月17 10:06 kafka_2.10-0.8.2.1.zip -rw-r--r--. 1 root root 1358190 5月27 11:26 redis-3.0.1.tar.gz -rw-r--r--. 1 root root 1877380 5月12 2011 zeromq-2.1.7.tar.gz -rw-r--r--. 1 root root 17699306 7月10 02:50 zookeeper-3.4.6.tar.gz JAVA vi /etc/profile 在文件末尾增加如下配置内容 #set java environment JAVA_HOME=/usr/local/jdk1.7.0_79/ CLASSPATH=.:$JAVA_HOME/lib/tools.jar PATH=$JAVA_HOME/bin:$PATH export JAVA_HOME CLASSPATH PATH 配置生效 source /etc/profile 验证配置结果 [root@localhost local]# java -version java version "1.7.0_79"
平台的结构化数据采用业内广泛使用的Oracle 数据库管理系统进行存储和管理。实时视频存储区部署一套RAC 集群，来承载业务处理中心相关业务。车牌图片和事件存储区部署另一套Oracle RAC 集群来承载计费相关业务，同时为了进一步加强数据容灾，保障数据的安全性，方案通过Oracle Dataguard 工具将该部分数据传送至福建的异地灾备中心。
方案采用了Oracle Rac支持本地业务，是因为Oracle RAC具有很多数据库的高可用性优势所决定的。 1、双机并行。RAC是一种并行模式，并不是传统的主备模式。也就是说，RAC集群的所有成员都可以同时接收客户端的请求。 2、高可用性。RAC是Oracle数据库产品高可用性的解决方案，能够保证在集群中只要有一个节点存活，就能正常对外提供服务。 3、易伸缩性。RAC可以非常容易地添加、删除节点，以满足系统自身的调整。 4、低成本。能使用较低廉的服务器来实现高可用性、高吞吐量的集群环境，这要比通过对某台高端服务器增加硬件实现高可用性、高吞吐量花费的成本低很多。 5、高吞吐量。随着节点数的增加，整个RAC 的吞吐量也在不断增长。 一、双机并行 RAC是一种充分利用服务器资源的高可用性实现方案，RAC 的并行模式实现方式与传统的双机热备实现方式截然不同。如下图所示，两个节点在传统的双机热备环境中，始终有一台机器作为备用机，只有当主节点出现问题的时候才会切换到备用机上;如果主机一直没有出现问题，那么备用机始终处于空闲状态，这在资源的利用上以及成本方面都是巨大的浪费。但RAC是一种并行模式的架构，也就是说，两个节点的集群节点间是一种并行运行的关系，当一台机器出现问题，请求会自动转发到另一台机器，没有任何一台机器作为备用机一直不被使用，这样就充分利用了服务器资源。同时，传统的双机热备构架在出现问题时，常常需要数分钟的切换时间，而RAC在出现问题
Cloudera大数据平台环境搭建 （版）
目 录 Cloudera 大数据平台环境搭建错误! 未定义书签。 版）错误! 未定义书 签。 1. 基础环 境. 错误! 未定义书签。 软件环境错误!未定义书签。 2. 3. 配置规划...... 所需要的软件资源 错误!未定义书签。 错误!未定义书签。 修改机器名（所有节点） 设置防火墙（所有节点） 配置免密码登录 SSH.. 关闭SELINUX（所有节点）…… 修改 Linux 内核参数（所有节 点） 其他安装与配置（所有节点） . 配置NTP服务................. 安装 oracle （所有节点） Mysql 安装（主节点） 安装CM 传包，解包 创建数据库 创建用户 制作本地YUM源 拷贝 修改 启动 访问 安装CDH 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误! 未定义书 签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 jar 包................. cloudera-scm-agent 配置 CM Server 和 Agent ..... 错误!未定义书签。 错误!未定义书签。 错误!未定义书签。 CM. 错误!未定义书签。 错误! 未定义书 签。 登录后界面错误!未定义书签。 选择CM版本错误!未定义书签。 指定主机错误!未定义书签。 选择CDH版本错误!未定义书签。 出现“主机运行状态不良”错误 检查主机正确性................... 错误!未定义书签。 错误!未定义书签。 选择安装的服务错误!未定义书签。 角色分配 . 数据库设置 错误!未定义书签。 错误!未定义书签。 测试连接报错：错误!未定义书签。 群集设置错误!未定义书签。
在为某证券公司设计其OA架构时，初期客户是30万用户在线；然而在项目实施中，客户又提出50万用户同时在线的需求，而且都有写的需求；这样初始的设计master-master-slave，读写分离满足不了客户的要求，所以我们打算采用Mysql Cluster方案；MySQL Cluster 是MySQL适合于分布式计算环境的高实用、高冗余版本。它采用了NDB Cluster 存储引擎，允许在1个Cluster中运行多个MySQL服务器。在MyQL 5.0及以上的二进制版本中、以及与最新的Linux版本兼容的RPM中提供了该存储引擎。 一、MySQL Cluster概述 MySQL Cluster 是一种技术，该技术允许在无共享的系统中部署“内存中”数据库的 Cluster 。通过无共享体系结构，系统能够使用廉价的硬件，而且对软硬件无特殊要求。此外，由于每个组件有自己的内存和磁盘，不存在单点故障。 MySQL Cluster 由一组计算机构成，每台计算机上均运行着多种进程，包括MySQL服务器，NDB Cluster 的数据节点，管理服务器，以及（可能）专门的数据访问程序。 所有的这些节点构成一个完成的MySQL集群体系。数据保存在“NDB存储服务器”的存储引擎中，表（结构）则保存在“MySQL服务器”中。应用程序通过“MySQL服务器”访问这些数据表，集群管理服务器通过管理工具(ndb_mgmd)来管理“NDB存储服务器”。 通过将MySQL Cluster 引入开放源码世界，MySQL为所有需要它的人员提供了具有高可用性、高性能和可缩放性的 Cluster 数据管理。 二、MySQL Cluster 基本概念 “NDB” 是一种“内存中”的存储引擎，它具有可用性高和数据一致性好的特点。 MySQL Cluster 能够使用多种故障切换和负载平衡选项配置NDB存储引擎，但在 Cluster 级别上的存储引擎上做这个最简单。MySQL Cluster的NDB存储引擎包含完整的数据集，仅取决于 Cluster本身内的其他数据。 目前，MySQL Cluster的 Cluster部分可独立于MySQL服务器进行配置。在MySQL Cluster中， Cluster的每个部分被视为1个节点。 管理(MGM)节点：这类节点的作用是管理MySQL Cluster内的其他节点，如提供配置数据、启动并停止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点之前首先启动这类节点。MGM节点是用命令 “ndb_mgmd”启动的。 数据节点：这类节点用于保存 Cluster的数据。数据节点的数目与副本的数目相关，是片段的倍数。例如，对于两个副本，每个副本有两个片段，那么就
作者:杨鑫奇 前言 做大数据相关的后端开发工作一年多来,随着Hadoop社区的不断发展,也在不断尝试新的东西,本文 着重来讲解下Ambari,这个新的Apache的项目,旨在让大家能够方便快速的配置和部署Hadoop生态圈相关的组件的环境,并提供维护和监控的功能. 作为新手,我讲讲我自己的学习经历,刚刚开始学习的时候,当然最简单的 Google 下Hadoop ,然后下载相关的包,在自己的虚拟机(CentOS 6.3) 上安装一个单机的Hadoop版本用来做测试,写几个测试类,然后做下CRUD测试之类的,跑跑Map/Reduce的测试,当然这个时候对于Hadoop还不是很了解,不断的看别人的文章,了解下整体的架构,自己所做的就是修改conf下的几个配置文件,让Hadoop能够正常的跑起来,这个时候几种在修改配置上,这个阶段之后,又用到了HBase,这个Hadoop生态圈的另外一个产品,当然还是修改配置,然后 start-all.sh , start-hbase.sh 把服务起起来,然后就是修改自己的程序,做测试,随着用Hbase 学了下 Zookeeper 和Hive等, 接着过了这个操作阶段了之后,开始研究Hadoop2.0看了董的博客的相关文章,还有CSDN上很多大牛的文章了之后, 算是对Hadoop的生态圈整体有一些了解,介于自己在公司所承担的开发所涉及到相关的技术仅仅就这些.但是作为一个 爱好探索的人,是否想多了解下呢,它的性能怎么样? 它是具体如何运作的? 看大公司的那些PPT,人家(淘宝等大公司)动不动就是几十个,几百个,乃至几千个节点,人家是如何管理的,性能是怎么样的?看着PPT里面的那些性能测试的曲线,你是否也能够详细的了解,并且对自己的项目进行性能调优呢? 我貌似找到答案了,那就是 Ambari , 由HortonWorks开发的一个Hadoop相关的项目,具体可以上官方去了解. 了解Hadoop生态圈 现在我们经常看到的一些关键字有: HDFS,MapReduce,HBase,Hive,ZooKeeper,Pig,Sqoop,Oozie,Ganglia,Nagios,CDH3,CDH4,Flume,Scri be,Fluented,HttpFS等等,其实应该还有更多,Hadoop生态圈现在发展算是相当繁荣了,而在这些繁 荣的背后又是谁在推动的呢? 读过Hadoop历史的朋友可能知道,Hadoop最早是始于Yahoo,但是现在主要是由 HortonWorks 和 Cloudera 这2家公司在维护者,大部分的commiter 都属于这2家公司,所以现在市面上看到的主要有2个版本,CDH系列,和社区版, 我最早用的是社区版本,后来换到CDH3,现在又换回社区版,因为有Ambari.当然,用什么和不用什么,只要自己的技术到家,还是都能修改的跑的正常的.这里就不多说了. 讲了这么多废话了,开始讲 Ambari安装吧. 开始部署 首先了解下Ambari, 项目地址在:https://www.doczj.com/doc/217959873.html,/ambari/
在PCSERVER上安装MARIADB。 一、先检查主机的环境 如果主机已经安装了MYSQL的早期版本，并且有MYSQL实例正在主机上运行，要先行清理早期的版本，具体步骤如下： 1、优雅地停掉当前正在运行的MYSQL服务。 2、卸载MYSQL早期版本及其组件 rpm -qa|grep -i mysql #查看已经安装的mysql相关包 rpm -ev package_name #package_name包名比如：mysql-server-5.0.51b-1.el5 二、用YUM安装MARIADB 具体步骤如下： 1、cd /etc/yum.repos.d 2、vi MariaDB.repo然后粘上官网上的内容（用CENTOS操作系统举例） Here is your custom MariaDB YUM repository entry for CentOS. Copy and paste it into a file under /etc/yum.repos.d/ (we suggest naming the file MariaDB.repo or something similar). See "Installing MariaDB with yum" for detailed information. 3、执行yum -y install MariaDB-client MariaDB-server MariaDB-devel 4、如果发现用YUM装时，代理服务器的网速下载太慢了导致超时然后报错退出，解决方案如下： A自己用个人电脑到官网下载列表中的RPM文件，
Oracle数据库设计方案 2013-8-15
目录 1 项目背景 (4) 2 数据库解决方案 (4) 2.1 Oracle Database EE 11g (4) 2.1.1 Oracle 11g DB Enterprise Edition 数据库核心概述 (4) 2.1.2 Oracle数据库管理软件功能 (5) 自动存储管理 (5) 更精简的初始化参数 (5) 超大数据库支持 (6) ORACLE 跨平台的可传输表空间 (6) 自驱式数据库 (6) ORACLE DATA PUMP 数据泵 (7) 分布式SQL、网关和分布式事务 (7) 自我管理的数据库 (8) 性能的故障诊断和排除 (8) 内存自动管理 (9) 2.2 Oracle 分区 (9) 2.2.1 Oracle分区概述 (9) 2.2.2 Oracle 分区优势 (9) 使用分区提高可管理性 (9) 使用分区提高性能 (10) 使用分区提高可用性 (11) 2.3 Oracle RAC数据库集群 (11) 2.3.1 Oracle RAC集群概述 (11) 2.3.2 Oracle RAC的优势 (12) 高可用性 (12) 可靠性 (12) 恢复能力 (12) 错误检测 (12) 持续运行 (13) 可伸缩性 (13)
1 项目背景 2 数据库解决方案 Oracle数据库无论从技术成熟度还是从市场占有率来看均具有无以伦比的优势，已成为广大用户的首选，不仅满足以上原则，而且： Oracle Database 提供了全球首个专为企业网格计算提供动力的软件基础平台架构。Oracle Database 充分利用了硬件在网格计算上的革新，让用户可以在这些标准的硬件组件上非常轻松的安装和配置数据库。 Oracle Database 不但是网格资源、网格服务和网格存储的使用者，而且是企业数据提供者，在其中都充分利用了网格计算的三个特性。Oracle Database 把Oracle Database使用硬件组件－包括计算资源和存储资源－的方式虚拟化，对于在企业网格环境中的不同数据库自动提供集群存储和集群计算资源。作为一个企业数据供应者，Oracle Database 提供了相关的技术，通过这些技术可以让数据库管理员为网格用户和网格应用进行资源汇总、虚拟管理和数据的供应。 同时，在一个企业级的网格环境中，对于安全、高可用性、自我依赖性和可管理性都有很高的要求。Oracle Database 提供了很多卓越的优势来简化用户对企业级网格的管理和操作。 根据客户应用需求，推荐使用Oracle如下产品: 2.1 Oracle Database EE 11g 2.1.1 Oracle 11g DB Enterprise Edition 数据库核心概述 Oracle Database 11g是为企业级网格计算（管理企业信息最灵活和最经济、
组建MySQL集群的几种方案 LVS+Keepalived+MySQL（有脑裂问题？但似乎很多人推荐这个） DRBD+Heartbeat+MySQL（有一台机器空余？Heartbeat切换时间较长？有脑裂问题？） MySQL Proxy（不够成熟与稳定？使用了Lua？是不是用了他做分表则可以不用更改客户端逻辑？） MySQL Cluster （社区版不支持INNODB引擎？商用案例不足？稳定性欠佳？或者还有其他问题？又或者听说现在发展不错？） MySQL + MHA （如果配上异步复制，似乎是不错的选择，又和问题？） MySQL + MMM （似乎反映有很多问题，未实践过，谁能给个说法） 淘宝的Cola(似乎现在停止开发了？)？变形虫Amoeba（事务支持？） 或者，其他方案？ 回答1： 不管哪种方案都是有其场景限制或说规模限制，以及优缺点的。 1. 首先反对大家做读写分离，关于这方面的原因解释太多次数（增加技术复杂度、可能导致读到落后的数据等），只说一点：99.8%的业务场景没有必要做读写分离，只要做好数据库设计优化和配置合适正确的主机即可。 2.Keepalived+MySQL --确实有脑裂的问题，还无法做到准确判断mysqld是否HANG 的情况； 3.DRBD+Heartbeat+MySQL --同样有脑裂的问题，还无法做到准确判断mysqld是否HANG的情况，且DRDB是不需要的，增加反而会出问题； 3.MySQL Proxy -- 不错的项目，可惜官方半途夭折了，不建议用，无法高可用，是一个写分离； 4.MySQL Cluster -- 社区版本不支持NDB是错误的言论，商用案例确实不多，主要是跟其业务场景要求有关系、这几年发展有点乱不过现在已经上正规了、对网络要求高； 5.MySQL + MHA -- 可以解决脑裂的问题，需要的IP多，小集群是可以的，但是管理大的就麻烦，其次MySQL + MMM 的话且坑很多，有MHA就没必要采用MMM 建议： 1.若是双主复制的模式，不用做数据拆分，那么就可以选择MHA或Keepalive 或heartbeat