02 腾讯云TStack产品运维培训-架构培训common组件20200110

腾讯云TStack产品运维培训架构培训common组件目录1. 云平台架构及Supervisor2. Mysql3. Mongodb4. Redis5. Rabbitmq6. 微服务管理及venus1云平台架构及Supervisor1.1 基础云&自助云&监控云1.2 自助云组件结构1.3 监控云组件结构1.4 Supervisor—服务管理1.1 基础云&自助云&监控云VM1monitor_host01VM4sip_host01物理服务器自助云监控云KVM虚拟化资源池VM2monitor_host02VM3monitor_host03VM5sip_host02VM6sip_host03con01（master 节点）控制节点计算节点存储节点con02控制节点计算节点存储节点con03控制节点计算节点存储节点1.2 自助云组件结构sip_host01sip_host02sip_host03Mongodb(副本集模式)Mariadb （主备模式）Rabbitmq(镜像队列模式)mongodb-primarymongodb-secondarymongodb-secondarymysql-master mysql-slave rabbitmq-node1rabbitmq-node2rabbitmq-node3venus IaaS 服务自助云微服务集合基础服务云运维服务tstack_op_svrtstack_op_log_svr 无…底层虚拟机中间件上层服务PaaS 服务上层业务服务前端服务1.3 监控云组件结构monitor_host01mariadb （多主模式）mariadb-masterrabbitmq-node1底层虚拟机核心组件部署结构monitor_host02monitor_host03mariadb-slave mariadb-slaverabbitmq-node2rabbitmq-node3walle-node1walle-node2walle-node3walle_cale_simple-node1walle_cale_simple-node2walle_cale_simple-node3walle_cale_complex-node1walle_cale_complex-node2walle_cale_complex-node3redis-master1 redis-slave3redis-master2redis-slave1redis-master3redis-slave2walle_centercollector-node1collector-node2collector-node3hanah_api-node1hanah_api-node2hanah_api-node3hanah_web-node1hanah_web-node2hanah_web-node3hanah_jobnetwork_agentalarm_collect/alarm_process/alarm_notice/alarm_judge-node1alarm_collect/alarm_process/alarm_notice/alarm_judge-node2alarm_collect/alarm_process/alarm_notice/alarm_judge-node3saltstackwalle_center 单节点hanah_job 单节点redis 三主三备saltstack 单节点agent 单节点监控云Web 页面信息展示上层页面展示中间服务SupervisorRedisRabbitmqMysql supervisorctl <status|start|stop> allsupervisorctl <status|start|stop> serviceVenus微服务Supervisor配置文件：自助云监控云/etc/supervisord.conf/etc/supervisord.conf.d/监控云/etc/supervisord.conf/etc/supervisord.conf.d/2Mysql2.1 Mysql集群架构2.2 Mysql集群状态确认2.3 故障恢复2.4 常用命令2.5 备份数据2.6 Mysqldump全量+ 二进制日志（增量）备份恢复2.7 heidisql可视化管理工具2.1 Mysql集群架构HA+keepalivedVIPHA+keepalived HA+keepalived自助云基础云/监控云Galeragroup communication2.2 Mysql集群状态确认一、Galera多主集群(基础云、监控云)mysql-ptstack_mariadb-e "show status like 'wsrep%';" | egrep'(cluster_size|cluster_status|evs_state|state_comment)'二、主从复制集群(自助云、云管平台)mysql-e 'show master status'mysql-e 'show slave status\G'故障异常：1、集群迁移；2、平台宕机重启一、Galera多主集群(基础云)恢复：1、如果数据库集群服务自动启动，在所有控制节点上先执行下面命令关闭。

[root@openstack-con01 ~]# systemctl stop mariadb2、在数据库3个节点判断哪一台优先启动集群3、K版：（1）在云平台控制服务器1上，执行以下命令：[root@openstack-con01 ~]# sudo sed-i's/safe_to_bootstrap: 0/safe_to_bootstrap: 1/g' /var/lib/mysql/grastate.dat[root@openstack-con01 ~]# sudo-u mysql/usr/libexec/mysqld--wsrep-cluster-address='gcomm://'IP：端口，IP：端口，IP：端口（2）如果上面的命令没有报错，在云平台控制服务器2、云平台控制服务器3上，执行以下命令：[root@openstack-con02 ~]# systemctl restart mariadb[root@openstack-con03 ~]# systemctl restart mariadb（3）等待30s后，在云平台控制服务器1上，Ctrl+c取消掉之前的命令，然后执行下面的命令启动数据库服务：[root@openstack-con01 ~]# systemctl restart mariadbP版：（1）在云平台控制服务器1上，执行以下命令：[root@openstack-con01 ~]# galera_new_cluster（2）如果上面的命令没有报错，在云平台控制服务器2、云平台控制服务器3上，执行以下命令：[root@openstack-con02 ~]# systemctl restart mariadb[root@openstack-con03 ~]# systemctl restart mariadb4、如果发生端口占用，造成数据库启动失败，执行下面的命令。

[root@openstack-con01 ~]# iptables-F[root@openstack-con01 ~]# systemctl stop haproxy[root@openstack-con01 ~]# systemctl restart mariadb[root@openstack-con01 ~]# systemctl restart haproxy注意：如果master数据库节点无法启动，在/etc/f的[mysqld]下加一项：innodb_force_recovery=1。

此方法成功启动master。

innodb_force_recovery=1这个参数会导致数据库不能修改删除或者更新，启动成功之后需要注释掉这个参数。

K版二、Galera多主集群(监控云)恢复：（1）在监控平台3个节点判断哪一台优先启动集群（2）将第一步找出的优先启动节点执行启动数据库命令：[root@monitor-host01]# /usr/local/mariadb/bin/mysqld_safe--datadir=/data/mariadb/data \ --pid-file=/var/run/mariadb/mariadb.pid> /dev/null 2>&1 &（3）依次在另两台自助云节点启动数据库[root@monitor-host02]# /usr/local/mariadb/bin/mysqld_safe--datadir=/data/mariadb/data \ --pid-file=/var/run/mariadb/mariadb.pid> /dev/null 2>&1 &[root@monitor-host03]# /usr/local/mariadb/bin/mysqld_safe--datadir=/data/mariadb/data \ --pid-file=/var/run/mariadb/mariadb.pid > /dev/null 2>&1 &三、主从复制集群(自助云、云管平台)故障恢复（1）sip_host01查看，查看有无error输出mysql-e 'show master status'（2）sip_host02查看，下面命令输出的Last_IO_Error:不为空mysql-e 'show slave status\G'（3）sip_host01 sip_host02上执行systemctl restart mariadb（4）登陆sip_host02数据库执行MariaDB[(none)]> start slave；查看数据库及数据库表信息：介绍命令登陆mysql-h hostname -p port -uroot-p显示数据库show databases;进入数据库use mysql;显示数据库中的表show tables;查询mysql库下的user表中的数据select * from er; 或者select * from er\G; 查看user表的数据结构desc user;刷新数据库信息flush privileges;查询user表中的host，user，password字段select host,user,password from user;查询表中字段中有关localhost的数据select host,user,password from user where host="localhost";查询表中某个字段中包含某个字符的所有记录select host,user,password from user where host like '%1';增删改：介绍命令创建数据库create database testdb character set=utf8;删除数据库drop databases testdb;创建表create table testtb(id int primary key not null auto_increment,name varchar(20));表增加字段alter table testtb add age int;表删除字段alter table testtb drop age;表插入数据insert into testtb(name,age) values ("xm",'20');表更新数据update testtb set name="xl",age='21' where id=2;表删除数据delete from testtb where id=6;删除表drop table testtb;用户权限管理：介绍命令查看当前用户select user();查看用户的权限（testdb 用户）show grants for 'testdb';对某个特定数据库中的特定表单给予授权grant 权限on 数据库.表单名称to 用户名@主机名对某个特定数据库中的所有表单给予授权grant 权限on 数据库.* to 用户名@主机名对所有数据库及所有表单给予授权grant 权限on *.* to 用户名@主机名对某个数据库中的所有表单给予多个授权grant 权限1,权限2 on 数据库.* to 用户名@主机名对所有数据库及所有表单给予全部授权（需谨慎操作）grant all privileges on *.* to 用户名@主机名创建管理员，允许从本地和任何主机登陆，并设置密码grant all privileges on *.* to 用户名@'localhost' identified by'password';grant all privileges on *.* to 用户名@'%' identified by 'password';删除用户drop user 用户名@localhost;为什么要备份？灾难恢复：硬件故障、软件故障、自然灾害、黑客攻击、误操作测试时间•备份需要多少时间•能够容忍多少的数据丢失•恢复数据需要在多长时间完成数据•做还原测试，用户测试备份的可用性•还原演练配置•备份的时长很重要，备份是要消耗磁盘io的。