新一代备份架构及技术
- 格式:pptx
- 大小:4.80 MB
- 文档页数:56


数据中心新一代备份系统建设方案作者:尤克勤来源:《中国金融电脑》 2016年第9期中国人寿保险股份有限公司上海数据中心尤克勤一、人寿股份备份系统现状2014 年1 月中国人寿保险股份有限公司( 以下简称“人寿股份”)卡园数据中心正式投产,卡园的备份系统于同期完成建设并投产运行。
卡园备份系统汲取了人寿股份集电港备份系统的建设经验,按照高性能、高可用、高利用率的原则进行设计,基于带库驱动器为备份设备的备份架构,是业界十分成熟且广泛应用的备份架构;采用SAN 网络备份和LAN 网络备份相结合的备份方式,合理有效地利用备份设备资源,在功能上能够满足大部分常规的数据对象备份需求;在性能上,通过备份计划上的精细设计,能够满足大部分的生产系统在数据备份窗口内完成备份;投产运行至今整体运行比较稳定。
在卡园数据中心的备份系统分为两个备份域,分别负责不同的生产系统的数据备份。
备份软件采用EMC 公司的EMC Networker 软件(8.1.x),备份设备为昆腾公司的Dxi8500 虚拟带库和i6000 物理带库。
物理带库主要用于生产系统全备份、差异备份;虚拟带库主要用于生产系统归档日志备份和清理,是生产系统持续运行的重要保障。
当前备份系统共计保护数据量约2.8PB,每天备份的数据量约100TB;备份峰值性能达到6GB/s,150 路并发;可以看出,人寿股份的备份规模巨大,已经被列为EMC NetWorker 在亚太地区最庞大的备份环境。
二、备份系统面临问题在大型数据中心的复杂环境中,目前的备份架构存在一些运行安全隐患和运维难题,同时部分设备的高可用性问题也影响到系统的稳定运行。
主要问题有以下几方面。
1. 备份系统的稳定性问题在使用带库驱动器为备份设备的架构中,备份系统以存储节点为中心,为了实现SAN 备份,大量生产服务器需要配置为存储节点,并通过SAN 直接识别大量共享带库驱动器。
但是过多的存储节点和共享驱动器会使备份服务器负载过高,影响备份系统的稳定性。
大智慧新一代目录文件结构,及备份方法大智慧新一代目录文件结构:DATA 数据目录 SH上海市场 SZ 深圳市场 SS 板块指数SUPERSTK下的文件:SYS.DTA 存放系统提供的公式USERDATA下的文件:AUTOBLK.CFG:自动板块设定SELF.DTA 存放用户自编的公式BLOCK文件夹下的文件:*.IBK 板块指数定义*.BLK 板块定义*.EBK 条件选股结果SELF 文件夹下的文件:*.WSV 保存页面文件ALERT.DAT 历史预警纪录EXTDATA.INF 扩展数据定义*.CEP 保存组合条件选股条件TEMPCMPD.CEP测试附加条件*.INV 用户个人投资纪录*.TPT 保存指标模板SELF年月日.DTA 每日自动公式备份文件TEST 文件夹下的文件:*.TST 存放系统测试结果*.OPT 存放参数优化的结果PARAM参数指引文件夹*.PRM 存放参数指引的结果TABLE文件夹下的文件:*.ESS数据表文件*.ESD数据表文件(带数据保存)SelfData文件夹下的文件:*.str 字符串数据*.oth 与股票无关序列值数据Pattern 文件夹下的文件*.PIN 模式匹配设计*.PWT模式匹配方法SpotAna文件夹下的文件:*.SPT 定位分析结果Relate文件夹下的文件:*.RTL 相关分析结果Posible文件夹下的文件:*.PSB 预测分布设计DATA件夹下的文件:DAY.DAT 日线数据EXTDAY.DAT 扩展数据MIN.DAT 5分钟线数据REPORT.DAT 当天的分笔成交数据STKINFO.DAT 代码表/即时行情数据/财务数据/除权数据大智慧目录结构介绍:x:\DZH\cfg下是自选股DATA是数据face下是图片HLP是帮助文件FONTS下是字体export下是输出内容IND下是指标update 升级文件zxinfo 公告invest 个人理财dzh/data/shase/dzh/data/sznse/ 下:min 分钟线day 日线week 周线month 月线base f10dzh\cfg\netwrkic.bk2 主要是自选股dzh\ind 指标文件、系统评价、预警功能dzh\lcdb 个人理财dzh\data k线数据、F10dzh\zhdoc 地雷文件dzh\ind\Export 新建公式股票自选在 \X:\dzh\CFG(1)Cfg目录:里面保存了客户使用的相关设置和自选股等相关资料;(2)Cut目录:这个是为以后的预留目录,现在基本上没有使用;(3)Data目录:里面包括了上海和深圳的F10资料、个股信息、日k线、分钟线、月线、周线、天空图、相关的报告等相关数据;(4)Export目录:是导出可以针对个股和相关日k线数据的目录,所有导出的xls数据都是存放在此目录中;(5)Fa目录:这个是为以后的预留目录,现在基本上没有使用;(6)Face目录:是存放相关的图片信息;(7)Fonts目录是:是存放大智慧程序内能够调用的几种类型的字体;(8)Gttemp目录:此目录存放登录时所接受的相关股票信息和登录时候的占用文件,删除后,可以自动生存新的临时文件;(9) Hlp目录:存放的大智慧程序的使用手册;(10)Ind目录:存放大智慧指标文件和用户自定义指标参数文件;(11)Internet目录:是存放大智慧主程序和服务器相关设置信息等资料;(12) Notice目录:是用来存放大智慧程序接收到的图片信息;(13)Supply目录:这个是为以后的预留目录,现在基本上没有使用;(14)Supply2目录:这个是为以后的预留目录,现在基本上没有使用;(15)Tmp目录:是用来存放临时文件的,但现在基本上未有使用;(16)Update目录:是用来存放老版本升级到新版本的升级相关程序的备份目录;(17)Zhdoc目录:是用来存放地雷信息文件的,每天接收到的地雷信息文件都存放其中,收盘后会保留;(18)Zxinfo目录中的Mydoc目录中:存放的是相关的财经信息和筹码分布图的相关解释和说明;(19)Invest目录:是用来存放用使用大智慧程序进行模拟账户进行炒股的保存信息,如果有的用户没有这个文件夹是因为在大智慧中没建立模拟炒股的用户信息,如果建立了后就会产生这个目录(20)“智能选股”生成的文件在dzh文件目录如下: x:\dzh\CFG 对,就在CFG这个目录下面.(21)在大智慧目录下(\dzh\inernet),有个repair程序,可以进行数据备份。