机房动力环境自动化监控系统v1.0
- 格式:doc
- 大小:93.00 KB
- 文档页数:8
机房动力环境监控系统概述2016年8月目录一、前言 (3)二、机房存在的隐患 (3)三、机房监控的内容 (4)1、供配电系统 (4)2、环境监控系统 (4)3、安全防卫系统 (4)4、服务器、路由器等网络设备 (5)四、机房监控的好处 (5)五、机房监控的方式、种类、以及优缺点 (6)1、云安防底端存储机房环境动力监控系统 (6)2、嵌入式机房动力环境监控系统 (6)3、多串口服务器动力环境监控系统 (7)4、传统动力环境监控系统 (7)5、早期机房动力环境监控系统 (7)六、嵌入式机房监控系统简介 (7)一、前言机房是什么?相信这个问题对大家来说一点也不陌生。
自从第一台计算机ENIAC1946年2月14日在美国宾夕法尼亚大学诞生以来,机房就深入人心,当时ENIAC的体积非常的庞大,使用了18800个真空管,长50英尺,宽30英尺,占地1500平方英尺,重达30吨(大约是一间半的教室大,六只大象重)。
人们得专门为它建造一个房子,也就是现在称为机房的地方,人们还得保障它的电力供应,控制机房内温度不能过高以致晶体管损坏,还需要防水防火防震。
虽然当时的机房还不如现在那么标准,但机房监控需要做的事情也有了大致的雏形。
二、机房存在的隐患随着信息技术的高速发展和普及,计算机系统及通信设备数量迅猛增加,机房(计算机中心、设备间、配线室、基站等)已经成为各类企事业单位业务管理的核心平台;配置了网络设备、计算机服务器及其它通讯设备的机房成为数据交换与存储的重要场所,需要特别的措施加以防护。
目前许多机房的管理不得不采用24小时专人值班来定时巡查机房场地设备,这样不仅加重了管理人员的负担,而且往往不能及时排除故障。
利用机房环境监测系统,能使机房监测的信息通过更快捷的方式在更大的区域内得到有效的集中搜集和处理,发现故障报警随时解决,对安全隐患进行记录和综合分析,最终寻求解决途径。
计算机设备中,使用了大批的半导体器件、电阻器、电容器等。
机房动力环境集中监控一体化主机一总述数据中心基础设施的建设,很重要的一个环节就是计算机机房的建设。
计算机机房工程不仅集建筑、电气、安装、网络等多个专业技术于一体,更需要丰富的工程实施和管理经验。
计算机房设计与施工的优劣直接关系到机房内计算机系统是否能稳定可靠地运行,是否能保证各类信息通讯畅通无阻。
三系统组成一体化主机KTR-TH23型小型机房监控一体化机KTR-TH23型小型机房监控一体化机是一款具有温度和湿度采集,红外遥控信号学习与发送的功能的空调控制小型主机,可以学习市面上99%以上的红外遥控器,并可控制两路开关量输出,检测3路开关量输入。
该产品可实现对机房温湿度实时采集,空调遥控,开关控制等,方便对小型机房的智能化管理与监控。
主要参数●技术指标:1、电源:DC 5-12V (具有反接保护)2、工作环境:温度-20~+50℃相对湿度≤95%RH3、控制范围:0~99℃,0~99%RH4、控制精度:温度±0.5℃,湿度±5%RH5、功耗:< 1W●基本功能:1、温度测量和控制,测量范围:0~99℃2、湿度测量和控制,测量范围:0~99%RH3、2路开关量输出4、3路开关量输入5、可按照用户需求增添功能●硬件参数1、通讯接口:RS4852、传输速率:9600 bps3、浪涌保护:RS485每线都具有600W雷击、浪涌保护4、电气接口:3.96mm标准接线端子(15位)5、体积:120*78*28 (mm)6、安装方式:壁挂式小型机房监控一体化机外观示意图1 2 3 4 5 6 7 8 9 10 11 12 13 14 15电源正电源负485A485B继电器A公共端继电器A常开继电器A常闭继电器B公共端继电器B常开红外发射管正红外发射管负开关量输入A路开关量输入B路开关量输入C路开关量公共端接线端子定义(从左到右)使用说明通过上位机对设备发送学习指令,状态灯长亮,用遥控器对准设备窗口,按下遥控器的按键,状态灯熄灭,刚才按下的键就被学习到相应的按键地址,发送遥控指令,状态灯闪一下,遥控信号被发出。
机房动力环境监控系统v1.0——应用客户端用户使用手册二0一六年一月目 录第一章软件环境 (6)1.1 软件的架构 (6)1.2 软件功能及适用范围 (6)1.3 软件搭建环境 (6)1.3.1服务端配置 (6)1.3.2客户端配置 (6)第二章软件的功能介绍 (7)2.1 系统启动 (7)2.2 系统管理 (9)2.2.1修改密码 (9)2.2.2操作员管理 (9)2.2.4 清除数据管理 (11)2.2.5数据库维护 (12)2.2.6数据库配置 (12)2.2.7系统参数配置 (13)2.2.8场所管理 (13)2.2.9站点管理 (14)2.3 监控主机管理 (15)2.3.1 主机设备管理 (15)2.3.2 主机时间组设置 (18)2.3.3 告警方案管理 (19)2.3.4 主机通道配置 (19)2.3.5 智能设备接入 (28)2.4 门禁系统管理 (30)2.4.1 部门管理 (30)2.4.2 卡务中心管理 (30)2.4.3 门禁设备管理 (38)2.4.4时间组设置 (42)2.4.5 门禁授权 (44)2.4.6 卡类管理 (47)2.4.7 人员导入/出 (48)2.4.8 同步设备人员 (49)2.5 视频监控管理 (50)2.5.1视频设备管理 (50)2.5.2视频录像查询 (51)2.5.3实时视频监控 (51)2.5.4 联动抓拍查询 (52)2.5.5 巡视组设置 (52)2.5.6 巡视时间组设置 (53)2.5.7 巡视记录查询 (54)2.6 规约配置管理 (54)2.6.1 61850规约映射 (54)2.6.2 刀闸信号定义 (55)2.7 联动方案管理 (56)2.7.1 安防报警联动 (56)2.7.2 环境量联动 (56)2.7.3 短信联动提醒 (57)2.7.4 定时采集任务 (58)2.7.5 数据同步计划 (59)2.7.6 门禁联动设置 (59)2.7.7 消防联动设置 (60)2.7.8 预置点联动 (61)2.8 数据记录报表 (62)2.8.2 设备告警日志 (62)2.8.3 设备操控查询 (63)2.8.4 收发短信查询 (64)2.8.5 联动抓拍查询 (64)2.8.6 模拟量曲线 (65)2.9 电子地图管理 (65)2.9.1新建地图 (66)2.9.2设计地图 (66)2.9.3删除地图 (67)2.10 帮助 (67)2.10.1关于 (67)2.10.2扩展功能 (68)2.10.3加密狗升级 (68)2.10.4退出 (69)第一章软件环境1.1 软件的架构软件架构采用(客户端+服务端)C/S 体系架构,开发语言c# ,开发工具VS2010,数据库MSSQL2000\2005,报表输出支持OFFICE2003系列1.2 软件功能及适用范围机房、基站动力环境综合监控1.3 软件搭建环境1.3.1服务端配置CPU: Inter(R) Core i3 750 2.1GHZ*2、内存:8G以上、硬盘500G以上操作系统:Windows Server 2003\ Windows Server 2008\ Windows 7 旗舰版64位数据库:Microsoft SQL Server 2000\20051.3.2客户端配置CPU: Inter(R) Core i3 750 2.1GHZ*2、内存:4G以上、1G独立显卡、硬盘160G以上操作系统:Windows XP \ Windows 7 旗舰版64位,Windows8.1 中文版其他:office 办公软件RAR解压缩第二章软件的功能介绍2.1 系统启动软件安装后,双击在桌面或开始菜单所有程序中【机房动力环境监控系统v1.0】图标,出现如下图所示的系统数据库连接配置界面。
机房监控(机房动环系统)APP软件是怎样的一、系统概述机房远程APP综合监控系统主要是对机房设备(如供配电系统、UPS电源、防雷器、空调、消防系统、保安门禁系统等)的运行状态、温湿度、烟雾、振动、红外、水浸、供电的电压、电流、频率、配电系统的开关状态、测漏系统、环境状态等进行实时监控并记录历史数据,同时将机房设备的工作状态的进行实时的视频监控,实现对机房远程监控与管理功能,通过手机APP可对上述全部监控对象进行可靠、准确的监控与控制。
使机房无线远程监控达到无人或少人值守,为机房高效的管理和安全运营提供有力的保证。
机房远程APP综合监控系统支持市面全系列安卓手机,手机终端可以通过4G/3G/GPRS/WIFI远程进行监控与控制,是目前无人值守管理人员最不可以缺少的系统组成部分之一,从而有效提高工作效率,保证机房系统运作的安全性与稳定性。
二、系统设计原则系统设计坚持“技术先进、使用方便、经济合理、超前考虑”的原则,系统具有先进性、实用性、规范性、可靠性、开放性,同时为了保证整个系统稳定可靠,具备良好的整体升级、扩展能力和方便维护,符合机房间远程APP综合管理控制的需要,系统设备选型在符合系统功能要求的前提下,综合的考虑了性能指标、规格统一性及性能价格比。
可靠性保证系统的高可靠性。
即不会出现因为某一个设备发生故障而造成整个监控系统无法使用的现象。
系统的接入不会影响现有通信设备和网络的正常工作。
系统将正确反映监控内容的实际情况。
系统的运行和平均故障修复时间完全符合设计要求。
实时性保证系统能实时的反映通信设备运行情况,一到那出现异常情况是能够及时报警。
安全性通过安全隔离、信息加密等技术保证系统安全。
实用性系统全面分析现有条件与未来需求,充分考虑当前功能要求与整体人员技术素质,力求实现系统建设与使用的同步,使集成开发的系统充分满足统计局的需求,并且易于操作、维护。
经济性具有极佳的性能价格比。
可维护性系统APP界面可操作性强、界面友好、易于使用。
机房动力环境监控系统一、概述 (2)二、系统目标 (2)三系统的组成 (2)四 UPS电源监控 (3)五、系统特色 (4)一、概述随着计算机技术的发展和普及,中心机房已成为各大单位的重要的数据处理及运行中心。
对于银行,证券,海关,邮局等需要实时交换数据的单位的机房,其机房管理更为重要,一旦系统发生故障,造成的经济损失及社会影响不可估量。
而中心机房的动力环境状态,作为中心机房设备运行的基础支撑,其良好的运行是保证机房数据运行的前提和基础,一旦机房动力环境出现故障,就会影响到计算机系统的运行,对数据传输、存储及系统运行的可靠性构成威胁,如事故严重又不能及时处理,就可能损坏机房硬件设备,危害数据安全,造成严重后果。
二、系统目标UPS机房动力环境监控管理系统的建设,主要是为了解决机房内部UPS状态监控,UPS故障告警、空调下漏水、通水管道漏水监控、温度湿度检测、烟雾告警检测。
通过系统的建设,可以实现对中心机房UPS设备、状态环境、市电供应等进行实时监控和智能化管理,及时发现并掌握动力环境运行过程中各类异常状况,避免造成对机房内关键运行与数据设备造成危害,并减少值班运维人员的工作强度,优化管理模式,实现保障机房良好运行、降低运行维护成本的目标。
三系统的组成娇龙3 通过工控机及系统集成软件,对各监控装置的动态参数进行集成,建立设备状态综合数据库,自动生成设备状态参数报表和变化趋势曲线,对设备状态的历史参数进行“横比”缺,趋势分析和相对比较相结合,实现设备状态的初步诊断,为专家诊断系统提供开放性平台,通过网络,现设备的远程/现场状态监测、诊断和评估。
四 UPS 电源监控机房监控系统对机房1台UPS 的运行参数做实时监测。
本地管理服务器与机房UPS的智能通讯接口进行连接,实时监视UPS 整流器、逆变器、旁路、负载等各部分的运行状态与参数。
系统一旦监测到UPS 发生报警,系统将自动切换到UPS 监控子系统的运行画面,进行形象的显示并对外报警,同时可对重要参数作曲线记录。
#E机房一体化智能配电环境监控系统1一、安装I 软件安装说明1.用户首先检查电脑是否具有了IIS后台运行环境。
打开控制面板—添加或删除程序—添加或删除WINDOWS 组件—Internet信息服务;前面如果未选择前已经有勾,代表已经安装没有则没有。
2.安装IIS按前期检查步骤进入到Internet信息服务栏目下将IIS前面勾上,点击下一步,找到安装文件,安装文件名为I386。
在安装提示寻找目录时,每次选好文件位置,再点击最后一个不属于文件夹类型的执行文件即可。
也可以用windows XP光盘安装。
Win7旗舰版直接在internet信息服务下勾选IIS服务安装即可。
3.安装NET框架按先后顺序安装do-tnetfxx2.0.exe、dotnetfx3setup.exe、dotnetfx35.exe程序。
再安装完此类型程序后,可以通过我的电脑管理—Internet信息服务—网站;对网站进行属性检查,再进入属性界面下,看 version是否为2.0.50727 是的话则正确。
反则可能有错误出现。
Win7旗舰版因为系统中自配framework3.5或更高版本一般则不需要安装。
4.安装pManager3.1找到文件所在位置直接点击安装即可。
后续只需要点击下一步下一步直至完成。
5.安装CSharpBackground.msi找到文件所在位置直接点击安装即可。
后续只需要点击下一步下一步直至完成。
6.安装pManager3000station找到文件所在位置直接点击安装即可。
选择准备安装目录,后续只需要点击下一步下一步直至完成。
7.安装MySQL数据库7.1、因为MySQL数据库需要使用端口3306,所以在安装MySQL之前,应当确保3306端口已经开放,并允许远程访问。
7.1.1、进入“控制面板”,启动Windows防火墙--,按照图1所示,添加放行端口。
图1 防火墙设置7.1.2检查TCP/IP筛选器设置。
机房动力环境监控系统机房动力环境及图像集中监控管理系统,简称机房动力环境监控系统,其监控对象主要是机房动力和环境设备等设备(如:配电、UPS、空调、温湿度、漏水、门禁、安防、消防、防雷等),具体监控项目和监控内容如下:1.UPS电源(包含直流电源)UPS电源和直流电源均带有电池,对计算机起到提高电源质量、停电后持续供电的保障。
通过由UPS厂家提供的通讯协议及智能通讯接口,对UPS进行监控,对UPS内部整流器、逆变器、电池、旁路、负载等各部件的运行状态进行实时监视,一旦有部件发生故障,机房环境监控系统将自动报警。
机房环境监控系统中对于UPS的监控一律采用只监视,不控制的模式,避免由于机房环境监控系统的失误带来的断电风险。
2.蓄电池在一个UPS不间断电源系统中,可以说蓄电池是这个系统的支柱,及时可靠地对蓄电池组进行巡回检测,对于维护负载设备的正常运转具有十分重要的意义。
为此,需要通过在线式电池监测仪、直流电流传感器等设备对UPS蓄电池进行监控。
3.空调设备机房的特点之一就是设备密集,发热量大。
因此,空调对控制机房的温湿度起着决定性作用。
通过实时监控,能够全面诊断空调运行状况,监控空调各部件(如压缩机、风机、加热器、加湿器、去湿器、滤网等)的运行状态与参数,并能够通过机房环境监控系统管理功能远程修改空调设置参数(温度、湿度、温度上下限、湿度上下限等),以及对精密空调的重启。
空调机组即便有微小的故障,也可以通过机房环境监控系统检测出来,及时采取措施防止空调机组进一步损坏。
4.漏水检测漏水检测系统分定位和不定位两种。
所谓定位式,就是指可以准确报告具体漏水地点的测漏系统。
不定位系统则相反,只能报告发现漏水,但不能指明位置。
系统由传感器和控制器组成。
控制器监视传感器的状态,发现水情立即将信息上传给监控PC。
测漏传感器有线检测和面检测两类,机房内主要采用线检测。
线检测使用测漏绳,将水患部位围绕起来,漏水发生后,水接触到检测线发出报警。
3D机房动力和环境监控系统产品介绍南宁迈世信息技术有限公司3D机房动力和环境监控系统是一套虚拟现实的3D机房管理系统,并非仅仅是一个外挂的3D展示系统,它与高档小区的3D展示系统或者故宫博物馆的3D展示系统是有本质区别的,不仅提供机房真实的3D显示及人性化操作,同时还结合机房实时信息及资产信息,实现机房管理质的飞跃。
机房管理包括以下几个方面:●机房展示及巡视●实时设备诊断及报警显示●机房及机柜的温湿度环境●机房动力及负荷分布●机房安全防范●机房IT监测●机房资产管理这些方面在虚拟现实的3D机房管理系统中,均可得到管理上的飞跃。
系统并不仅限于3D,其报表系统、详细数据界面、分析界面等显然不能脱离2D,必须做到2D和3D的有机结合,独立的3D外挂系统,虽然可以秀,但缺乏成熟度。
系统是一个2D、3D有机结合的完整系统。
一、机房展现及巡视3D界面提供动态巡视功能,可任意指定巡视路线,设定巡视周期,自动进行实时的、平滑的巡视过程,巡视整个机房环境、机房设备、机柜列、IT设备等,动态展现机房各个部位的设备状况。
如果将机房管理系统投影到大屏上,管理人员可以清楚地观察到机房内的任何异常,便于第一时间进行处理。
当管理人员需要仔细检查指定设备时,可以停止“自动巡视”,切换到“行走模式”,通过键盘或鼠标,移动到关注的目标前,打开机柜门,检查实际工作状态,检查完毕后,恢复“自动巡视”模式。
图例-自动巡视二、实时设备诊断及报警显示系统具有实时监测和诊断功能,当设备(空调、UPS、服务器等)发生报警时,该设备红色闪烁,当发生漏水时,在漏水位置显示真实感的水流,当空调停机时,风机停止转动,冷媒、热媒停止流动,通过这些形象的方式,提醒管理人员,有报警发生应尽快处理。
图例-UPS报警红色闪烁图例-开关跳闸并显示报警色图例-漏水报警图中出现水流三、机房及机柜的温湿度环境机房温度环境对服务正常工作致关重要,由于机房的气流通道、服务器等分布不匹配,有可能导致机柜局部温度过高,因此总体的空调温度并不能准确反映机房内温度状况,必须通过3D热场的温度切片图来表现温度环境,才能完整表现机房环境状况,该温度图可自动巡视,展现机房各个位置的温度分布,图中温度从10℃-40℃,以颜色由蓝到红的变化,有局部区域温度过高。
机房动力环境监控系统常规监控内容深圳市安之源电子有限公司 东北办一、低压配电监测子系统(1)监测对象:*路市电配电、*路UPS电配电。
(2)监测内容:主要开关开合状态;三相及各相电压、电流、有功功率、无功功率、频率、功率因数、视在功率、有功电度、无功电度等。
(3)实施方案:A:在市电配电柜、UPS输出柜或强电列头柜安装带RS485通讯接口的PDA380电量仪,分别采集相应的三相全电量参数,在UPS 输出柜或强电列头柜安装带RS485通讯接口的D86开关状态采集模块(每只可采集8路输出开关),采集配电柜内的开关状态;B:通过1根四芯屏蔽线分别将电量仪检测的信号(RS485)传输到监控主机,并成一路接入网络型数据采集机的其中1个通讯口。
电量仪本身的供电要求为220VAC,为了保证电量仪在市电停电时也能正常工作,要求提供1路由UPS输出的电给电量仪本身供电。
开关状态采集模块D86(RS485输出)通过一根四芯屏蔽线接入网络型数据采集机的其中一个串口上,由网络型数据采集机将输出以TCP/IP方式传输到监控服务器,实现对配电开关状态的监测。
(4)实施目标:当监测的参数超过设定的允许值或开关发生变化时,系统诊断为有故障(报警)事件发生,监控主系统立刻弹出相应的报警页面窗口,同时监控主机自动拨打预设电话,实现电话语音报警,同时可实现短信报警,通知值班人员或相应的主管人员。
示意图如下:二、柴油发电机组监测子系统(1)监测对象:*台发电机;(2)监测内容;三相及各相电压、电流、有功功率、无功功率、频率、功率因数、视在功率、转速、水温、油温、电池电压、机油压力、马达状态等。
(3)实施方案:发电机监测由发电机生产厂家提供通讯接口和通讯协议,监控厂家负责安装通讯转换设备AM9520和数据读取。
(4)由于不同品牌的厂家设计理念不一样,能监测的参数也不一样,因此,所有模拟量与数字量的具体情况依据发电机厂家提供的发电机通信协议而定。
机房动力环境监控(管理)系统建设方案1概述本项目选择的是面向数据中心基础设施管理推出的新一代数据中心管理系统,实现对数据中心基础设施层的动力、环境、视频、门禁等设备的实时数据、设备状态、告警等的管理。
同时支持各种机房视图和报表展现,用户可方便查看机房设备实时状态。
使机房具备24小时无人值守的水平。
2系统拓扑结构可监控的底层设备包含动力监控子系统、环境监控子系统、视频监控子系统和门禁监控子系统。
管理系统拓扑结构图3设备集中统一管理3.1动力设备监控1、配电柜监控监控实现:通过配电柜智能电量仪RS485接口接至采集器。
采集器通过实时不间断的轮询采集将信息传送给监控平台进行显示、报警。
监控性能:实时测量动力配电柜、USP输入输出柜的输入电源的电压、电流、功率因数等电力参数,对于精密配电柜还具备测量支路的电力参数监控。
可设定电压、电流的上限值与下限值,当监测的电压或电流超过设定的允许值时,系统诊断为有故障(报警)事件发生,监控主系统发出报警。
2、UPS监控监控实现:通过UPS的智能接口接至采集器。
采集器通过实时不间断的轮询采集将UPS的信息传送给监控平台进行显示、报警。
监控性能:实时显示并保存各UPS通讯协议所提供的能远程监测的运行参数和各部件状态。
实时判断UPS的部件是否发生报警,当UPS的某部件发生故障或越限时,嵌入式监控服务器系统发出报警。
3.2环境设备监控1、精密空调监控监控实现:设备提供通讯接口。
按实际情况划分区域,将一个区域内的精密空调通过RS485接口接至采集器。
采集器通过实时不间断的轮询采集将信息传送给监控平台进行显示、报警。
监控性能:监测精密空调运行状态,故障时进行报警。
能够实时显示并保存各空调通讯协议所提供的各项运行参数、各部件状态及报警情况。
2、温湿度监控监控实现:在机房内的重要区域安装温湿度传感器,带有RS485接口。
按实际情况划分区域,将每一个区域内的温湿度传感器接入采集器。
采集器通过实时不间断的轮询采集将信息传送给监控平台进行显示、报警。
机房动力环境自动化监控系统
目录
1综述 (1)
1.1源系统层 (1)
1.2数据仓库层 (1)
1.3展示层 (1)
2ETL数据集成 (2)
2.1数据获取 (2)
2.1.1全量抽取 (2)
2.1.2增量抽取 (2)
2.2数据转换 (3)
3数据展示 (3)
3.1系统管理子系统 (3)
3.2用户及权限管理 (3)
3.3系统日志管理 (3)
3.4统计查询子系统 (3)
3.5监控报警 (4)
3.6系统界面风格展示 (4)
4源系统技术要求 (5)
5系统采用技术 (5)
6硬件平台和操作系统 (6)
服务器 (6)
1综述
结合电力企业业务特点,从技术的角度可以将系统的总体技术架构划分为
三部分:源系统层、数据仓库层、展示层。
下图是系统总体技术架构。
1.1源系统层
源系统层包括已建成的三套动力环境监控系统。
1.2数据仓库层
数据仓库是统一数据平台,对来自不同源系统的数
据按照一定的逻辑关系和抽取原则进行整合,将这些业务数据转换、清洗、筛选、合
并成为支持企业管理层进行决策的关键数据,存储在数据仓库中的各类数据模
型中。
解决了跨系统、跨部门进行查询统计分析的需要。
采用Kettle开源的ETL工具完成此部分。
1.3展示层
实时监控状态量变化,对于超出规程规定阀值范围的状态量指标,根据不同的类别和等级及时向各级设备管理人员发布报警信息。
2ETL数据集成
数据集成是把不同来源、格式和特点的数据在逻辑上或物理上有机地集中,从而提全
面的数据共享,是企业商务智能、数据仓库系统的重要组成部分。
ETL 是企业数据集成的主要解决方案。
2.1数据获取
通过有效数据源获取反映设备健康状态指标的各类设备基础数据、实时数据等。
数据源可以为生产管理系统、在线监测系统等。
按照数据来源和数据特性不同可分为台帐信息、运行信息、监控信息等。
2.1.1全量抽取
全量抽取类似于数据迁移或数据复制,它将数据源中的表或视图的数据原封不动的从数据库中抽取出来,并转换成自己的ETL 工具可以识别的格式。
基础数据和台账数据采用全量抽取的方式。
2.1.2增量抽取
增量抽取只抽取自上次抽取以来数据库中要抽取的表中新增或修改的数据。
1,触发器方式
在要抽取的表上建立需要的触发器,建立插入、修改、删除三个触发器,每当源
表中的数据发生变化,就被相应的触发器将变化的数据写入一个临时表,抽取线程从临时表中抽取数据,临时表中抽取过的数据被标记或删除。
2,时间戳方式
是一种基于快照比较的变化数据捕获方式,在源表上增加一个时间戳字段,系统中更新修改表数据的时候,同时修改时间戳字段的值。
当进行数据抽取时,通过比较系统时间与时间戳字段的值来决定抽取哪些数据。
注:第一种方式,由于需要对业务系统的数据库进行改造,提供的 接口抽取用户需要具有一定的权限, 源系统需要提供创建表和触发器的权限。
第二种方式,性能也比较好,ETL 系统设计清晰,源数据抽取相对清楚简单,可以实现数据的递增加载。
如果源系统数据已经有时间戳的话,最好采用此种方法。
2.2 数据转换
对数据进行过滤、换算、组合等加工处理,使其成为反映设备健康状态的状态参量。
并对错误、不一致的数据进行清洗和加工。
3 数据展示
数据展示系统主要分为
系统管理,统计查询,监控报警3个模块。
后期根据具体的业务需求增加或修改模块功能。
3.1 系统管理子系统
实现用户及权限管理,数据字典维护、系统日志管理、系统运行监控四部分功能。
设备某个状态量的阈值设置。
3.2 用户及权限管理
实现用户及权限管理功能。
权限分为以下类别:
系统操作权限:即系统的使用权限,区分用户对系统的操作级别及操作范围。
3.3 系统日志管理
对系统运行日志、故障日志进行管理,并提供对日志查功能。
3.4 统计查询子系统
通过设备属性如设备类型、设备名称、生产厂家等,以及断面时间对设备的运行状况进行查询。
并对单个设备展示历史数据的运行曲线。
3.5监控报警
对设备的当前最新状态可以进行查询。
对告警设备进行置顶显示。
并通过短信或者其他方式对负责人进行提醒等。
3.6系统界面风格展示
系统主菜单界面
系统子菜单界面
4源系统技术要求
第一,提供最新的详细数据库文档。
系统相关模块的前台访问权限。
后台数据库的访问权限。
第二,本系统抽取数据时要求外部系统要能够区分哪些数据已经被上传过,并
将针对这些数据的修改或删除传递给本系统。
如果源系统数据已有修改更新时间戳则只需提供数据库访问权限即可。
如果没有则需要根据具体的数据结构重新制定数据获取方案。
第三,需要源系统的维护开发人员或者比较熟悉源系统的人员提供支持,以便尽快熟悉数据结构,业务流程完成开发。
5系统采用技术
抽取层,将采用kettle,数据抽取工具。
WEB展现层,easyui,ext,spring,hibernate等。
数据库,mysql,oracle。
6硬件平台和操作系统服务器。