多传感器航迹融合综述
在20年代70年代初，R. A. Singer等人首次提出航迹融合问题，其推导了表征两航迹关联概率的“相关方程”，其实就是计算两条航迹间的玛氏距离：
将关联概率小于门限值的航迹视为待融合的航迹，这即是一个假设检验问题；但其后续的航迹融合有一个隐含假设：来自同一目标、不同传感器的两个局部估计误差是相互独立的[1][2]。
[1] R. A. Singer and A. J. Kanyuck, “Computer control of multiple site track correlation”, Automatica, vol. 7, pp. 455-463, July 1971.
[2] R. A. Singer and A. J. Kanyuck, “Correlation of Multiple-Site Track Data”, IEEE Transactions on Aerospace and Electronic System, vol. 6, No. 2, pp. 180-187, March 1970.
而实际情况中，尽管不考虑目标机动性或量测噪声，过程噪声是相同的，因此局部估计误差往往是高度相关的，因此相关性不容忽视。
1979年，J．Speyer在多传感器分布式估计问题中将估计间的相关性考虑其中，但其不适用于假设检验问题[3]。此外，Willsky等人也在其研究中考虑了相关性等问题[4]。
[3] J. L. Speyer, “Computation and Transmission Requirements for a Decentralized Linear- Quadratic-Gaussian Control Problem”, IEEE Transactions on Automatic Control, vol. 24 no. 2 pp. 266-269, 1979.
[4] A. Willsky, M. Bello, D. Castanon, B. Levy, G. Verghese, “Combining and Updating of Local Estimates and Regional Maps Along Sets of One-Dimensional Tracks”, IEEE Transactions on Automatic Control, vol. 27, no. 4, pp. 799-813, 1982.
1981年,Y. Bar-shalom等人推导了两局部估计误差互相关的简单递推公式，将互相关性融入假设统计量公式中。其适用于假设检验问题的，在假设统计量服从Chi方分布时可以被实现[5]。
互协方差：
相关方程：
[5] Y. Bar-Shalom, “On the Track-to-Track C orrelation Problem”, IEEE Transactions on Automatic Control, AC-26, 571-572, Apr. 1981
在[5]的基础上，1986年，Y Bar-shalom等人在[6]中推导了考虑公共过程噪声带来的相关性的情况下的分布式估计融合的航迹融合公式,其中互协方差计算与[5]中相同：
若估计误差相互独立的情况下，则融合公式变为：
实例表明考虑相关性可以将融合后得到估计的不确定性区域占单个传感器不确定性区域（协方差椭圆）将减少为70%，若假设估计独立成立，则会减少50%。
单传感器 不相关（
50%） 相关（70%）
[6] Y. Bar-Shalom and L. Campo, “The Effect of the Common Process Noise on the Two-Sensor Fused-Track Covariance ”, IEEE Transactions on Aerospace and Electronic Systems , vol. 22, no. 6, pp. 803-805, 1986.
但[6]中的贝叶斯最小均方误差理论是建立在一个不成立的假设上的，且1988年，[7]比较了[6]中所推导的融合公式（状态向量融合）与最优的方法（量测融合，即是集中式融合），结果表明[6]中的方法效果比最优方法差，虽然均方误差仅低了7%，其只是一种次优的方法。
[7] J. A. Roecker and C. D. McGillem, “Comparison of Two -Sensor Tracking Methods [6]状态向量融合
量测融合
Based on State Vector Fusion and Measurement Fusion”, IEEE Transactions on Aerospace and Electronic Systems, vol. 24, no. 4, pp. 447-449, 1988.
仅利用状态向量进行融合只是一种次优的方法，一种更有效的方法则为信息融合。
1995年，O．E. Drummond提出采用带全局估计反馈的航迹融合结构来处理互相关问题，但其只针对不存在过程噪声情况[8]；
1997年，Oliver E. Drummond又提出Tracklet方法（Trakclet，可以认为是一个目标的航迹数据，与其他目标的的Tracklet都不想关），并采用混合式融合，来综合分布式融合与集中式融合的优缺点[9][10]。
同时，C. Y. Chong也提出一种基于所谓“imformation graph”的分布式融合算法[11][12]。
以上几种算法都是通过巧妙的处理来减小相关性，但都不能完全消灭相关性的影响。
[8] O. E. Drummond, “Track fusion with feedback,” in Proc.1996 SPIE Conf. Signal and Data Processing of Small Targets, vol. 2759, pp. 342–360, 1996.
[9] O. E. Drummond, “A hybrid sensor fusion algorithm architecture and tracklets,” in Proc. 1997 SPIE Conf. Signal and Data Processing of Small Targets, vol. 3163, pp. 512–524, 1997.
[10] O. E. Drummond, “Tracklets and a hybrid fusion with process noise,” in Proc. 1997 SPIE Conf. Signal and Data Processing of Small Targets, vol. 3163, pp. 512–524, 1997.
[11] C.Y. Chong, S. Mori, W. H. Barker and K. C. Chang, “Architectures and algorithms for track association and fusion,” IEEE AES Syst. Mag., pp. 5–13, Jan. 2000, Also in Proc. 1999 Int. Conf. on Information Fusion, Sunnyvale, CA, July, 1999.
[12] C. Y. Chong, S. Mori and K. C. Chang, “Distributed multitarget multisensory tracking,” in Multitarget-Multisensor Tracking: Advanced Applications, Y. Bar-Shalom, Ed. Norwood, MA:
Artech House, 1990, pp. 247–295.
2003年，X. R. Li针对之前的估计融合准则存在的缺陷和约束性，例如要求局部估计误差非相关、局部估计的动态模型相同、网络结构和信息形式简单等问题，发表了一个系列文章。
在PART1[13]中总体而系统研究了估计融合问题，首先建立一个统一的线性模型，提出了存在相关性，在加权最小二乘（WLS）和最优线性无偏估计（BLUE）意义下的一系列集中式和分布式的最优融合准则。
由于在分布式融合中，局部估计误差的互协方差不管在上诉的WLS,BLUE还是LMMSE（线性最小均方误差）意义下都是一个十分关键的量。其在PART3[14]中给出了各情况时在线性系统线性观测下的互协方差推导公式，这些公式对所有线性无偏估计都是有效的，不管其是否为最优估计。
[13] Li, X. R., et al, “Optimal linear estimation fusion–Part I: Unified fusion Rules,”IEEE Transactions on Information Theory, vol. 49, no. 9, pp. 2192-2208, Sept. 2003.
[14] Li, X. R. and Zhang, P, “Optimal linear estimation fusion–Part III: Cross-correlation of local estimation errors,” In P roceedings of the 4th International Conference of Information Fusion, Montreal, QC, Canada, Aug. 2001.
2010年，Ting Yuan和Bar-Shalom针对非均匀航迹融合问题，即局部传感器使用不同的目标状态空间，且其存在一个非线性转换，例如传感器A为笛卡尔坐标系，目标状态为[x, x’, y, y’]，而传感器B目标状态为[θ,θ‘]，其推导了此情况下的LMMSE和MML估计方法及其互相关计算方法。
[15] T. Yuan, Y. Bar-Shalom, X. Tian, “Heterogeneous track-to-track fusion,” In Information
Fusion (FUSION), 2011 Proceedings of the 14th International Conference on. IEEE, pp. 1-8, 2011.
然而, 在很多情况下获取相关信息是十分复杂甚至不切实际的，例如共同的过程噪声、相关量测噪声未知，分布式网络的拓扑结构未知或者非线性系统等情况下，计算局部估计误差互相关十分复杂，耗时费力。
1996年，K.Uhlmann提出了协方差交叉（Covariance intersection，CI）融合算法来解决这个问题[16]，也开启了分布式融合的另一重要研究方向。传统的CI融合即是使融合后的协方差矩阵的迹最小的优化准则。
后来，不同的优化准则下又衍生出很多的CI融合算法，他和他的学生Julier又提出最小行列式CI(DCI)融合算法,即其优化准则是使融合后的协方差矩阵行列式最小[17][18]。
[16] J. K. Uhlmann, “General data fusion for estimates with unknown cross covariances,” In Proceedings of the SPIE Aerosense Conference, vol. 2755, pp. 536—547, 1996.
[17] S. J. Julier and J. K. Uhlmann, “Non-divergent estimation algorithm in the presence of unknown correlations,”In Proceedings of the American Control Conference, vol. 4, pp. 2369-2373, 1997.
[18] S. J. Julier and J. K. Uhlmann, “General decentralized data fusion with covariance intersection (CI),” In D. Hall and J. Llians (Eds.), Handbook of Multisensor Data Fusion, Boca Raton, FL: CRC Press, ch. 12, 2001.
[19]提出了基于信息理论的CI融合，并提出了最小化信息熵的准则，最优化求解权值，但其计算十分复杂，[20][21]提出了近似的求解权值的快速CI算法，但其只适用于高斯情况。
[19] M. Hurley, “An information theoretic justification for covariance intersection and its generalization,”In Proceedings of the 5th International Conference of Information Fusion, Annapolis, MD, 2002, 505—511.
[20] W. Niehsen, “Information fusion based on fast covariance intersection filtering,”In
Proceedings of the 5th International Conference of Information Fusion, Annapolis, MD, 2002, 901—905.
[21] D. Franken, and A. Hupper, “Improved fast covariance intersection for distributed data fusion,” In Proceedings of the 8th International Conference of Information Fusion, Franklin Plaza, Philadelphia, PA, July 2005.
在一些特殊情况下，待融合的局部估计间大不相同，比如两位置估计间相差1Km，但其各自的均方误差矩阵表示都只有几米的误差。在这样的情况下，估计值将被视为不合理的。
[22][23]提出一种协方差联合（Covariance union, CU）算法来解决这个问题。文献[23]提出马氏距离来检测估计间的统计误差，并提出一个自定义的门限来检测不合理性，也提出一个结合了CI和CU 算法的容错机制。然而门限的设定通常是比较困难的。
[22] J. K. Uhlmann, “Covariance consistency methods for fault-tolerant distributed data fusion,” Information Fusion, 4 (2003), 201—215.
[23] S. J. Julier, J. K. Uhlmann, and D. Nicholson, “A method for dealing with assignment ambiguity,”In Proceedings of the 2004 American Control Conference,Boston, MA, 2004, 4102—4107.
另一方面则是多传感器的多目标跟踪融合，如广义CI融合算法，基于随机极的广义CI算法，PHD 、CPHD、Gaussian Mixture CPHD，Bernoulli，多目标-多伯努利迭代(MeMBer Filter)滤波器的CI融合算法等。
多传感器航迹融合还有一个问题则是针对有偏估计及其补偿。如Bar-Shalom在[24]所表述，传感器配准的目的即是估计传感器量测的偏差，缩放或者抵消传感器距离或方位上的偏差、时钟偏差、传感器位置偏差等.
针对有偏估计问题：
2003年，N. Okello等人文献[25][26]在局部航迹的相等量测的情况下，提出一个联合航迹有偏估计融合算法。
2004年，X. Lin, Y. Bar-Shalom和T. Kirubarajan在文献[27]中提伪量测的概念出来解决exact bias estimation问题，文献[28][29]对其进行了扩展，如递归最小二乘有偏估计和最优最小均方误差有偏估计。但其缺点有一下几点：1、他们都需要利用局部估计的卡尔曼增益，这在实际的系统中通常不能送至融合中心；2、这些算法均假设融合中心在同一时刻接受到来自每个传感器的局部航迹，由于带宽限制，这在实际系统中也是不现实的；3、算法需要相应的来调整传感器数量，且当传感器数量增加时还会面临维数灾难。
此外，文献[30]利用多点局部搜索来解决航迹融合和有偏估计问题,文献[31]提出了基于伪量测的最大期望算法来完成融合和配准问题。
[24] Y. Bar-Shalom, P. K. Willett, X. Tian, “Tracking and data fusion,” A Handbook of Algorithms, Yaakov Bar-Shalom, 2011.
[25] N. Okello and S. Challa, "Joint sensor registration and track-to-track fusion for distributed trackers," in IEEE Transactions on Aerospace and Electronic Systems, vol. 40, no. 3, pp. 808-823, 2004.
[26] N. Okello and B. Ristic, "Maximum likelihood registration for multiple dissimilar sensors," in IEEE Transactions on Aerospace and Electronic Systems, vol. 39, no. 3, pp. 1074-1083, 2003.
[27] X. Lin, Y. Bar-Shalom, and T. Kirubarajan, "Exact multi sensor dynamic bias estimation with local tracks," in IEEE Transactions on Aerospace and Electronic Systems, vol. 1, no. 2, pp. 576-590, 2004.
[28]X. Lin, Y. Bar-Shalom, and T. Kirubarajan, "Multisensor-multitarget bias estimation of asynchronous sensors," in Proc. SPlE, vol. 5429, pp. 105-116, 2004.
[29] X. Lin, Y. Bar-Shalom, and T. Kirubarajan, "Multi sensor multi target bias estimation for general asynchronous sensors," In IEEE Transactions on Aerospace and Electronic Systems, vol. 41, no. 3, pp. 899-921,2005.
[30] D. J. Papageorgiou and J. D. Sergi, "Simultaneous track-to-track association and bias removal using multistart local search," in Proc. IEEE Aerospace Conference, pp. 1-14, 2008.
[31] D. Huang, H. Leung, and E. Bosse, "A pseudo-measurement approach to simultaneous registration and track fusion," in IEEE Transactions on Aerospace and Electronic Systems, vol. 48,no. 3, pp. 2315-2331, 2012.
尽管很多文献都有研究有偏估计及其补偿的方法，仍然存在一种方法仅利用局部航迹估计值和相关的协方差矩来解决有偏估计问题。2013年，E. Taghavi, R. Tharmarasa, T. Kirubarajan等人在文献[32]提出的实际解决方案具有数学合理性和计算可行性。这个新方法是基于在融合中心重构的局部估计的卡尔曼增益，且利用了O.E. Drummond 的Tracklet方法来连续跟新航迹，以此来为有偏估计提供一个低计算量的算法。其最大的贡献是：A)在融合中心重构卡尔曼增益；B）松弛对接受局部估计的约束；C）修正融合中心的局部估计；D）提供一个低计算量的融合航迹。
[32] E. Taghavi, R. Tharmarasa, T. Kirubarajan, et al, “Bias estimation for practical distributed multiradar-multitarget tracking systems,”Information Fusion(FUSION), 2013 16th International Conference on IEEE, pp. 1304-1311, 2013.
万方数据
万方数据
万方数据
万方数据
万方数据
多传感器信息融合方法综述 作者：吴秋轩， 曹广益 作者单位：上海交通大学电子信息与电气工程学院,上海,200030 刊名： 机器人 英文刊名：ROBOT 年，卷(期)：2003,25(z1) 被引用次数：2次 参考文献(5条) 1.周锐;申功勋;房建成基于信息融合的目标图像跟踪 1998(12) 2.张尧庭;桂劲松人工智能中的概率统计方法 1998 3.何友;王国宏;彭应宁多传感器信息融合 2000 4.罗志增;叶明Bayes方法的多感觉信息融合算法及其应用[期刊论文]-传感技术学报 2001(03) 5.张文修;吴伟业;梁吉业粗糙集理论与方法 2001 本文读者也读过(8条) 1.臧大进.严宏凤.王跃才.ZANG Da-jin.YAN Hong-feng.WANG Yue-cai多传感器信息融合技术综述[期刊论文]-工矿自动化2005(6) 2.多传感器信息融合及应用[期刊论文]-电子与信息学报2001,23(2) 3.赵小川.罗庆生.韩宝玲.ZHAO Xiao-chuan.LUO Qing-sheng.HAN Bao-ling机器人多传感器信息融合研究综述[期刊论文]-传感器与微系统2008,27(8) 4.范新南.苏丽媛.郭建甲.FAN Xin-nan.SU Li-yuan.GUO Jian-jia多传感器信息融合综述[期刊论文]-河海大学常州分校学报2005,19(1) 5.咸宝金.陈松涛智能移动机器人多传感器信息融合及应用研究[期刊论文]-宇航计测技术2010,30(2) 6.韩增奇.于俊杰.李宁霞.王朝阳信息融合技术综述[期刊论文]-情报杂志2010,29(z1) 7.肖斌多传感器信息融合及其在工业中的应用[学位论文]2008 8.丁伟.孙华.曾建辉.DING Wei.SUN Hua.ZENG Jian-hui基于多传感器信息融合的移动机器人导航综述[期刊论文]-传感器与微系统2006,25(7) 引证文献(2条) 1.武伟.郭三学基于多传感信息融合的轮胎气压监测系统[期刊论文]-轮胎工业 2006(5) 2.魏东.杨洋.李大寨.宗光华基于多传感器融合的机器人微深度环切[期刊论文]-传感器技术 2005(11) 本文链接：https://www.doczj.com/doc/ba11933144.html,/Periodical_jqr2003z1037.aspx
多聚焦图像融合方法综述 摘要：本文概括了多聚焦图像融合的一些基本概念和相关知识。然后从空域和频域两方面将多聚焦图像融合方法分为两大块，并对这两块所包含的方法进行了简单介绍并对其中小波变换化法进行了详细地阐述。最后提出了一些图像融合方法的评价方法。 关键词：多聚焦图像融合；空域；频域；小波变换法；评价方法 1、引言 按数据融合的处理体系，数据融合可分为：信号级融合、像素级融合、特征级融合和符号级融合。图像融合是数据融合的一个重要分支，是20世纪70年代后期提出的概念。该技术综合了传感器、图像处理、信号处理、计算机和人工智能等现代高新技术。它在遥感图像处理、目标识别、医学、现代航天航空、机器人视觉等方面具有广阔的应用前景。 Pohl和Genderen将图像融合定义为：“图像融合是通过一种特定的方法将两幅或多幅图像合成一幅新图像”，其主要思想是采用一定的方法，把工作于不同波长范围、具有不同成像机理的各种成像传感器对同一场景成像的多幅图像信息合成一幅新的图像。 作为图像融合研究重要内容之一的多聚焦图像融合，是指把用同一个成像设备对某一场景通过改变焦距而得到的两幅或多幅图像中清晰的部分组合成一幅新的图像，便于人们观察或计算机处理。图像融合的方法大体可以分为像素级、特征级、决策级3中，其中，像素级的图像融合精度较高，能够提供其他融合方法所不具备的细节信息，多聚焦融合采用了像素级融合方法，它主要分为空域和频域两大块，即： （1）在空域中，主要是基于图像清晰部分的提取，有梯度差分法，分块法等，其优点是速度快、方法简单，不过融合精确度相对较低，边缘吃力粗糙； （2）在频域中，具有代表性的是分辨方法，其中有拉普拉斯金字塔算法、小波变换法等，多分辨率融合精度比较高，对位置信息的把握较好，不过算法比较复杂，处理速度比较慢。 2、空域中的图像融合 把图像f(x,y)看成一个二维函数，对其进行处理，它包含的算法有逻辑滤波器法、加权平均法、数学形态法、图像代数法、模拟退火法等。 2.1 逻辑滤波器法 最直观的融合方法是两个像素的值进行逻辑运算,如:两个像素的值均大于特定的门限值,
多传感器信息融合
0前言 移动机器人的定位问题是提高移动机器人自主能力的关键问题之一。具体来说，定位是利用先验环境地图信息、机器人位姿的当前估计及传感器的观测值等输入信息，经过一定的处理和变换，产生更加准确地对机器人当前位姿的估计。机器人的定位方式有很多种，如，基于光电寻线的定位、基于声纳的机器人自主定位、基于全景视觉的定位及基于激光测距的定位等。可以看出：机器人的定位方式取决于所采用的传感器。目前，在移动机器人上使用较多的传感器有视觉传感器、里程计和惯导系统、超声传感器、激光测距仪、GPS 定位系统等。其中，视觉传感器具有信息量大、感应时间短的优点，但往往获得的数据噪声大、信息处理时间长；激光传感器在测距范围和方向上具有较高的精度，但价格昂贵；超声波传感器虽然角度分辨力较低，但它处理信息简单、成本低、速度快，因此，在自主移动机器人上得到了广泛的应用；里程计是一种相对定位传感器，它通过累计计算得到定位信息，缺点是存在累计误差问题，因此，可结合绝对定位传感器，如超声传感器等，提供较准确的定位。各传感器都有它自己的局限性，因此，移动机器人往往同时装备多种传感器，各自提供关于机器人定位的消息。目前的趋势是：根据传感器的可靠性。使用不同类型的传感器来测量相关数据。本文采用扩展卡尔曼滤波( EKF) 技术，将里程计和超声波传感器所提供的数据进行融合定位。 1 机器人运动模型的建立 由于移动机器人机构复杂，为了便于构造运动学模型与规划控制机器人的位姿，本文选择两轮驱动小车作为运动平台。将整个机器人本体看作一个刚体，车轮视为刚性轮，并在运动不是太快而转弯半径较大时，不考虑车轮与地面侧向滑动的情况，其简化运动学模型如图1 所示。
第三届中国信息融合大会 中国 西安 2011.08 ———————————————————— 基金项目：航空基金项目，批准号：20090853013，西北工业大学校翱翔之星计划；西北工业大学基础研究基金：JC201015 多传感器航迹融合算法综述 张 伟，兰 华，杨 峰，梁 彦 （西北工业大学自动化学院，陕西 西安，710072） 摘 要：航迹融合是多传感器融合的一个重要组成部分，也是多传感器融合领域发展最快的方向之一。本文论述了航迹融合理论发展，以局部航迹估计误差的相关性为研究对象，详细讨论了几种主流航迹融合算法，包括简单凸组合、修正互协方差、不带反馈和带反馈的最优分布式融合、协方差交集、最优线性无偏估计以及自适应航迹融合等算法，分析并比较了各算法的特点、性能及应用。 关键词：多传感器；航迹融合；误差相关性 Approaches to Mutisensor Track-to-Track Fusion ：A Survey ZHANG Wei, LAN Hua, YANG Feng, LIANG Yan (College of Automation, Northwestern Polytechnical University, Xi’an Shannxi 710072, P .R. China) Abstract : Track-to-track fusion is an important part of multisensor fusion and is also one of the most rapidly developing branches of the multisensor fusion field. Various mainstream track-to-track fusion algorithms, including covariance convex algorithm, Bar Shalom-Campo algorithm, optimal distributed fusion without feedback, optimal distributed fusion with feedback, covariance intersection algorithm, best linear unbiased estimation algorithm and adaptive fusion algorithm, are investigated in detail, according to the correlation between local estimate errors. The performance of various algorithms and the weaknesses and strengths of the approaches in the context of different applications are analyzed and compared in this paper. Keywords ：Multisensor ; track-to-track fusion; error correlation 0引 言 在一个分布式多传感器环境中，每个传感器对于目标进行探测和跟踪的过程都是独立的，航迹关联关心的是如何判断从不同传感器获得的两条航迹是否对应于同一个目标。当确认两条航迹来自同一个目标后，接下来的问题是如何将这两条航迹的估计结果融合在一起，这就是航迹融合问题[1] 。 在航迹关联与航迹融合的问题中，由于参与融合的局部航迹之间存在误差相关性，从而使得航迹融合问题变得复杂。航迹融合中的误差相关性可以分为两类，一类是各局部状态估计之间由于共同的过程噪声、相关的量测噪声以及共同的先验估计而产生的 误差相关性；另一类是当融合中心具备记忆能力并存在多条传感器至融合中心的信息传播途径，局部状态（先验）估计与全局状态（先验）估计之间也存在有相关性[2]。因此，对局部航迹之间误差相关性的分析是航迹融合的基础和关键。在航迹融合的发展过程中，对误差相关性不同处理方式一直是航迹融合算法发展的主轴。 早期的航迹融合算法假设局部航迹之间的估计误差是独立的[3][4]，文献[5,6]首次考虑了由于相同过程噪声所导致的航迹误差相关性，并且分别给出了两传感器的最优关联和融合算法，文献[7]首次给出了多传感器最优估计的方法。一般的航迹关联和融合算法都需要计算它们之间的互协方差矩阵，
多传感器信息融合技术论文多传感器信息融合技 术论文阐述了多传感器信息融合的定义、原理、分类和结构，分析了多传感器信息融合的特点及其研究方向多传感器信息融合技术论文【1】关键词：多传感器信息融合研究方向 1 、多传感器信息融合的定义多传感器信息融合也称为信息融合或数据融合，指的是对不同知识源和多个传感器所获得的信息进行综合处理，消除多传感器信息之间可能存在的冗余和矛盾，利用信息互补，降低不确定性，以形成对系统环境相对完整一致的理解，从而提高智能系统决策和规划的科学性、反应的快速性和正确性，进而降低决策风险的过程。 由其定义可见，多传感器信息融合避免了单一传感器的局限性，可以获取更多信息，得出更为准确、可靠的结论。 2 、多传感器信息融合的原理多传感器信息融合是人类和其他生物系统中普遍存在的一种基本功能。如果把单传感器信号处理或低层次的数据处理方式看作是对人脑信息处理的一种低水平模仿，那么多传感器信息融合就是对人脑信息处理的一种高水平模仿。 多传感器信息融合的基本原理就像人脑综合处理信息的过程一样，它充分利用多个传感器资源，通过对这些传感器及其观测信息的合理支配和使用，把多个传感器在时间或空间上的冗余或互补信息依据某种准 则来进行组合，以获得被测对象的一致性解释或描述[1] 。 3 、多传感器信息融合的分类 信息的数据融合是对多源数据进行多级处理，每一级处理都代表了
对原始数据的不同程度的抽象化，它包括对数据的检测、关联、估计和组合等处理。信息融合按其在传感器信息处理层次中的抽象程度，可以分为三个层次：像素层融合、特征层融合及决策层融合[2] 。 3.1 像素层融合它是最低层次的融合，是在采集到的传感器的原始信息层次上（未经处理或只做很少的处理）进行融合，在各种传感器的原始测报信息未经预处理之前就进行信息的综合和分析。其优点是保持了尽可能多的战场信息; 其缺点是处理的信息量大，所需时间长，实时性差。 3.2 特征层融合属于融合的中间层次，兼顾了数据层和决策层的优点。它利用从传感器的原始信息中提取的特征信息进行综合分析和处理。也就是说，每种传感器提供从观测数据中提取的有代表性的特征，这些特征融合成单一的特征向量，然后运用模式识别的方法进行处理。这种方法对通信带宽的要求较低，但由于数据的丢失使其准确性有所下降。 3.3 决策层融合指在每个传感器对目标做出识别后，将多个传感器的识别结果进行融合。这一层融合是在高层次上进行的，融合的结果为指挥控制决策提供依据。 决策层融合的优点是：具有很高的灵活性，系统对信息传输带宽要求较低; 能有效地融合反映环境或目标各个侧面的不同类型信息，具有很强的容错性;通信容量小，抗干扰能力强; 对传感器的依赖性小，传感器可以是异质的; 融合中心处理代价低。 4 、多传感器信息融合的融合结构多传感器信息融合通常是在一个
多传感器数据融合技术的理论及应用 张宁110101256 摘要：多传感器数据融合技术是一门新兴前沿技术。近年来，多传感器数据融合技术已经受到广泛关注，它的理论和方法已经被应用到许多研究领域。本文主要论述了多传感器数据融合的基本概念、工作原理、数据融合特点与结构、数据融合方法及其应用领域，并总结了当前数据融合研究中存在的主要问题及其发展趋势。 关键词：多传感器；数据融合；融合方法 1引言 多传感器数据融合是一个新兴的研究领域，是针对一个系统使用多种传感器这一特定问题而展开的一种关于数据处理的研究。多传感器数据融合技术是近几年来发展起来的一门实践性较强的应用技术，是多学科交叉的新技术，涉及到信号处理、概率统计、信息论、模式识别、人工智能、模糊数学等理论。近年来，多传感器数据融合技术无论在军事还是民事领域的应用都极为广泛。多传感器数据融合技术已成为军事、工业和高技术开发等多方面关心的问题。这一技术广泛应用于复杂工业过程控制、机器人、自动目标识别、交通管制、惯性导航、海洋监视和管理、农业、医疗诊断、模式识别等领域。实践证明：与单传感器系统相比，运用多传感器数据融合技术在解决探测、跟踪和目标识别等问题方面，能够增强系统生存能力，提高整个系统的可靠性和鲁棒性，增强数据的可信度，并提高精度，扩展整个系统的时间、空间覆盖率，增加系统的实时性和信息利用率等。 2基本概念及融合原理 2.1多传感器数据融合概念 数据融合又称作信息融合或多传感器数据融合，对数据融合还很难给出一个统一、全面的定义。随着数据融合和计算机应用技术的发展，根据国内外研究成果，多传感器数据融合比较确切的定义可概括为：充分利用不同时间与空间的多传感器数据资源，采用计算机技术对时间序列获得的多传感器观测数据，在一定准则下进行分析、综合、支配和使用，获得对被测对象的一致性解释与描述，进而实现相应的决策和估计，使系统获得比它的各组成部分更充分的信息。
毕业（设计）论文 开题报告 系别自动化系 专业自动化 班级 191102 学生姓名 学号 指导教师 报告日期 2015-3-30
毕业（设计）论文开题报告表 论文题目多传感器图像融合算法研究 学生姓名学号114434 指导教师 题目来源（划√）科研√生产□实验室□专题研究□ 论文类型（划√）设计□论文√其他□ 一、选题的意义 数字图像融合是将两个或者两个以上的传感器在同一时间（或不同时间）获取的关于某个具体场景的图像或者图像序列信息加以综合，以生成一个新的有关此场景的解释，而这个解释是从单一传感器获取的信息中无法得到的。图像融合的目的是减少不确定性，其作用包括：（1）图像增强。通过综合来自多传感器（或者单一传感器在不同时间）的图像，获得比原始图像清晰度更高的新图像。（2）特征提取。通过融合来自多传感器的图像更好地提取图像的特征，如线段，边缘等。（3）去噪。（4）目标识别与跟踪。（5）三维重构。 图像融合技术(Image Fusion Technology)作为多传感器信息融合的一个非常重要的分支——可视信息融合，近二十年来，引起了世界范围的广泛关注和研究。图像融合是一门综合了传感器技术、图像处理、信息处理、计算机和人工智能等多种学科的现代高新技术。图像融合的主要思想是采用一定的算法，把来自多个传感器的多幅图像综合成一幅新图像，使融合后的图像具有更高的可信度，较少的不确定性以及更好的可理解性，融合后的图像比原来的图像更加清晰可靠，易于分辨，最终得到在任何一幅单独的原始图像中无法表现的某些特征，可为分类识别系统提供更加完备的数据集。 图像融合的基本原理就是在对同一目标的采用不同传感器所获得的图像，或者同一传感器在不同时间、不同角度所获得的图像在经过像素级配准之后，利用其在信息表达上的互补性和冗余性，根据一定的融合法则合成一幅满足某种要求的新的图像。因此，图像融合的目的是充分利用多个待融合源图像中包含的冗余信息和互补信息，实现多幅源图像信息的综合，已达到人们的某种需要。 最近这些年来，在军事领域与民事领域的各种各样种类繁多的需求牵引之下，
一、背景介绍： 多传感器数据融合是一种信号处理、辨识方法，可以与神经网络、小波变换、kalman 滤波技术结合进一步得到研究需要的更纯净的有用信号。 多传感器数据融合涉及到多方面的理论和技术，如信号处理、估计理论、不确定性理论、最优化理论、模式识别、神经网络和人工智能等。多传感器数据融合比较确切的定义可概括为：充分利用不同时间与空间的多传感器数据资源，采用计算机技术对按时间序列获得的多传感器观测数据，在一定准则下进行分析、综合、支配和使用，获得对被测对象的一致性解释与描述，进而实现相应的决策和估计，使系统获得比它的各组成部分更充分的信息。 多传感器信息融合技术通过对多个传感器获得的信息进行协调、组合、互补来克服单个传感器的不确定和局限性，并提高系统的有效性能，进而得出比单一传感器测量值更为精确的结果。数据融合就是将来自多个传感器或多源的信息在一定准则下加以自动分析、综合以完成所需的决策和估计任务而进行的信息处理过程。当系统中单个传感器不能提供足够的准确度和可靠性时就采用多传感器数据融合。数据融合技术扩展了时空覆盖范围，改善了系统的可靠性，对目标或事件的确认增加了可信度，减少了信息的模糊性，这是任何单个传感器做不到的。 实践证明：与单传感器系统相比，运用多传感器数据融合技术在解决探测、跟踪和目标识别等问题方面，能够增强系统生存能力，提高整个系统的可靠性和鲁棒性，增强数据的可信度，并提高精度，扩展整个系统的时间、空间覆盖率，增加系统的实时性和信息利用率等。信号级融合方法最简单、最直观方法是加权平均法，该方法将一组传感器提供的冗余信息进行加权平均，结果作为融合值，该方法是一种直接对数据源进行操作的方法。卡尔曼滤波主要用于融合低层次实时动态多传感器冗余数据。该方法用测量模型的统计特性递推，决定统计意义下的最优融合和数据估计。 多传感器数据融合虽然未形成完整的理论体系和有效的融合算法，但在不少应用领域根据各自的具体应用背景，已经提出了许多成熟并且有效的融合方法。多传感器数据融合的常用方法基本上可概括为随机和人工智能两大类，随机类方法有加权平均法、卡尔曼滤波法、多贝叶斯估计法、产生式规则等;而人工智能类则有模糊逻辑理论、神经网络、粗集理论、专家系统等。可以预见，神经网络和人工智能等新概念、新技术在多传感器数据融合中将起到越来越重要的作用。 数据融合存在的问题 (1)尚未建立统一的融合理论和有效广义融合模型及算法； (2)对数据融合的具体方法的研究尚处于初步阶段； (3)还没有很好解决融合系统中的容错性或鲁棒性问题； (4)关联的二义性是数据融合中的主要障碍； (5)数据融合系统的设计还存在许多实际问题。 二、算法介绍： 2.1多传感器数据自适应加权融合估计算法： 设有n 个传感器对某一对象进行测量，如图1 所示，对于不同的传感器都有各自不同的加权因子，我们的思想是在总均方误差最小这一最优条件下，根据各个传感器所得到的测量值以自适应的方式寻找各个传感器所对应的最优加权因子，使融合后的X值达到最优。
原野林宏中国人民解放军61855 部队韩晓静中国人民解放军61741 部队 肖舟旻中国人民解放军重庆通信学院邢劭谦中国人民解放军61855 部队 【摘要】多传感器图像融合的应用表现在多个领域中，航空航天、军事、医疗，以及其他高新技术产业，图像融合条件下，多传感器能够将数字化信号反应在图像中，并把图像特征充分的发挥出来。经多维度、多测度空间处理，多源信息图像的应用功能会愈加丰富、多样，不仅图像的信号层、像素层、特征层能够有机的融合在一起，其还会展现出不同种类、风格的融合图像。 【关键词】多传感器图像融合影响因素应用研究 在光学、电子学、摄影技术，以及传感器技术、计算机技术的多重应用表现下，图像融合这一科研课题迅速发展起来。传感器作为一种检测装置，在信息测量、信号编辑方面拥有强大的功能优势，它不但能在复杂环境下接收图像信号，还能将多重信号一一过滤、整合在一起，形成融合型图像。 一、传感器图像融合技术分类 1、信号https://www.doczj.com/doc/ba11933144.html,层。传感器接收的是源信号，所以相对于信号层的图像融合，与其他种类相比，其图像质感、表现更好，因为首先信号的误差小、传感器信号处理能力强，微小、弱势的信号都可以被检测、处理到。信号层信号会混有随机噪声影响，该信号在估量过程会发生阶段性改变，因此需要精准确定、对比信号频率才行。 2、像素层。像素层图像代表的是不同程度的像素信息内容，与信号信息不同，它具有一定的特征性，多半以图像的形式展现出来。为了让图像能够最真实、细腻的传输信号，传感器会依靠滤波功能，对同种像素级的图像信息源进行映射处理，以谋求图像信息源在融合后产生交互影响，进而的形成丰富多元的融合图像。如果各传感器参加融合的图像具有不同分辨率，则需要在映射处理的基础上，对图像信号源进行细致、精密的对准和校对，从高到底像素级，一步步提取、融合图像信号源的各特征信息。 3、特征层。特征层体现在传感器信息数据的融合特征，与信号层和像素层存在某种联系，信号的原始特征、图像信息源的特征，都能够透过信息的“特殊含义”所展现出来，也就是说，在某特殊区域、特殊范围、特殊时间内，如果要求传感器信息融合处理，那么首当其冲的便会是特征层的信号内容，因为其在边界提取、同密度或同景深区域表示等方面存在较大差异，亦容易被发觉、应用。 二、多传感器图像融合应用研究 本文选择红外图像与可见光图像融合应用为研究对象，探索多传感器是如何实现图像融合的，红外信号具有感光、感温功能，在不同温度梯度环境中，红外图像所表现出来的信号内容是存在明显差异的。可见光图像与其相比，可以展现、表露出诸多图像上的信息细节，如：局部高度、表征状态，以及光感亮度等等。该项技术应用在军事领域，军人要在夜晚的环境中组织进攻，必博闻新闻须通过红外传感器探索、检测周边环境，在将其与可见光图像融合，展现夜晚环境下真实的地区环境状态，使军人犹如在白天作战。 为了进一步丰富红外图像与可见光图像的融合效果，技术人员选择了特征层图像融合技术，它首先利用红外传感器把周边环境的探索信号、内容搜集过来，再由滤波器、信号编辑器、图像处理装置，将其复制粘贴到传统可见光图像中，使检测到的信号发挥图像编辑、处理能力，通过信号的变化、编辑处理，使图像展现可变的几何图形、方向、位置，以及特征的时域范围情境状态。红外传感器检测到的图像数据是信号翻译过来的，所以准度较高，可达到中级，如果精度要求还有待提升，可通过提高红外传感器检索信号的频率和波长，提高图像数据的精度级别。此外，在把红外传感器中的众多图像信号进行压缩处理的过程中，可见光
图像融合算法概述 摘要：详细介绍了像素级图像融合的原理,着重分析总结了目前常用的像素级图像融合的方法和质量评价标准,指出了像素级图像融合技术的最新进展,探讨了像素级图像融合技术的发展趋势。 关键词：图像融合; 多尺度变换; 评价标准 Abstract:This paper introduced the principles based on image fusion at pixel level in detail, analysed synthetically and summed up the present routine algorithm of image fusion at pixel level and evaluation criteria of its quality. It pointed out the recent development of image fusion at pixel level, and discussed the development tendency of technique of image fusion at pixel level. Key words:image fusion; multi-scale transform; evaluation criteria 1.引言： 图像融合是通过一个数学模型把来自不同传感器的多幅图像综合成一幅满足特定应用需求的图像的过程, 从而可以有效地把不同图像传感器的优点结合起来, 提高对图像信息分析和提取的能力[ 1] 。近年来, 图像融合技术广泛地应用于自动目标识别、计算机视觉、遥感、机器人、医学图像处理以及军事应用等领域。图像融合的主要目的是通过对多幅图像间冗余数据的处理来提高图像的可靠性; 通过对多幅图像间互补信息的处理来提高图像的清晰度。根据融合处理所处的阶段不同,图像融合通常可以划分为像素级、特征级和决策级。融合的层次不同, 所采用的算法、适用的范围也不相同。在融合的三个级别中, 像素级作为各级图像融合的基础, 尽可能多地保留了场景的原始信息, 提供其他融合层次所不能提供的丰富、精确、可靠的信息, 有利于图像的进一步分析、处理与理解, 进而提供最优的决策和识别性能. 2.图像融合算法概述 2.1 图像融合算法基本理论
收稿日期:2002203217 作者简介:毛士艺(1935-),男,浙江黄岩人,教授,100083,北京. 多传感器图像融合技术综述 毛士艺 赵 巍 (北京航空航天大学电子工程系) 摘 要:对国内外多传感器图像融合技术的发展状况进行了介绍,描述了 图像融合的主要步骤,概括了目前主要图像融合方法的基本原理,并对各种方法的性能进行了定性分析.给出了评价图像融合效果的标准和方法,指出了图像融合技术的发展方向. 关 键 词:图像处理;图像合成;传感器;图像融合 中图分类号:T N 911.73文献标识码:A 文章编号:100125965(2002)0520512207 近20年,随着传感器技术和计算机计算能力的提高,多传感器图像融合技术的应用越来越广泛.在军事领域,以多传感器图像融合为核心内容的战场感知技术已成为现代战争中最具影响力的军事高科技.20世纪90年代,美国海军在SS N 2 691(孟菲斯)潜艇上安装了第1套图像融合样机,可使操纵手在最佳位置上直接观察到各传感器的全部图像[1],[2].1998年1月7日《防务系统月刊》电子版报道,美国国防部已授予BTG 公司2项合同,其中一项就是美国空军的图像融合设计合同,此系统能给司令部一级的指挥机构和网络提供比较稳定的战场图像.在遥感领域,大量遥感图像的融合为更方便、更全面地认识环境和自然资源提供了可能[3]～[5],其成果广泛应用于大地测绘、植被分类与农作物生长势态评估、天气预报、自然灾害检测等方面.1999年10月4日,由我国和巴西联合研制的“资源一号”卫星发射升空,卫星上安装了我国自行研制的CC D 相机和红外多光谱扫描仪,这两种航天遥感器之间可进行图像融合,大大扩展了卫星的遥感应用范围.在医学成像领域,CT 、MR 和PET 图像的融合提高了计算机辅助诊 断能力[6].2001年11月25日～30日在美国芝加哥召开了每年一度的RS NA 北美放射学会年会,在会议上GE 公司医疗系统部展销了其产品Dis 2covery LS.Discovery LS 是GE 公司于2001年6月 刚推出的最新PET/CT ,是世界上最好的PET 与最高档的多排螺旋CT 的一个完美结合,具有单体PET 不能比拟的优势.它可以完成能量衰减校正、 分子代谢影像(PET )与形态解剖影像(CT )的同机 图像融合,使检查时间成倍地降低.在网络安全领域,多尺度图像融合技术可将任意的图像水印添加到载体图像中,以确保信息安全[7]. 在各个应用领域的需求牵引下,各国学者对多传感器图像融合技术的研究也越来越重视.在多传感器信息融合领域中,图像融合是应用最为广泛,发表文献最多的一个方向.从文献[8]可看出,在参与统计的信息融合文章中,信号层的信息融合文章占53%.同时,我们做了这样一个调查,在Ei C om pendexWeb 数据库中用“image fusion ”作为关键词,检索从1980年到2001年摘要中出现这一词组的文章数目.1980年至1984年,这方面的文章只有4篇;1995年至1999年增加到603篇;2000年和2001年两年就有299篇.从中可以看出国际学术界对图像融合技术的重视程度与日俱增. 为了使国内同行对图像融合技术有一个较为全面的了解,本文在参考国内外文献的基础上,对目前常用的图像融合技术进行了概括和评述.文章首先介绍了图像融合研究的基本内容,将图像融合的概念界定到像素级;接着描述了各种图像融合技术的基本原理,对它们的优缺点进行了定性分析,给出了评价图像融合技术的方法. 1 多传感器图像融合技术研究内容 多传感器图像融合属于多传感器信息融合的范畴,是指将不同传感器获得的同一景物的图像 2002年10月第28卷第5期北京航空航天大学学报 Journal of Beijing University of Aeronautics and Astronautics October 2002V ol.28 N o 15
基于多传感器信息融合的智能机器人 院－系：信息工程与自动化学院 专业：模式识别与智能系统 年级： 2011 级 学生姓名：朱丹 学号： 2011204082 任课教师：黄国勇 2011年11月
摘要 机器人多传感器信息融合是当今科学研究的热点问题。传感器是连接机器人智能处理过程与外界环境的重要纽带，一般智能机器人都配有数个不同种类的传感器。本文主要分析了多传感器系统在机器人当中的重要性和多传感器信息融合的基本原理，并探讨了多传感器信息融合技术在智能机器人中的应用。 关键词：智能机器人、多传感器、信息融合 引言 多传感器、信息融合技术与传统机器人的结合构成了智能机器人。要使机器人拥有智能，对环境变化做出反应，首先必须使机器人具有感知环境的能力。用传感器采集环境信息加以综合处理，控制机器人进行智能作业，更是机器人智能化的重要体现。在以往机器人智能领域的研究中，人们把更多的注意力集中到研究和开发机器人的各种外部传感器上。尽管在现有的智能机器人和自主式系统中，大多数使用了多个不同类型的传感器，但并没有把这些传感器作为—个整体加以分析，更像是—个多传感器的拼合系统。虽然在各自传感器信息处理与分析方面开展了大量富有成效的工作，但由于忽视了多传感器系统的综合分析，对提高智能系统的性能带来了不利影响，效率低下而且速度缓慢。 因此，多传感器信息融合技术较之单一传感器有非常大的数据准确度的优势，已经成为现在机器人研究领域的关键技术。 一、多传感器信息融合的基本原理 多传感器信息融合是人类和其他生物系统中普遍存在的一种基本功能。人类本能地具有将人体的各种功能器官(眼、耳、鼻、四肢)所探测的信息(景物声音、气味和触觉)与先验知识进行综合的能力，以便对周围的环境和正在发生的事件做出估计。这一处理过程是复杂的，也是自适应的，它将各种信息(图像、声音、气味、物理形状、描述)转化成对环境的有价值的解释，这需要大量不同的智能处理，以及适用于解释组合信息含义的知识库。 多传感器信息融合实际上是对人脑综合处理复杂问题的一种功能模拟。在多传感器系统中，各种传感器提供的信息可能具有不同的特征:时变的或者非时变的；实时的或者非实时的；快变的或者缓变的；模糊的或者确定的；精确的或者不完整的；可靠的或者非可靠的；相互支持的或互补的；相互矛盾的或冲突的。 多传感器信息融合的基本原理就像人脑综合处理信息的过程一样，它充分地利用多个传感器资源，通过对各种传感器及其观测信息的合理支配与使用，将各种传感器在空间和时间上的互补与冗余信息依据某种优化准则组合起来，产生对观测环境的一致性解释和描述。信息融合的目标是基于各传感器分离观测信息，通过对信息的优化组合导出更多的有效信息。它的最终目的是利用多个传感器共同或联合操作的优势，来提高整个传感器系统的有效性。
多传感器信息融合学习心得 通过一学期的学习，对多传感器信息融合有了一定的了解，学习了多传感器信息融合中的多种方法，并在小组论题和作业中都有所体现，下面我谈一下自己的学习心得。 一、多传感器信息融合的产生与发展 多传感器信息融合是由美国军方在20世纪70年代提出的，通过对各传感器获得的未知环境特征信息的分析和综合,得到对环境全面、正确的估计,它避免了单一传感器的局限性,可以获取更多信息,得出更为准确、可靠的结论。主要用于对军事目标（舰艇、飞机等）的检测、定位、跟踪和识别，具体应用在海洋监视、空对空或地对空防御系统等。 二、多传感器信息融合主要方法 多传感器信息融合是建立在传统的估计理论和识别算法的基础之上，主要有卡尔曼滤波、贝叶斯理论、D-S证据理论和小波变换等，下面我简单介绍一下各种算法。 1）卡尔曼滤波 卡尔曼滤波器实际上是一个最优化自回归数据处理算法。首先，我们先要引入一个离散控制过程的系统。该系统可用一个线性随机微分方程来描述：X(k)=A X(k-1)+B U(k)+W(k) 再加上系统的测量值： Z(k)=H X(k)+V(k) 上两式子中，X(k)是k时刻的系统状态，U(k)是k时刻对系统的控制量。A 和B是系统参数，对于多模型系统，他们为矩阵。Z(k)是k时刻的测量值，H是测量系统的参数，对于多测量系统，H为矩阵。W(k)和V(k)分别表示过程和测量的噪声。他们被假设成高斯白噪声(White Gaussian Noise)，他们的方差分别是Q，R（这里我们假设他们不随系统状态变化而变化）。 假设现在系统的状态是k，根据系统模型，可以基于系统上一状态而预测出现在状态： X(k|k-1)=A X(k-1|k-1)+B U(k) (1)
多传感器信息融合技术综述 内容摘要：多传感器信息融合技术是一门新兴学科，它的理论和方法已被应用到许多研究领域。本文主要对多传感器信息融合的模型与结构、信息融合的主要技术和方法、信息融合理论体系以及信息融合技术的应用等内容进行了概要介绍和展开了综述。 关键词：多传感器；信息融合；综述 随着传感器技术、数据处理技术、计算机技术、网络通讯技术、人工智能技术和并行计算的软硬件技术等相关技术的发展，多传感器信息融合技术已受到了广泛关注。多传感器信息融合是20世纪80年代出现的一门新兴学科，它首先广泛地应用于军事领域，如海上监视、空－空和地－空防御、战场情报、监视和获取目标及战略预警等，随着科学技术的进步，多传感器信息融合至今已形成和发展成为一门信息综合处理的专门技术，并很快推广应用到工业机器人、智能检测、自动控制、交通管理和医疗诊断等多种领域。我国从20世纪90年代也开始了多传感器信息融合技术的研究和开发工作，并在工程上开展了多传感器识别、定位等同类信息融合的应用系统的开发，现在多传感器信息融合技术越来越受到人们的普遍关注。1多传感器信息融合的概念 在信息融合领域，人们经常提及“多传感器融合”（multi-sensor fusion）、“数据融合”（data fusion）和“信息融合”（information fusion）。实际上它们是有差别的，现在普遍的看法是，多传感器融合包含的内容比较具体和狭窄，至于信息融合和数据融合，有一些学者认为数据融合包含了信息融合，还有一些学者认为信息融合包含了数据融合，而更多的学者把信息融合与数据融合的当作同一概念看待，在不影响应用的前提下，二种提法都是可以的。因此本文统一使用信息融合这一提法。信息融合有多种定义方式，作者认为比较确切的概念为：充分利用不同时间与空间的多传感器信息资源，采用计算机技术对按时序获得的多传感器观测信息在一定准则下加以自动分析、综合、支配和使用，获得对被测对象的一致性解释与描述，以完成所需的决策和估计任务，使系统获得比它的各组成部分更优越的性能。 2 信息融合的模型和结构 2.1 信息融合的模型 信息融合绝大部分的研究都是根据具体问题及其特定对象建立自己的融合层次，针对其在军事上的应用将信息融合划分为检测层、位置层、属性层、态势评估和威胁估计；根据输入输出数据的特征提出了基于输入/输出特征的融合层次化描述等。可见，信息融合层次的划分没有统一标准，根据信息表征的层次，我们将信息融合划分为像素层、特征层和决策层，分别称为像素级融合、特征级融合和决策级融合[1]。一个给定的信息融合系统，可能涉及多个级别数据的输入。 （1）像素级融合见图1，这是最低层次的信息融合。在这种方法中，匹配的传感器数据直接融合，而后对融合的数据进行特征提取和特征说明。传感器的信息融合之后，没有单个处理的信息损失，识别的处理等价于对单个传感器的处理。该层次的信息融合能够提供其它层次上的融合所不具备的细节信息，因此，像素级多传感器处理提供一种最优决策和识别性能。但是，像素级融合要求精确的传感器配准和宽的传输带宽。 （2）特征级融合见图2，这是中间层次的信息融合。在这种方法中，每个传感器观测目标，并对各传感器的观测进行特征提取（如提取形状、边沿、方位信息等），产生特征矢量，而后融合这些特征矢量，并做出基于联合特征矢量的属性说明。在特征级融合中，各个源提供的特征矢量融合到一个综合的特征矢量中，这种融合是比较简单的，该层次的信息融合是像素级融合和更高一级决策级融合的折衷形式，兼容了两者的优缺点，具有较大的灵活性，在许多情况下是很实用的。
遥感图像融合技术的发展现状及趋势 1 引言 多源图像融合属于多传感器信息融合的范畴, 是指将不同传感器获得的同一景物的图像或同一传感器在不同时刻获得的同一景物的图像, 经过相应处理后, 再运用某种融合技术得到一幅合成图像的过程。多幅图像融合可克服单一传感器图像在几何、光谱和空间分辨率等方面存在的局限性和差异性, 提高图像的质量, 从而有利于对物理现象和事件进行定位、识别和解释。与单源遥感图像相比, 多源遥感图像所提供的信息具有冗余性、互补性和合作性。因此,将多源遥感图像各自的优势结合应用, 获得对环境正确的解译是极为重要的。多源遥感图像融合则是富集这些多种传感器遥感信息的最有效途径之一,是现代多源数据处理和分析中非常重要的一步。本文基于遥感图像融合的研究现状、分析了图像融合研究的困境和不足, 最后提出了未来的发展趋势和热点, 以期达到抛砖引玉的作用。 2 遥感图像融合研究现状 随着信息科学技术的发展, 在20 世纪七八十年代诞生了一个称为数据融合的全新概念。这一概念不断扩展, 处理的对象由一般的数据发展到数字图像。1979 年, Daliy 等人首先将雷达图像和LandsatMSS 图像的复合图像应用于地质解译, 被认为是最早的图像
融合。20 世纪80 年代, 图像融合技术逐渐应用到遥感图像的分析和处理中。90年代以后, 图像融合技术成为研究的热点, 并成为很多遥感图像应用的一个重要预处理环节。目前, 遥感图像融合已经发展为像素级、特征级和决策级3个层次, 如表1。需要指出的是, 融合层次并没有划分融合算法严格的界限, 因为本质上各个融合层次都是信息融合的范畴。像素级图像融合技术已被广泛研究和应用, 并取得了一定的成果。特征级融合是一种中等层次的信息融合, 利用从各个传感器图像的原始信息中提取的特征信息,进行综合分析及融合处理, 不仅增加从图像中提取特征信息的可能性, 还可能获取一些有用的复合特征, 尤其是边缘、角、纹理、相似亮度区域、相似景深区等。在特征级融合中, 对图像配准的要求不如像素级图像融合对配准要求那么严格。决策级图像融合是一种更高层次的信息融合, 其结果将为各种控制或决策提供依据。在进行融合处理前, 先对图像进行预处理、特征提取、识别或判决, 建立对同一目标的初步判决和结论, 然后对各个图像的决策进行相关处理, 最后进行决策级的融合。从特点来看,不同层次的融合各有优缺点, 难以在信息量和算法效率方面都同时满足需求。 表一:遥感图像融合三个层次的对比 融合层次融合算法特点
多传感器融合方法 一、 数学知识 1、 期望 定义1设X 是离散型随机变量，它的概率函数是：k k ,1,2,P X X p k === （） 如果1k k k x p ∞ =∑有限，定义X 的数学期望 ()1 k k k E X x p +∞ ==∑ 定义2设X 是连续型随机变量，其密度函数为()f x ，如果()x f x ∞ -∞ ?有限，定 义X 的数学期望为 ()()E x xf x dx +∞-∞ =? 2、 条件数学期望 定义X 在Y y =的条件下的条件分布的数学期望称为X 在Y y =的条件下的条件期望。 当(),X Y 为离散随机向量时 ()()||i i i E X Y y x P X x Y y ====∑ 当(),X Y 为连续随机向量时 ()()|y ||x E X Y y xp x y dx +∞-∞ ==? 3、 贝叶斯公式 定义设Ω为试验E 的样本空间，B 为E 的事件，12,,n A A A 为Ω的一个划分，且 ()0P B >，()()01,2,,i P A i n >= ，则
()()() ()() 1 ||,1,2,|i i i n j j j P B A P A P A B i n P B A P A == =∑ 称此为贝叶斯公式。 4、 贝叶斯估计 期望损失：??(|)(,)(|)R x p x d θλθθθθΘ =? 损失函数：?(,)λθ θ，把θ估计为?θ所造成的损失 常用损失函数：2??(,)()λθ θθθ=-，平方误差损失函数 如果采用平方误差损失函数，则θ的贝叶斯估计量?θ是在给定x 时θ的条件期望，即： []?|(|)E x p x d θθθθθΘ ==? 同理可得到，在给定样本集χ下，的贝叶斯估计是： []?|(|)E p d θθχθθχθΘ ==? 求贝叶斯估计的方法：（平方误差损失下） ● 确定θ的先验分布()p θ ● 求样本集的联合分布 1(|)(|)N i i p p x θχθ==∏ ● 求的后验概率分布 (|)() (|)(|)()p p p p p d χθθθχχθθθ Θ = ? ● 求的贝叶斯估计量 ?(|)p d θθθχθΘ =? Gaussian 情况，仅参数θμ=未知 给定样本集χ，已知随机变量()2~,k x N μσ均值未知而方差已知。均值变量