1、第第9章章 多传感器信息融合技术多传感器信息融合技术n信息融合的理论基础信息融合的理论基础n信息融合系统的功能模型信息融合系统的功能模型n多传感器目标识别的信息融合方法多传感器目标识别的信息融合方法n多传感器目标检测基础多传感器目标检测基础n信息融合技术的应用信息融合技术的应用第第9章章 多传感器信息融合技术多传感器信息融合技术 本章主要介绍多传感器信息融合的概本章主要介绍多传感器信息融合的概念、基本原理、层次结构、目标识别的信念、基本原理、层次结构、目标识别的信息融合方法、目标检测的基本理论及在实息融合方法、目标检测的基本理论及在实际中的应用际中的应用 9.1 信息融合的理论基础信息融合的理
2、论基础 n9.1.1 信息融合的目的和意义信息融合的目的和意义n代表性的定义为:利用计算机技术对按时序获得代表性的定义为:利用计算机技术对按时序获得的若干传感器的观测信息在一定准则下加以自动的若干传感器的观测信息在一定准则下加以自动分析、优化综合,为完成所需要的决策和估计任分析、优化综合,为完成所需要的决策和估计任务而进行的信息处理过程。务而进行的信息处理过程。n另一个定义为:信息融合是一种通过集成多知识另一个定义为:信息融合是一种通过集成多知识源的信息和不同专家的意见以产生一个决策的方源的信息和不同专家的意见以产生一个决策的方法,完成对目标的识别、分类与决策任务。即对法,完成对目标的识别、分
3、类与决策任务。即对多源信息进行综合处理,从而得出更为准确、可多源信息进行综合处理,从而得出更为准确、可靠的结论。靠的结论。9.1 信息融合的理论基础信息融合的理论基础n多传感器信息融合的目的:将多个传感器在时间和空多传感器信息融合的目的:将多个传感器在时间和空间上的互补或冗余按照某种算法或准则进行综合,解间上的互补或冗余按照某种算法或准则进行综合,解决探测、跟踪和目标识别等方面问题,增加了判断和决探测、跟踪和目标识别等方面问题,增加了判断和估计的精确性、可靠性和在对环境下的生存性。估计的精确性、可靠性和在对环境下的生存性。n具有如下优点:具有如下优点:1.增加了系统的生存能力。增加了系统的生存
4、能力。2.扩展了空间覆盖范围。扩展了空间覆盖范围。3.扩展了时间覆盖范围。扩展了时间覆盖范围。4.提高了可信度。提高了可信度。5.降低了信息的模糊性。降低了信息的模糊性。6.改善了探测性能。改善了探测性能。7.提高了空间分辨率。提高了空间分辨率。8.增加增加了测量空间的维数。了测量空间的维数。9.1 信息融合的理论基础信息融合的理论基础n9.1.2 信息融合的基本原理信息融合的基本原理 n多传感器信息融合的基本原理就像人脑综合处理信息多传感器信息融合的基本原理就像人脑综合处理信息的过程一样,它充分地利用多个传感器资源,通过对的过程一样,它充分地利用多个传感器资源,通过对各种传感器极其观测信息的
5、合理支配与使用,将各种各种传感器极其观测信息的合理支配与使用,将各种传感器在空间和时间上的互补与冗余信息依据某种优传感器在空间和时间上的互补与冗余信息依据某种优化准则组合起来,产生对观测环境的一致性解释和描化准则组合起来,产生对观测环境的一致性解释和描述。述。n信息融合的目标是基于各传感器分离观测信息,通过信息融合的目标是基于各传感器分离观测信息,通过对信息的优化组合导出更多的有效信息。对信息的优化组合导出更多的有效信息。它最终目的它最终目的是利用多个传感器共同或联合操作的优势,来提高整是利用多个传感器共同或联合操作的优势,来提高整个传感器系统的有效性。个传感器系统的有效性。9.2 信息融合系
6、统的功能模型信息融合系统的功能模型 一种广义的信息融合功能分级法,从信息融合一种广义的信息融合功能分级法,从信息融合功能角度出发把它分为五个层次:检测级融合、位功能角度出发把它分为五个层次:检测级融合、位置级(目标跟踪级)融合、属性级置级(目标跟踪级)融合、属性级(目标识别级目标识别级)融融合、态势评估与威胁估计。合、态势评估与威胁估计。n9.2.1 检测级融合检测级融合 检测级融合是直接在多传感器分布检测系统中检测级融合是直接在多传感器分布检测系统中检测判决或信号层上进行的融合。检测判决或信号层上进行的融合。从分布检测的角度看,检测级融合的结构模型从分布检测的角度看,检测级融合的结构模型主要
7、有五种:分散式结构、并行结构、串行结构、主要有五种:分散式结构、并行结构、串行结构、树状结构和带反馈并行结构。树状结构和带反馈并行结构。9.2 信息融合系统的功能模型信息融合系统的功能模型n一、分散式结构一、分散式结构 二、并行结构二、并行结构 9.2 信息融合系统的功能模型信息融合系统的功能模型n 三、串行结构三、串行结构 四、树状结构四、树状结构 9.2 信息融合系统的功能模型信息融合系统的功能模型n五、带反馈并行结构五、带反馈并行结构 9.2 信息融合系统的功能模型信息融合系统的功能模型n9.2.2 位置级融合位置级融合 n位置级融合是直接在传感器的观测报告或测量位置级融合是直接在传感器
8、的观测报告或测量点迹或传感器的状态估计上进行的融合,包括点迹或传感器的状态估计上进行的融合,包括时间时间 和空间上的融合,是跟踪级的融合,属和空间上的融合,是跟踪级的融合,属于中间层次,也是最重要的融合。于中间层次,也是最重要的融合。n在多传感器跟踪系统中,主要有集中式、分布在多传感器跟踪系统中,主要有集中式、分布 式和混合式结构。式和混合式结构。n一、集中式结构一、集中式结构 9.2 信息融合系统的功能模型信息融合系统的功能模型n二、分布式结构二、分布式结构 9.2 信息融合系统的功能模型信息融合系统的功能模型n 三、混合式结构三、混合式结构 9.2 信息融合系统的功能模型信息融合系统的功能
9、模型n9.2.3 属性级融合属性级融合n目标识别融合可分为三种结构层次目标识别融合可分为三种结构层次:数据层融数据层融合、特征层融合和决策层融合。合、特征层融合和决策层融合。n一、数据层融合一、数据层融合 9.2 信息融合系统的功能模型信息融合系统的功能模型n二、特征层融合二、特征层融合 9.2 信息融合系统的功能模型信息融合系统的功能模型n三、决策层融合三、决策层融合 9.2 信息融合系统的功能模型信息融合系统的功能模型n9.2.4 态势评估与威胁估计态势评估与威胁估计 n态势评估与威胁估计是信息融合的第四层和第五层。态势评估与威胁估计是信息融合的第四层和第五层。态势评估包括态势的提取和评估
10、,态势的提取是态势评估包括态势的提取和评估,态势的提取是指由不完整的数据集合建立一般化的态势表示,从而指由不完整的数据集合建立一般化的态势表示,从而对前几级处理产生的兵力分布情况有一个合理的解释。对前几级处理产生的兵力分布情况有一个合理的解释。态势评估是通过对复杂战场环境的正确分析和表达,态势评估是通过对复杂战场环境的正确分析和表达,导出敌我双方兵力的分布推断,绘出意图、告警、行导出敌我双方兵力的分布推断,绘出意图、告警、行动计划与结果。态势评估是对战场上战斗力量分配情动计划与结果。态势评估是对战场上战斗力量分配情况的评价过程。况的评价过程。9.2 信息融合系统的功能模型信息融合系统的功能模型
11、n威胁估计是威胁程度处理,是通过将敌方的威威胁估计是威胁程度处理,是通过将敌方的威胁能力,以及敌人的企图进行量化来实现的,胁能力,以及敌人的企图进行量化来实现的,即从我军有效地打击敌人的能力出发,估价敌即从我军有效地打击敌人的能力出发,估价敌方的杀伤力和危险性,同时还要估计我方的薄方的杀伤力和危险性,同时还要估计我方的薄弱环节,并对敌方的意图给出提示和告警。威弱环节,并对敌方的意图给出提示和告警。威胁估计也包括对我方薄弱环节的估计,以及通胁估计也包括对我方薄弱环节的估计,以及通过对技术、军事条令数据库的搜索来确定敌方过对技术、军事条令数据库的搜索来确定敌方意图。意图。9.3 多传感器目标识别的
12、信息融合方法多传感器目标识别的信息融合方法 主要有物理模型方法、参数分类方法和基主要有物理模型方法、参数分类方法和基于知识的方法。于知识的方法。n9.3.1 物理模型方法物理模型方法 这种方法根据物理模型直接计算实体特征这种方法根据物理模型直接计算实体特征(时间域、信号、数据、频域数据或图像),(时间域、信号、数据、频域数据或图像),如图所示。如图所示。9.3 多传感器目标识别的信息融合方法多传感器目标识别的信息融合方法n9.3.2 参数分类方法参数分类方法 可进一步分为统计方法和基于信息技术的方法可进一步分为统计方法和基于信息技术的方法 一、统计方法一、统计方法 统计方法包括经典推理、统计方
13、法包括经典推理、Bayes推理和推理和D-S证据理论。证据理论。1.经典推理经典推理 经典推理描述的是在给出目标存在的假设条件下,经典推理描述的是在给出目标存在的假设条件下,所观测到的数据与标识相关的概率。所观测到的数据与标识相关的概率。2.Bayes推理推理 Bayes推理基于推理基于Bayes 统计理论,是统计目标识统计理论,是统计目标识别的基本方法。别的基本方法。9.3 多传感器目标识别的信息融合方法多传感器目标识别的信息融合方法n Bayes融合识别算法如图所示融合识别算法如图所示 9.3 多传感器目标识别的信息融合方法多传感器目标识别的信息融合方法 3.D-S证据理论证据理论 D-S
14、证据理论是对证据理论是对Bayes理论的推广,理论的推广,基础是证据的合并和可信度函数的更新。基础是证据的合并和可信度函数的更新。n二、基于信息技术的方法二、基于信息技术的方法 基于信息技术的方法是使用参数数据基于信息技术的方法是使用参数数据与得出的标识说明之间的一个变换或映射。与得出的标识说明之间的一个变换或映射。主要的方法有参数模板、聚类分析、自适主要的方法有参数模板、聚类分析、自适应神经网络、表决法和熵法等。应神经网络、表决法和熵法等。9.3 多传感器目标识别的信息融合方法多传感器目标识别的信息融合方法n9.3.3 基于知识的方法基于知识的方法 基于知识的方法有两个方面的内容:一方基于知
15、识的方法有两个方面的内容:一方面是表示知识的技术;另一方面是处信息以得面是表示知识的技术;另一方面是处信息以得出结论的推理方法。原理如图所示。出结论的推理方法。原理如图所示。9.4 多传感器目标检测基础多传感器目标检测基础 n9.4.1 集中式目标检测集中式目标检测 9.4 多传感器目标检测基础多传感器目标检测基础n9.4.2 分布式目标检测分布式目标检测 n一、问题的描述一、问题的描述 n二、融合中心的数据融合方法二、融合中心的数据融合方法 9.5 信息融合技术的应用信息融合技术的应用 n9.5.1 信息融合的民事应用领域信息融合的民事应用领域 一、工业过程监视及工业机器人一、工业过程监视及
16、工业机器人 二、遥感与金融系统二、遥感与金融系统 三、空中交通管制与病人照顾系统三、空中交通管制与病人照顾系统 四、船舶避碰与交通管制系统四、船舶避碰与交通管制系统 五、生物特征的身份识别五、生物特征的身份识别9.5 信息融合技术的应用信息融合技术的应用n9.5.2 信息融合技术在军事上的应用信息融合技术在军事上的应用 1.采用多传感器的自主式武器系统和自备式运采用多传感器的自主式武器系统和自备式运 载器。载器。2.采用单一武器平台,如舰艇、机载空中警戒、地面站、采用单一武器平台,如舰艇、机载空中警戒、地面站、航天目标监视或分布式多传感器网络的广域监视系统。航天目标监视或分布式多传感器网络的广域监视系统。3.采用多传感器进行截获、跟踪和指挥制导的火控系统。采用多传感器进行截获、跟踪和指挥制导的火控系统。4.情报收集系统。情报收集系统。5.敌情指示和预警系统,其任务是对威胁和敌方企图进敌情指示和预警系统,其任务是对威胁和敌方企图进行估计。行估计。6.军事军事力量的指挥和控制站。力量的指挥和控制站。