一种结合显著性区域检测的多波段图像融合方法和系统

1.本发明涉及图像处理和计算机视觉技术领域，具体而言，涉及一种结合显著性区域检测的多波段图像融合方法和系统。


背景技术：

2.图像融合的目标是从多种源图像中生成一幅包含重要和有意义信息的融合图像，提高对场景描述的完整性和准确性。和任意单一源图像相比，融合图像能为人类视觉系统或其他应用提供更为全面的信息。在众多种类的图像融合中，红外与可见光图像融合是其中的重要分支，原因在于可见光图像与红外图像具有很强互补性。
3.红外与可见光图像融合的关键是将尽可能多的目标强度信息和细节信息传递到融合图像中。目前，红外与可见光图像融合算法有很多，其中基于多尺度变换的融合算法和基于显著区域分析的融合算法是两类很重要的算法。基于多尺度变换融合方法将源图像分解为若干层，根据特定规则融合相应的层，最后重建目标图像。其中以双边滤波器，引导滤波器，加权最小二乘法滤波器及其变形的边缘保持滤波器得到广泛应用。对于显著性检测的融合算法，显著辐射目标是红外图像中最有价值的特征，需要整体保存到融合图像中，基于显著性的融合方法可以突出物体区域的完整性，并改善融合图像的视觉质量。
4.然而，大多数基于多尺度变换的方法保留了大量细节和视觉信息，失真较小，但图像细节可能会变得模糊。一方面，由于图像滤波器和融合权重选择不当，这些融合规则更有可能在图像边缘产生伪影，并损失红外突出目标的辐射亮度。另一方面，许多方法都非常注重细节信息的提取，而忽视了目标热信息的保存。
5.有鉴于此，本发明提出了一种结合显著性区域检测的多波段图像融合方法和系统，以克服光晕效应和梯度伪影问题，有效增强源图像的对比度和细节信息。


技术实现要素：

6.本发明的目的在于提供一种结合显著性区域检测的多波段图像融合方法，包括：对红外图像进行增强处理，得到增强红外图像；分别对所述增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层；对所述红外基础层和所述可见光基础层进行融合，得到融合基础层；基于细节权重图，对所述红外细节层和所述可见光细节层进行融合，得到融合细节层；基于显著权重图，对所述红外显著层和所述可见光显著层进行融合，得到融合显著层；对所述融合基础层、所述融合细节层和所述融合显著层进行变换，得到融合图像。
7.进一步的，所述增强处理为增强所述红外图像的热信息；其中，所述增强所述红外图像的热信息的计算公式为：
其中，表示增强热信息后得到的增强红外图像；表示所述红外图像中坐标处的像素值；表示预定义的领域运算模板大小；表示图像大小；表示存储在映射矩阵中的像素块的平均值；和分别表示整个红外图像和可见光图像的平均像素值。
8.进一步的，得到可见光基础层和红外基础层的计算公式为：其中，表示滤波后的可见光基础层；表示滤波后的红外基础层；表示每个图像块的保存因子，；表示以像素k为中心的领域运算模板；表示以像素k为中心的滤波器定义的局部域；表示第i个像素的强度；表示滤波器定义的局部域；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像。
9.进一步的，红外细节层和可见光细节层通过计算原始图像与基础层的差值得到；其中，计算所述细节层的公式为：其中，表示可见光细节层；表示红外细节层；表示所述原始图像。
10.进一步的，得到红外显著层和可见光显著层的计算公式为：其中，表示可见光显著层；表示红外显著层；表示像素窗口面积；表示待处理图像；m和n分别表示所述待处理图像的横坐标和纵坐标；表示像素点的横坐标；表示像素点的纵坐标；表示横轴方向的迁移距离；表示纵轴方向的迁移距离；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像。
11.进一步的，所述得到融合基础层的计算公式为：
其中，表示所述融合基础层；表示所述红外基础层；表示所述可见光基础层。
12.进一步的，所述细节权重图通过提取细节层的特征得到，提取所述细节层的特征的计算公式为：其中，表示细节层的特征；表示图像中像素点的坐标；表示小波分解尺度；表示基于频率扩展的权重因子；表示坐标处的振幅；表示坐标处的相位；表示常数；表示噪声阈值表示；表示封闭量，当其值为正时，封闭量等于自身，否则等于0；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像；得到细节权重图的计算公式为：重图的计算公式为：其中，表示红外细节权重图；表示可见光细节权重图；表示红外细节层的特征；表示可见光细节层的特征；所述得到融合细节层的计算公式为：其中，表示所述融合细节层；表示红外细节层；表示可见光细节层。
13.进一步的，所述显著权重图的计算公式为：其中，表示所述显著权重图；表示可变函数参数；表示显著层的归一化形式；
所述得到融合细节层的计算公式为：其中，表示所述融合显著层；表示所述红外显著层；表示所述可见光显著层。
14.进一步的，所述得到融合图像的计算公式为：其中，表示所述融合图像；表示所述融合基础层；表示所述融合细节层；表示所述融合显著层。
15.本发明的目的在于提供一种结合显著性区域检测的多波段图像融合系统，包括信息处理模块和信息输出模块；所述信息处理模块包括增强处理单元、分解单元、基础层融合单元、细节层融合单元、显著层融合单元和图像融合单元；所述增强处理单元用于对红外图像进行增强处理，得到增强红外图像；所述分解单元用于分别对所述增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层；所述基础层融合单元用于对所述红外基础层和所述可见光基础层进行融合，得到融合基础层；所述细节层融合单元用于基于细节权重图，对所述红外细节层和所述可见光细节层进行融合，得到融合细节层；所述显著层融合单元用于基于显著权重图，对所述红外显著层和所述可见光显著层进行融合，得到融合显著层；所述图像融合单元用于对所述融合基础层、所述融合细节层和所述融合显著层进行变换，得到融合图像；所述信息输出模块用于输出所述融合图像。
16.本发明实施例的技术方案至少具有如下优点和有益效果：通过动态阈值热信息滤波器(dttif)调整热目标和背景区域的像素值，扩大热目标与背景区域之间的相对像素差，可以实现热目标增强。其次，采用最大对称环绕显著性检测和子窗口方差滤波器（svf）将源图像分解为显著层、细节层和基础层，使融合图像中的目标边缘不会模糊，从而确保源图像中的显著区域能够得到很好的保留。基于相位一致性（pc）的细节层权重构造方法对噪声和照明不良具有鲁棒性，可以更好保留细节信息。引入的非线性函数可以突出图像成分中较大的显著性。通过本发明技术方案能较好地增强源图像的对比度和细节，此外，还可以有效避免融合过程中热信息丢失的风险。
附图说明
17.图1为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合方法的示例性流程图；图2为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合方法的示例性示意图；
图3为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合系统的示例性模块图；图4为本发明一些实施例提供的获取可见光图像和红外图像的图像采集装置的示例性装置图；图标：1-主镜，2-次镜，3-分光板，4-反射镜，5-可见光+近红外成像透镜组，6-长波红外成像透镜组，7-中波红外成像透镜组，8-中红外ccd摄像机，9-可见光+近红外ccd摄像机，10-长波红外ccd摄像机。
具体实施方式
18.为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
19.图1为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合方法的示例性流程图。在一些实施例中，流程100可以由系统300执行。如图1所示，流程100包括以下步骤：步骤s110，获取可见光图像和不同波段的红外图像，并对可见光图像和红外图像进行预处理。在一些实施例中，步骤s110可以由图像采集模块310执行。
20.不同波段的红外图像可以包括近红外波段图像、中红外波段图像和长红外波段图像。在一些实施例中，可以同时获取同一视野的可见光图像和不同波段的红外图像。例如，使用图4所示的图像采集装置400获取，该图像采集装置可以通过一次拍照获取到可见光图像和其对应的不同波段的红外图像。
21.预处理可以是指分别对可见光图像和不同波段的红外图像进行处理，以使其符合后续处理要求。预处理的方式可以包括但不限于裁剪图像、对图像进行灰度处理等中的一种或多种。
22.步骤s120，对红外图像进行增强处理，得到增强红外图像。在一些实施例中，步骤s120可以由增强处理单元320-1执行。
23.增强红外图像可以是指增强图中热信息后得到的红外图像。在一些实施例中，可以通过动态阈值热信息滤波器（dttif）增强红外图像的热信息，以得到增强红外图像。
24.在一些实施例中，增强红外图像的热信息的计算公式为：其中，表示增强红外图像；表示红外图像中坐标处的像素值；表示预定义的领域运算模板大小；表示图像大小，例如，可见光图像或红外图像的长和宽；表示存储在映射矩阵中的像素块的平
均值，例如，运算模板大小可以被预先被定义为个像素点，将该领域运算模板映射到红外图像中可以得到映射矩阵为的像素块，对该像素块中81个像素点的亮度取平均值可以得到映射矩阵中像素块的平均值；和分别表示整个红外图像和可见光图像的平均像素值，例如，对红外图像或可见光图像中的每个像素点的亮度取平均值。
25.步骤s130，分别对增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层。在一些实施例中，步骤s130可以由分解单元320-2执行。
26.红外基础层可以是指保有增强红外图像中基础信息的图层。红外细节层可以是指保有增强红外图像中细节信息的图层。红外显著层可以是指保有增强红外图像中显著信息的图层。可见光基础层可以是指保有可见光图像中基础信息的图层。可见光细节层可以是指保有可见光图像中细节信息的图层。可见光显著层可以是指保有可见光图像中显著信息的图层。在一些实施例中，可以通过子窗口方差滤波器(svf)和最大对称环绕显著性检测(msss)将增强红外图像分解为红外基础层、红外细节层和红外显著层；将可见光图像分解为可见光基础层、可见光细节层和可见光显著层。
27.在一些实施例中，得到基础层（包括可见光基础层和红外基础层）的计算公式为：其中，表示滤波后的基础层，包括红外基础层和可见光基础层，其中，红外基础层至少可以包括近红外波段基础层、中红外波段基础层和长红外波段基础层；表示每个图像块的保存因子，，该因子控制原始图像块的贡献程度；表示以像素k为中心的领域运算模板，例如，领域运算模板可以为的像素块，处于（3,3）位置处的像素点可以被认为是中心像素k，在一些实施例中，中心像素也可以包括多个像素点；表示以像素k为中心的滤波器定义的局部域，例如，以位置为（10,10）的像素点为中心，领域运算模板为的像素块，可以为横坐标为8-12，纵坐标为8-12的正方形像素块；表示第i个像素的强度，例如，第i个像素的亮度值；表示滤波器定义的局部域，例如，的像素块；和为下标，用于表示图像是与可见光图像相关还是与红外图像相关；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像。
28.在一些实施例中，图像块的保存因子的计算公式为：
其中，表示图像的方差值，其中，图像可以包括可见光图像和增强红外图像，图像的确定与i的取值相关；，分别表示a,b,c,d四个子窗口的方差值，表示滤波器窗口中边缘的阈值参数。
29.在一些实施例中，细节层通过计算原始图像与基础层的差值得到；原始图像可以是包括多张增强红外图像和可见光图像，不同的原始图像对应不同的基础层，其中，计算细节层（包括可见光细节层和红外细节层）的公式为：其中，表示细节层；表示原始图像，其中，
“”
表示或。
30.在一些实施例中，得到显著层（包括可见光显著层和红外显著层）的计算公式为：其中，表示显著层；表示像素窗口面积；表示待处理图像，其中，待处理图像可以是指可见光图像和增强红外图像中的一小块图像；m和n分别表示待处理图像的横坐标和纵坐标，例如，待处理图像中心位置处的像素点的坐标可以被认为是待处理图像的坐标；表示像素点的横坐标；表示像素点的纵坐标；表示横轴方向的迁移距离；表示纵轴方向的迁移距离；表示与可见光图像相关的图像；表示与增强红外图像相关的图像。
31.在一些实施例中，像素窗口面积的计算公式为：横轴方向的迁移距离和纵轴方向的迁移距离的计算公式为：其中，表示可见光图像或增强红外图像的宽，表示可见光图像或增强红外图像的高。
32.步骤s140，对红外基础层和可见光基础层进行融合，得到融合基础层。在一些实施例中，步骤s140可以由基础层融合单元320-3执行。
33.融合基础层可以是指融合了红外图像和可见光图像的基础信息的图层。在一些实施例中，可以采用平均融合规则得到融合基础层。其中，得到融合基础层的计算公式为：
其中，表示融合基础层；表示红外基础层；表示可见光基础层。
34.步骤s150，基于细节权重图，对红外细节层和可见光细节层进行融合，得到融合细节层。在一些实施例中，步骤s150可以由细节层融合单元320-4执行。
35.融合细节层可以是指融合了红外图像和可见光图像的细节信息的图层。细节权重图可以是指细节层中每个像素点的权重分布情况。在一些实施例中，可以基于所要提取的细节层的特征，得到细节权重图。其中，提取细节层的特征的计算公式为：其中，表示细节层的特征；表示图像中像素点的坐标；表示小波分解尺度；表示基于频率扩展的权重因子；表示坐标处的振幅；表示坐标处的相位；表示常数；表示噪声阈值表示；表示封闭量，当其值为正时，封闭量等于自身，否则等于0；表示与可见光图像相关的图像；表示与增强红外图像相关的图像。
36.得到细节权重图的计算公式为：得到细节权重图的计算公式为：其中，表示红外细节权重图；表示可见光细节权重图；表示红外细节层的特征；表示可见光细节层的特征。
37.在一些实施例中，可以采用加权平均规则来融合红外细节层和可见光细节层，得到融合细节层，其中，得到融合细节层的计算公式为：其中，表示融合细节层；表示红外细节层；表示可见光细节层。
38.步骤s160，基于显著权重图，对红外显著层和可见光显著层进行融合，得到融合显
著层。在一些实施例中，步骤s160可以由显著层融合单元320-5执行。
39.融合显著层可以是指融合了红外图像和可见光图像的显著信息的图层。显著权重图可以是指显著层中每个像素点的权重分布情况。在一些实施例中，可以通过非线性函数计算得到显著权重图。其中，得到显著权重图的计算公式为：其中，表示显著权重图；表示可变函数参数；表示显著层的归一化形式。显著层的归一化形式的计算公式为：的计算公式为：其中，表示显著层的归一化形式；和分别表示红外显著层和可见光显著层。
40.在一些实施例中，可以采用加权平均规则来融合红外显著层和可见光显著层。其中，得到融合显著层的计算公式为：其中，表示融合显著层；表示红外显著层；表示可见光显著层。
41.步骤s170，对融合基础层、融合细节层和融合显著层进行变换，得到融合图像。在一些实施例中，步骤s170可以由图像融合单元320-6执行。
42.融合图像可以是指进行融合处理后得到的图像，融合图像相对于一般图像能突出物体区域的完整性，并改善图像的视觉质量，且消除伪影等。在一些实施例中，得到融合图像的计算公式为：其中，表示融合图像；表示融合基础层；表示融合细节层；表示融合显著层。
43.图2为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合方法的示例性示意图。如图2所示，示意的流程200的内容可以包括：通过图像采集装置采集可见光图像和多张多个波段的红外图像。然后对采集的可见光图像和多张红外图像进行图像预处理，得到预处理后的可见光图像和多张红外图像。对于预处理后的红外图像，还通过dttif增强多张红外图像的热信息，得到多张增强红外图像。然后对预处理后的可见光图像进行svf处理，得到可见光基础层，并基于可见光基础层和预处理后的可见光图像的差值，得到可见光细节层，最后通过对预处理后的可见光图像进行msss处理，得到可见光显著层。同时，以处理预处理后的可见光图像的方式分别处理多张增强红外图像，得到多张红外基础层、多张红外细节层和多张红外显著层；然后对多张红外基础层和可见光基础层任意两两执行加权平均融合，得到一张融合基础层。对多张红外细节层和可见光细节层任意两两执行加权平均融合，得到一张融合细节层。对多张红外显著层和可见光显著层任意两两执行平均融合，得到一张融合显著层。最后，将融合基础层、融合细节层和融合显著层进行和计算，得到最终的融合图像。
44.图3为本发明一些实施例提供的一种结合显著性区域检测的多波段图像融合系统的示例性模块图。如图3所示，系统300可以包括图像采集模块310，信息处理模块320和信息输出模块330；信息处理模块320包括增强处理单元320-1、分解单元320-2、基础层融合单元320-3、细节层融合单元320-4、显著层融合单元320-5和图像融合单元320-6；图像采集模块310用于采集可见光图像和多张红外图像。关于图像采集模块310的更多内容，参见图1及其相关描述。
45.增强处理单元320-1用于对红外图像进行增强处理，得到增强红外图像。关于增强处理单元320-1的更多内容，参见图1及其相关描述。
46.分解单元320-2用于分别对增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层。关于分解单元320-2的更多内容，参见图1及其相关描述。
47.基础层融合单元320-3用于对红外基础层和可见光基础层进行融合，得到融合基础层。关于基础层融合单元320-3的更多内容，参见图1及其相关描述。
48.细节层融合单元320-4用于基于细节权重图，对红外细节层和可见光细节层进行融合，得到融合细节层。关于细节层融合单元320-4的更多内容，参见图1及其相关描述。
49.显著层融合单元320-5用于基于显著权重图，对红外显著层和可见光显著层进行融合，得到融合显著层。关于显著层融合单元320-5的更多内容，参见图1及其相关描述。
50.图像融合单元320-6用于对融合基础层、融合细节层和融合显著层进行变换，得到融合图像。关于图像融合单元320-6的更多内容，参见图1及其相关描述。
51.信息输出模块330用于输出融合图像。关于信息输出模块330的更多内容，参见图1及其相关描述。
52.图4为本发明一些实施例提供的获取可见光图像和红外图像的图像采集装置的示例性装置图。如图4所示，装置400可以包括主镜1、次镜2、分光板3、反射镜4、可见光+近红外成像透镜组5、长波红外成像透镜组6、中波红外成像透镜组7、中红外ccd摄像机8、可见光+近红外ccd摄像机9和长波红外ccd摄像机10。
53.远距离目标通过次镜2和主镜1到达分光板3和反射镜4，可见光+近红外ccd摄像机
9通过可见光+近红外成像透镜组5获取分光板3反射的远距离目标的可见光图像和近红外波段图像；长波红外ccd摄像机10通过长波红外成像透镜组6获取分光板3反射的远距离目标的长红外波段图像；中红外ccd摄像机8通过中波红外成像透镜组7获取反射镜4反射的远距离目标的中红外波段图像。
54.以上仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

技术特征：
1.一种结合显著性区域检测的多波段图像融合方法，其特征在于，包括：对红外图像进行增强处理，得到增强红外图像；分别对所述增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层；对所述红外基础层和所述可见光基础层进行融合，得到融合基础层；基于细节权重图，对所述红外细节层和所述可见光细节层进行融合，得到融合细节层；基于显著权重图，对所述红外显著层和所述可见光显著层进行融合，得到融合显著层；对所述融合基础层、所述融合细节层和所述融合显著层进行变换，得到融合图像。2.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，所述增强处理为增强所述红外图像的热信息；其中，所述增强所述红外图像的热信息的计算公式为：其中，表示增强热信息后得到的增强红外图像；表示所述红外图像中坐标处的像素值；表示预定义的领域运算模板大小；表示图像大小；表示存储在映射矩阵中的像素块的平均值；和 分别表示整个红外图像和可见光图像的平均像素值。3.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，得到红外基础层和可见光基础层的计算公式为：其中，表示滤波后的可见光基础层；表示滤波后的红外基础层；表示每个图像块的保存因子，；表示以像素k为中心的领域运算模板；表示以像素k为中心的滤波器定义的局部域；表示第i个像素的强度；表示滤波器定义的局部域；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像；表示当i为vis时，计算得到可见光基础层，当i为ir时，计算得到红外基础层。4.根据权利要求3所述的结合显著性区域检测的多波段图像融合方法，其特征在于，红外细节层和可见光细节层通过计算原始图像与基础层的差值得到；其中，计算所述细节层的公式为：
其中，表示可见光细节层；表示红外细节层；表示所述原始图像。5.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，得到红外显著层和可见光显著层的计算公式为：其中，表示可见光显著层；表示红外显著层；表示像素窗口面积；表示待处理图像；m和n分别表示所述待处理图像的横坐标和纵坐标；表示像素点的横坐标；表示像素点的纵坐标；表示横轴方向的迁移距离 ；表示纵轴方向的迁移距离 ；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像。6.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，所述得到融合基础层的计算公式为：其中，表示所述融合基础层；表示所述红外基础层；表示所述可见光基础层。7.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，所述细节权重图通过提取细节层的特征得到，提取所述细节层的特征的计算公式为：其中，表示细节层的特征；表示图像中像素点的坐标；表示小波分解尺度；表示基于频率扩展的权重因子；表示坐标处的振幅；表示坐标处的相位；表示常数；表示噪声阈值表示；表示封闭量，当其值为正时，封闭量等于自身，否则等于0；表示与所述可见光图像相关的图像；表示与所述增强红外图像相关的图像；得到细节权重图的计算公式为：
其中， 表示红外细节权重图；表示可见光细节权重图；表示红外细节层的特征；表示可见光细节层的特征；所述得到融合细节层的计算公式为：其中，表示所述融合细节层；表示红外细节层；表示可见光细节层。8.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，所述显著权重图的计算公式为：其中，表示所述显著权重图；表示可变函数参数；表示显著层的归一化形式；所述得到融合细节层的计算公式为：其中，表示所述融合显著层；表示所述红外显著层；表示所述可见光显著层。9.根据权利要求1所述的结合显著性区域检测的多波段图像融合方法，其特征在于，所述得到融合图像的计算公式为：其中，表示所述融合图像；表示所述融合基础层；表示所述融合细节层；表示所述融合显著层。10.一种结合显著性区域检测的多波段图像融合系统，其特征在于，包括信息处理模块和信息输出模块；所述信息处理模块包括增强处理单元、分解单元、基础层融合单元、细节层融合单元、显著层融合单元和图像融合单元；所述增强处理单元用于对红外图像进行增强处理，得到增强红外图像；所述分解单元用于分别对所述增强红外图像和可见光图像进行分解，得到红外基础
层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层；所述基础层融合单元用于对所述红外基础层和所述可见光基础层进行融合，得到融合基础层；所述细节层融合单元用于基于细节权重图，对所述红外细节层和所述可见光细节层进行融合，得到融合细节层；所述显著层融合单元用于基于显著权重图，对所述红外显著层和所述可见光显著层进行融合，得到融合显著层；所述图像融合单元用于对所述融合基础层、所述融合细节层和所述融合显著层进行变换，得到融合图像；所述信息输出模块用于输出所述融合图像。

技术总结
本发明提供了一种结合显著性区域检测的多波段图像融合方法和系统，包括：对红外图像进行增强处理，得到增强红外图像；分别对所述增强红外图像和可见光图像进行分解，得到红外基础层、红外细节层和红外显著层以及可见光基础层、可见光细节层和可见光显著层；对所述红外基础层和所述可见光基础层进行融合，得到融合基础层；基于细节权重图，对所述红外细节层和所述可见光细节层进行融合，得到融合细节层；基于显著权重图，对所述红外显著层和所述可见光显著层进行融合，得到融合显著层；对所述融合基础层、所述融合细节层和所述融合显著层进行变换，得到融合图像；以克服光晕效应和梯度伪影问题，有效增强源图像的对比度和细节信息。信息。信息。


技术研发人员：张蓉竹 李佳文 吴小龑 龙婕 宋红红 杨晓敏 陶冶
受保护的技术使用者：四川大学
技术研发日：2022.12.12
技术公布日：2023/1/6