随着红外热成像技术的不断发展，红外图像在民用领域和军用领域都得到了越来越广泛的应用。原始红外图像反映的是特定场景的红外辐射分布，其整体视觉效果往往较差，具有对比度不佳和图像纹理细节不清晰的缺点。它在直方图中呈现出灰度值范围较窄和峰值明显的特点，其图像清晰度往往不佳，因而其必须经过图像增强处理才能适于人眼观察。本文提出了一种基于自适应S曲线灰度变换的红外图像增强算法。通过客观评价指标的计算，结合主观评价方法对图像进行对比评价，结果表明本文提出的算法能够提高红外图像的对比度和增强图像细节，在保证图像不失真的基础上有效地改善红外图像的视觉效果。 With the continuous development of infrared thermal imaging technology, infrared image has been increasingly applied in both the civilian and military fields. The original infrared image reflects the infrared radiation distribution of a specific scene, and its overall visual effect is often poor, with poor contrast and unclear texture detail in the image. Therefore, it exhibits a narrow range of grayscale values and obvious peaks in the histogram, and its image clarity is often poor. Therefore, it must undergo image enhancement processing to be suitable for human observation. This article proposes an infrared image enhancement algorithm based on adaptive S-curve grayscale transformation. By calculating the objective evaluation indicator and combining subjective evaluation methods to compare and evaluate images, the results show that the algorithm proposed in this paper can improve the contrast of infrared images and enhance image detail, effectively improving the visual effect of images while ensuring they are not distorted.
随着红外热成像技术的不断发展，红外图像在民用领域和军用领域都得到了越来越广泛的应用。原始红外图像反映的是特定场景的红外辐射分布，其整体视觉效果往往较差，具有对比度不佳和图像纹理细节不清晰的缺点。它在直方图中呈现出灰度值范围较窄和峰值明显的特点，其图像清晰度往往不佳，因而其必须经过图像增强处理才能适于人眼观察。本文提出了一种基于自适应S曲线灰度变换的红外图像增强算法。通过客观评价指标的计算，结合主观评价方法对图像进行对比评价，结果表明本文提出的算法能够提高红外图像的对比度和增强图像细节，在保证图像不失真的基础上有效地改善红外图像的视觉效果。
红外图像，纹理细节，图像增强，S曲线灰度变换
Quanrong Yang
School of Electronic and Control Engineering, North China Institute of Aerospace Engineering, Langfang Hebei
Received: Apr. 17th, 2024; accepted: May 15th, 2024; published: May 22nd, 2024
With the continuous development of infrared thermal imaging technology, infrared image has been increasingly applied in both the civilian and military fields. The original infrared image reflects the infrared radiation distribution of a specific scene, and its overall visual effect is often poor, with poor contrast and unclear texture detail in the image. Therefore, it exhibits a narrow range of grayscale values and obvious peaks in the histogram, and its image clarity is often poor. Therefore, it must undergo image enhancement processing to be suitable for human observation. This article proposes an infrared image enhancement algorithm based on adaptive S-curve grayscale transformation. By calculating the objective evaluation indicator and combining subjective evaluation methods to compare and evaluate images, the results show that the algorithm proposed in this paper can improve the contrast of infrared images and enhance image detail, effectively improving the visual effect of images while ensuring they are not distorted.
Keywords:Infrared Image, Texture Detail, Image Enhancement, S-Curve Grayscale Transformation
Copyright © 2024 by author(s) and beplay安卓登录
This work is licensed under the Creative Commons Attribution International License (CC BY 4.0).
http://creativecommons.org/licenses/by/4.0/
纵观古今，特别是信息化发展的当今时代，信息在人类社会的发展中扮演着至关重要的角色。信息不仅是人类沟通交流的桥梁，而且还是知识的重要载体。作为一种常见的信息，视觉信息具有极高的研究和应用价值，图像是它的一种重要的呈现形式。图像是人类视觉研究的基础，常见的图像有可见光图像和红外图像。红外成像实现了图像研究从可见光波段到红外波段的拓展，对视觉系统的研究与应用具有十分重要的意义。可见光成像不适合应用于黑暗或者有雾等恶劣条件的拍摄场景，而红外成像则不同，它是一种被动探测方式，受周围环境的影响较小，红外成像系统设备具有隐蔽性并且能够探测到被遮蔽的目标 [
随着红外成像技术的不断发展，红外图像的应用越来越广泛。红外成像能够应用于实时探测、目标跟踪的实际需求中，无论是在民用领域，还是在军用领域，红外成像都发挥着越来越重要的作用。例如，疾病的早期诊断 [
红外图像增强的实质是通过图像增强处理使红外图像具有更佳的视觉效果。本章研究的是红外图像增强算法的相关理论基础，旨在于为后续提出的红外图像增强算法提供必要的理论支撑。
红外图像是通过红外成像系统聚焦红外辐射的方式而形成的。由红外探测器采集得到的图像反映的是背景和目标的红外辐射情况，是没有层次感的低分辨率灰度图像 [
图1. 场景1原图及其直方图
对于一幅图像，当其整体灰度值在灰度级范围的中间区域时，其视觉效果往往更佳。场景1整体灰度变小的图像、整体灰度变大的图像及它们的直方图如图2所示。相比较于暗图和亮图，场景1的原图具有灰度适中的特点，其图像视觉效果更好。
图2. 场景1图像及其直方图
针对红外图像增强算法的研究，目前国内外学者根据不同应用场景提出了相应的算法，取得了许多的成果。红外图像增强算法的划分是比较灵活的，通常情况下根据处理空间的不同，红外图像增强算法可分为基于空间域的算法和基于变换域的算法两大类。前者是直接对图像灰度级进行运算，而后者则是在处理图像变换域时对图像的系数值进行改变，是一种对图像间接增强的算法。基本的红外图像增强算法有直方图均衡化、线性灰度变换和伽马变换。
直方图均衡化算法是一种简单实用的图像增强算法 [
g ( x , y ) = 255 b − a [ f ( x , y ) − a ] (1)
实际应用中，衡量图像质量的评价方法可划分为主观评价、客观评价这两种 [
客观评价方法是一种将数学模型的确定计算数值作为评价指标的方法。此方法科学实用，适用性好。图像质量的客观评价方法有很多，本文将峰值信噪比、标准差和平均梯度作为红外图像质量的客观评价指标。
m 、 n 分别表示图像像素点的总行数和总列数。峰值信噪比的计算见公式(2)，它常用来评判图像的失真情况，可以客观地呈现原图与增强处理后的图像的差异程度。其中， w 是指图像的位深， M S E 是均方误差，其计算公式见公式(3)。对于位深为8的红外图像， P S N R 的合理取值范围为[20, 50]。
P S N R = 10 lg ( 2 w − 1 ) 2 M S E (2)
在均方误差公式中， c ( i , j ) 代表经过增强处理后的图像灰度值， l ( i , j ) 则指原图像的灰度值。
M S E = 1 m × n ∑ i = 0 m − 1 ∑ j = 0 n − 1 [ c ( i , j ) − l ( i , j ) ] 2 (3)
标准差是评价图像整体对比度的常用指标，其表达式见公式(4)。其中， h ( i , j ) 表示该像素点的灰度值。 p 表示图像像素点灰度值的平均值，其计算公式见公式(5)。图像的标准差越大，图像的对比度就越高。
S = 1 m × n ∑ i = 0 m − 1 ∑ j = 0 n − 1 [ h ( i , j ) − p ] 2 (4)
p = 1 m × n ∑ i = 0 m − 1 ∑ j = 0 n − 1 h ( i , j ) (5)
图像边缘清晰度是评价图像质量的重要切入点，平均梯度是评价图像边缘清晰度的指标之一，其计算见公式(6)。 Δ t 1 ( i , j ) 代表图像像素点在水平 x 方向上的梯度幅值， Δ t 2 ( i , j ) 代表图像像素点在垂直 y 方向上的梯度幅值。本文将prewitt梯度算子作为图像的梯度幅值的计算方法。图像的平均梯度越大，则其包含的边缘细节信息就越丰富。
A G = 1 m × n ∑ i = 0 m − 1 ∑ j = 0 n − 1 Δ t 1 2 ( i , j ) + Δ t 2 2 ( i , j ) 2 (6)
S曲线灰度变换的原理是将图像像素灰度值由中心点向两端拉伸，典型的S曲线灰度变换计算公式见公式(7)。其中， t 为大于1的常量， h ( i , j ) 表示归一化的灰度值。S曲线灰度变换处理的一个必要操作是首先将图像像素灰度值进行归一化处理。此外，S曲线灰度变换的关键是图像归一化直方图灰度值整体在灰度范围的中心附近，近似关于0.5对称。
S ( i , j ) = { 255 × 0.5 × t h ( i , j ) − 1 t 0.5 − 1 0 ≤ h ( i , j ) ≤ 0.5 255 × 0.5 × [ 1 − t 1 − h ( i , j ) t 0.5 − 1 + 2 ] 0.5 < h ( i , j ) ≤ 1 (7)
对于8位红外图像，典型的归一化公式见公式(8)。 X ( i , j ) 表示原图像的灰度值。
h ( i , j ) = X ( i , j ) 255 (8)
S曲线灰度变换适合应用于低对比度图像的增强。为了使归一化直方图灰度值总体在0.5附近，本文对归一化处理方法进行了调整创新，这一点满足图像整体灰度值处于亮暗程度适中的优势。低对比度图像直方图灰度值分布大体集中在一个小范围内，根据此特点，本文的归一化处理过程见公式(9)。其中， X m i d 表示图像中所有像素灰度值的中值。通过此归一化方法可以使红外图像直方图近似关于0.5对称。
h ( i , j ) = { X ( i , j ) 2 × X m i d 0 ≤ X ( i , j ) ≤ X m i d X ( i , j ) + 255 − 2 X m i d 2 × ( 255 − X m i d ) X m i d < X ( i , j ) ≤ 255 (9)
用 M 表示图像总像素除以256的计算值，将图像直方图中像素个数大于 M 的灰度级的个数用 m 来表示。当图像不存在该灰度级的像素时，此灰度级为无效灰度级。定义 n 为图像的无效灰度级个数。对于公式(7)，本文根据红外图像的直方图特点对参数 t 进行自适应取值，其自适应取值公式见公式(10)。
t = 256 × n m (10)
实验的模拟仿真软件为MATLAB。上一章提出的自适应S曲线灰度变换是本文的红外图像增强算法，为了评价增强效果，本文同时仿真了直方图均衡化和线性灰度拉伸这两种传统算法。各场景中，原图和各算法处理的效果图如图3所示。不同场景的各算法的客观评价分别见表1、表2和表3。
主观评价上，通过直接观察原图和增强图像的方法对它们进行对比。在这三个场景中，经过直方图均衡化处理的红外图像存在明显的亮区域和暗区域，出现了过曝光的图像整体失真问题。经过线性灰度拉伸处理的红外图像具有较好的整体对比度，但图像边缘清晰度的增强效果不明显。经过本文算法处理的红外图像具有对比度大和图像边缘细节清晰的特点，其图像视觉效果最佳。例如，场景1中道路视觉效果、车辆轮廓和房屋纹理细节变得清晰，场景2中树木和人的视觉效果变好，场景3中树木和房屋的轮廓变得清晰可见。
客观评价上，结合峰值信噪比、标准差和平均梯度对增强的红外图像进行全面的分析。经过本文算法处理的图像在峰值信噪比上满足要求，其值在[20, 50]的合理范围内。经过直方图均衡化或者线性灰度拉伸处理的图像则不在合理取值范围内，这与主观评价上过曝光的失真问题相符合。特别对于直方图均衡化算法，过大的标准差也能体现出过度失真的问题。同时在平均梯度上，经过直方图均衡化处理的图像取得过大值。经过本文算法处理的图像在对比度上取值比经过线性灰度变换处理的图像小，在平均梯度上取值却较大，观察图像可以看出经过本文算法处理的红外图像具有最佳的边缘细节增强效果。
主观评价和客观评价的多角度分析表明，本文算法在图像增强处理上比直方图均衡化和线性灰度拉伸好。
a) 场景1原图 b) 场景1直方图均衡化 c) 场景1线性灰度拉伸d) 场景1本文算法
图3. 原图及各算法处理效果图
| 类型 | 峰值信噪比 | 标准差 | 平均梯度 |
|---|---|---|---|
| 原图 | — | 32.7188 | 3.7786 |
| 直方图均衡化 | 13.7857 | 74.6748 | 16.2510 |
| 线性灰度拉伸 | 14.9962 | 54.5330 | 6.3103 |
| 本文算法 | 20.9953 | 48.9936 | 7.8710 |
表1. 场景1各算法的对比
| 类型 | 峰值信噪比 | 标准差 | 平均梯度 |
|---|---|---|---|
| 原图 | — | 20.7363 | 3.6287 |
| 直方图均衡化 | 12.1082 | 74.6602 | 21.7510 |
| 线性灰度拉伸 | 13.8839 | 34.5600 | 6.0089 |
| 本文算法 | 23.8637 | 33.0931 | 7.9153 |
表2. 场景2各算法的对比
| 类型 | 峰值信噪比 | 标准差 | 平均梯度 |
|---|---|---|---|
| 原图 | — | 34.6835 | 3.2889 |
| 直方图均衡化 | 13.9353 | 74.3727 | 15.4563 |
| 线性灰度拉伸 | 13.9720 | 57.8064 | 5.4926 |
| 本文算法 | 21.4064 | 50.1208 | 6.7263 |
表3. 场景3各算法的对比
原始红外图像具有较低的对比度和边缘清晰度，需要进行增强处理从而改善图像质量。针对其特点，本文提出了一种自适应S曲线灰度变换算法。在主观评价和客观评价中比较本文算法与基本的红外图像增强算法的处理效果，表明本文提出的自适应S曲线灰度变换算法可以有效地提高红外图像的对比度和红外图像的边缘细节清晰度。实验结果表明，经过本文算法处理的红外图像具有较佳的视觉效果，其图像质量得到明显的改善。
杨权荣. 基于自适应S曲线变换的红外图像增强Infrared Image Enhancement Based on Adaptive S-Curve Transformation[J]. 计算机科学与应用, 2024, 14(05): 61-67. https://doi.org/10.12677/csa.2024.145114
https://doi.org/10.1038/s41598-024-54146-1
https://doi.org/10.1080/10833196.2016.1223575