HDR 영상 복원을 위해 대비와 텍스쳐 영역 정보를 고려한 혼합 톤 매핑 기법

국문 초록 (Abstract)

본 논문은 전역적 대비를 보존하는 동시에 경계 정보를 정확히 보존할 수 있는 혼합 톤 매핑 기법 (Tone Mapping Operator: TMO)을 제안한다. 우선, 넓은 동적 영역 (High Dynamic Rangae: HDR) 영상을 낮은 동적 영역 (Low Dynamic Range: LDR) 디스플레이에 적합하게 압축하기 위해 인간의 시각 시스템 (Human Visual System: HVS)에 기반한 임계 값 대 밝기 값 (Threshold vs. Intensity: TVI) 함수와 영상의 대비를 사용하였으며 이에 따라 영상의 전역적인 대비를 보존할 수 있었다. 또한, 가이디드 영상 필터링(Guided Image Filtering: GIF)을 이용하여 검출된 경계 정보와 변화감지역 (Just Noticeable Difference: JND) 모델의 공간적 마스킹을 이용하여 검출된 경계 정보를 결합함으로써 영상의 경계를 보존하고 출력 영상의 인지적 화질을 향상시켰다. 기존에 TMO들은 크게 전역적 톤 매핑 (Global Tone Mapping: GTM)과 지역적 톤 매핑 (Local Tone Mapping: LTM)으로 분류되었다. GTM은 전역적인 대비를 보존하며 구현이 단순해 실행시간이 빠르다는 장점이 있지만 영상의 경계 정보가 손실되며 지역적 대비를 보존하지 못하는 단점이 있었다. 반면 LTM은 영상의 지역적 대비와 경계 정보를 잘 보존하였지만 경계 영역에서의 헤일로 열화 현상의 발생과 같이 일부 영역이 부자연스럽게 표현되는 경우가 발생하였으며 GTM과 비교하여 높은 계산 복잡도를 가졌다. 따라서 본 논문에서는 GTM과 LTM의 장점을 결합하여 전역적인 대비를 보존하는 동시에 영상의 경계 정보를 보존하는 TMO를 제안하였으며 실험결과를 통해 제안하는 톤 매핑 기법이 인지적 화질 측면에서 성능이 우수한 것으로 확인되었다.

다국어 초록 (Multilingual Abstract)

In this paper, we propose a Tone Mapping Operator (TMO) that preserves global contrast and precisely preserves boundary information. In order to reconstruct a High Dynamic Range (HDR) image to a Low Dynamic Range (LDR) display by using Threshold value vs. Intensity value (TVI) based on Human Visual System (HVS) and contrast value. As a result, the global contrast of the image can be preserved. In addition, by combining the boundary information detected using Guided Image Filtering (GIF) and the detected boundary information using the spatial masking of the Just Noticeable Difference (JND) model, And improved the perceived image quality of the output image. The conventional TMOs are classified into Global Tone Mapping (GTM) and Local Tone Mapping (LTM). GTM preserves global contrast, has the advantages of simple implementation and fast execution time, but it has a disadvantage in that the boundary information of the image is lost and the regional contrast is not preserved. On the other hand, the LTM preserves the local contrast and boundary information of the image well, but some areas are expressed unnatural like the occurrence of the halo artifact phenomenon in the boundary region, and the calculation complexity is higher than that of GTM. In this paper, we propose TMO which preserves global contrast and combines the merits of GTM and LTM to preserve boundary information of images. Experimental results show that the proposed tone mapping technique has superior performance in terms of cognitive quality.

목차 (Table of Contents)

• 요약
• Abstract
• Ⅰ. 서론
• Ⅱ. 기존의 톤 매핑 기법
• Ⅲ. 제안하는 톤 매핑 기법
• Ⅳ. 실험 결과
• Ⅴ. 결론
• 참고문헌 (References)

참고문헌 (Reference)

• 1 박태장, "두 장의 LDR 영상을 이용한 HDR 영상 취득 기법" 한국방송∙미디어공학회 16 (16): 247-257, 2011
• 2 O. Blackwell, "Visual performance data for 156 normal observers of various ages" 1 (1): 3-13, 1971
• 3 M. Cadík, "The naturalness of reproduced high dynamic range images" 920-925, 2005
• 4 S. Daly, "The Visible Differences Predictor: An algorithm for the assessment of image fidelity" 1666 : 1992
• 5 Jeongyun L., "Standard technology trend for HDR / WCG image compression" 21 (21): 59-69, 2016
• 6 Christophe Schlick, "Quantization Techniques for Visualization of High Dynamic Range Pictures" 7-18, 2014
• 7 Erik Reinhard, "Photographic Tone Reproduction for Digital Images" 21 (21): 267-276, 2002
• 8 Wu, J., "Just noticeable difference estimation for images with free-energy principle" 15 (15): 1705-1710, 2013
• 9 K. Ma, "High dynamic range image tone mapping by optimizing tone mapped image quality index" 1-6, 2014
• 10 H. Yeganeh, "High dynamic range image tone mapping by maximizing a structural fidelity measure" 1879-1883, 2013
• 11 E. Reinhard, "High Dynamic Range Imaging, Acquisition, Display, and Image-Based Lighting" Morgan Kaufmann 2005
• 12 임정윤, "HDR와 SDR 비디오의 스케일러블 부호화를 위한 계층 압축 기법" 한국방송∙미디어공학회 20 (20): 756-769, 2015
• 13 K. He, "Guided Image filtering" 35 (35): 1397-1409, 2013
• 14 N.Draper, "Applied Regression Analysis" JohnWiley 1981
• 15 Frederic Drago, "Adaptive Logarithmic Mapping for Displaying High Contrast Scenes" 22 (22): 419-426, 2003
• 16 Gregory Ward Larson, "A Visibility Matching Tone Reproduction Operator for High Dynamic Range Scenes" 3 (3): 291-306, 1997
• 17 Michael Ashikhmin, "A Tone Mapping Algorithm for High Contrast Images" Eurographics Association 145-156, 2002
• 18 K. Devlin, "A Review of Tone Reproduction Techniques" Dept. Comput. Sci. Univ. Bristol 2002
• 19 H. Shahid, "A New Hybrid Tone Mapping Scheme for High Dynamic Range(HDR)Videos" 351-352, 2015
• 20 Sumanta N. Pattanaik, "A Multiscale Model of Adaptation and Spatial Vision for Realistic Image Display" ACM 287-298, 1998