3D 포인트 클라우드의 얼굴 정규 벡터들에 기반한 RGB-D 융합 = RGB-D Fusion Based on Facial Normal Vectors Using 3D Point Cloud
저자
발행사항
광주 : 조선대학교 대학원, 2013
학위논문사항
학위논문(석사)-- 조선대학교 대학원 : 컴퓨터공학과 2013. 8
발행연도
2013
작성언어
한국어
주제어
DDC
621.3 판사항(21)
발행국(도시)
광주
형태사항
viii, 43 p. ; 26 cm
일반주기명
조선대학교 논문은 저작권에 의해 보호받습니다.
지도교수: Sang Woong Lee
참고문헌 : p.37-42
소장기관
Various face recognition algorithms have been developed and become available as standalone systems. However, a robust face recognition system is still a dream of all the security and intelligence agencies around the globe. 2D face recognition systems fail to perform well in certain cases due to the effect of illumination, various face poses, aging and different type of occlusions. In addition to above mentioned problems, verification of actual face presence is also impossible by using 2D systems, therefore, researchers move towards the development of 2.5 and 3D face recognition systems. It is harder to forge these systems by using photograph instead of the actual face because they utilize multimodal features such as optical flow, curvature profile and depth information etc. which cannot be acquired by conventional 2D sensors. Many 2.5 and 3D face recognition systems are already available in the market, but lack of real time operation and very high sensor cost are the main issue with most of them. Further, rendering of a 3D face model is computationally very expensive and require immense hardware resources. Due to these issues its acceptance for being deployed in common use become undesirable.
We have developed a new method for the alpha blending based fusion of RGB-D data of Kinect sensor. Our fusion approach gives us promising results in situations where the performance of only 2D and 3D is not well; specially in the presence of corrupted data. Our system relies both on the 2D and 3D information of the face. We have used the state-of-the-art Kinect sensor from Microsoft for the data acquisition. Since this sensor is available in very low price as compared to the other 2.5 and 3D sensors, its utilization is highly desirable for this application.
A robust face recognition system is implemented in this research that works with alpha blending based 2D-3D data fusion and Fisherfaces algorithm. We have utilized the EURECOM Kinect face dataset with a new alpha blending fusion method. Normal vectors of 3D point clouds of depth data are used to create alpha mask for fusion.
With the help of this mask we have created three different dataset, namely; grayscale, fusion and fusion with Gaussian smoothing dataset. We have evaluated the recognition results with four different illumination conditions. Two regions-of-interest (ROI) for size normalization are also used to evaluate the recognition results. This system can work either offline with our custom made variants of fusion dataset or online by using RGB-D data acquisition from Kinect sensor.
Our method mainly insist on the robustness of the fusion data. In case of corrupted RGB information, fusion dataset set gives us up-to 64% recognition rate. The other advantage of using this fusion method is its requirement of low computational power. It makes this method desirable for use in realtime environment on ordinary machines without any graphical processing unit (GPU).
다양한 얼굴 인식 알고리즘이 개발되고 독립형 시스템으로 사용할 수 있도록 개발되었다. 그러나 전 세계에서 강인한 얼굴 인식 시스템은 모든 보안 및 정보기관에서 여전히 꿈으로 여겨지고 있다. 2D 얼굴 인식 시스템은 조명, 다양한 얼굴의 자세, 노화와 얼굴 노출의 차단 등의 문제로 성능에 문제가 있다. 위의 문제뿐만 아니라, 2D 시스템을 사용한 실제 얼굴 존재의 입증은 불가능하다. 이러한 문제점들로 인해 얼굴인식 연구자들은 2.5D와 3D 얼굴 인식 시스템의 개발에 대한 연구를 진행하여 왔다. 이러한 시스템은 광원에 의한 실제 얼굴에서의 명암, 얼굴 윤곽, 깊이 정보 등을 사용하기 때문에 실제 얼굴 대신에 사진으로 얼굴 인식을 시도하는 것은 불가능하다. 현재까지 이미 많은 2.5D와 3D 얼굴 인식 시스템이 시장에 존재하지만, 실시간 동작의 어려움과 센서의 매우 높은 가격은 여전히 주된 문제점이다. 3D 얼굴 모델의 렌더링 과정은 처리과정이 매우 복잡하고 요구되는 하드웨어가 많다. 이러한 문제점으로 인해 2.5D와 3D 얼굴 인식 시스템을 실생활에서 사용하는 것은 쉽지않다.
본 논문에서는 키넥트 센서의 RGB-D 데이터의 알파 블렌딩의 융합을 위한 새로운 방법을 제안한다. 제안된 방법은 2D나 3D 얼굴에서 성능이 잘 나오지 않는 상황에서 유용하며, 특별히 손상된 데이터의 경우에 좋은 성능을 보여 준다. 제안된 방법은 2D 와 3D 얼굴의 모든 정보를 사용고 있으며, 데이터 수집을 위해 마이크로소프트사의 키넥트 센서를 사용한다. 키넥트 센서는 다른 센서들에 비해 매우 저렴한 가격으로 이용 가능하기 때문에 응용 제품을 개발하는 측면에서 매우 유용하다.
본 논문에서는 2D-3D 데이터 융합과 Fisherfaces 알고리즘을 기반으로 하여 알파 블렌딩과 연계하여 특정한 상황에 강인한 얼굴 인식 방법을 제안한다. 이를 위해 알파 블렌딩 융합 방법과 EURECOM의 Kinect의 얼굴 데이터베이스를 사용하였으며 깊이 데이터의 3 차원 클라우드의 법선 벡터는 융합을 위한 알파 마스크 변수를 만드는 데 사용된다.
이러한 알파 블렌딩 융합 방법과 EURECOM 데이터베이스를 바탕으로 회색조, 제안 방법, 제안 방법 후 가우스함수 적용 등의 3가지 실험데이터를 합성하였다. 또한 조명 환경에 대한 변화를 측정하기 위해서 4가지 조명 조건에서 인식 결과를 평가하였다. 또한 얼굴 정규화 과정에서의 두가지 관심 영역(ROI)을 설정하여 인식 결과를 비교하였다.
이러한 다양한 설험 데이터를 통하여 실험한 경과 제안된 방법은 정상적인 경우에는 기존 방법에 비해 유사한 결과를 보여주었으며, 특히 눈썹이 가려지거나 조명에 의해 일부 영역이 가져지는 등의 가려진 얼굴 데이터의 경우에는 상대적으로 좋은 성능을 보였다.
분석정보
서지정보 내보내기(Export)
닫기소장기관 정보
닫기권호소장정보
닫기오류접수
닫기오류 접수 확인
닫기음성서비스 신청
닫기음성서비스 신청 확인
닫기이용약관
닫기학술연구정보서비스 이용약관 (2017년 1월 1일 ~ 현재 적용)
학술연구정보서비스(이하 RISS)는 정보주체의 자유와 권리 보호를 위해 「개인정보 보호법」 및 관계 법령이 정한 바를 준수하여, 적법하게 개인정보를 처리하고 안전하게 관리하고 있습니다. 이에 「개인정보 보호법」 제30조에 따라 정보주체에게 개인정보 처리에 관한 절차 및 기준을 안내하고, 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 하기 위하여 다음과 같이 개인정보 처리방침을 수립·공개합니다.
주요 개인정보 처리 표시(라벨링)
목 차
3년
또는 회원탈퇴시까지5년
(「전자상거래 등에서의 소비자보호에 관한3년
(「전자상거래 등에서의 소비자보호에 관한2년
이상(개인정보보호위원회 : 개인정보의 안전성 확보조치 기준)개인정보파일의 명칭 | 운영근거 / 처리목적 | 개인정보파일에 기록되는 개인정보의 항목 | 보유기간 | |
---|---|---|---|---|
학술연구정보서비스 이용자 가입정보 파일 | 한국교육학술정보원법 | 필수 | ID, 비밀번호, 성명, 생년월일, 신분(직업구분), 이메일, 소속분야, 웹진메일 수신동의 여부 | 3년 또는 탈퇴시 |
선택 | 소속기관명, 소속도서관명, 학과/부서명, 학번/직원번호, 휴대전화, 주소 |
구분 | 담당자 | 연락처 |
---|---|---|
KERIS 개인정보 보호책임자 | 정보보호본부 김태우 | - 이메일 : lsy@keris.or.kr - 전화번호 : 053-714-0439 - 팩스번호 : 053-714-0195 |
KERIS 개인정보 보호담당자 | 개인정보보호부 이상엽 | |
RISS 개인정보 보호책임자 | 대학학술본부 장금연 | - 이메일 : giltizen@keris.or.kr - 전화번호 : 053-714-0149 - 팩스번호 : 053-714-0194 |
RISS 개인정보 보호담당자 | 학술진흥부 길원진 |
자동로그아웃 안내
닫기인증오류 안내
닫기귀하께서는 휴면계정 전환 후 1년동안 회원정보 수집 및 이용에 대한
재동의를 하지 않으신 관계로 개인정보가 삭제되었습니다.
(참조 : RISS 이용약관 및 개인정보처리방침)
신규회원으로 가입하여 이용 부탁 드리며, 추가 문의는 고객센터로 연락 바랍니다.
- 기존 아이디 재사용 불가
휴면계정 안내
RISS는 [표준개인정보 보호지침]에 따라 2년을 주기로 개인정보 수집·이용에 관하여 (재)동의를 받고 있으며, (재)동의를 하지 않을 경우, 휴면계정으로 전환됩니다.
(※ 휴면계정은 원문이용 및 복사/대출 서비스를 이용할 수 없습니다.)
휴면계정으로 전환된 후 1년간 회원정보 수집·이용에 대한 재동의를 하지 않을 경우, RISS에서 자동탈퇴 및 개인정보가 삭제처리 됩니다.
고객센터 1599-3122
ARS번호+1번(회원가입 및 정보수정)