퓨필랩 모바일 동공 추적 장치를 위한 3차원 캘리브레이션 및 성능 평가 방법

문지훈,신동원,호요성,Mun, Ji-Hun,Shin, Dong-Won,Ho, Yo-Sung 한국스마트미디어학회 2018 스마트미디어저널 Vol.7 No.2

동공 추적 기술은 스마트 장치와 연계하여 사용자에게 편의를 제공할 수 있는 효율적인 정보 제공 수단으로 사용될 수 있다. 본 논문에서는 Pupil-labs에서 제작한 모바일 동공 추적 장치를 사용하여 사용자의 응시점 거리를 측정하고, 정확도와 정밀도를 분석하는 실험 수행결과를 보인다. 이를 기반으로 동공 추적 장치가 측정하는 동공의 응시점 위치와 대상 타겟과의 오차를 비교한다. 모바일 동공 추적 장치도 한 종류의 카메라이기 때문에 사용하기 전에는 반드시 캘리브레이션 작업을 수행해야 한다. 일반적으로 사용하는 2차원 캘리브레이션 방법뿐만 아니라, 3차원 캘리브레이션 수행 방법에 대해 설명한다. 3차원 캘리브레이션은 2차원 캘리브레이션 결과보다 높은 정확도를 갖기 위해임의의 평면을 설정하여 다양한 3차원 공간상에서 캘리브레이션을 수행하는 과정을 의미한다. 3차원 캘리브레이션의 효율성을 보이기 위해 실험결과에 대한 분석 결과를 설명한다. 또한 전반적인 장치의 사용 방법과 장치를 통해 얻을 수 있는 다양한 정보를 소개한다. Pupil tracking technologies can be used as an efficient information provider means that provides convenience to the user by connecting with a smart device. In this paper, we measure the distance of user gaze point using the pupil tracking device which produced by Pupil-labs, also shows the experimental result with analyzing accuracy and precision. Based on that the pupil gaze point location which tracked by pupil tracking device is compared with object target in terms of error. Since the mobile pupil tracking device is also one kind of camera, we have to perform the calibration before using the device. Not only generally used 2-dimensional calibration, but also 3-dimensional calibration method is explained. To get the improved accuracy of 2-dimensional calibration result, the 3-dimensional calibration set an imaginary plane and executes the calibration in various 3-dimensional spaces. To show the efficiency of 3-dimensional calibration, we analyze the experimental result. It also introduces various using methods and information that can be obtained through the device.

가상 시점 영상 합성을 위한 방향성 고려 홀 채움 방법

문지훈,호요성,Mun, Ji Hun,Ho, Yo Sung 한국스마트미디어학회 2014 스마트미디어저널 Vol.3 No.4

최근 깊이 영상 기반 합성 방법을 이용한 가상시점 합성 방법이 3차원 영상의 적용 분야에서 많이 사용되고 있다. 가상 시점 영상은 기존에 알고 있는 영상과 이와 관련된 깊이 영상 정보를 이용하여 카메라로 촬영 하지 않은 가상시점 영상을 생성하게 된다. 하지만 깊이 영상 기반 합성 방법을 이용해 가상시점 영상을 생성할 경우, 깊이 영상을 기반으로 합성하기 때문에 이미지 워핑 과정에서 폐색 영역이 발생하게 된다. 이러한 폐색 영역을 제거하기 위해 지금까지 다양한 홀 채움 방법들이 제안되어 왔다. 동일 색상영역 검색, 수평방향 보간 방법, 수평방향 보외 방법 그리고 다양한 인페인팅 방법들이 홀 채움 방법들로 제안되었다. 하지만 이러한 방법들을 사용하여 텍스쳐 영역의 홀을 제거할 경우 다른 종류의 간섭 현상이 발생하는 문제가 있다. 본 논문에서는 이러한 문제점을 해결하기 위해 다양한 방향성을 고려한 홀 채움 방법을 새롭게 제안하여 확장된 홀 영역을 효율적으로 채우는 방법을 설명한다. 제안된 방법들은 복잡한 텍스쳐들이 있는 배경부분에서 발생하는 홀 영역을 채울 때 성능 효율성을 나타낸다. 방향성을 고려한 홀 채움 방법은 픽셀 단위로 홀 채움 영역 값을 측정하는 과정에서 홀 영역의 주변 텍스쳐 픽셀 값들을 사용하게 된다. 제안한 방법을 이용해 가상시점 영상 합성 결과 발생하는 홀 영역을 기존의 홀 채움 방법보다 보다 더 효율적으로 채울 수 있는 것을 확인할 수 있었다. Recently the depth-image-based rendering (DIBR) method is usually used in 3D image application filed. Virtual view image is created by using a known view with associated depth map to make a virtual view point which did not taken by the camera. But, disocclusion area occur because the virtual view point is created using a depth image based image 3D warping. To remove those kind of disocclusion region, many hole filling methods are proposed until now. Constant color region searching, horizontal interpolation, horizontal extrapolation, and variational inpainting techniques are proposed as a hole filling methods. But when using those hole filling method some problem occurred. The different types of annoying artifacts are appear in texture region hole filling procedure. In this paper to solve those problem, the multi-directional extrapolation method is newly proposed for efficiency of expanded hole filling performance. The proposed method is efficient when performing hole filling which complex texture background region. Consideration of directionality for hole filling method use the hole neighbor texture pixel value when estimate the hole pixel value. We can check the proposed hole filling method can more efficiently fill the hole region which generated by virtual view synthesis result.

강재 탄성보의 솟음량을 이용한 RC 슬래브교 보강공법

문지훈,고정완,Mun, Ji-Hun,Go, Jeong-Wan 한국도로교통협회 2003 도로교통 Vol.91 No.-

평활화 필터 기반 적응적 가중치를 이용한 변위 추정 방법

문지훈(Ji-Hun Mun),호요성(Yo-Sung Ho ) 한국방송·미디어공학회 2016 한국방송공학회 학술발표대회 논문집 Vol.2016 No.11

가상시점 영상 생성을 위한 효율적인 홀 채움 방법

문지훈(Ji-Hun Mun),호요성(Yo-Sung Ho) 한국방송·미디어공학회 2014 한국방송공학회 학술발표대회 논문집 Vol.2014 No.11

본 논문에서는 가상시점 영상을 생성할 때 발생하는 홀 영역을 효율적으로 채우는 방법을 제안한다. 가상시점 영상을 생성하려면 우선 깊이 영상에 대해 3차원 워핑을 수행한 뒤, 이때 발생하는 작은 홀을 미디언 필터를 이용하여 적절히 채워야 한다. 홀이 채워진 깊이 영상을 기반으로 하여 입력받은 참조 컬러 영상에 대해 3차원 워핑을 수행하여 가상 위치에 새로운 시점 영상을 생성하게 된다. 이때 또한 마찬가지로 3차원 워핑을 수행하기 때문에 홀 영역이 발생하게 된다. 텍스쳐 영상을 워핑하여 새로운 좌표계로 옮긴 영상은 주변 컬러 화소들과의 관계들을 가지고 있다. 텍스쳐 영상을 워핑한 결과 영상에서 발생하는 홀 영역을 채우기 위해 방향성을 고려한 홀 채움 방법을 사용한다. 홀 주변 화소 영역의 값들을 홀을 채우게 될 후보 화소 값으로 설정한 뒤, 각각의 화소값에 대해 비용값을 계산한다. 이때 가장 적은 비용값을 갖게 하는 주변 화소 값을 해당영역의 홀 채움 값으로 사용하게 된다. 좌영상과 우영상을 워핑할 때 발생하는 홀 영역의 위치가 각각 다르게 나타난다. 홀 영역은 배경화소 값을 이용해 채울 경우 자연스러운 결과를 보인다. 배경화소 값을 이용하기 위해 좌영상과 우영상에 따른 새로운 홀 스캔 방향 또한 제안한다. 능동적으로 홀 스캔 방향을 선택하여 홀 주변 화소값들을 스캔해가며 워핑 결과 발생하는 홀 영역을 효율적으로 채우게 된다. 결과적으로 제안한 방법을 통하여 생성된 가상시점 영상의 화질이 좋아지는 결과를 확인할 수 있었다.

경계영역 정확도 향상을 위한 영상분할 기반 스테레오 매칭

문지훈(Ji-Hun Mun),호요성(Yo-Sung Ho) 한국방송·미디어공학회 2015 한국방송공학회 학술발표대회 논문집 Vol.2015 No.11

3차원 영상을 생성하기 위해 스테레오 매칭을 통해 깊이 정보를 획득한다. 이때 발생하는 경계영역과 텍스처가 부족한 부분의 깊이정보 부정확성 문제를 해결하기 위해 영상 분할 기반 스테레오 매칭 방법을 제안한다. 일반적으로 사용하는 윈도우 기반 스테레오 매칭 결과를 기반으로 분할된 영상 내에서 최적의 변위 값을 재 할당함으로서 깊이정보의 정확성을 향상시킬 수 있다. Mean-shift는 참조 영상에서 화소 간 평균값 차이가 최대가 되는 영역들을 반복적으로 찾는다. 유사한 평균값을 갖는 영역들을 기반으로 영상을 분할하는 것을 Mean-shift를 이용한 영상분할 이라고 한다. 분할된 영상은 각 영역을 대표하는 패치 구조를 가지고 있어 참조 영상에 포함되어있는 잡음에 강인한 특성을 지닌다. 스테레오 매칭을 통해 화소별로 변위값을 할당해주는 대신, 분할된 영상을 이용하여 각 분할 영역에 동일한 변위 값을 할당한다. 분할된 영상에 동일한 변위 정보를 할당할 경우 객체와 배경의 경계영역에서 잘못된 변위 값이 할당되는 경우가 발생한다. 이러한 경계 영역의 변위정보 부정확성을 보완하기 위해 화소의 기울기 항을 비용 값 계산 과정에 추가하여 단점을 보완한다. 최종 비용 값 계산을 통해 획득한 초기 변위 지도에 중간 값 필터를 적용하여 분류된 영역에 동일한 변위 값을 할당한다. 제안한 방법을 적용하여 경계영역의 정확도가 향상된 최종 변위 지도를 획득한다.

HEVC SAO 인트라 모드 오프셋 값 조정을 통한 복잡도 감소

문지훈(Ji-Hun Mun),최정아(Jung-Ah Choi),호요성(Yo-Sung Ho) 한국방송·미디어공학회 2014 방송공학회논문지 Vol.19 No.3

증예(症例) : 피부선병(연주창) 1예

문지훈 ( Ji Hun Mun ),임철완 ( Chull Wan Ihm ) 전북대학교 의과학연구소 2003 全北醫大論文集 Vol.27 No.1

A 27-year-old man developed subcutaneous erythematous nodules on his right neck, which were followed by softening and yellowish pus discharge. Biopsy from the skin lesion showed necrosis and granuloma with Langhan`s giant cells, compatible with tuberculosis. The AFB stain of the tissue was negative but the culture on Ogawa`s media showed M. tuberculosis. Chest X-ray showed pleural thickening and calci-fications implying old pulmonary tuberculosis. Underlying fistulous tract was detected on enhanced CT of the region. With the diagnosis of scrofuloderma, the patient was successfully treated with antitubercuberculous medication for 5 months. Discussion about the nomenclature of the disease was also made.

가중치를 이용한 센서스 변환과 가이드 필터링 기반깊이지도 생성 방법

문지훈(Ji-Hun Mun),호요성(Yo-Sung Ho) 대한전자공학회 2017 전자공학회논문지 Vol.54 No.2

일반적으로 영상은 기하학적 왜곡과 방사성 왜곡을 포함하고 있다. 센서스 변환은 방사 왜곡으로 인해 발생하는 스테레오 부정합 문제를 해결할 수 있다. 일반적인 센서스 변환은 윈도우 중심 화소 값과 이웃한 화소의 값을 비교하기 때문에 화소 값의 차이가 크지 않은 경우 정확한 정합 결과를 얻기 어렵다. 이를 해결하기 위해 윈도우 내 보조 윈도우를 적용하여 화소 값 차이별로 서로 다른 4단계 가중치를 적용하는 센서스 변환 방법을 제안한다. 현재 화소 값이 보조 윈도우의 화소평균 값 보다 큰 경우 높은 가중치를 부여하고, 그렇지 않은 경우 낮은 가중치를 부여함으로서 차등적인 센서스 변환을 수행한다. 가중치를 이용한 센서스 변환 영상과 입력 영상을 이용하여 초기 변위지도를 생성한 뒤, 기울기 정보를 추가적으로 사용하여 최종 변위지도 생성을 위한 비용 함수를 모델링한다. 최적의 비용 값을 찾기 위해 가이드 필터링을 사용하는데, 이는 입력 영상과 변위영상을 사용하여 필터링을 수행하기 때문에 객체의 경계영이 보존될 수 있다. 실험 결과로부터 제안한 방법을 이용한 스테레오 정합 결과 성능이 기존의 방법에 비해 개선된 것을 확인하였다. Generally, image contains geometrical and radiometric errors. Census transform can solve the stereo mismatching problem caused by the radiometric distortion. Since the general census transform compares center of window pixel value with neighbor pixel value, it is hard to obtain an accurate matching result when the difference of pixel value is not large. To solve that problem, we propose a census transform method that applies different 4-step weight for each pixel value difference by applying an assistance window inside the window kernel. If the current pixel value is larger than the average of assistance window pixel value, a high weight value is given. Otherwise, a low weight value is assigned to perform a differential census transform. After generating an initial disparity map using a weighted census transform and input images, the gradient information is additionally used to model a cost function for generating a final disparity map. In order to find an optimal cost value, we use guided filtering. Since the filtering is performed using the input image and the disparity image, the object boundary region can be preserved. From the experimental results, we confirm that the performance of the proposed stereo matching method is improved compare to the conventional method.

로봇 연동제어 다축 스팟용접 시스템 및 범용 멀티 행거 개발

문지훈(Ji Hun Mun),김정호(Jung Ho Kim),이승욱(Seung Uk Lee) 대한기계학회 2014 대한기계학회 춘추학술대회 Vol.2014 No.4-3