음향 신호의 양방향적 연관성을 고려한 유해 콘텐츠 검출 기법

송광호(KwangHo Song),김유성(Yoo-Sung Kim) 한국콘텐츠학회 2020 한국콘텐츠학회논문지 Vol.20 No.5

본 논문에서는, 최근 인터넷을 통해 빠르게 확산하고 있는 음향 중심의 음란 콘텐츠를 정확하게 검출하기 위해, 음향의 이웃 신호들 사이에 존재하는 양방향적 연관성을 기반으로 콘텐츠의 유해성을 판단하는 기법을 제안한다. 이웃한 음향 신호들간의 양방향적 연관성을 추출하기 위하여, 양방향 확장-인과 컨벌루션 연산(bi-directional dilated-causal convolution operation)들을 수행하는 확장-인과 컨벌루션 블록을 쌓아만든 다층구조 양방향 확장-인과 컨벌루션 네트워크를 제안한다. 제안된 유해 콘텐츠 검출 기법의 효용성 검증을 위한 실험에서는 음향 신호의 각 시점으로부터 추출한 단순 특징 벡터를 기계학습 모델로 분류하는 기존방법, 기존의 확장-인과 컨벌루션 블록을 적용해 음향 시계열 데이터의 순 방향 연관성만을 이용하는 기법, 그리고 본 연구에서 제안한 음향 시계열 데이터의 양방향 연관성까지 이용하여 유해성을 판단하는 기법의 분류 정확성을 비교하였다. 실험 결과에 의하면 본 연구에서 제안한 기법이 최대 84.38%의 인식 정확도를 가지며 이는 기존의 단순 특징 벡터를 이용하는 방법보다 약 25.80% 높고 순 방향 연관성만을 이용하는 기법보다 약 3.10% 높은 것으로 분석되었다. In this paper, we propose a new pornographic content detection scheme using bi-directional relationships between neighboring auditory signals in order to accurately detect sound-centered obscene contents that are rapidly spreading via the Internet. To capture the bi-directional relationships between neighboring signals, we design a multilayered bi-directional dilated-causal convolution network by stacking several dilated-causal convolution blocks each of which performs bi-directional dilated-causal convolution operations. To verify the performance of the proposed scheme, we compare its accuracy to those of the previous two schemes each of which uses simple auditory feature vectors with a support vector machine and uses only the forward relationships in audio signals by a previous stack of dilated-causal convolution layers. As the results, the proposed scheme produces an accuracy of up to 84.38% that is superior performance up to 25.80% than other two comparison schemes.

단어 동시출현관계로 구축한 계층적 그래프 모델을 활용한 자동 키워드 추출 방법

송광호(KwangHo Song),김유성(Yoo-Sung Kim) 한국정보과학회 2017 정보과학회논문지 Vol.44 No.5

키워드 추출은 주어진 문서로부터 문서의 주제나 내용에 관련된 단어들을 추출해내는 방법으로 대량의 문서를 다루는 텍스트마이닝 연구들이 전처리에서 공통적으로 거치는 대표 자질 추출에서 중요하게 활용될 수 있다. 본 논문에서는 하나의 문서의 주제에 적합한 키워드를 추출하기 위해 문서에 출현한 단어들 사이의 동시출현관계, 동시출현 단어 쌍 사이의 출현 종속 관계, 단어들 사이의 공통 부분단어 관계 등의 다양한 관계들을 특징으로 활용하여 구축한 계층적 그래프 모델을 제안하고, 그래프를 구성하는 정점(Vertex)들의 중요도를 평가할 때 입력 간선(Edge)에 의한 영향뿐만 아니라 출력 간선에 의한 영향도 고려한 새로운 중요도 산출 방법을 제안하며, 이를 토대로 점진적으로 키워드를 추출해내는 방안을 제안한다. 그리고 제안한 방법의 정확성과 주제적 포괄성 검증을 위해 다양한 분야의 주제를 가진 문서 데이터에 다양한 평가방법을 적용해 기존의 방법보다 전체적으로 더 나은 성능을 보임을 확인하였다. Keyword extraction can be utilized in text mining of massive documents for efficient extraction of subject or related words from the document. In this study, we proposed a hierarchical graph model based on the co-occurrence relationship, the intrinsic dependency relationship between words, and common sub-word in a single document. In addition, the enhanced TextRank algorithm that can reflect the influences of outgoing edges as well as those of incoming edges is proposed. Subsequently a novel keyword extraction scheme using the proposed hierarchical graph model and the enhanced TextRank algorithm is proposed to extract representative keywords from a single document. In the experiments, various evaluation methods were applied to the various subject documents in order to verify the accuracy and adaptability of the proposed scheme. As the results, the proposed scheme showed better performance than the previous schemes.

Primary Culture 한 소 모양체근 세포에서의 PLC/IP₃ 및 cAMP/PKA 경로를 통한 차즈기 열수 추출물의 수축 조절 효과

송광호(Kwangho Song),구연경(Yean Kyoung Koo),정현묵(Hyun Mook Jung),임예지(Yeji Lim),나귀환(Guihwan Na),김영식(Yeong Shik Kim) 한국식품영양과학회 2019 한국식품영양과학회지 Vol.48 No.8

GPCR을 통한 모양체근의 조절은 PLC/IP₃ 경로와 cAMP/PKA 경로를 통해 발생한다. 이 두 경로 모두 세포 내액의 Ca<SUP>2+</SUP> 이온 농도를 증가시켜 calmodulin의 활성화를 통해 근육을 수축시키게 되는데 수축을 억제하여 원상 복귀시키기 위해서는 세포 내액의 Ca<SUP>2+</SUP> 이온 농도를 감소시켜 조절할 수가 있다. 또 다른 조절기전으로서는 cAMP/PKA 경로를 통한 MLCK 활성화를 거쳐 모양체근을 수축시키는 방식이다. 차즈기 열수 추출물은 cyclopentolate hydrochloride를 처리하여 근육의 수축을 억제시킨 primary cultured모양체근 세포에서 GPCR에 리간드로서 성공적으로 결합하여 PLC/IP₃ 경로와 cAMP/PKA 경로 모두를 활성화시킬 수 있다는 것을 확인하였다. 이렇게 활성화된 신호전달체계는 calmodulin과 MLCK를 활성화하여 cyclopentolate hydrochloride에 의해 마비되거나 수축 적응이 억제된 모양체근을 수축시킨다는 점을 확인하였다. 하지만 모양체근과 같은 평활근의 경우 troponin 단백질의 부재로 Ca<SUP>2+</SUP>을 통한 조절보다는 MLCK 활성화를 통한 조절기전이 주를 이루고 있다는 점을 감안할 때 차즈기 열수 추출물은 GPCR을 거쳐 cAMP/PKA 활성화를 통해 순차적으로 MLCK의 인산화를 유도함으로써 모양체근을 조절하는 것으로 생각된다. We investigated the regulatory effects of a hot water extract of Perilla frutescens var. acuta (PF) on the contraction of primary cultured bovine ciliary muscle cells via the PLC/IP₃ and cAMP/PKA pathways. In this study, we treated cyclopentolate hydrochloride (10 μM) on the cells to inhibit ciliary muscle contraction and then we treated these cells with PF (50 or 200 μg/mL) to restore the accommodation process of these the cells. Intracellular levels of IP₃, Ca<SUP>2+</SUP> and cAMP were measured by ELISA. For determining the mode of action in the signaling pathways, the protein expressions of IP3, CaM, MLCK and PKA were measured by performing western blotting. As a result, PF increased the intracellular level of Ca<SUP>2+</SUP> and CaM, promoted by IP₃ activation, indicating that certain components of PF bind to the G-protein coupled receptor (GPCR) and so activate the PLC/IP₃ signaling pathway. On the other hand, the PF elevated the intracellular levels of cAMP and PKA, and this resulted in the activation of MLCK to regulate ciliary muscle contraction. These results suggested that PF has an ability to regulate ciliary muscle contraction via both the PLC/IP₃ and cAMP/PKA signaling pathways in cyclopentolate hydrochloride-treated primary cultured ciliary muscle cells. However, due to characteristics of ciliary smooth muscle, this study carefully suggests that PF is more favorable to the cAMP/PKA pathway rather than the PLC/IP₃ pathway in contraction or restoring the accommodation process via further activation of MLCK.

참고문헌 인용부호 자동부착 지원 시스템 개발

송광호(Kwangho Song),민지홍(Jihong Min),김유성(Yoo-sung Kim) 한국정보과학회 2015 정보과학회 컴퓨팅의 실제 논문지 Vol.21 No.10

약 본 논문에서는 작성중인 기술문서에 대해 기존 문서 데이터베이스내의 원본문서들과 유사도를 비교하여 일정기준 이상의 유사성을 갖는 문장을 포함하는 원본문서들의 서지정보를 모아 참고문헌 목록을 자동으로 작성해 주며 대상 문서의 해당 문장에는 참고문헌 인용부호를 부착할 수 있도록 지원하는 시스템을 소개한다. 또한 이러한 제안 내용을 토대로 하여 웹기반 시범 서비스 모델을 설계하고 이를 온라인 서비스로 실현하기 위한 프로토타입 시스템을 개발하였다. 개발된 시스템을 활용하여 기술문서 작성자에게 작성중인 기술문서에 대해 기 발표된 원본문서내의 유사 문장을 검색하고 이에 대한 참고문헌 인용부호를 부착할 수 있도록 지원함으로써 표절 문제를 선제적으로 예방하고 나아가 참고문헌 목록 생성 및 인용부호 자동부착 지원기능을 통해 논문 저술에 편리성을 확보할 수 있을 것이라 기대한다. In this paper, the design and implementation of an automatic reference-citation-mark attachment system are introduced. The system automatically attaches a citation mark to the end of a sentence in a technical document if the corresponding statement has a high similarity to another statement in the same document; simultaneously, the corresponding bibliographic data is automatically created from the cited-document information. In accordance with functional specifications, a Web-based, online service model and the development of its prototype system are proposed. The developed system can help in the elimination of unexpected plagiarism issues, and will alleviate the burdens of reference citation and reference-list creation for technical writers.

보행자 이미지에서 지역 다중규모 특징 임베딩 추출을 위한 어텐션 피라미드 이용의 보행자 재식별

송광호(Kwangho Song),김유성(Yoo-Sung Kim) 한국정보과학회 2021 정보과학회논문지 Vol.48 No.12

본 논문에서는 보행자 이미지로부터 불필요한 배경 잡음을 배제시키며 정교한 지역 특징 임베딩(local feature embedding)을 추출하기 위해 어텐션 매커니즘을 결합시킨 이중 피라미드를 이용하는 새로운 보행자 재식별 방법을 제안한다. 규모 피라미드와 지역 피라미드로 구성된 이중 피라미드에 공간 어텐션을 적용해 특징 임베딩에 불필요한 배경 요소들이 반영되는 것을 억제시키고, 채널 어텐션을 적용해 추출된 다중규모 특징 중에서 상대적으로 중요도가 높은 것으로 지역 특징 임베딩이 구성되도록 한다. 실험에서는 각 구성 피라미드에 공간 어텐션과 채널 어텐션이 적용되는 효과를 비교함으로써 각 어텐션의 적용에 따른 재식별 정확도 변화를 관찰하고, 이를 기존의 우수 연구들과 비교하였다. 실험 결과에 따르면 제안 기법은 최대 99.4%의 1순위 정확도를 보였으며, 이는 기존 연구들보다 최소 약 0.2%, 최대 약 13.8%까지 높은 것으로 분석되었다. In this paper, a person re-identification scheme using the dual pyramid adapting attention mechanisms to extract more elaborate local feature embedding by excluding the noises caused by the unnecessary backgrounds in person’s image is proposed. With the dual pyramid of local and scale ones, the spatial attention is used to suppress the noise effects caused by unnecessary backgrounds, and the channel attention is used to emphasize the relatively important multiscale features when the local feature embedding is constructed. In the experiments, the proposed scheme was compared with other cases in which the attention module is not used for each pyramid to confirm the optimal configuration and compared based on the rank-1 accuracy with the state-of-the-art studies for the person re-identification. According to the experimental results, the proposed method showed a maximum rank-1 accuracy of 99.4%, which is higher by at least about 0.2% and at most by about 13.8% than previous works.

지능형 영상 감시 시스템에서 사람 자세 추정을 이용한 납치 상황 인식

박주현(Ju Hyun Park),송광호(KwangHo Song),김유성(Yoo-Sung Kim) 한국컴퓨터정보학회 2018 韓國컴퓨터情報學會論文誌 Vol.23 No.8

In this paper, a kidnapping detection scheme in which human pose estimation is used to classify accurately between kidnapping cases and normal ones is proposed. To estimate human poses from input video, human’s 10 joint information is extracted by OpenPose library. In addition to the features which are used in the previous study to represent the size change rates and the regularities of human activities, the human pose estimation features which are computed from the location of detected human’s joints are used as the features to distinguish kidnapping situations from the normal accompanying ones. A frame-based kidnapping detection scheme is generated according to the selection of J48 decision tree model from the comparison of several representative classification models. When a video has more frames of kidnapping situation than the threshold ratio after two people meet in the video, the proposed scheme detects and notifies the occurrence of kidnapping event. To check the feasibility of the proposed scheme, the detection accuracy of our newly proposed scheme is compared with that of the previous scheme. According to the experiment results, the proposed scheme could detect kidnapping situations more 4.73% correctly than the previous scheme.

과거 데이터 분석을 통한 원룸의 가스사용량 예측

박준영(JunYyoung Park),송광호(Kwangho Song),정용안(Yongan Cheong),한대진(Deajin Han),나웅수(Woongsoo Na) 한국통신학회 2024 한국통신학회 학술대회논문집 Vol.2024 No.1

협동적 데이터 프로세스를 통해 고품질 데이터를 형성하기 위한 데이터옵스 프레임워크의 개념적 설계

전지연(JiYeon Jeon),송광호(KwangHo Song),최진(Gene Choi) 한국정보과학회 2022 한국정보과학회 학술발표논문집 Vol.2022 No.06

지능형 영상 감시 시스템에서 모바일 센서 융합을 이용한 폭력행위 인식

차현인(HyunIn Cha),송광호(KwangHo Song),김유성(Yoo-Sung Kim) 한국정보과학회 2018 정보과학회논문지 Vol.45 No.6

본 논문에서는 지능형 CCTV에서 동시다발적이고 연속적인 행위들로부터 추출한 특성들을 반영하여 폭력행위를 인식하는 방법으로서 그룹 ROI(Region of Interest)를 검출하고 ROI에서의 Dense Optical Flow 알고리즘을 사용해 얻은 움직임 정보와 영상 내 행위자가 소지한 모바일 기기의 관성측정장치로부터 얻은 가속도와 각속도 정보를 융합한 폭력행위 인식모델을 제안한다. 그리고 제안한 모델의 연산시간 감소를 통한 실시간성 확보와 영상만을 사용했을 때의 가려짐에 따른 성능 저하 현상의 성능 개선여부를 평가하기 위한 실험들을 진행하였으며 실행시간 측면에서 약 5.26배 빠른 연산속도를 보였고 정확도 측면에서 11.4% 증진된 결과를 보였다. 이를 통해 제안 모델이 폭력행위 인식에 발생하는 과도한 연산에 따른 실시간성 문제를 보완할 수 있고 영상 내 행위자 사이의 가려짐에 따른 비전 인식 불능에 대한 문제점을 보완할 수 있음을 알 수 있다. In this paper, we propose a violence recognition model by reflecting features extracted by concurrent and continuous action in intelligent CCTV through detecting group ROI(Region of Interest) from image. And then, proposed model uses extracted motion information obtained by using Dense Optical Flow algorithm in ROI and fusing of the acceleration and angular velocity information obtained from the inertial measurement unit of the mobile device possessed by actor. Experiments were performed to evaluate the reduction of the computation time of the proposed model and improvement of the performance degradation due to the occlusion. Result of experiment, the execution time was about 51 times faster and the accuracy of recognition of violence was improved by 11% compared to previous research methods. Therefore, the proposed model can overcome the problem of real-time failure due to excessive computation and can solve the problem of invisibility due to occlusion by actor in the image in recognition of violence.

상황 인식용 Ground Truth 데이터의 자동 생성을 위한 외부 인식기 연동 API 개발

김동현(DongHyun Kim),송광호(Kwangho Song),김유성(Yoo-sung Kim) 한국정보과학회 2018 정보과학회 컴퓨팅의 실제 논문지 Vol.24 No.5

지능형 CCTV의 이상 상황 인식용 Ground Truth(GT) 데이터의 생성을 위해 사용되는 비디오 주석 생성 시스템은 대량성, 다양성, 상세성을 만족해야 한다. 본 연구팀은 이전 연구에서 대량성, 다양성을 만족시키기 위한 목적으로 인터페이스 파일을 통해 외부 인식기를 연동하여 주석을 자동 생성하는 INHA-VAS를 제안하였다. 하지만 INHA-VAS는 외부 인식기 연동시에 과도한 노력이 필요하고, 상세성을 만족시키지 못하였기 때문에 주석자의 노력을 최소화하고, 이미지 인식기를 통해 상세성을 지원하는 INHA-VAS API를 제안한다. API의 효용성 검증 실험을 진행한 결과 INHA-VAS API가 더 쉽게 외부 인식기를 연동함을 알 수 있었다. 또한, INHA-VAS API를 활용하는 INHA-VAS가 대량성, 다양성, 상세성을 만족하는 것으로 보아 INHA-VAS가 상황 인식용 GT 데이터를 생성하는 데 적합한 비디오 주석생성 시스템임을 알 수 있었다. A video annotation system used to generate ground truth (GT) data for intelligent closedcircuit television (CCTV) abnormal situation recognition should satisfy the massiveness, diversity, and detail of the previous video annotation system. In the previous research, we proposed INHA video annotation system (INHA-VAS), which automatically generates annotations by linking third-party detectors through interface files for the purpose of satisfying massiveness and diversity. However, since INHA-VAS requires excessive effort in linking with third-party detectors and does not satisfy the detail, the INHA-VAS Application Programming Interface (API) that minimizes the annotator"s effort and supports detail through an image detector is proposed. The result of the validation experiment of the API, showed that the INHA-VAS API linked the third-party detector more easily. In addition, INHA-VAS using INHA-VAS API satisfies the need for massiveness, diversity, and detail, so that INHA-VAS is a video annotation system suitable for generating GT data for event recognition.