m-shaper: A Sketch Drawing System for Musical Shape Generation

권두영,Kwon, Doo-Young The Korea Academia-Industrial cooperation Society 2015 한국산학기술학회논문지 Vol.16 No.2

This paper proposes a sketch drawing system called m-shaper for musical shape generation. Through simple sketch drawing, users can generate musical shape configuration which can be played by a computer. One key ingredient of the process is a unique concept for the interactive musical shape generation that combines shape and sound based on the designers' manual inputs. m-shaper captures the numerical values of drawing characteristics and determines how the musical notes and shapes can be generated. Using a tablet, four sketch movements are captured such as pressure, tilt, rotation and speed. Each point of a shape corresponds to a certain musical note that represents a type of instrument, duration, pitch, and octave. The current m-shaper has been developed as a computational tool for supporting the schematic design process. Designers in m-shaper draw geometric sketches with a musical inspiration and explore possible conceptual forms. They also can control the parameters for results and transform their sketch drawing. 본 논문은 음악적 형태 생성을 위한 스케치 드로잉 시스템, 엠쉐이퍼 (이하 m-shaper)를 제안한다. 간단한 스케치 드로잉을 통해 사용자들은 컴퓨터로 바로 연주가 가능한 음악적 형태를 구성할 수 있다. m-shaper는 드로잉 특징을 규정하는 변수를 획득하고 이를 이용하여 음표와 형태를 제작한다. 타블렛을 이용하여 4가지 스케치 움직임 정보, 압력, 회전각도, 기울기 각도, 속도 정보를 감지한다. 형태를 구성하는 각각의 점은 악기 종류, 음길이, 음높낮이, 옥타브를 표현하는 특정음표에 매핑된다. 현재 m-shaper 시스템은 디자인 초기단계를 지원하는 컴퓨터 연산도구로 개발되었다. 디자이너는 음악적 영감을 받으며 기하학적인 스케치를 그리고 개념 형태를 탐색할 수 있다. 디자이너들은 관련 제어값을 조절하면서 결과물을 조절하고 스케치 드로잉을 변형할 수 있다.

適正賃金制에 관한 研究

權斗榮(Doo Young Kwon),朴鍾悅 고려대학교 노동문제연구소 1973 노동연구 Vol.4 No.-

삼차원 핸드 제스쳐 디자인 및 모델링 프레임워크

Doo-Young Kwon(권두영) 한국산학기술학회 2013 한국산학기술학회논문지 Vol.14 No.10

본 논문에서는 삼차원 핸드 제스쳐 디자인 및 모델링을 위한 프레임워크를 기술한다. 동작 인식, 평가, 등록 을 지원하기위해 동적시간정합(Dynamic Time Warping, 이하 DTW)과 은닉마코브모델 (Hidden Markov Mode, 이하 HMM)을 활용 하였다. HMM은 제스쳐 인식에 활용되며 또한 제스쳐 디자인과 등록 과정에 활용된다. DTW은 HMM 훈련 데이터가 부족한 경우 제스쳐 인식에 활용되고, 수행된 동작이 기준 동작의 차이를 평가하는 데에 활용 된다. 동작 움직임에 나타나는 위치 정보와 관성 정보를 모두 획득하기 위해 바디센서와 시각센서를 혼합하여 동작 을 감지하였다. 18개의 예제 손동작을 디자인하고 다양한 상황에서 제안된 기법을 테스트하였다. 또한 제스쳐 수행 시 나타나는 사용자간 다양성에 대해 토론한다. We present a framework for 3D hand gesture design and modeling. We adapted two different pattern matching techniques, Dynamic Time Warping (DTW) and Hidden Markov Models (HMMs), to support the registration and evaluation of 3D hand gestures as well as their recognition. One key ingredient of our framework is a concept for the convenient gesture design and registration using HMMs. DTW is used to recognize hand gestures with a limited training data, and evaluate how the performed gesture is similar to its template gesture. We facilitate the use of visual sensors and body sensors for capturing both locative and inertial gesture information. In our experimental evaluation, we designed 18 example hand gestures and analyzed the performance of recognition methods and gesture features under various conditions. We discuss the variability between users in gesture performance.

[special issue: 디지털 아키텍처] 디지털 건축과 아날로그 인간

권두영(Kwon Doo-Young) 대한건축학회 2004 建築 Vol.48 No.11

韓國勞勤市場에 관한 調査研究

權斗榮(Kwon Doo Young) 고려대학교 노동문제연구소 1975 노동연구 Vol.5 No.-

m-shaper: A Sketch Drawing System for Musical Shape Generation

Doo-Young Kwon(권두영) 한국산학기술학회 2015 한국산학기술학회논문지 Vol.16 No.2

본 논문은 음악적 형태 생성을 위한 스케치 드로잉 시스템, 엠쉐이퍼 (이하 m-shaper)를 제안한다. 간단한 스케치 드로잉을 통해 사용자들은 컴퓨터로 바로 연주가 가능한 음악적 형태를 구성할 수 있다. m-shaper는 드로잉 특징을 규정하 는 변수를 획득하고 이를 이용하여 음표와 형태를 제작한다. 타블렛을 이용하여 4가지 스케치 움직임 정보, 압력, 회전각도, 기울기 각도, 속도 정보를 감지한다. 형태를 구성하는 각각의 점은 악기 종류, 음길이, 음높낮이, 옥타브를 표현하는 특정 음표에 매핑된다. 현재 m-shaper 시스템은 디자인 초기단계를 지원하는 컴퓨터 연산도구로 개발되었다. 디자이너는 음악적 영감을 받으며 기하학적인 스케치를 그리고 개념 형태를 탐색할 수 있다. 디자이너들은 관련 제어값을 조절하면서 결과물을 조절하고 스케치 드로잉을 변형할 수 있다. This paper proposes a sketch drawing system called m-shaper for musical shape generation. Through simple sketch drawing, users can generate musical shape configuration which can be played by a computer. One key ingredient of the process is a unique concept for the interactive musical shape generation that combines shape and sound based on the designers' manual inputs. m-shaper captures the numerical values of drawing characteristics and determines how the musical notes and shapes can be generated. Using a tablet, four sketch movements are captured such as pressure, tilt, rotation and speed. Each point of a shape corresponds to a certain musical note that represents a type of instrument, duration, pitch, and octave. The current m-shaper has been developed as a computational tool for supporting the schematic design process. Designers in m-shaper draw geometric sketches with a musical inspiration and explore possible conceptual forms. They also can control the parameters for results and transform their sketch drawing.

픽셀아트기반 게임 공동창작에 대한 연구 - 마리오되기를 중심으로

권두영(Doo-Young Kwon),이현기(Hyun-Ki Lee),홍창현(Chang-Hyeon Hong),김주연(Joo-Yeon Kim) 한국산학기술학회 2021 한국산학기술학회논문지 Vol.22 No.12

본 연구의 목적은 비전문가들이 함께 모여 하나의 공통된 주제 속에서 자신의 아이디어로 게임을 디자인하고 구현할 수 있는 창작 방법론을 개발하는 것이다. 연구 방법으로는 컴퓨터 그래픽 디자인과 코딩이 생소한 참가자들이 함께 협업하여 아이디어를 내어 마리오 되기(Be the Mario)라는 게임을 공동으로 창작한다. 공동창작 임무를 수행하면서, 관람자들이 개별 창작자의 소중한 꿈을 경험하도록 하였다. 마리오 되기는 초기 버전 마리오 게임 스타일로 제작되었으며 프로젝트에 참여한 8명의 창작자가 각자 자신의 스토리를 기획하고, 캐릭터와 스테이지를 제작하였다. 이를 모아 하나의 옴니버스식 게임으로 구성하였다. 자신의 꿈을 주제로 게임 공간을 연출하고 마리오 대신 본인을 닮은 캐릭터를 픽셀아트 작품으로 창작하였다. 횡스크롤 게임의 구조에 공동 스테이지와 개별 스테이지를 두어 개발 및 참여함으로써, 다수의 비전문가가 게임개발의 참여가 가능한 공동창작 디자인방법론을 개발하였다. The purpose of this study is to develop a creative methodology in which non-professionals can gather together to design and implement games in a common theme with their own ideas. As a research method, participants unfamiliar with computer graphic design and coding come up with ideas and jointly create a game called Be The Mario and introduce the results for integration. While carrying out the co-creation mission, viewers were enabled to experience the precious dreams of the individual creators. Be the Mario was produced in the style of the early version of the Mario game, and eight creators who participated in the project planned their own stories and produced characters and stages. These stories, characters, and stages were collected and composed into one omnibus game. Each participant directed a game space under the theme of his/her dream and created a character that resembles him/her as a pixel artwork instead of Mario. By developing and participating in the structure of cross-scroll games with joint and individual stages, the co-creation design methodology was developed enabling various non-expert people to participate in game development.

방자전: 관객참여 인터랙티브 미디어 공연

오지숙(Gi Sook Oh),권두영(Doo Young Kwon) 한국HCI학회 2014 한국HCI학회 학술대회 Vol.2014 No.2

본 논문에서는 단순 관람의 공연 형식을 확장하여 관객이 다양한 형식으로 직접 공연에 참여하는 새로운 형태의 공연을 제안한다. 디지털 기술을 활용하여 관객이 공연에 참여하는 다양한 기법 (관객 캐릭터, 협력 게임, 인터랙티브 무대효과)을 소개한다. 관객캐릭터는 관객의 얼굴이 맵핑된 디지털 배우로 등장인물로 공연에 참여하며, 실제 배우와 함께 공연을 진행한다. 협력 게임은 배우와 관람객이 함께 협력하여 특정 상황을 극복하는 게임적인 기법이다. 인터랙티브 무대효과는 관람객의 호응도를 이용하여 공연 무대의 효과를 인터랙티브하게 변화시키는 기법이다. 본 공연을 통해 관객은 공연에 대한 몰입도를 표출하면서 공연 스토리 전개와 영상제어에 참여할 수 있다. 본 논문에서는 구현된 기법을 테스트하기 위해 관객 참여 인터랙티브 공연을 기획하여 실제로 공연중에 나타날 수 있는 다양한 가능성과 문제점을 도출하고 기술하였다. In this paper, we propose a new type of performance by extending the conventional format of the performance where audiences participate in a variety of ways. Utilizing digital technology, we propose various types of techniques (the audience character, collaborative games, interactive stage effect ) that the audience participates in the performance. The audience participates in the performance as digital characters. The audience’s face is mapped into the characters and they perform with the actors. The game is performend in cooperation with the actors and audience-specific techniques to cope with the situation in the game. Interactive effects of stage performances are changing stage environment. Through three techniques, audiences express commitments and participate in the control of performance and visual stories. During the test of the implementation, we examined an interactive audience participation, and derived a wide range of possibilities and the problems described.

시각적 연상기반의 드로잉 방법 및 드로잉 도구 개발

육은주(Youk, Eun-Joo),권두영(Kwon, Doo-Young) 인제대학교 디자인연구소 2011 Journal of Integrated Design Research (JIDR) Vol.10 No.2

시각적 연상은 이미지, 물체, 광경 등 다양한 대상을 시각을 통해 인지하고 자신의 경험과 지식, 환경을 바탕으로 관련된 생각을 하는 것이다. 본 논문에서 제안하는 시각적 연상 드로잉은 시각적 연상을 통해 떠올린 주제의 심상 이미지를 다양한 색, 형태, 질감 등을 고려하여 그림으로 표현하는 것이다. 본 논문에서는 시각적 연상 드로잉의 개념과 특성에 대해 설명하고 이에 기초한 시각적 연상 드로잉 방법론을 소개한다. 아날로그 매체와 디지털 매체의 특성을 고려하여 개발된 3가지 방식의 연상 드로잉 저작 도구를 설명한다. 본 논문에서 제안된 연상 드로잉 기법과 시스템의 테스트를 위해 아날로그 드로잉 체험전시와 디지털 드로잉 체험전시를 개최하였다. 300여명의 사용자가 참여하여 다양한 드로잉 결과물들이 만들어지고 공유되었다. 여기에서 도출된 사용자 피드백과 다양한 이슈들을 본 논문에서 설명한다 Visual association is the ability to relate visual stimuli to others, previously learned visual images in a meaningful way. Visual association drawing proposed in this paper uses a visual association skill to get a drawing idea and express using the associated color, shape, and drawing. In this drawing process, users visually think their own concrete image from the given abstract image and draw the emergent shapes. In this paper, We describe the concept and characteristics of the drawing process. Three different drawing systems were developed considering the characteristics of an analogue media and digital media. We tested the proposed drawing techniques and tools in two different exhibitions. More than 300 users have participated, and various drawing outputs were generated and shared. We explain various issues and feedbacks from the exhibitions.

비주얼센서와 바디센서를 이용한 뉴미디어 타악기(X-Percussion) 개발

설호종(Seol Ho Jong),권두영(Kwon Doo Young) 한국HCI학회 2017 한국HCI학회 학술대회 Vol.2017 No.2

타악기는 인간에게 가장 친숙한 악기이고, 사운드의 분절적 특징이 디지털의 원리인 0과 1의 원리와 상동하기 때문에 뉴미디어 기술과 융합하기에 용이하다. 본 연구에서는 뉴미디어가 융합된 타악기의 다양한 확장성에 주목하였다. 뉴미디어 관점에서의 타악기 분류 방법을 제시하고, 그 방법에 따라 연주자의 움직임은 비주얼 센서, 악기 연주와 연주자의 미시적인 움직임은 바디센서를 동시에 사용함으로서 연주자의 사이즈, 동작의 크기, 위치와 방향, 섬세한 움직임 및 동작의 강/약 정보까지 인식할 수 있는 엑스퍼커션(X-Percussion)을 개발하였다. 또한 그렇게 얻어진 다양한 데이터를 통해 벡터 필드와 다차원 시각화를 적용하여 예술성을 극대화시킨 영상을 실시간으로 제어 할 수 있도록 하였다. Percussion instruments are the most familiar instruments for humans, and are easy to integrate with new media technology because the segmental characteristics of the sound are identical to the principles of digital and 0 and 1. We have focused on various extensibility of percussion instruments that are fusion of new media. We propose a method of classifying percussion instruments from the viewpoint of new media. The movement of the player is sensed using a visual sensor, and musical instrument performance and micro movement of the performer are captured by using the body sensor at the same time. X-Percussion can recognize the details of motion. By applying vector field and multidimensional visualization through various data obtained in this way, it is possible to control the image which maximizes artistry in real time.