BuddyMirror: 이미지 메이킹 서비스를 지원하는 스마트 미러

조연정(Yeon-Jeong Jo),심채린(Chae-Lin Sim),장효원(Hyo-Won Jang),진재환(Jae-Hwan Jin),이명준(Myung-Joon Lee) 인문사회과학기술융합학회 2019 예술인문사회융합멀티미디어논문지 Vol.9 No.5

사람에 대한 이미지 메이킹은 외모나 인상, 자신감 등 자신을 표현할 수 있는 다양한 요소들을 개선하는 방법이다. 사람들은 이미지 메이킹을 위하여 전통적인 방법으로서 거울이나 카메라를 이용하여 자신의 모습을 확인하거나 발표 연습을 수행한다. 최근에는 스마트 미러가 여러 분야에서 널리 활용됨에 따라 스마트 미러가 거울을 대신하여 이미지 메이킹 도구로 사용하고자 하는 시도가 빈번하게 등장하고 있다. 스마트 미러는 쉽게 접근이 가능하다는 거울의 특성을 가질 뿐만 아니라 카메라나 마이크 등 다양한 기기를 부착할 수 있으므로 이미지 메이킹 서비스를 제공하기 위한 도구로서 적합하다. 본 논문에서는 사용자에게 이미지 메이킹 서비스를 제공하는 스마트 미러 소프트웨어인 BuddyMirror와 이를 유연하게 동작시키기 위한 전용 모바일 앱의 개발에 대하여 기술한다. BuddyMirror는 사용자의 요청에 따라 발표준비, 모의면접, 스타일링 서비스를 제공하고 전용 모바일 앱과의 연동 기능을 제공한다. 이를 위하여, 본 논문에서는 개발된 새로운 서비스를 널리 사용되는 스마트 미러 개발 플랫폼인 MagicMirror의 모듈로서 구현하고 동작시키기 기법을 설명한다. 전용 모바일 앱은 사용자가 이미지 메이킹 서비스를 제공 받기 위해 발표 자료를 스마트 미러에 전달하거나 촬영된 영상을 다운로드하는 기능을 제공한다. Image making for a person is a way to improve various factors that can express oneself, such as appearance, impression, and confidence. In general, people use mirror or camera as a traditional method to make their own image or perform presentation exercises. Recently, as smart mirrors are widely used in various fields, attempts to use smart mirrors as image making tools instead of mirrors have been frequently made. Smart Mirror is considered as a suitable tool to provide image making service because it can attach various devices such as a camera and a microphone in addition to the main advantage of a mirror that it is easily accessible. In this paper, we present BuddyMirror - a smart mirror software that provides image-making service to users, and a dedicated mobile app for flexibly running the mirror software. BuddyMirror provides functions for presentation, mock interview, and styling service at the request of users, interworking with the dedicated mobile app. We also describe the techniques developed for implementing and activating each of the new services as a module of MagicMirror, a widely used smart mirror development platform. The developed mobile app enables users to deliver presentations to BuddyMirror or to download the recorded video for image-making services.

스마트 미러를 활용한 뷰티케어 서비스 전략방향 연구

원종욱 ( Won Jong-wook ),한규훈 ( Han Gyu-hoon ),오문석 ( Oh Moon-seok ) 커뮤니케이션디자인학회(구 시각디자인학회) 2018 커뮤니케이션 디자인학연구 Vol.63 No.-

기술 발전과 4차 산업혁명을 통해 스마트 패러다임이 빠르게 변화함에 따라 서비스 환경에서 스마트 미디어의 적용 방법도 다양하게 변화하고 있으며 각 서비스 별로 요구되는 서비스 가치 역시 다변화 되고 있다. 이에 본 연구는 스마트 미디어를 활용한 서비스 환경에서 서비스 제공자 측면에서 요구하는 서비스 가치를 도출하고 이를 스마트 디바이스를 통해 구현 할 수 있는 서비스 전략을 제안하고자 한다. 본 연구의 목적은 뷰티케어 샵에서 스마트 미러를 활용하여 서비스를 제공하는데 있어 서비스 제공자 측면의 서비스 가치가 반영된 전략을 도출하는데 있다. 본 연구를 위해 현재 4차 산업혁명 시기의 스마트 미디어 생태계에 대하여 고찰하였고, 이를 바탕으로 뷰티케어 샵에 적용하기 적합한 매체로서 스마트 미러를 선정하고 스마트 미러의 적용 방안에 대해 분석하였다. 이후 뷰티케어 샵 종사자 20명를 대상으로 FGI를 통한 정성적 연구를 진행하여 도출된 데이터를 바탕으로 사용자 경험 맵을 작성하고 서비스 단계별 핵심 요소들을 분석하였다. 분석된 데이터를 통해 서비스 제공자 측면에서의 다섯 가지 서비스 가치를 도출하고 서비스 가치가 반영된 세 가지 핵심 서비스 전략을 도출하였다. 또한 사용자 경험 맵을 수정/보완하여 이를 바탕으로 서비스 전략과 스마트 미러의 기능을 활용한 맞춤형 서비스를 제안하고 최종적으로 스마트 미러가 적용된 스마트 뷰티케어 샵 서비스 전략을 제안하였다. The smart paradigm is rapidly changing through technological development in the fourth industrial revolution. As a result, the application method of smart media in the service environment is changing in various ways, and the value required for each service turns into differnet ways as well. The purpose of this study is to derive the service value required by the service provider in the service environment using smart media. Also, the study proposes a service strategy that can be implemented through smart device. Specifically, the purpose of this study is to derive a strategy that reflects service value of service provider in providing service using smart mirror in beauty care shop. For this study, smart media ecosystem of the 4th industrial revolution period was reviewed, and smart mirror was selected as a suitable media for beauty care shop. After that, we conducted a qualitative research through FGI for 20 people in beauty care shop and created user experience map based on the derived data and analyzed key elements in each service stage. From the analyzed data, we derive five service values from the side of service provider and derive three core service strategies, which reflect the service value. For the last, the user experience map was revised and supplemented, and these are based on the service strategy and the customized service utilizing the functions of the smart mirror. As a result, the service strategy of the smart beauty care shop with the smart mirror was finally proposed.

사적공간의 스마트미러에서 사용자 식별 및 인증 기법 연구

문형진 중소기업융합학회 2019 융합정보논문지 Vol.9 No.7

As IoT Technology develops and Era of Hyperconnectivity comes, various kinds of customized services became available. As a next-generation display, a smart mirror accesses multimedia devices and provides various services, so it can serve as a social learning tool for the children and the old ones, as well as adults who need information. Smart Mirror must be able to identify users for individualized services. However, since the Smart Mirror is an easily accessible device, there is a possibility that information such as an individual's pattern and habit stored in the smart mirror may be exposed to the outside. Also, the other possibility of leakage of personal location information is through personal schedule or appointment stored in the smart mirror, and another possibility that privacy can be violated is through checking the health state via personal photographs. In this research, we propose a system that identify users by the information the users registered about their physique just like their face, one that provides individually customized service to users after identifying them, and one which provides minimal information and service for unauthenticated users. IoT 기술 발달로 인해 초연결사회가 되면서 다양한 사용자 맞춤 서비스가 요구된다. 맟춤 서비스로 활용되는 차세대 디스플레이인 스마트 미러를 멀티미디어 기기에 접근하여 다양한 서비스를 제공함으로 정보가 필요한 성인 뿐만 아니라 어린아이의 사회학습 도우미 및 노인의 생활 도우미 역할이 가능하다. 개인별로 차별화된 서비스를 위해서는 스마트 미러가 사용자를 식별하는 것이 가능해야 한다. 스마트 미러는 누구나 쉽게 접근 가능한 기기이므로 스마트 미러에 저장된 개인의 패턴이나 습관 등의 정보가 외부로 노출될 가능성이 있다. 사적 공간의 스마트 미러에 저장된 개인의 일정이나 약속 등 개인의 위치정보 유출 가능성이 있고, 개인 사진을 통해 건강상태를 확인할 수 있어 이를 통한 프라이버시 침해 가능성도 존재한다. 본 연구는 사용자가 얼굴 등의 생체정보를 등록하여 사용자를 식별하고 사용자 인증 후 개인에 맞는 서비스를 제공하고, 인증이 되지 않는 사용자에게는 최소한의 정보와 서비스만 제공하는 시스템을 제안한다.

Raspberry Pi를 이용한 스마트 미러 개발

린즈밍(Zhi-Ming Lin),김철원(Chul-Won Kim) 한국전자통신학회 2021 한국전자통신학회 논문지 Vol.16 No.2

사람들이 인공 지능 분야를 계속 연구하고 제안 한다. 그 때문에 상대적으로 성숙한 인공지능 기술이 일상생활에 더 많이 활용된다. 평소 어디서나 볼 수 있는 생활용품들이 지능화되기 시작하고 있다. 그러나 미러는 생활용품에서 가장 많이 쓰이는 용품 이다. 그 인공 지능 기술을 미러에 적용하는 데 가장 적합 하다. 이 논문의 연구 결과는 라즈베리 pi를 기반으로 설계된 스마트 미러가 날씨, 온도, 인사를 표시하고, 인간-미러 상호작용 기능을 가지고 있다. 본 논문 연구방법은 라즈베리 pi 3B +를 핵심 컨트롤러로 사용하고 Google 어시스턴트를 지능형 제어로 사용한다. 라즈베리 pi의 자체 WiFi를 통해 네트워크에 연결하면 미러가 자동으로 시간, 날씨 및 뉴스 정보 기능을 표시하고 업데이트 할 수 있다. 키워드를 사용하여 Google 어시스턴트를 깨운 다음 미러를 제어하여 음악을 재생하고 시간을 상기시키는 등의 작업을 할 수 있다. 스마트 미러 음성 상호 작용의 기능을 실현한다. 또한 이 연구에 사용 된 하드웨어는 모두 모듈식 어셈블리이고, 나중에 사용자가 직접 조립하는 것이 편리 하며. 저렴한 가격으로 시장 진흥에 적합하다. With people s continuous research and exploration in the field of artificial intelligence, more relatively mature artificial intelligence technology is applied in people s daily life. Mirrors are the most commonly used daily necessities in life, and it should be applied to artificial intelligence. The research results of this paper show that the smart mirror designed based on the raspberry pi displays weather, temperature, greetings, and has a human-mirror interaction function. The research method of this paper uses the Raspberry pi 3B + as the core controller and Google Assistant as the intelligent control. When connected to the network via Raspberry Pi s own WiFi, the mirror can automatically display and update time, weather and news information features. You can wake up the Google Assistant using keywords, then control the mirror to play music, remind the time, It implements the function of smart mirror voice interaction. Also, all the hardware used in this study is modular assembly. Later, it is convenient for user to assemble by himself later. It is suitable for market promotion at an affordable price.

공공장소의 UX 기반 스마트 미러 디스플레이 활용 체계 연구

오문석 ( Oh Moon-seok ),원종욱 ( Won Jong-wook ) 커뮤니케이션디자인학회 2017 커뮤니케이션 디자인학연구 Vol.59 No.-

스마트 환경으로의 급격한 미디어 패러다임의 변화는 IoT 사물인터넷을 이용한 사물간의 방대한 네트워크 형성을 통해 사람들에게 유기적이고 편리한 커뮤니케이션 환경을 조성하고 있다. 그 중 스마트 미러디스플레이의 활용은 대중들이 이용하는 공공장소의 디지털 기기를 활용한 커뮤니케이션에서 차세대 매체로 주목받고 있다. 이에 본 연구에서는 공공장소에서 효과적으로 스마트 미러 디스플레이를 활용하기 위하여 사용자의 경험을 기반으로 그 방안을 도출하고자 한다. 이를 위한 UX 평가를 위하여 피터 모빌(Peter Morville)의 허니콤(Honeycomb) 모델과 제이콥 니슬(Jacob Nielsen)의 사용성 평가 원칙을 바탕으로 사용성, 목적성, 매력성, 공간성의 주요 4개 요소를 도출하였으며, 공공성에 대한 이론적 고찰을 통해 공공장소를 공익시설, 교통시설, 상품판매시설, 서비스이용시설의 4가지로 분류하였다. 이를 바탕으로 객관적인 사용자 경험 기반 분석을 위하여 설문을 통한 통계적 분석기법을 활용한 방법을 이용하였으며, 그에 따른 가설을 설정하여 검증하였고 연령 및 성별 분석 결과를 도출하였다. 공공시설의 이용도가 높고 새로운 미디어에 대한 욕구가 높은 10대, 20대의 경우 공익, 교통, 상품판매, 서비스 시설에서 사용성에 미치는 영향도가 가장 높았다. 30대 이상의 층은 사용성과 목적성에 대한 욕구가 높게 나타났다. 이에 따라 본 연구는 향후 스마트 미러 디스플레이를 활용한 효과적인 공공장소 콘텐츠 제작을 위한 기초 자료를 마련하였다. The rapid change of the media paradigm into a smart environment is creating an organic and convenient communication environment through the formation of a vast network among objects using IoT Internet. Among them, the utilization of smart mirror display has been highlighted as a next generation media in communication using digital devices in public places that the public uses. Accordingly this study intends to derive the method based on the user`s experience in order to utilize smart mirror display effectively in a public place. Based on Peter Morville `s Honeycomb model and Jacob Nielsen` s usability evaluation principle, four major factors of utilization convenience, communication efficiency, media interest, and spatial suitability were derived for UX evaluation while the public places were classified as 4 categories of Public facilities, transportation facilities, commodity sales facilities, and service utilization facilities through a theoretical review of publicness. Based on this, we used statistical analysis method through questionnaires for the objective user experience based analysis, and then set and verified hypothesis and derived the results of age and gender analysis. As a result, the desire for media interest was shown to be high in young people without distinction in each place, and those in their 30s or older showed a high desire for ease of use and communication efficiency. Based on the results of age and gender, we prepared basic data to apply the needs of each floor in the future production of public space contents using Smart Mirror Display.

헤어 스타일링을 위한 스마트 미러 시스템 개발

김성덕(Seong-Deok Kim),송민석(Min-Seok Song),주현진(Hyun-Jin Joo),박현아(Hyun-A Park),한영오(Young-Oh Han) 한국전자통신학회 2020 한국전자통신학회 논문지 Vol.15 No.1

In this paper, we implemented a smart mirror that helps users to measure the results before the procedure by reflecting various hairstyles on the head. When the camera is used to capture a face in real time and recognize the face, the stored hair image is uploaded to provide a virtual image. In addition, the high production cost, which is a problem of the existing smart mirrors, was reduced by using Raspberry Pi, Open CV, and half mirror film, and various functions were implemented through touch control. It is also designed to provide information such as weather, calendar and time. 본 논문에서는 다양한 헤어스타일을 머리에 비춰봄으로써 사용자가 시술 전 결과물을 미리 가늠하는 것을 돕는 스마트 미러를 구현하였다. 카메라를 사용해 실시간으로 얼굴을 촬영하고 얼굴임을 인식하면 저장된 헤어 이미지를 올려 가상 이미지를 제공한다. 또한 기존 스마트 미러가 갖는 문제점인 높은 제작비용을 라즈베리 파이, Open CV, 하프미러 필름을 사용해 절감했고 터치 제어로 다양한 기능수행 능력을 구현했다. 또한 날씨, 달력 및 시간 등의 정보도 제공하도록 설계하였다.

사용 정보 기반 추천 서비스를 제공하는 스마트미러 설계 및 구현

고혜민(Hyemin Ko),김세림(Serim Kim),강남희(Namhi Kang) 한국정보과학회 2017 정보과학회 컴퓨팅의 실제 논문지 Vol.23 No.1

사물인터넷 기술이 발전되면서 인터넷을 통해 상호 연결되는 일상의 사물들이 증가하고 있다. 또한 연결된 사물들을 활용한 많은 스마트 서비스들이 개발되고 있다. 사용자 주변의 사물들 중 거울은 생활 속에서 다양한 역할을 한다는 점에서 광범위한 기능 적용과 서비스 확장이 가능하다. 최근 특정 장소의 특정 목적과 관심사를 가진 사람들이 모인 곳에 설치된 다양한 스마트미러 상품들이 출시되고 있다. 그러나 대부분 제공되는 정보가 한정적이라는 제한사항이 있다. 이를 개선하기 위해 본 논문에서는 사용자 맞춤형 서비스가 가능한 스마트미러를 설계하고 구현한다. 제한하는 스마트미러는 기존 인터넷 서비스에서 제공하고 있는 정보를 활용하여 사용자에게 실시간 교통 정보와 뉴스, 일정, 날씨 등의 생활 정보를 제공할 수 있다. 또한 스마트미러 사용자의 이용 내역을 기반으로 추천 서비스를 제공할 수 있다. Advances in Internet of Things Technology lead to the increasing number of daily-life things that are interconnected over the Internet. Also, several smart services are being developed by utilizing the connected things. Among the daily-life things surrounding user, the mirror can supports broad range of functionality and expandable service as it plays various roles in daily-life. Recently, various smart mirrors have been launched in certain places where people with specific goals and interests meet. However, most mirrors give the user limited information. Therefore, we designed and implemented a smart mirror that can support customized service. The proposed smart mirror utilizes information provided by other existing internet services to give user dynamic information as real_time traffic information, news, schedule, weather, etc. It also supports recommendation service based on user usage information.

스타일링을 위한 스마트 미러

강수빈(Su-Bin Kang),권승하(Seung-Ha Kwon),김윤호(Yun-Ho Kim),이수익(Soo-Ik Lee),한영오(Young-Oh Han) 한국전자통신학회 2021 한국전자통신학회 논문지 Vol.16 No.6

본 논문에서는 얼굴인식을 통해 가상으로 사용자의 얼굴에 안경 및 헤어 스타일을 선택하여 체험하고 날씨별 옷차림을 추천하여 다양한 스타일을 가이드하는 스마트 미러를 구현하였다. 또한 영상을 시청하는 동시에 화면을 보면서 메이크업이 가능하다. 그리고 라즈베리파이, 아크릴판, 하프 미러 필름을 사용하여 기존의 스마트 미러의 비용을 절감하였다. 날씨, 날짜, 달력, 뉴스 등의 기본 정보도 추가하였으며, 터치스크린을 사용함으로써 사용자의 편의를 증대하였다 In this paper, we implemented smart mirrors that virtually select and experience eyeglasses and hair styles on user faces through face recognition and recommend weather-specific clothes to guide various styles. In addition, makeup is possible while watching the video while looking at the screen. Raspberry Pi, acrylic plate and half mirror film were used to reduce the cost of conventional smart mirrors. It also added basic information such as weather, dates, calendars, and news, and increased user convenience by using a touchscreen.

얼굴 인식과 OpenCV를 활용한 IoT 스마트 미러

김재희,강보경,김용수 大田大學校 産業技術硏究所 2006 산업기술연구소 論文集 Vol.31 No.1

개개인의 개성이 다양한 형태로 나타나는 현대에서 미용에 대한 관심도 함께 증가하고 있다. 대표적으로 미용실 또는 집에서 염색을 하는 경우이다. 본 논문에서는 라즈베리파이와 스마트 미러 디스플레이를이용하여 헤어 살롱에서 직원 대신 고객들의 간단한 헤어 색상에 대한 상담을 도와주고 자가 염색을 하는개인에게 색상 선택에 대한 부담을 줄여주는 IoT 스마트 미러를 설계하고 구현한다. 핵심 기능은Haarcascade 알고리즘을 사용한 얼굴 검출을 포함하여 얼굴 영역에서의 머리카락 검출, dlib 라이브러리를 이용하여 Landmark를 통한 입술 검출, 영상 처리를 활용하여 검출 된 머리카락과 입술의 픽셀 단위 염색으로 구성되어있다.

Open API를 활용한 개인용 스마트미러

김성진(Sung Jin Kim),최진명(Jin Myung Choi),최낙준(Nak Jun Choi),이동은(Dong Eun Lee),김다은(Da Eun Kim),윤승진(Sung Jin Yun),최낙진(Nak Jin Choi) 한국컴퓨터정보학회 2023 한국컴퓨터정보학회 학술발표논문집 Vol.31 No.1