D spark Season2 3rd_뭐든지 인식하는 recognition 기술

Season

2��

rٛޥ�ੌ नטRHFRJQLWLRQ�Ӟ sऀTech-Talk by DIG

�����ৠ�ݿ���������a�����

오늘 말씀드릴 내용은

��

rٛޥ�ੌ नטRHFRJQLWLRQ�Ӟ sऀTech-Talk by DIG

�����ৠ�ݿ���������a�����

뭐든지 인식하는Recognition 기술

기계의 관점 사람의 관점

물리적 신호 맥락의 해석

데이터 정보

����������������������������

rښښҋ�Ӟౡೡ�߅ݾ s҆�ࢳ੍�Tech-Talk by DIG

����ৠല�ݿ���������a�����

��

rٛޥ�ੌ नטRHFRJQLWLRQ�Ӟ sऀTech-Talk by DIG

�����ৠ�ݿ���������a�����

Sensor Recognition

사람을 이해하는 기술!

사람을 닮아가는 기술!

사람과 기계가 인터렉션하면서

인식 기술 Recognition

가장 먼저 떠오르는 것은?

홍채인식 / 지문인식사람의 생체적 특징과 패턴을 인식하고

그 사람이 누구인지 특정하는 기술

X Box Kinect인식기술의 획기적 전환점

http://www.youtube.com/watch?v=HG0-MGjpLUY

Leap Motion - Gesture Galaxy Nexus - Face

MYO - Muscle PuzzleBox Orbit - Brainwave

예상보다 가까이에 있습니다!

��

rٛޥ�ੌ नטRHFRJQLWLRQ�Ӟ sऀTech-Talk by DIG

�����ৠ�ݿ���������a�����뭐든지 인식하는Recognition 기술

Contents

1. Gesture & Motion 손끝으로 움직이는 세상!

2. Face & More 당신의 얼굴을 보여주세요!

3. Voice & Sound 당신의 (목)소리를 들려주세요!

4. Brainwave 당신도 프로페서 X가 될 수 있다!

손끝으로 움직이는 세상- Gesture & Motion -

Kinect

키넥트 구조

Kinect

적외선 프로젝트적외선을 픽셀 단위로 송출

깊이인식 적외선 카메라반사되어 오는 적외선을 인식

20여개의 관절을 인식하여XYZ 3차원의 신체 움직임을 감지현실의 움직임으로 가상 게임을 컨트롤

* Natural User Interface

Leap Motion

키넥트와 원리는 동일키넥트보다 200배 높은 감도약 1/100 mm 움직임 감지화면 아래에서 동작을 인지

MYO

- 팔에 착용하는 밴드 형태의 입력장치- 팔과 손가락의 25가지 동작을 인식하여 정해진 동작에 따라 해당하는 명령을 수행- 착용한 사용자의 근육에서 발생하는 전기신호를 분석하여 전달하고, 기기에 있는 센서로 근육의 움직임과 팔의 동작을 읽어내는 것

- Chris O’Shea의 미디어아트- Motion Tracking Software + Camera에 거울을 설치하여 거울이 사람의 움직임을 인식하면 모든 거울이 사람을 주목

Audience

Gesture & Motion

http://vimeo.com/9852175

- 키넥트 기술을 통해 3D로 사람의 움직임을 감지- 비가 내리는 터널에 사람이 지나가면 그곳만 비가 멈춤

Rain Room

Gesture & Motion

http://vimeo.com/51830893

- 미국 자폐증 진단 및 예방기관인 Autism Speaks의 자폐증 진단 방법을 알리기 위한 Interactive OOH- 사람의 움직임을 감지하여 사람의 눈을 피하는 아이의 모습을 통해 자폐증 진단 방법을 알림

Autism Speaks

Gesture & Motion

http://www.youtube.com/watch?v=UqHrRIwlVm4

- 화장품은 바르고 지우기 귀찮아서 많이 안해본다는 점에 착안- 키넥트로 입술과 눈을 인식하여 가상으로 화장품을 발라볼 수 있는 거울 제작

Virtual Makeup Mirror

Gesture & Motion

http://www.youtube.com/watch?v=4PxW5FEKY3I

- 스위스 로잔의 대학교에서 실시한 클래식 음악을 더 많은 대중이 쉽게 즐기게 하기 위한 시도- 사람들이 웹사이트에 자신의 목소리를 업로드- 업로드된 사람들의 목소리로 Orchestra를 구성하여 손의 움직임으로 오케스트라 연주

Kinect-Powered Orchestra

Gesture & Motion

http://vimeo.com/74922458#

Natural User InterfaceKinect로 촉발된 NUI의 시대

사람을 닮아가는 기술조금 더 사람에 가까이 다가간 기술

키넥트 기술의 전개

- 키넥트 인식범위의 한계를 뛰어넘는 시도- 인식범위를 정교화하여 손의 움직임을 감지

키넥트를 활용한 수화번역

- 장비의 제약없이 무엇이든 디스플레이로 만드는 기술- 적외선 통신을 이용해 물리적 입력값을 받는 기술

OmniTouch

http://www.youtube.com/watch?v=Pz17lbjOFn8

당신의 얼굴을 보여주세요- Face & More -

http://www.youtube.com/watch?v=FGMAQIY01r4

Face Recognition(Geometric Feature Analysis)

- 얼굴 인식의 가장 보편적인 방법으로 눈, 코, 입과 같은 얼굴의 특징점들의 위치나 크기 또는 이들간의 거리와 같은 기하학적 인자들로 얼굴을 인식- 안면근육의 움직임, 입모양, 눈 깜박임 등 안면의 다양한 변화를 인식

Face & More

Smile Ball - 스위스 건강보험회사 KPT의 사례- 억지로라도 웃으면 행복하다는 점에서 착안하여 안면근육을 움직여 컨트롤하는 핀볼게임 개발- 웹사이트와 스마트폰 앱에서도 Smile Ball 플레이 가능

www.smileball.ch

http://www.youtube.com/watch?v=3Sb-C9YrvFQ

Face & More

Drive Awake - 태국의 커피 프랜차이 카페 아마존의 브랜드 앱- 안구의 움직임을 트래킹하여 졸음이 오면 경보음을 울리고 가까운 카페 아마존 매장을 안내

http://www.youtube.com/watch?v=Un5J15ilGlw

Face & MoreFace & More

- 독일 커피 브랜드 Douwe Egbert의 디지털 인스톨레이션- 커피를 많이 찾는 공항에 하품을 하면 커피를 무료로 제공하는 자판기를 설치

Bye Bye Red Eye

http://www.youtube.com/watch?v=HOTQ8z0fQHo

Face & MoreFace & More

- 뉴질랜드 유기견 보호협회에서 진행한 디지털 캠페인- 웹캠으로 사진을 찍거나 사진을 업로드하면 사람의 얼굴을 인식하여 닮은 유기견을 추천

Doggelganger

- 잃어버린 애완동물의 얼굴을 인식하여 주인을 찾는 애플리케이션- 애완동물의 이름, 크기, 특이사항 등 상세 정보와 함께 동물의 얼굴 사진을 미리 업로드- 애완동물을 잃어버린 주인이 앱의 경고(Alert)버튼을 누르면 동물의 수의사, 동물보호단체 같은 지역에 살고 있는 핍 사용자들과 소셜미디어 사용자에게 알림과 함께 애완동물의 정보와 이미지가 전송- 그 지역에서 주인이 없는 애완동물이 신고되면 안면 인식 시스템을 이용해 그 동물의 얼굴과 가장 유사한 사진을 매칭하여 주인을 찾음

Face & More

PIP

Face & More

Dream Voice - Mouthesizer : 입모양을 인식해서 소리로 전환시켜주는 스마트폰 앱 개발

안면 인식과 매체가 만났을 때

- 고객의 얼굴을 인식하여 성별, 연령을 추정하고 그에 적합한 광고를 송출하는 시스템

Tesco “OptimEyes”IFC몰 Media Platform

- 사람의 얼굴과 움직임을 인식하는 인터렉티브 플랫폼- 스탠딩 미디어에 안면인식 기능 탑재

Face & More

57개의 근육으로 이루어지는 다양한 표정

앞으로 안면인식 기술이 보다 정교화되고 발전한다면다양한 맥락에서의 인식이 이루어질 것

사람의 감정, 상태 예측하고 그에 맞는 맞춤형 컨텐츠 제공도 가능

당신의 (목)소리를 들려주세요- Voice & Sound -

http://www.youtube.com/watch?v=TbJldUklxzs

음성인식의 원리

- 음성의 파형에서 언어정보를 추출- 음성파형을 1/100초 단위로 늘어놓고 그것들을 알아보기 쉽게 숫자로 변환하여 어떤 글자인지를 계산하는 과정

The Popinator

Voice & Sound

- 스낵 제조기업 팝콘 인디아나의 바이럴 마케팅 필름- 사람들이 팝콘을 먹을때 흔히 하는 던져서 먹기에 착안- 사람의 “Pop”이라는 목소리를 인식하여 그 방향으로 완벽한 각도와 속도를 맞춰 팝콘을 발사하는 기계를 제작

http://www.youtube.com/watch?v=b1cz8IasV4w

- 주변의 소리를 저장하여 Remix 음악을 만드는 Sound Bottle by Jun Hujiwara- Coca-Cola에서 Re: Sound Bottle을 그대로 활용하여 Coca-Cola Bottle Mix를 제작- Sound in, Happiness out 이라는 컨셉으로 커뮤니케이션

Re : Sound BottleCoca-Cola Bottle Mix

Voice & Sound

http://www.youtube.com/watch?v=fBJ3b2eUTlU

Nissan Voice Driver Cup - 어린 시절 장난감 자동차를 손으로 밀며 부릉부릉 소리를 내던 추억에서 착안- 목소리의 크기로 미니자동차를 움직이는 경주를 개최- 현장 뿐만 아니라 웹사이트와 스마트폰앱을 통해서도 참여 가능

Voice & Sound

http://www.youtube.com/watch?v=SNfPz9kVf3M

VW Up! Holland Up! - 네덜란드 VW에서 2012 런던올림픽 응원을 위해 소리로 움직이는 자동차를 개발- 실제 자동차에서 엑셀레이터를 제거, 안전을 위해 1단 기어에서만 작동- 바이럴 영상에 그치지 않고 TVCF로도 제작

Voice & Sound

http://www.youtube.com/watch?v=NKIey2EvH40

MIVOR - 음성을 해석하여 이용자의 기분을 비주얼라이징- 컴퓨터 마이크를 통해 MIVOR 음성으로 이야기를 주고 받으며, 이용자의 반응에 따라 이용자의 현재 기분을 형형색색의 비주얼로 표현

음성인식은 NUI 에서 한발 더 나아가

Artificial Intelligence와 연결되는스마트 솔루션의 미래

당신도 프로페서X가 될 수 있다 - 뇌파인식 -

Who’s the Best?

UI의 진화

버튼 조작 키보드, 버튼, 키패드

커서 조작 마우스, 터치패드, 트랙볼

터치 조작 터치스크린, Inking, 필기인식

UI 진화의 끝판왕

제스처 조작 동작인식, 모션캡쳐

안구 조작 홍채인식, 시선분석

음성 조작 음성명령, 자연어인식

뇌파 조작 뇌파인식기술

뇌파인식기술 Brain Computer Interface IBM은 5년 내에 우리의 삶을 바꿀 기술 중 첫 번째로 BC I를 지목

특징추출 변환알고리즘

뇌파인식

디지털변환

신호처리

동작명령

뇌파측정장치의 발달 휴대성과 디자인을 갖춘 뉴로헤드셋의 발달은 뇌파인식의 활용을 가속화

Brainwave X Vehicle 이제 생각만으로 운전이 가능한 시대가 온다

�����������������������

헬멧을 쓰고 생각한 대로 기어가 변속되는 자전거

��� ��� �����������

운전 중 집중도에 따라 움직이는 자동차

http://www.youtube.com/watch?v=MLXMQCPiAic

Brainwave X Digital Device 뇌파인식을 만나 더욱 강력해지는 스마트기기

����������� ��������

뇌파로 Siri를 컨트롤하는 해커프로젝트

�����������

생각만으로 태블릿이 컨트롤 가능한 기술을 개발 중

http://www.youtube.com/watch?v=RXz2f7iUrjM http://www.youtube.com/watch?v=xFIRmnRHNUM

Brainwave X Appcessory 진실한 감정을 실시간으로 표현하고 공유한다

��������

뇌파로 조종하는 감정적 액세서리

����

감정변화로 체크인하는 뉴로태깅 앱세서리

http://www.youtube.com/watch?v=w06zvM2x_lw http://www.youtube.com/watch?v=qvHcBq7UaY0

Brainwave X Entertainment 문화를 즐기는 새로운 방식

����

뇌파를 이용한 음악선곡 헤드폰

�������

관심사를 촬영하는 뇌파카메라

http://www.youtube.com/watch?v=JyiXQgj_Nfk http://www.youtube.com/watch?v=CDgkX-JY_wM

Brainwave X 3D printer 무엇이든 상상하는 대로 만들어진다

������������

3D프린터를 사용해 사용자의 생각대로 물건을 만들어주는 프로그램

http://www.youtube.com/watch?v=MJF4B4vGjnA

Brainwave X Game 더 이상 발컨은 없다

�����

호주 Emotiv사는 뇌파로 불덩어리를 쏘는 게임을 출시

�������

뇌파로 볼을 조종하는 게임

http://www.youtube.com/watch?v=ny0JZqnQGRc http://www.youtube.com/watch?v=eVX7c_eviB8

Brainwave X Promotion 뇌파를 활용한 맥주 프로모션 기기

������������ �������

맥주에 대한 집중력에 따라 생맥주를 주는 프로모션

���� �������� ��

관객의 뇌파에 따라 스토리가 달라지는 인터렉티브 무비

http://www.youtube.com/watch?v=U3FmPkLs8s4

뇌파인식의 시사점 및 향후전망

아직 뇌파의 세기 정도만 광고마케팅분야에 활용된 상황 감정인식, 실물조종 등의 다른 부분들을 활용한다면 멋진 아이디어가 나올 것!

뇌-컴퓨터 인터페이스 컴퓨터-뇌 인터페이스

뇌-뇌 인터페이스

뇌파인식 음성인식

얼굴인식 동작인식

지금까지 살펴본 다양한 인식기술들

지금까지 살펴본 주요 인식기술 결국은 새로운 요리재료일 뿐

어떻게 조합하고 맛을 낼 것인지가 중요

다만 확실한 건 앞으로도 인기 있을 재료라는 점

그리고 그 요리는 결국 사람이 먹게 된다는 것

기술은 결국 사람에 대한 관심과 이해해서 시작된 것

��� ����� �� �

How to CreateReal Life Solutions

for People

Useful and/or Purposefulso PowerfulMarketing

Insight x Creativity x Technology

New Marketing Value Creation

facebook.com/groups/digital.spark

감사합니다!