영상 인식 기반 세컨드 스크린 서비스

2012년 출시된 이미디오(imideo)는 엔써즈(Enswers)의 영상 인식 기술을 응용한 브라우저 플러그인 서비스로, 웹페이지나 블로그에 있는 방송 캡처 이미지를 인식하면 해당 장면이 포함된 실제 방송 영상을 곧바로 찾아 재생해 준다. 구글 이미지 검색이 이미지로 이미지를 찾는 것처럼, 이미디오는 이미지로 영상 속 특정 장면을 찾아 그 장면 전후 1분 분량을 미리보기로 재생하는 방식이다. 엔써즈의 기존 서비스가 엔드유저용(enswerme)과 콘텐츠·비즈니스 관리용(platform-v, adview)으로 나뉘어 있었다면, 이미디오는 엔드유저와 영상 사업자를 직접 연결해 콘텐츠 판매까지 이어질 수 있는 채널로 기획됐다.

저작권 계약상 미리보기는 1분으로 제한돼 있었는데, 이 글은 미리보기의 마지막 장면을 다시 캡처해 검색하면 다음 1분을 이어 볼 수 있다는 사용자 관점의 꼼수(hack)를 소개한다. 서비스가 설계한 정책적 제약(과금·저작권 보호를 위한 시간 제한)이 실제 사용 맥락에서는 손쉽게 우회되어 소비될 수 있음을 보여주는 초기 사례로, 기능 설계자가 세운 제약과 실제 사용자 행동 사이의 간극을 드러낸다.

글은 이 이미지 기반 영상 인식 기술이 궁극적으로 지향해야 할 방향을 스마트 TV의 세컨드 스크린(second screen) 경험으로 확장해 제시한다. 방송 화면을 스마트폰으로 찍기만 하면 지금 보고 있는 콘텐츠가 무엇인지, 화면 속 PPL 상품의 가격이 얼마인지, 다른 시청자들의 실시간 반응이 무엇인지를 알 수 있는 서비스다. 오디오 핑거프린팅 방식(당시 ABC 아이패드 앱처럼 방송 소리로 콘텐츠를 식별하는 방식)과 비교하면, 녹화 방송의 경우 화면만 찍어도 즉시 인식할 수 있는 이미지 인식 기술이 몇 초의 인식 대기 없이 더 매끄러운 경험을 제공한다. 니코니코동화식 시간 동기화 댓글이나 지인 그룹 채팅(카카오톡)에서 자연스럽게 발생하는 반응을 데이터로 추출해 방송의 특정 장면과 결합하는 아이디어도 함께 제시된다.

이 글의 핵심 통찰은 스마트 TV의 진짜 가치는 TV를 PC처럼 만드는 하드웨어적 변화가 아니라, 메인 화면(본방송) 시청을 방해하지 않으면서 부가 정보를 얹을 수 있는 이미지·영상 인식 기반 세컨드 스크린 기술에서 나온다는 것이다. "TV를 보다가 궁금하다고 TV 화면으로 검색질을 하는 것은 스마트한 사용자라면 하기 힘든 일"이라는 표현처럼, 부가 정보를 얻기 위해 메인 콘텐츠 시청 경험 자체를 방해해서는 안 된다는 원칙("the show must go on")이 세컨드 스크린 설계의 핵심 제약으로 제시된다. 콘텐츠 자체의 검색보다 거기서 추출·가공한 메타 정보(하이라이트, 광고 연동, PPL 정보)의 부가가치가 더 클 수 있다는 전망도 덧붙는다.

핵심 내용

이미디오(imideo): 엔써즈의 영상 인식 기술 기반, 방송 캡처 이미지로 해당 영상 장면을 찾아 재생하는 브라우저 플러그인 서비스(2012)
미리보기 1분 제한을 마지막 장면 재캡처로 우회하는 사용자 꼼수(hack) — 정책적 제약과 실제 사용 행동 사이의 간극을 보여주는 사례
세컨드 스크린 개념: 방송 화면을 찍어 콘텐츠를 식별 → PPL 가격·실시간 반응·광고 등 부가 정보 제공
오디오 핑거프린팅(소리 인식) 대비 이미지 인식은 인식 대기 시간 없이 즉시 반응 가능하다는 장점
니코니코동화식 시간 동기화 댓글, 카카오톡 그룹 채팅 반응 등 사용자 생성 데이터를 하이라이트 추출에 활용하는 아이디어
스마트 TV의 핵심 가치는 하드웨어(TV의 PC화)가 아니라 메인 콘텐츠 시청을 방해하지 않는 세컨드 스크린 기술에 있다는 결론 — "the show must go on"

출처

(방송 캡처 이미지 동영상 검색) 이미디오 계속 이어보기 꼼수 — 2012-05-03, 無異

영상 인식 기반 세컨드 스크린 서비스

핵심 내용

관련 개념

출처