인물 위치 조정형 화상회의 방법

본 발명의 상세한 구성 및 수행 과정을 첨부된 도면을 통하여 설명하면 다음과 같다.

우선, 도 1은 인터넷을 기반으로 본 발명의 화상회의를 수행하는 구성요소 및 구성요소간 연결상태를 도시한 것으로, 도시된 바와 같이, 본 발명의 화상회의는 기본적으로 영상 촬영 및 음성 입출력 기능이 탑재된 다수의 컴퓨터(10)에 의하여 수행되며, 이들 다수의 컴퓨터(10)는 인터넷을 통하여 상호 연결된다.

또한, 동 도면에서 가상선으로 도시된 바와 같이, 웹페이지(21) 또는 서버(20)가 구성되어 화상회의 참여 컴퓨터(10)가 이들 웹페이지(21) 또는 서버(20)를 경유하여 연결될 수도 있으며, 컴퓨터(10) 또는 서버(20)에는 후술할 배경정보(40)가 수록된 배경데이터베이스(90)가 연결된다.

여기서 배경데이터베이스(90)란 후술할 가상화면(32)을 구현함에 있어서 활용되는 가상의 배경정보(40)가 수록되는 데이터베이스이며, 컴퓨터(10)와 배경데이터베이스(90)의 연결 또는 서버(20)와 배경데이터베이스(90)의 연결이란 당해 컴퓨터(10) 또는 서버(20)의 기억장치내 배경데이터베이스(90)가 구축되거나, 외장형 기억장치 또는 원격지 스토리지에 배경데이터베이스(90)가 구축되어 통신로를 통하여 컴퓨터(10) 또는 서버(20)와 연결되는 상태를 망라하는 것이다.

또한, 본 발명에 있어서 인터넷 기반 화상회의를 수행하는 컴퓨터(10)로는 카메라가 장착되고 음성 입출력이 가능한 통상의 탁상용 컴퓨터(10) 또는 랩탑 컴퓨터(10) 뿐 아니라, 도 1에서도 예시된 바와 같이 촬상기능이 탑재되고 인터넷 접속이 가능한 태블릿PC 또는 스마트폰 등 다양한 정보기기가 적용될 수 있다.

여타의 인터넷 기반 화상회의 방법에서와 같이 본 발명에 있어서의 화상회의 참여 컴퓨터(10)간 주요 송수신 정보 역시 영상정보 및 음성정보로서, 이들 정보는 컴퓨터(10)간 개설된 통신로(session)를 통하여 유통되는데, 영상정보 및 음성정보의 입출력 및 유통은 물론, 후술할 제반 이미지프로세싱을 수행하는 회의프로그램이 컴퓨터(10)에 탑재되어 실행됨에 따라 화상회의가 진행된다.

이러한 본 발명의 회의프로그램은 영상정보 및 음성정보의 송수신 기능이 자체 구비된 브라우저(browser), 영상정보 및 음성정보의 송수신 플러그인(plug-in)이 설치된 브라우저 또는 화상회의 목적의 통신로 개설 및 정보 송수신을 담당하는 별도의 응용프로그램 등 다양한 형식을 가질 수 있다.

특히, 도 1에서 가상선으로 도시된 바와 같이, 서버(20)와 연결된 웹페이지(21)가 구축되고 컴퓨터(10)의 회의프로그램이 웹페이지(21)를 매개로 서버(20)와 접속되는 방식이 본 발명에도 적용될 수 있는데, 이 경우 회의프로그램으로는 전술한 브라우저가 적용될 수 있으며, 브라우저는 일반 인터넷 사용자에게 친숙한 프로그램이므로 회의프로그램으로서 브라우저가 적용되는 경우 사용자 편의 확보에 있어서 유리하다.

도 2 및 도 3은 본 발명의 화상회의가 수행되는 컴퓨터(10)의 화면을 예시한 것으로, 도시된 바와 같이, 컴퓨터(10)의 화면에는 화상회의의 각 참여자 컴퓨터(10)에서 송출된 영상정보 즉, 각 참여자가 자신의 컴퓨터(10)에 의하여 촬영된 영상이 출력되고 있는데, 이들 각 컴퓨터(10)별 송출 영상정보는 화자화면(11), 본인화면(12) 및 청자화면(13)으로 구분되어 출력된다.

화자화면(11)은 당 시점(時點)에서 발언하는 주 발언자를 촬영한 화면이고, 본인화면(12)은 당해 컴퓨터(10)의 사용자가 당해 컴퓨터(10)에 장착된 카메라에 의하여 촬영된 영상을 출력하는 화면으로서, 이들 화자화면(11) 및 본인화면(12)이 여타의 개별 청자화면(13) 점유 영역을 월등하게 상회하는 면적으로 출력된다.

또한, 도 4 역시 본 발명의 컴퓨터(10) 화면을 예시한 것으로서, 도시된 실시예에서는 컴퓨터(10)로서 휴대형 인터넷 접속 정보기기인 스마트폰이 적용되고 있으며, 이 경우에도 화자화면(11) 및 본인화면(12)이 청자화면(13)의 면적을 상회한다.

전술한 바와 같이 본 발명은 화상회의 수행중 화면 출력에 있어서, 실제 촬상된 영상을 가감없이 출력하는 것이 아니라, 촬상 영상 중 인물을 추출하고 가상의 배경과 합성하여 출력하는 것으로서, 도 2는 실제 촬영 영상을 그대로 출력하여 본인화면(12)으로서 실제화면(31)이 출력되는 상태를 예시하고 있으며, 도 3 및 도 4는 인물과 가상의 배경이 합성된 가상화면(32)이 본인화면(12)으로서 출력되는 상태를 예시하고 있는데, 이러한 가상화면(32) 출력은 사용자가 선택할 수 있는 기능으로 제공되며, 도 2 내지 도 5에 예시된 바와 같이, 사용자가 화면상 구현된 아이콘 등의 객체를 클릭 또는 터치하는 조작을 통하여 가상화면(32) 기능이 수행될 수 있다.

즉, 도 5에서와 같이, 도면 상부에 도시된 바와 같은 실제화면(31) 출력상태에서 사용자가 우상단의 아이콘을 클릭하면 가상화면(32)으로 화면이 전환되고, 동 도면 하부에 도시된 바와 같은 가상화면(32) 출력상태에서도 우상단의 아이콘을 클릭함에 따라 실제화면(31)으로 복귀될 수 있는 것이다.

이러한 가상화면(32)의 구현은 도 6 및 도 7에 도시된 바와 같은 종래의 화상회의 시스템에서와 같이, 실제 촬영 영상에서 인물에 해당되는 영상정보인 인물정보(50)를 추출하고 인물정보(50)를 제외한 여타의 실제화면(31) 구성 영상정보인 소거영역(59)은 제거한 후, 소거영역(59)이 제거된 인물정보(50)를 사전 저장되어 확보된 배경정보(40)와 중첩하여 합성하는 방식으로 수행된다.

물론, 인물정보(50)의 추출은 해당 인물의 실제 움직임을 추종할 수 밖에 없으며, 따라서 종래기술에서는 도 7에서와 같이, 인물의 움직임이 가상화면(32)에 가감없이 반영되어, 실제화면(31)에서의 인물 움직임이 가상화면(32)에서도 그대로 출력된다.

일반적으로 화상회의 참여자는 개인별 성향에 따라 미차는 있으나, 장시간 화상회의를 진행하는 과정에서 자세를 바꾸거나 위치를 이동하는 등 다양한 요인으로 인하여 이동할 수 밖에 없으며, 종래기술에서는 도 7에서와 같이, 사용자의 실제 움직임이 인물정보(50)에 그대로 반영되어 최종 구현되는 가상화면(32)에서도 화면상 인물이 이동할 수 밖에 없다.

전술한 바와 같이, 가상화면(32)상에서의 인물의 움직임은 실제화면(31)에서의 움직임에 비하여 상당한 시각적 피로감 및 심리적 불안감을 야기하게 되는 바, 당해 화상회의의 몰입도 및 효용을 심각하게 훼손하게 된다.

이에, 본 발명에서는 도 8에서와 같이, 실제화면(31)상 인물의 움직임에도 불구하고 가상화면(32)에서는 인물이 정위치를 유지한 상태로 출력될 수 있도록 하였으며, 이러한 본 발명은 인터넷을 통하여 상호 직접 연결되거나, 인터넷상에 구축된 웹페이지(21) 또는 이와 연결된 서버(20) 등을 경유하여 상호 간접 연결된 다수의 컴퓨터(10)에 의하여 수행되는 화상회의 방법으로서, 도 9에서와 같이, 컴퓨터(10)에 탑재된 회의프로그램이 실행되어 화상회의가 진행되되, 회의프로그램이 실제화면(31)의 촬상정보에서 인물정보(50)를 추출하고, 회의프로그램이 배경데이터베이스(90)에서 배경정보(40)를 인출하는 실행단계(S10)로 개시된다.

본 발명은 기본적으로 실제 촬영 영상에서 인물 부분을 추출하고 이를 가상의 배경과 합성하는 회상회의 방법인 바, 도 2 내지 도 4에서 예시한 바와 같이, 컴퓨터(10) 사용자 본인을 촬영한 본인화면(12)에 대하여 적용되는 것이 일반적이라 할 수 있다.

여기서 배경정보(40)는 당 시점(時點)에서 실제 촬영된 배경 영상이 아니라, 사전 촬영 또는 수집되어 배경데이터베이스(90)에 저장된 영상정보로서, 통상 수려한 경치, 격조 높은 실내 공간 또는 기타 사용자의 취향에 따라 선별된 배경이 적용될 수 있다.

실제화면(31)을 구성하는 촬상영상 중, 인물정보(50)를 추출하는 방식은 전술한 바와 같이, 외곽추출 이미지프로세싱은 물론 기계학습을 통한 이미지 추출 등 다양한 기법이 적용될 수 있으며, 도 9에서와 같이, 인물정보(50)의 추출에 따라 실제화면(31)을 구성하는 촬상영상 중 인물 부분을 제외한 부분은 소거영역(59)으로 설정되어 제거된다.

이후, 회의프로그램이 인물정보(50)를 구성하는 전체 화상의 위치를 특정하는 기준점(55)을 추출된 인물정보(50)에 설정하는 설정단계(S21)가 수행되는데, 여기서 인물정보(50)를 구성하는 전체 화상이란 도 9에서 소거영역(59)을 제외한 실제 인물의 촬상 영상 영역을 가리키는 것으로, 그 자체가 순수 인물의 영상이라 할 수 있다.

또한, 인물정보(50)를 구성하는 전체 화상의 위치를 특정하는 기준점(55)은 순수 인물 영상의 영역내 정위치를 유지하는 특성을 가지는 점으로서, 통상 해당 영역의 중심점 즉, 해당 영역의 외곽을 형성하는 폐곡선의 무게중심으로 설정될 수 있는데, 이러한 인물정보(50) 영역을 세분화하여 신체 외곽과 별도로 안면부 외곽을 추출할 수도 있으며 이 경우 안면부 외곽 폐곡선의 무게중심이 기준점(55)으로 적용될 수 있다.

이어서, 도 9의 하단부에서와 같이, 회의프로그램이 배경정보(40)에 사전 설정된 표적점(45)과 상기 기준점(55)이 일치되도록 배경정보(40)와 인물정보(50)를 중첩하여 가상화면(32)을 생성하는 중첩단계(S22)가 수행됨에 따라, 도 10에서와 같이, 실제화면(31)상 인물의 이동이 발생되어도, 가상화면(32)상 인물의 위치는 화면상 중앙부에 안정적으로 유지될 수 있다.

또한, 전술한 실행단계(S10) 내지 중첩단계(S22)는 본 발명 적용 화상회의 진행과정에서 지속적으로 반복 수행됨으로써, 실제 인물의 움직임이 지속되어도 화면상 출력되는 인물 위치가 안정적으로 조정되어 관리될 수 있다.

한편, 도 11 및 도 12는 본 발명 완속형 실시예를 설명한 도면으로서, 본 발명의 완속형 실시예는 전술한 중첩단계(S22) 수행에 따라 인물정보(50)의 기준점(55)이 배경정보(40)의 표적점(45)을 추종하는 과정에서, 과급한 추종으로 인한 출력 가상화면(32)의 급변을 억제하고 일층 평안한 가상화면(32)을 구현할 수 있도록 한 것이다.

즉, 실제화면(31)상 인물의 이동에 따라 가상화면(32)상 인물이 일시적으로 이동한 후 화면상 중앙부로 위치가 조정되는 과정에서, 급격하게 이동하지 않고 도 11에서와 같이 부드럽게 이동할 수 있도록 한 것으로, 이는 중첩단계(S22)를 수행함에 있어서, 회의프로그램이 배경정보(40)에 사전 설정된 표적점(45)과 상기 기준점(55)이 일치되도록 배경정보(40)와 인물정보(50)를 중첩하여 가상화면(32)을 생성하되, 도 12에서와 같이, 중첩전 기준점(55)과 표적점(45)을 연결하는 선형(線形) 경로상에 다수의 경유점(65)을 설정하고, 기준점(55)이 이들 경유점(65)을 순차 경유하여 표적점(45)과 일치될 수 있도록 함으로써 달성된다.

여기서 기준점(55)과 표적점(45)을 연결하는 선형 경로란 그 사전적 의미에서와 같이, 기준점(55)과 표적점(45)을 역행(逆行) 없이 연결하는 직선 또는 곡선의 경로로서, 도 12의 도면상 경유점(65)은 기준점(55)과 표적점(45)을 연결하는 수평선상에 설정되었다.

또한, 도 13은 본 발명 표적점(45) 조절형 실시예를 설명한 것으로, 동 실시예의 인물 이동시 화면을 도시하고 있는데, 도시된 바와 같이, 표적점(45)이 사용자의 조작에 따라 이동 설정될 수 있으며, 이로써 사용자는 인물이 중앙에 배치되는 획일적인 화면을 탈피하여 인물의 위치를 자유롭게 변동시킬 수 있고, 이는 전체 화면의 미감(美感) 확보는 물론, 화상회의 수행상 필요한 자료 등을 인물과 동반하여 출력하는 상황에서 유용하게 활용될 수 있다.

이러한 본 발명의 표적점(45) 조절형 실시예에서는 도 13에서와 같이, 중첩단계(S22)가 수행된 후, 가상화면(32)상 인물정보(50)에 대응되는 객체가 조작됨에 따라, 배경정보(40)상 표적점(45) 위치가 변경되는데, 도시된 실시예에서는 사용자가 마우스 커서를 인물정보(50)가 출력되는 영역에 위치시킨 상태에서 드래그하는 조작을 통하여 표적점(45)을 이동시키고 있으며, 이 밖에도 별도의 마커 또는 아이콘을 구현하고 이를 조작하는 등 다양한 방식이 적용될 수 있다.