감성 전달 기능을 가진 동작 포함 로봇 채팅 시스템{Motion Operable Robot Chatting System capable of Emotion Transmission}

도1은 종래기술에 따른 이메일을 표시하는 홈로봇 시스템.

도2는 본 발명의 전체적인 구성을 도시함.

도3은 본 발명에 따른 동작 관련 데이터의 형태를 도시함.

도4는 본 발명에서 이모티콘 리스트가 표시된, 동작 포함 채팅을 위한 전용 채팅창을 도시함.

도5는 본 발명에서, 동작명 리스트가 표시된, 동작 포함 채팅을 위한 전용 채팅창을 도시함.

도6은 본 발명에서, 다수개의 문장 및 동작명과 동작명 리스트가 표시된, 동작 포함 채팅을 위한 전용 채팅창을 도시함.

도7은 본 발명에서, 동작명을 위한 태그창이 일반 채팅창과 별도로 나타나는 경우를 도시함.

도8은 본 발명의 다른 실시예에 따른 전체적인 구성을 도시함.

도9는 본 발명의 다른 실시예에 따른 전체적인 구성을 도시함.

본 발명은 메신저 등을 사용하여 채팅을 하는 양 당사자가 채팅시에 문장 뿐만 아니라, 감성(감정)에 대응하는 동작명이나 이모티콘을 넣어서 채팅을 수행하면, 로봇이 문장 부분을 음성으로 읽어주면서 감성 대응 동작명이나 이모티콘에 대응하는 동작이 로봇에서 실행되게 하여, 채팅하는 양당사자의 감정을 음성 뿐만 아니라 동작으로도 표현해 주게 할 수 있는 감성 전달 동작 포함 로봇 채팅 시스템에 관한 것이다.

미래에는 홈로봇이 각 가정마다 보급되어 각 가정에서 홈로봇이 다양하게 이용되게 되는데, 그 하나의 분야가 홈로봇이 수신된 이메일을 자신의 내장 표시장치에 표시해 주는 기능이다.

이러한 종래기술에서는 도1에서와 같이, 각각의 홈로봇(1)이 일종의 인터넷 가능 PC 역할을 하여 IP주소가 부여되어 있어, 이 IP주소로 이메일이 수신되면 저장하고 있다가 사용자가 수신된 이메일을 보여주기를 원하는 경우 또는 수신 즉시 이메일을 보여주도록 설정되어 있는 경우에 홈로봇은 화면(2)에 수신된 이메일을 표시해 주게 된다.

그런데, 이러한 홈로봇에서는 이메일을 시각적으로 표시해 줄 뿐 읽어주는 기능(문자를 음성으로 변환해 주는 기능; TTS(Text To Speech)기능)이 없고, 읽어주는 기능이 있다고 하여도 문장을 읽어주는 정도에 그치고 이 문장의 내용에 따른 아무런 동작도 실행하지 않아, 무미건조한 읽어주는 기능에 불과하여 흥미를 유발시키지 못한다.

그리고, 이러한 로봇을 이용한 이메일 시스템은 실시간으로 양 당사자간의 실시간적인 대화가 불가능하므로, 메신저 기능을 이용하여 양 당사자간에 실시간으로 채팅을 하여 실시간으로 상대방과 대화를 하게 할 수도 있는데, 이 경우에도 실시간으로 홈로봇상의 모니터에 문장을 표시해 주거나 홈로봇이 TTS엔진을 이용하여 문장을 읽어 주는 기능이 전부이어서, 수신자에게 송신자의 감정을 관련 동작으로 전달하는 것이 불가능하다.

본 발명은 상기의 종래기술의 문제점을 감안하여, 채팅을 하는 양 당사자가 채팅 문장을 작성시에 동작 관련 특수 문자나 이모티콘을 부가시켜 동작 포함 채팅 문장을 작성하여 상대방에게 전달하면, 홈로봇이 이 동작 포함 채팅 문장에서 일반 문장에 대응하는 부분을 읽어주면서 이 특수 문자나 이모티콘에 대응하는 동작을 홈로봇이 실행하게 하여, 홈로봇이 발성을 하면서 동작을 하게 하는 동작 포함 채팅이 가능하게 하는 감성 전달 동작 포함 로봇 채팅 시스템을 제공한다.

이상과 같은 기술적 과제를 달성하기 위하여, 본 발명은,

감성 전달 동작 포함 로봇 채팅 방법에 있어서,

송신자가 송신자 단말기의 채팅창을 통해 문장 부분과 동작 부분을 입력하여 로봇 채팅 서버로 전송하는 단계; 상기 로봇 채팅 서버에서 상기 문장 부분에 대응하는 음성 데이터와 상기 동작 부분에 대응하는 동작 제어 데이터를 수신자 단말기에 송신하는 단계; 상기 수신자 단말기에서 상기 음성 데이터와 동작 제어 데이터 를 수신자 로봇으로 전송하는 단계; 상기 수신자 로봇이 상기 음성 데이터를 이용하여 발성을 하고 동작 제어 데이터를 통해 동작을 수행하는 단계를 포함하는 것을 특징으로 한다.

먼저, 도2를 참고로 하여 본 발명의 구성을 설명하기로 한다.

홈로봇1, 홈로봇2는 각각 PC1, PC2에 무선 또는 유선으로 연결되어 PC1, PC2에서 음성 데이터와 동작 제어 데이터를 수신하여 발성을 하고 동작을 수행한다.

로봇 채팅 서버(S)에는 도3에서와 같이, 다양한 동작을 위한 동작명과, 동작 코드와, 이 동작 코드에 대응하는 동작을 수행하기 위한 동작 제어 데이터와, 동작에 대응하는 이모티콘 이미지 데이터가 저장되고, 문자를 음성 데이터로 변환하는 TTS엔진(E)과 연동하게 된다.

예를 들어 인사 동작을 위해서는 동작명인 “인사”와, 동작 명령 코드인 “00000001”과, 홈로봇의 목을 숙이고 팔을 모으는 자세(도1의 홈로봇2의 동작)를 하고 나서 다시 목을 세우고 팔을 내리는 인사 동작을 실행하는 인사 동작 제어 데이터와, 이모티콘 이미지(

이제, 채팅자1, 채팅자 2는 각각 PC1, PC2에서 도2에서와 같은 채팅창1, 채팅창2를 열어서 채팅 입력 부분(10)에 채팅용 문장(“안녕하세요”, “저도 놀랐어요”)을 입력하고, 채팅창 상단에 있는 동작 이모티콘 리스트(11)에서 이 문장에 대응하는 동작을 위한 이모티콘(

이렇게 채팅 입력 부분(10)에 문장과 동작이 표시되면, 채팅자1, 채팅자2는 각 문장과 대응하는 동작명이 제대로 입력되어 있는지를 바로 확인가능하고, 만일 제대로 입력되어 있지 않으면 문장은 통상의 채팅시와 같이 수정하고, 동작 부분(<인사> 또는 <놀람>)은 삭제하고 다시 다른 이모티콘을 선택하면 된다.

이렇게 문장 부분과 동작부분(이 문장부분과 동작 부분을 총칭하여 동작 포함 채팅문장이라고 칭함)이 완성되면, 하부에 있는 전송 메뉴를 선택하면 로봇 채팅 서버(S)로 문장부분과 동작부분이 전달된다. 예를들어, PC1의 채팅 문장 입력 부분(10)에 “안녕하세요 <인사>” 가 표시되고 전송 메뉴(12)를 선택하면 이 “안녕하세요 <인사>”가 로봇 채팅 서버(S)로 전달되면, 로봇 채팅 서버(S)는 미리 약정된 특수문자(<, >)에 의해 문장부분(“안녕하세요”)과 동작부분(<인사>”)을 분리하여, 문장 부분은 연동된 TTS엔진(E)에 의해 음성 데이터로 변환하고 동작 부분에 대응하는 동작 제어 데이터를 독출하여 PC2을 거쳐 홈로봇2로 송신하여, 홈로봇2의 스피커(미도시)로 ““안녕하세요”라고 발성을 하면서, “안녕하세요”에 대응하는 인사 동작을 수행하게 한다.

이상과 같은 방식으로 채팅을 하면 양 당사자 간에 채팅이 음성 뿐만 아니라 동작으로서도 재현이 가능하게 되어, 동작 포함 채팅이 가능하게 된다.

한편, 이상에서는 채팅 입력부분(10)에 표시되는 동작 부분을 특수문자로 동작명을 감싸는 형태로 기재하였으나, 도4에서와 같이 채팅 입력 부분(20)의 동작 부분까지 이모티콘으로 표시하는 방법도 가능하다.

이모티콘으로 표시를 하면 동작 수가 적은 경우에는 이 이모티콘 이미지를 통해 관련 동작을 보다 용이하게 알 수 있다. 그러나, 동작 수가 많아지면 이모티콘을 통해 관련 동작을 용이하게 구별하기가 어렵게 되므로, 이때에는 도5에서와 같이 동작 리스트 부분(31)과 채팅 입력 부분(30)에 표시되는 동작을 모두 동작명으로 표시하는 것이 바람직하다.

또한, 채팅 입력창의 동작 부분을 “안녕하세요<1>”또는 “안녕하세요.124”와 같이 직접 동작 코드 번호로 입력하는 방식으로 표현을 할 수도 있는데, 여기서“안녕하세요.124”는 동작명이 계층구조 트리 형식으로 분류되어 있어서 마침표(.) 아래의 124는 1은 인사말이고, 1.2는 기쁜 인사말이며, 1.2.4는 매우 빠르게 기쁜 인사말을 하라는 동작 명령이다.

그리고, 동작 수가 상당히 많아서 도2, 4, 5의 동작 리스트 부분(11, 21, 31)부분에 한번에 모든 동작을 표시하기가 곤란한 경우에는, 예를 들면 마우스의 오른쪽 버튼을 누리면 동작 분류 메뉴가 나오고 특정 동작 분류를 선택하면 동일 분류의 다양한 동작을 표현하는 메뉴가 다시 나와서 적합한 동작을 선택하게 하는 톱다운 방식도 가능하다.

또한, 이상에서는 문자를 음성으로 변환하는 TTS엔진과 동작 관련 데이터(동작명, 동작 코드, 이모티콘, 동작 제어 데이터)를 로봇 채팅 서버(S)에 저장하는 것으로 기재를 하였으나, 서비스 서버(S)를 거쳐서 PC1, PC2에 저장하게 하거나 고성능의 홈로봇1, 홈로봇2에 저장하여 이러한 저장 장소에서 문장부분과 동작부분을 수신하여 문자부분을 TTS엔진으로 음성 데이터로 변환하고 동작부분에 대응하는 동작 제어 데이터를 독출하는 것도 가능하다.

한편, 본 발명에서는 음성 데이터와 동작 제어 데이터가 동시에 홈로봇에 전달되어야 발성에 동기된 동작을 할 수 있기 때문에, 특히, 도6에서와 같이 채팅창의 문장 입력 부분(40)에 다수의 문장 부분과 동작 부분이 있는 경우에는 인터넷 등의 네크워크의 전송지연으로 인하여 서로 동기 되어야 하는 음성 데이터와 동작 제어 데이터의 어느 한쪽이 늦게 전달되는 경우에는 비동기가 되므로, 본 발명의 바람직한 실시를 위하여 동기화 과정이 필요하다.

이러한 동기화를 위하여, 예를들면 로봇 채팅 서버(S)나 PC에서 음성 데이터와 동작 제어 데이터를 형성시에, 각 문장의 음성 데이터 다음에 동작 코드 식별자를 넣고 그 다음에 이 문장에 대응하는 동작 제어 데이터(문자에 대응하는 동작 제어 데이터가 없으면 Null 표시를 함)를 넣는 과정(즉, 음성 데이터 + 동작 코드 식별자 + 동작 제어 데이터 + 동작 코드 식별자)을 반복하여 단일의 전송 파일로 형성하는 과정, 예를들면 도6에서와 같은 채팅 입력 부분(40)이 3개의 문장부분(“안 녕하세요”, “어제 일로 저도 많이 놀랐습니다”, “저도 무척 화가 났습니다”)과 동작부분(<인사>, <놀람>, <화냄>)으로 구성되는 경우에는 아래와 같은 방식으로 단일의 전송 파일을 형성하는 과정을 통해, 한번에 홈로봇으로 전송하여 홈로봇에서 차례로 음성 부분을 재생� ��고 동작을 구현하게 할 수 있다.

“안녕하세요” 발성 데이터+식별자+안녕 동작 제어 데이터+ 식별자

+“어제 일로 저도 많이 놀랐습니다” 발성 데이터+식별자+놀람 동작 제어 데이터+식별자

+“저도 무척 화가 났습니다” 발성 데이터+식별자+화냄 동작 제어 데이터+식별자

그러나, 이러한 방법은 전체의 전송 파일의 크기가 큰 경우에는 홈로봇의 메모리 용량 역시 커져야 하는 단점이 있다. 이를 보완하기 위해서는 각 문장 단위로 (음성부분 + 동작 명령 코드 식별자 +동작 제어 데이터 부분+식별자) 형식의 전송 파일을 형성하여 각 문장 단위로 전송 파일을 홈로봇으로 전송하여 각 문장 단위로 발성을 하면서 동작을 하도록 할 수 있다.

그러나, 이 방법은 전송선로에 장애가 발생하여 다음의 문장에 대응하는 전송 파일의 전달이 지연되는 경우에는 홈로봇이 이전 문장용 발성 및 동작을 한 후 다음의 문장용 발성 및 동작을 하지 못하여 단절되는 현상이 발생할 수도 있다는 단점이 있다.

또한, 이상에서는 동작 포함 채팅 전용 에디터(도4, 5, 6)를 사용하여 동작 포함 채팅 로봇 시스템을 구현하였으나, 일반적인 채팅 에디터를 이용하여 홈로봇용 동작 포함 채팅 로봇 시스템을 구현하는 것도 가능하다. 이때에는 상기의 전용 에디터에서의 이모티콘(도4)이나 동작명(도5, 6)이 일반 채팅 에디터에서는 제공되지 않기 때문에, 도7에서와 같이, 일반 채팅 에디터창(50)과는 별도의 위치에, 홈로봇이 인식할 수 있는 태그(Tag)들의 리스트를 제공하는 별도의 태그창(51)이 PC화면에 나타나게 하여, 일반적인 채팅 문장 작성 후에 이 태그창(51)을 보면서 직접 입력하거나 태그창(51)에서 해당 태그를 복사하여, 동작 명령에 해당하는 태그를 일반 채팅 문장에 포함시키도록 하면 된다. 이때 태그는 일반적인 채팅에서 거의 사용하지 않는 문자(<, >, &, # 등)를 이용하여, 예를들면"<깜짝놀람>" 또는 "<화남>과 같은 형식이 적절하다.

한편, 도2에서는 홈로봇1, 홈로봇2가 PC1, PC2에 연결되고 PC1, PC2가 로봇 채팅 서버(S)로 인터넷으로 연결되는 것으로 기재되었으나, 도8에서와 같이 홈로봇1, 홈로봇2가 로봇채팅 서버(S)에 인터넷으로 직접 연결되고 PC1, PC2는 단순히 키보드 역할을 수행하는 단말기(예를들면, PC도 가능하지만, 휴대폰이나 PDA도 가능함)인 것도 가능하다.

이 경우에는 사용자는 PC/휴대폰/PDA에서 문장부분과 동작부분을 입력하여 블루투스 등의 근거리 무선 통신 기능을 이용하여 홈로봇1, 홈로봇2로 송신하면 홈 로봇1, 홈로봇2가 인터넷으로 로봇 채팅용 서버(S)에 문장부분과 동작 부분을 송신하여, 로봇 채팅 서버(S)에 연동되는 TTS엔진(E)에 의해 문장부분을 음성 데이터로 변환하고, 동작부분과 관련된 동작 제어 데이터를 로봇 채팅 서버(S)에서 독출하여, 이 음성 데이터와 동작 제어 데이터를 홈로봇1, 홈로봇2가 수신하여 발성과 동작을 수행하게 하는 것도 가능하다.

또한, 도2, 8을 결합하여, 도9에서와 같이 홈로봇1, 홈로봇2와 PC1, PC2가 모두 로봇 채팅 서버(S)에 연결되어, PC1, PC2로는 로봇 채팅 서버(S)에 연결하여 로봇 채팅 서비스를 위한 회원가입 및 로그인을 수행하고 채팅 상대방 로봇을 지정하게 하는 기능을 수행하며, 로봇 채팅 서버(S)에서는 음성 데이터와 동작 제어 데이터를 홈로봇1, 홈로봇2로 송신하는 기능을 수행하게 하는 것도 가능하다.

이 경우에는 PC1, PC2에 의해 작성된 문장부분과 동작부분은 로봇 채팅 서버(S)에 전달되어, 이 로봇 채팅 서버(S)가 음성 데이터와 동작 제어 데이터를 지정된 채팅 상대방 로봇에 송신하여 홈로봇1, 홈로봇2에서 발성 및 동작을 수행하게 한다.

한편, 동시에 수많은 사용자가 몰릴 경우 로봇 채팅 서버(S)의 과부하가 문제가 될 수 있다. 이때 동작 제어 데이터와 음성합성을 고성능PC에서 또는 홈로봇에서 자체적으로 부담한다면 로봇 채팅 서버(S)는 단순히 문자 메시지 전달기능만이 필요해진다. 이 경우 동작 제어 데이터는 미리 생성하여 고성능 PC 또는 홈로봇으로의 다운로드가 가능하겠지만, 문장의 실시간 음성 변환을 위해서 PC 또는 로봇에 TTS엔진(E)를 내장시켜야 한다. 다만, 고가의 TTS엔진(E)을 각 PC 또는 로봇마 다 설치하기에는 무리가 따를 수 있으므로, TTS만 전문적으로 처리해주는 인터넷 서비스를 위한 TTS서버를 별도로 설치하여 PC 또는 홈로봇에서 문장(문자 메시지)부분만을 이 TTS서버도 전송하여 음성 변환한 음성 데이터를 PC 또는 홈로봇이 수신하게 하는 것도 가능하다.

그리고, 이상의 도2, 8, 9에서는 양자간의 채팅시에 대해서만 설명을 하였으나, 본 발명의 원리는 3인 이상의 다자간 채팅시에도 적용이 가능하다.

예를 들어, 채팅자가 3인(A, B, C)이고, 각 채팅자에게는 2개씩의 홈로봇(a1,a2, b1, b2, c1,c2)이 있어서, 채팅자(B)와 채팅자(C)가 송신하는 동작 포함 채팅이 채팅자(A)의 PC(A)에 연결된 홈로봇(a1), 홈로봇(a2)에서 각각 재생되고, 채팅자(A)와 채팅자(C)가 송신하는 동작 포함 채팅이 채팅자(B)의 PC(B)에 연결된 홈로봇(b1), 홈로봇(b2)에서 각각 재생되며, 채팅자(A)와 채팅자(B)가 송신하는 동작 포함 채팅이 채팅자(C)의 PC(C)에 연결된 홈로봇(c1), 홈로봇(c2)에서 각각 재생되게 하는 방식으로 구성할 수도 있다.

한편, 이상에서는 이미지 형태의 이모티콘을 사용하는 것으로 기재를 하였으나, “^^”와 같은 철자 이모티콘도 가능하다.

또한, 이상에서는 문장부분과 동작 부분을 전송시에 전송 메뉴를 선택하는 것으로 기재를 하였으나, 일반 채팅시에서와 같이 엔터키를 칠때에 바로 전송하게 하는 것도 가능하다.

한편 도2에서는 PC가 채팅을 수행하는 주체가 되었지만, PC대신에 다른 단말기(휴대폰, PDA 등)를 통한 채팅시에도 본 발명의 원리가 적용 가능하다.

이상에서는 본 발명의 바람직한 실시예를 설명하였으나, 본 발명은 이 실시예에 한정되는 것이 아니라 본 발명의 정신을 벗어나지 않는 범위 내에서 다양한 변형이 가능하다는 점을 유의해야 한다.

이상과 같이 하면, 채팅시에 상대방이 전송할 문장과 대응 동작을 입력하여 전송을 하면 상대방의 홈로봇이 이 문장을 읽어주면서 관련 동작을 수행하게 되어 감성 전달 동작 포함 채팅 로봇 시스템이 가능하게 된다.