公开(公告)号：KR101661669B1

公开(公告)日：2016-09-30

申请号：KR1020150001398

申请日：2015-01-06

Applicant: 포항공과대학교 산학협력단

Inventor： 이근배 ,  김정은 ,  한상도 ,  이규송

IPC: G10L15/22 ,  G10L15/18

Abstract: 대화시스템및 그방법에관한것이다. 대화시스템은, 음성신호를수신하며, 상기음성신호로부터제1자연어를인식하는음성인식기, 상기제1자연어로부터사용자발화의도를획득하는발화의도검출모듈, 카메라를통해획득되는이미지로부터시각정보를추출하는시각정보추출모듈, 상기사용자발화의도에따른외부응용데이터베이스선택정보와, 상기사용자발화의도및 상기시각정보에따라서응답정보를추출하기위한쿼리문을포함하는스마트미러모델을저장하는제1데이터베이스, 상기스마트미러모델을토대로, 상기사용자발화의도에대응하는외부응용데이터베이스를선택하고, 상기사용자발화의도에따라선택된외부응용데이터베이스로부터상기사용자발화의도및 상기시각정보에대응하는상기응답정보를추출하는스마트미러제어기, 그리고상기이미지에상기응답정보에대응하는응답이미지를중첩하여출력하는디스플레이를포함할수 있다.

公开(公告)号：KR1020160084748A

公开(公告)日：2016-07-14

申请号：KR1020150001398

申请日：2015-01-06

Applicant: 포항공과대학교 산학협력단

Inventor： 이근배 ,  김정은 ,  한상도 ,  이규송

IPC: G10L15/22 ,  G10L15/18

CPC classification number: G10L15/22 ,  G10L15/18 ,  G10L15/25 ,  G10L15/28

Abstract: 대화시스템및 그방법에관한것이다. 대화시스템은, 음성신호를수신하며, 상기음성신호로부터제1자연어를인식하는음성인식기, 상기제1자연어로부터사용자발화의도를획득하는발화의도검출모듈, 카메라를통해획득되는이미지로부터시각정보를추출하는시각정보추출모듈, 상기사용자발화의도에따른외부응용데이터베이스선택정보와, 상기사용자발화의도및 상기시각정보에따라서응답정보를추출하기위한쿼리문을포함하는스마트미러모델을저장하는제1데이터베이스, 상기스마트미러모델을토대로, 상기사용자발화의도에대응하는외부응용데이터베이스를선택하고, 상기사용자발화의도에따라선택된외부응용데이터베이스로부터상기사용자발화의도및 상기시각정보에대응하는상기응답정보를추출하는스마트미러제어기, 그리고상기이미지에상기응답정보에대응하는응답이미지를중첩하여출력하는디스플레이를포함할수 있다.

Abstract translation: 本发明涉及一种能够使用户以固定姿势进行操作的对话系统及其方法。 对话系统可以包括：语音识别器，其接收语音信号，并从语音信号识别第一自然语言; 语音意图检测模块，其从第一自然语言获取用户的语音意图; 视觉信息提取模块，其从由相机获取的图像中提取视觉信息; 存储智能镜模型的第一数据库，其包括基于用户的语音意图提取外部应用数据库选择信息的查询语句和基于用户语音意图和视觉信息的响应信息; 智能镜控制器，其基于智能镜模型，选择与用户的语音意图对应的外部应用数据库，并从所选择的外部应用数据库中提取与用户的语音意图相对应的响应信息和可视信息 基于用户的言语意图; 以及显示器，其输出图像和与响应图像相对应的响应图像，其中响应图像与图像重叠。