A study on an emotion model for prosody control and dialog management in speech communication

语音交流中韵律控制和对话管理的情感模型研究

基本信息

批准号：
17500079
负责人：
OHNO Sumio
金额：
$ 1.98万
依托单位：
Tokyo University of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2005
资助国家：
日本
起止时间：
2005 至 2006
项目状态：
已结题

项目摘要

In this scientific research project, it was achieved that a conversational system can process the emotion, and the object was 1) concerning the spoken expression of the emotional utterances and 2) concerning the modeling emotions in a dialog management. The following results were obtained in this project.1) Emotional expression of synthetic speechNot only the kind of emotions but also the levels of their strength were our research targets. Four emotions, i.e., "Joy", "Sadness", "Anger", and "Fear" were taken up as a kind of feelings, and prosodic features of the emotional utterances were examined by collecting and analyzing it for synthesizing expressive speech with controlling the level of the emotion. The controlling rule war formulated on the basis of a linear modeling of obtained prosodic parameters. The evaluation experiment was conducted by a synthetic speech. As a result, emotional strength control can be realized with a limitation of the kinds of emotions. A relatively good performance was obtained for "sadness" and "fear" in case of controlling the pitch features.2) Modeling of emotions in dialog managementWhen the processing of the expression of emotion is taken to the conversation between human and machine, advanced communications function is achieved by guessing other's emotions. It proposed an engineering model of the mind. The knowledge representation in the model of the mind was defined from the viewpoint of "Own inner environment", "Own inner environment from others" and "Own external environment from others", and emotions located it with one parameter of an inner environment. Moreover, the guess method by the inference-by-synthesis technique was designed as a processing technique for the others recognition in the model of the mind.

在这个科研项目中，实现了一个可以处理情感的会话系统，其目标是1）涉及情感话语的口头表达和2）涉及对话管理中的建模情感。本项目取得了以下成果： 1）合成语音的情感表达我们的研究目标不仅是情感的种类，还有情感的强度水平。将“喜悦”、“悲伤”、“愤怒”、“恐惧”四种情绪视为一种感觉，通过收集和分析情绪话语来检查其韵律特征，以合成具有控制性的表达性语音。情绪的水平。控制规则战争是在所获得的韵律参数的线性建模的基础上制定的。评估实验通过合成语音进行。从而可以在限制情绪种类的情况下实现情绪强度控制。在控制音高特征的情况下，“悲伤”和“恐惧”都获得了较好的表现。2）对话管理中的情绪建模当将情绪表达的处理带到人机对话中时，高级通信功能是通过猜测别人的情绪来实现的。它提出了一个心灵工程模型。心智模型中的知识表征是从“自己的内部环境”、“来自他人的自己的内部环境”和“来自他人的自己的外部环境”的角度来定义的，而情感则以内部环境的一个参数来定位它。此外，综合推理技术的猜测方法被设计为心智模型中他人识别的处理技术。

项目成果

期刊论文数量（26）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

生成過程モデルに基づく感情表現におけるFOパターン制御規則の導出と合成音声による評価

基于生成过程模型的情感表达FO模式控制规则推导和合成语音评估

DOI：
发表时间：
2006
期刊：
電子情報通信学会論文誌D J89-D・8
影响因子：
0
作者：
榊重信;伊藤慶明;石亀昌明;小嶋和徳;河津宏美
通讯作者：
河津宏美

癒し系ロボットPDDINの分析および福祉と認知リハビリテーションへの応用に関する研究

康复机器人PDDIN分析及其在福利和认知康复中的应用研究

DOI：
发表时间：
2007
期刊：
電子情報通信学会技術研究報告 TL2006-66(WIT2006-98)
影响因子：
0
作者：
K.Sato;Y.Hamada;M.Morimoto and K.Fujii;河津宏美;小澤朋之
通讯作者：
小澤朋之

「怒り」の感情表現とその言語表現-音響的特徴

“愤怒”的情感表达及其语言表达——声学特征

DOI：
发表时间：
2006
期刊：
言語処理学会第12回年次大会ワークショップ「感情・評価・言語と態度」論文集
影响因子：
0
作者：
吉田;拓真;伊藤;慶明;石亀;昌明;小嶋;和徳;有本泰子
通讯作者：
有本泰子

Analysis of the relationship between F0 contour parameters and perceived degree of emotion in Japanese utterances

日语言语中F0轮廓参数与情感感知程度的关系分析

DOI：
发表时间：
2005
期刊：
Proceedings of the 10^<th> International Conference on Speech and Computer 2
影响因子：
0
作者：
土井健司;井上正博;田坂未来;平島大志郎;勅使河原可海;Hiromi Kawatsu
通讯作者：
Hiromi Kawatsu

感情の強さを制御可能な音声合成のためのFOパターン生成

用于语音合成的 FO 模式生成可控制情绪强度