視聴覚コンテンツにおける映像と音楽の適合性の効果の実験心理学的検討

视听内容中视频与音乐兼容性影响的实验心理检验

基本信息

批准号：
22K03199
负责人：
浅野倫子
金额：
$ 2.66万
依托单位：
The University of Tokyo
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

本研究の目的は，短い映画のような視聴覚コンテンツにおいて映像と音楽が「適合している（適合していない）」と感じられる条件を特定し，そのように感じられる際の認知処理を実験心理学的手法により明らかにすることである。一般的な視聴覚統合では視覚と聴覚のタイミングや意味が不一致だと統合が促進されないが，映像と音楽の場合は，視聴覚情報の印象の不適合により，元の視覚情報や聴覚情報にはない印象（皮肉等）が創発される可能性が指摘されており，特殊な視聴覚統合として位置づけることができる。この着想に基づき，映像と音楽の適合性に寄与する情報の処理レベル（低次の知覚，中間的な感覚間協応，感情・意味等の高次処理）と，そのレベルが感性的な効果の生起のしかたに影響する可能性について，実験心理学的手法により明らかにする。1年目である2022年度は，短い視聴覚コンテンツにおける映像と音楽の感情（感情価（ポジティブ，ネガティブ）や覚醒度の高低）における適合性が，視聴覚コンテンツへの没入感の強さに与える影響を心理学実験により検討した。その結果，感情価と覚醒度が共に不適合であるときに没入感が最も低く，その条件に比べて，いずれか片方が適合でもう片方が不適合であるときのほうが有意に高まることが示された。しかし，そのような感情価や覚醒度における適合性の効果は，教示によって映像と音楽の関係に注目するように誘導するなどの操作の影響を受けやすいことを示唆する結果も得られた。映像と音楽の主観的調和感についても調べた。これらの研究成果の一部について，国内学会および国際学会で発表した。また，上記の実験的検討と並行して，映画など視聴覚コンテンツの鑑賞や読書における没入やその関連概念についての理論研究および実証研究の文献調査を行い，2年目以降の研究の理論的基盤を強化した。

这项研究的目的是确定视频和音乐在诸如短片之类的视听内容中感觉到“兼容（不兼容）”的条件，并在通过实验性心理技术感觉到这种方式时澄清认知处理。总的来说，如果视觉和听觉的时间和含义不一致，则没有促进整合，但是在视频和音乐的情况下，可以指出，在原始的视觉或听觉上，在原始的视觉或听觉上没有发现，听觉信息的不一致的印象可能会导致印象（讽刺等）的创造。基于这个想法，我们将阐明有助于视频和音乐兼容的信息处理水平（低阶感知，中等感官间合作，情感和含义的高阶处理等）以及该水平的可能性可能影响敏感性影响的方式。在2022年的第一年，我们研究了短视听内容之间情绪（正，负，高和低水平的唤醒水平）之间对视听内容中浸入强度的影响。结果表明，当情绪价和唤醒都不兼容时，沉浸式是最低的，当其中一个是兼容而另一个与这些条件相比的不兼容时，它是明显更高的。但是，结果还表明，兼容性对情绪估值和唤醒水平的影响很容易受到操纵的影响，例如通过教学引起视频与音乐之间的关系。我们还研究了视频和音乐之间的主观和谐感。其中一些研究结果在国内和国际会议上提出。此外，与上面的实验检查并行，我们对观看和阅读视听内容（如电影（如电影）中的沉浸式和相关概念的理论和经验研究进行了文献调查，并从第二年开始加强了研究的理论基础。