音響モデルによるネットワーク上での対話的演奏システムの研究と開発

利用声学模型的网络交互表演系统的研究与开发

基本信息

批准号：
11780318
负责人：
中村文隆
金额：
$ 1.47万
依托单位：
The University of Tokyo (2000)Kobe Yamate College (1999)
依托单位国家：
日本
项目类别：
Grant-in-Aid for Encouragement of Young Scientists (A)
财政年份：
1999
资助国家：
日本
起止时间：
1999 至 2000
项目状态：
已结题

项目摘要

本研究課題においては、限られたネットワーク帯域での対話演奏に有効なモデルとして音響モデルのパラメータ送受信を用いるシステムの研究・開発を行った。対話演奏では双方向の実時間通信が必須であるが、インターネットでは原則として帯域保証を得ることができない。近年普及している一方向のコンテンツ配信では受信側でのバッファリングによるゆらぎ吸収などの方策を用いることができるが、双方向の実時間対話では演奏のずれが問題となるため、対話演奏の形式に制限が課せられる。このため、適切なモデル化によって演奏に必要とされるパラメータを設定し、ネットワーク上で伝送されるべきデータ量を減らす研究を行った。具体的なプラットホームとしてGUIによる直感的なユーザーインターフェースを備えるPureData(Pd)を使用し、正弦波合成、フィルタによる減算、FMモデル、のそれぞれについてネットワークを通じてパラメータを送受信し、対話的演奏を行うシステムを製作した。同システムを神戸山手女子短期大学における講義時間中に学生に使用させ、コンピュータに関する経験の少ない学生でも講義時間中にシステムを把握し、実際にLAN内での対話的演奏を行うことができることを確認した。また、東京大学と神戸山手女子短期大学の間でインターネットを経由した対話演奏の実験を行い、WAN経由での運用について検証を行った。以上の実験結果より、少ないパラメータ量でネットワーク経由の対話的演奏を行うシステムを構築することができることを実証できたと考えている。

在本研究主题中，我们研究并开发了一种系统，该系统使用参数传输和接收声学模型作为有限网络频段中交互式性能的有效模型。双向实时沟通对于对话表演至关重要，但是作为一般规则，无法在互联网上获得带宽保证。在近年来已经流行的单向内容的分布中，可以使用诸如通过在接收器侧缓冲的波动吸收之类的措施，但是性能偏差是双向实时对话中的问题，因此限制受到交互式性能的形式。因此，我们进行了研究，以通过适当的建模来设置性能所需的参数，从而减少了通过网络传输的数据量。作为一个具体平台，我们使用了使用GUI具有直观用户界面的Puredata（PD），并创建了一个系统，该系统通过网络通过网络发送和接收参数，以适用于Sine Wave合成，滤波器减法和FM模型，并执行交互式性能。学生在Kobe Yamate妇女初级学院的讲座期间使用该系统使用，并且可以证实，即使是计算机经验很少的学生也可以在讲座期间掌握该系统，并且实际上在LAN内进行了互动表演。此外，还通过东京大学和科比山塔妇女初级学院之间的互联网进行了对话表演的实验，并通过WAN测试了该行动。从上述实验结果中，我们认为已经证明，可以通过少量参数构建通过网络执行交互式性能的系统。