Automatic transcription based on formal language theory

基于形式语言理论的自动转录

基本信息

批准号：
20H04302
负责人：
酒井正彦
金额：
$ 10.23万
依托单位：
Nagoya University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2020
资助国家：
日本
起止时间：
2020-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

本研究は、リズムの構造を考慮し自然言語の解析手法の応用により、MIDIデータからの自動採譜手法の確立を目指すことを主な目的としている。本年度は主に和音を含む単旋律のリズム量子化について研究を進め、以下の成果が得られた。入力となるmidiイベント列の部分列（トークンと呼ぶ）を、同一時刻に起こる楽譜の単位とみなすことで、MIDI入力と楽譜の要素を対応付ける手法を考案した。具体的にイベントの部分列がトークンとみなせるかどうかを表すいくつかの条件について検討を行い、これをシステムに組み込んで実験を行うことで課題を整理した。このシステムは https://git.trs.css.i.nagoya-u.ac.jp/transcription/qparselib/-/tree/mono2 で公開している。その結果、各イベントが発生した時点で鳴っている音の数を前処理によりあらかじめ計算しておくことによって、処理中に入力のMIDIイベントを参照する範囲が限定でき、その結果効率よくトークンであるかどうかの判定ができることが分かった。また、各イベントを楽譜上の時刻に対応させる際の評価値の計算においてリズムの密度の単旋律における定義の拡張が必要であることが判明した。この評価値は出力の精度に大きく影響があると予想されるため注意が必要である。その他、音楽生成理論に基づく自動演奏に対する表情付アルゴリズムを改良し、それらの実験のためのプラットフォームを作成し公開した。（https://git.trs.css.i.nagoya-u.ac.jp/transcription/dm-env）

本研究的主要目的是通过考虑节奏结构并应用自然语言分析方法，建立一种基于 MIDI 数据的自动乐谱转录方法。今年我们主要对包括和弦在内的单曲节奏量化进行了研究，得到了以下成果。我们设计了一种将 MIDI 输入与乐谱元素关联起来的方法，将输入 MIDI 事件序列的子序列（称为标记）视为同时发生的乐谱单元。具体来说，我们研究了表明事件的子序列是否可以被视为令牌的几个条件，并将这些条件合并到系统中并进行实验来解决问题。该系统发布于 https://git.trs.css.i.nagoya-u.ac.jp/transcription/qparselib/-/tree/mono2。因此，通过预先计算每个事件发生时正在演奏的音符数量，可以限制处理过程中输入 MIDI 事件的参考范围，从而限制正在演奏的音符数量可以限制每个事件发生的时间，因此可以有效地确定令牌是否可以另外，发现当每个事件对应于乐谱上的时间时，在计算评估值时有必要扩展单体旋律中节奏密度的定义。该评估值预计会对输出的准确性产生很大影响，因此必须小心。此外，我们还基于音乐生成理论改进了自动演奏的面部表情算法，并创建并发布了这些实验的平台。（https://git.trs.css.i.nagoya-u.ac.jp/transcription/dm-env）

项目成果

期刊论文数量（9）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

The Simulated Emergence of Chord Function

DOI：
10.1007/978-3-030-72914-1_18
发表时间：
2021
期刊：
影响因子：
0
作者：
Yui Uehara;S. Tojo
通讯作者：
Yui Uehara;S. Tojo

ASAP: a dataset of aligned scores and performances for piano transcription

DOI：
发表时间：
2020-10
期刊：
影响因子：
0
作者：
Francesco Foscarin;Andrew Mcleod;P. Rigaux;Florent Jacquemard;Masahiko Sakai
通讯作者：
Francesco Foscarin;Andrew Mcleod;P. Rigaux;Florent Jacquemard;Masahiko Sakai

qparse library for rhythm transcription

用于节奏转录的 qparse 库