中央音乐学院音乐人工智能与音乐信息科技系近日建成全球首个带标注的多模态胡琴演奏数据库(CCOM-HuQin)(以下简称“数据库”)。该数据库不仅加入了胡琴经典作品资料,更囊括了胡琴在不同地区的多种演奏技法并对其进行了标注。
数据库涵盖了二胡、高胡、高音板胡、中音板胡、次中音板胡、低音板胡、坠胡、中胡共8种代表性胡琴乐器的高质量音频、多视角视频以及相应的数字化乐谱和标注文件,并将其分为人工标注的经典曲目选段和带多级标签的单个演奏技法片段两个子集。
人工标注的经典曲目选段中,选曲包括从古至今不同历史时期和作曲家的作品,展现了河南、河北、陕西、广东、内蒙古及新疆等多个地区的创作风格和演奏技法。每首乐曲的标注文件包括带有技法标注的乐谱、音符级别(note-level)的音高—时间序列标注以及每个音符对应的演奏技法、帧级别(frame-level)的基频(F0)音高轨迹。以上标注均由具有胡琴表演知识的专业人士完成,保证了其准确性和可靠性。
带多级标签的单个演奏技法片段,包含12大类、25小类的单个演奏技法,每个技法类别具有力度、速度、音程关系等各个演奏属性的标签。这些标签以层级结构设为文件名,供研究者使用。
该数据库采用统一的高精度录制标准和科学可靠的标注体系,可广泛用于音高识别、音频转谱、乐谱跟随以及音视频分析、情感计算、表演生成等研究,填补了音乐科技领域中带标注的多模态中国民族乐器演奏数据库的空白,对弘扬中国民族音乐以及中西方音乐对比研究具有重要价值。
数据库是中央音乐学院高精尖学科建设项目与国家社科基金艺术学重大项目“音乐与人工智能协同创新发展理论研究”所取得的成果之一,体现了音乐与科技跨领域成功合作,为学校未来数据中心建设作出了贡献。今后,学校将继续拓展数据库的内容和标注信息,探索更全面高效的数据库建设和管理模式,促进音乐数据库的标准化,为音乐科技领域的研究提供权威可靠的数据支持。
标签: 中央音乐学院 多模态胡琴演奏数据库 高音板胡 中音板胡