• Complex
  • Title
  • Keyword
  • Abstract
  • Scholars
  • Journal
  • ISSN
  • Conference
搜索

Author:

黄志清 (黄志清.) | 贾翔 (贾翔.) | 郭一帆 (郭一帆.) | 张菁 (张菁.)

Indexed by:

EI Scopus CSCD

Abstract:

光学乐谱识别是音乐信息检索中一项重要技术,音符识别是乐谱识别及其关键的部分.针对目前乐谱图像音符识别精度低、步骤冗杂等问题,设计了基于深度学习的端到端音符识别模型.该模型利用深度卷积神经网络,以整张乐谱图像为输入,直接输出音符的时值和音高.在数据预处理上,通过解析MusicXML文件获得模型训练所需的乐谱图像和对应的标签数据,标签数据是由音符音高、音符时值和音符坐标组成的向量,因此模型通过训练来学习标签向量将音符识别任务转化为检测、分类任务.之后添加噪声、随机裁剪等数据增强方法来增加数据的多样性,使得训练出的模型更加鲁棒;在模型设计上,基于darknet53基础网络和特征融合技术,设计端到端的目标检测模型来识别音符.用深度神经网络darknet53提取乐谱图像特征图,让该特征图上的音符有足够大的感受野,之后将神经网络上层特征图和该特征图进行拼接,完成特征融合使得音符有更明显的特征纹理,从而让模型能够检测到音符这类小物体.该模型采用多任务学习,同时学习音高、时值的分类任务和音符坐标的回归任务,提高了模型的泛化能力.最后在MuseScore生成的测试集上对该模型进行测试,音符识别精度高,可以达到0.96的时值准确率和0.98的音高准确率.

Keyword:

目标检测 音符识别 深度学习 端到端 光学乐谱识别

Author Community:

  • [ 1 ] [黄志清]北京工业大学信息学部,北京,100022
  • [ 2 ] [贾翔]北京工业大学信息学部,北京,100022
  • [ 3 ] [郭一帆]北京工业大学信息学部,北京,100022
  • [ 4 ] [张菁]北京工业大学信息学部,北京,100022

Reprint Author's Address:

Email:

Show more details

Related Keywords:

Source :

天津大学学报

ISSN: 0493-2137

Year: 2020

Issue: 6

Volume: 53

Page: 653-660

Cited Count:

WoS CC Cited Count:

SCOPUS Cited Count:

ESI Highly Cited Papers on the List: 0 Unfold All

WanFang Cited Count: -1

Chinese Cited Count:

30 Days PV: 4

Online/Total:448/11122695
Address:BJUT Library(100 Pingleyuan,Chaoyang District,Beijing 100124, China Post Code:100124) Contact Us:010-67392185
Copyright:BJUT Library Technical Support:Beijing Aegean Software Co., Ltd.