Transkripsi musik polifonik saat ini tampaknya tidak menjadi masalah yang terpecahkan.
Bagaimana dengan kebalikan dari sebagian kecil masalah. Apakah ada jenis karakteristik spektral (dari STFT) yang dapat digunakan untuk menghilangkan beberapa akord musik dari ruang probabilitas? (mis. cuplikan suara ini kemungkinan besar tidak mengandung akord C #, atau akord minor apa pun yang berkurang, atau ini adalah not tunggal bukan akor, dll.)
Asumsikan potongan audio lebih-atau-kurang stasioner (serangan sementara dihapus, dll), dan bahwa nada untuk sebagian besar atau semua catatan individu sangat mungkin ada. (Dan pertanyaan ini bukan tentang akord terbalik.)
music
frequency-spectrum
hotpaw2
sumber
sumber
Jawaban:
Masalah transkripsi musik polifonik telah menerima banyak perhatian di komunitas penelitian dalam beberapa tahun terakhir dan saya akan mengatakan bahwa untuk polipon instrumen tunggal (piano, gitar, dll ...) hasilnya sangat bagus. Berikut adalah beberapa makalah / penulis yang telah melihat masalah ini secara mendalam. Derry Fitzgerald telah melakukan banyak hal di daerah tersebut, banyak dari kerjanya di NMF tentang pemisahan sumber menghasilkan transkripsi yang akurat. Anssi Klapuri telah melihat secara lebih khusus masalah pendeteksian akor dalam polifoni multi-instrumen. Dan akhirnya, meskipun tidak diterbitkan, Mikel Gainza telah mengembangkan algoritma transkripsi akord yang sangat akurat untuk musik komersial yang akan segera dirilis dalam produk perangkat lunak berbasis gitar Riffstation. Publikasi di tautan di sini harus memberi Anda ide yang bagus tentang bagaimana lanskap transkripsi musik Polifonik saat ini.
sumber
Nah, untuk ini, STFT hanya akan berisi komponen frekuensi dasar dan frekuensi lain yang dekat dengan harmoniknya (walaupun tidak tepat, karena tidak harmonis ). Temukan puncak dalam spektrum dan lihat apakah frekuensi yang lebih tinggi dekat dengan kelipatan bilangan bulat dari frekuensi terendah yang ada. Jika ada frekuensi non-harmonik, maka itu bukan nada tunggal.
(Tapi bagaimana dengan instrumen dengan fundamental yang hilang , atau hal-hal yang secara fundamental tidak harmonis seperti lonceng? Bagaimana dengan dua instrumen yang secara sempurna selaras memainkan satu oktaf terpisah, sehingga sebagiannya sebagian besar sejajar satu sama lain? Apakah Anda ingin mendeteksi itu sebagai satu not atau dua catatan?)
sumber