TabTracking

Nagrywanie dźwięku stanowi poważne wyzwanie ze względu na złożony charakter muzyki, zwłaszcza w porównaniu z innymi sygnałami. Złożoność ta staje się jeszcze bardziej widoczna w muzyce polifonicznej, w której wiele instrumentów i głosów nakłada się na siebie. Pomimo tych wyzwań, opracowano wiele technik skutecznego przetwarzania muzyki do zastosowań audio. TabTracking bada metody transkrypcji muzyki do formy pisemnej, koncentrując się na przechwytywaniu dźwięku gitary elektrycznej. Analizowane są techniki takie jak FFT, STFT, spektrogramy, skalogramy, reprezentacja chrominancji, wykrywanie szczytów i podejścia oparte na uczeniu maszynowym. Ponadto przedstawiono implementację sprzętową w HDL, która wykorzystuje FPGA. Głównym aspektem tej aplikacji jest generowanie tabulatur gitarowych, numerycznego systemu notacji, który wskazuje, która struna i progi zostały zagrane na gitarze. Możliwe przypadki użycia tej pracy obejmują digitalizację występów gitarowych, gdzie muzycy mogą nagrywać utwory bezpośrednio grając, zamiast ręcznie wprowadzać tabulatury, lub jam session, gdzie spontaniczne pomysły muzyczne mogą być uchwycone poprzez nieformalne, wspólne tworzenie muzyki z innymi muzykami.