Audioに関わる信号処理. Audio Processing


👂音楽情報検索(MIR)

MIR (Music Information Retrieval)

  • 音楽を「情報」として計算機で扱い、そこから意味のある情報を取り出す学問。
  • 検索だけでなく分析・分類・生成・推薦まで含む「計算機で音楽を理解する」全般
  • 知覚と記号のあいだのギャップ (semantic gap)」を埋める

low

  • onset検出
  • pitch検出
  • spectral抽出

mid

  • beat/tempo推定
  • key推定
  • chrod推定
  • source separation

high

  • ジャンル分類
  • ムード推定
  • 曲構造解析
  • 類似度

応用

  • 楽曲推薦
  • カバー、著作権検出

🎵ピッチシフト

ピッチを変更する音響処理. 移調/トランスポーズ.

🎵シェール効果

ケロケロボイス、ケロらせる、ロボットサウンド

ピッチを意図的に強制補正させることで機械的なボイスサウンドを生み出す.

AutoTune

ピッチ補正ソフトの元祖. 1997年に発売.

それまで1990年初頭からオーディオファイル破壊編集にて局所的なピッチ修正を行うことはありましたが、ファイル非破壊にてプラグインエフェクトとしてピッチ補正が行える「AutoTune」の登場はボーカル処理に革命を起こし始めていました。

Cher - Believe (Official Music Video) [4K Remaster] - YouTube

🎵タイムストレッチ

音程(ピッチ)を変えずに速度(テンポ)だけを変更する、音声処理。

タイムストレッチをC++で実装する方法を調べてみました | Futurismo

応用