VST-Begriffe

Bevor man mit der Programmierung eines VST-PlugIns beginnt, ist es empfehlenswert, sich zunächst mit einigen grundlegenden und essenziellen Begriffen vertraut zu machen. Diese Kenntnisse erleichtern das Verständnis der technischen Abläufe und ermöglichen eine effizientere Entwicklung.

• Virtual Studio Technology, kurz VST genannt, ist eine von Steinberg entwickelte Schnittstelle für Audio-Plugins, die die Integration unterschiedlichen Tonaufnahmegeräten und Instrumenten ermöglicht. Sie bedient sich digitaler Signalverarbeitung, um so bestimmte Geräte zu simulieren. Es können über eine Programmierschnittstelle digitale Effektgeräte und Instrumente innerhalb einer Musiksoftware eingesetzt werden.
• Ein PlugIn beschreibt ein Zusatzprogramm, welches die Funktionen von Webanwendungen und Desktop-Programmen ergänzt. Wenn ein PlugIn installiert wurde, wird die jeweilige Anwendung mit zusätzlichen Funktionen erweitert, ohne das Änderungen am Kerncode erforderlich sind.
• Software Development Kit, kurz SDK ist ein Set von Entwicklungswerkzeugen, die von einem Unternehmen bereitgestellt werden und zur Entwicklung einer Software dient. Für die VST Programmierung ist das VST3 SDK von Steinberg das wichtigste Werkzeug.
• C++ ist eine Programmiersprache, die häufig für die Entwicklung von Audio-PlugIns verwendet wird, da sie eine hohe Performance und Kontrolle über Systemressourcen bietet. Für die Erlernung dieser Programmiersprache können wir Ihnen

Einsatz von VST-PlugIns

VST-Effekte werden viel im Bereich der Musikproduktion eingesetzt, beispielsweise bei dem Mastern von Musik. Auch beim Komponieren von elektronischer Musik sind VST-Effekte heutzutage nicht mehr wegzudenken. Die Software von VST bringt auch die Möglichkeit mit sich, mit Audiosignalen zu kommunizieren. Das bildet die Grundlage, sich virtueller Effektgeräte zu bedienen, wie beispielsweise den Reverb, Equalizer oder auch den Kompressor. Bei vielen Hosts ist das Verketten unterschiedlicher VST-Effekte möglich. Das hat zur Folge, dass der Originalsound individuell verändert werden kann. Ein klassisches Beispiel dafür ist das Auto-Tune, bei welchem digital die Tonhöhen geändert und angepasst werden können. Das hat eine Klangveränderung zur Folge.

Eine VST-Programmierung wird häufig in der Musikproduktion verwendet. Bild: Pixabay

Vorbereitung zur VST-Programmierung

Für die Programmierung eines eigenen VST-PlugIns können Sie folgende Tools installieren.

• IDE (Visual Studio oder Xcode)
• C++ Compiler (MSVC, Clang, GCC)
• VST3 SDK
• Audio Framework (Juce, iPlu2, etc.)
• Build-Tools (CMake)
• DAWS (zum Testen der PlugIns)
• Git für Versionskontrolle

Mit diesen Tools sind Sie bestens gerüstet, um in die VST-PlugIn-Programmierung einzutauchen. Um Ihnen das Programmieren zu erleichtern, können wir Ihnen die Tutorials auf der Steinberg Webseite empfehlen.

Durchführung einer VST-Programmierung

Man muss zunächst die nötigen Tools installieren, um ein eigenes PlugIn zu entwickeln. Dazu gehören die VST 3 SDK von Steinberg, eine Entwicklungsumgebung wie Xcode oder Visual Studio sowie CMake für die Projektgenerierung. Zudem wird eine DAW wie Cakewalk oder FruityLoops Studio benötigt, um das PlugIn zu testen. Nach dem Einrichten der Umgebung kann der bereitgestellte Quellcode geladen und erste Änderungen an bestehenden PlugIns vorgenommen werden.

Erstellung eines eigenen PlugIns

Um ein eigenes VST-PlugIn zu entwickeln, benötigt man eine geeignete Entwicklungsumgebung wie JUCE oder Steinberg’s VST SDK. Zunächst wird das Grundgerüst des PlugIns erstellt, inklusive der DSP-Algorithmen zur Klangbearbeitung. Anschließend folgt die Gestaltung der Benutzeroberfläche mit Reglern und Anzeigen. Nach der Implementierung werden Tests durchgeführt, um die Stabilität und Klangqualität sicherzustellen. Abschließend wird das PlugIn kompiliert und für verschiedene Plattformen bereitgestellt. Eine gute Dokumentation erleichtert die spätere Nutzung und Weiterentwicklung.

In weiteren Artikel helfen wir Ihnen Ihr eigenes Homestudio einzurichten oder welche Australischen Band und Musiker’innen Sie auf jeden Fall kennen sollten.

Quellen

Krug, Katharina (2022). Was ist Visual Studio? Verständlich erklärt.

Pianoo (2018). VST. Software-Schnittstelle und Recording-Revolution.

Steinberg Media Technologies GmbH (2022). VST 3 Developer Portal.

Der Beitrag VST programmieren – so geht’s erschien zuerst auf SystMus.

Was ist eine WAV-Datei

Die WAV-Datei, auch Wave oder Wave-Datei genannt, ist ein Audio-Dateiformat, welche bis zu 4 GB groß sein kann. Während MP3-Dateien verlustbehaftet komprimiert sind, kann ein WAV.Kontainer unkomprimierte PCM-Rohdaten enthalten.

Der Name der WAV-Datei ist vom englischen Begriff „wave“ abgeleitet und bedeutet „Welle“. Sie können mit Python Audio Dateien im WAV-Format erstellen. Quelle: Pixabay

Python Audio Datei erhalten (3 Methoden)

Drei der praktischsten Methoden um aus einem Array eine WAV-Datei zu erstellen sind:

• Scipy ist für den wissenschaftlichen Gebrauch konzipiert. Die Bibliothek glänzt durch ihre Einfachheit und Genauigkeit.
• Das waveModul ist bereits in Python enthalten und benötigt keine zusätzlichen Bibliotheken.
• Soundfile ist ebenfalls schnell, einfach und vielseitig.

Python Audio — Sinus erstellen

Um eine WAV-Datei zu erhalten, benötigen Sie zunächst ein NumPy-Array. In diesem sind mehrdimensional Daten gespeichert. Die Daten in einem Array lassen sich als Graph darstellen oder als Audio abspielen. Ein Ton kann entstehen, wenn die Daten sich in gleichmäßigen Abständen wiederholen. Das nennt man Periodizität. Nicht-periodische Daten können auch als Audio abgespielt werden, klingen für das menschliche Ohr allerdings wie Rauschen.

import numpy as np 

samplerate = 44100

def signal(f=440, s=1, A=1, fileformat=np.int16):
    t = np.linspace(0, s, int(s*samplerate), endpoint=False) 
    amplitude = (np.iinfo(fileformat).max)*A
    sine = amplitude * np.sin(2*np.pi*f*t)
    return sine.astype(fileformat)

Dieser Quelltext definiert die Funktion signal(). Diese können Sie mit beliebigen Werten aufrufen. Die Funktion gibt ein Array mit den Werten eines Sinus zurück. Die wichtigsten Werte sind:

• f die Frequenz und somit Tonhöhe des Sinus.
• s die Länge des Sinus in Sekunden.
• A die Amplitude, sie beeinflusst wie die Lautstärke des Signals vom Computer gelesen wird. A=1 ist in diesem Fall der höchstmögliche Wert des Dateiformates und A=0 wäre Stille.
• fileformat die Art der Enkodierung beziehungsweise die Bit-Tiefe. Geben Sie hier np.int16 für 16-Bit PCM, np.int32 für 32-Bit PCM oder np.uint8 für unsignierte 8-Bit PCM Enkodierung an.

In einem eigenen Artikel erklären wir ausführlich, wie Sie in Python einen Sinus plotten und abspielen.

Python Audio — Datei erhalten mit SciSciPy

SciPy ist eine Python Bibliothek. Sie ist für die Anwendung im wissenschaftlichen Bereich gedacht und hat viele nützliche Funktionen. Eine davon ist die write Funktion aus dem Modul scipy.io.wavfile(). Mit diesem Modul können Sie Eingangsdaten erstellen und Ausgangsdaten auslesen.

from scipy.io.wavfile import write
sine=signal(f=440, s=1, A=0.5, fileformat=np.int16)
write('python_audio.wav', samplerate, sine.astype(np.int16))

Importieren Sie zunächst das Modul mit from scipy.io.wavfile import write.
Rufen Sie dann sine=signal(f=440, s=1, A=0.5) mit den gewünschten Werten auf. Geben Sie im Anschluss einen Namen für die Datei ein. Beachten Sie, den Namen in Anführungszeichen zu setzen und mit .wav zu beenden. Fügen Sie die Variable für die samplerate hinzu und geben Sie mit sine.astype(np.int16) die Enkodierungsform an — in diesem Fall 16-bit PCM.
Die Funktion sollte dann eine Datei mit dem gewählten Namen im gleichen Ordner abspeichern, in dem das Programm gelaufen ist.

Python Audio — waveModul

Sollten Sie keine Lust haben weitere Bibliotheken zu installieren ist hier ein weiterer Weg in Python eine Audio-Datei zu erhalten: Das in Python eingebaute wave-Modul.

import wave 

sine=signal(f=440, s=1, A=0.5, fileformat=np.int16)

filename = 'python_audio.wav' 

with wave.open(filename, 'wb') as wf:
    wf.setnchannels(1)  
    wf.setsampwidth(2) 
    wf.setframerate(samplerate)
    wf.writeframes(sine.tobytes())

Importieren Sie zuerst das wave Modul. Legen Sie im Anschluss den Namen der Datei in der Variable filename fest.
Nutzen Sie die wave.open() Funktion:

• Um mit wf.setnchannels(1) die Menge der Ausgangs-Kanäle festzulegen. Wenn Sie einen einzelnen Kanal einstellen, wie in diesem Fall, wird die Datei in Mono gespeichert.
• Legen Sie mit wf.setsampwidth(2) die Bit-Tiefe fest. Ein Wert von 2 bedeutet eine Bit-Tiefe von 16, 4 wären 32 Bit. Da das Sinus-Array auch mit 16-Bit gespeichert wurde, bietet sich 16 Bit hier an.
• Bei wf.setframerate() reicht es, wenn Sie die vorher festgelegte samplerate Variable angeben.
• Schreiben Sie dann mit wf.writeframes(sine.tobytes()) das Sinus-Array auf eine WAV-Datei.

Python Audio — Das Soundfile Modul

Die write Funktion des Soundfile Moduls eignet sich ebenfalls, um in Python Audio-Dateien zu erhalten.

import soundfile as sf

sine=signal(f=440, s=1, A=0.5, fileformat=np.int16)

filename = 'python_audio.wav'
sf.write(filename, sine, samplerate)

Installieren Sie dafür zuerst das Modul. Importieren Sie es dann mit import soundfile as sf. Legen Sie den Dateinamen fest und speichern Sie ihn in der Variable filename.
Schreiben Sie nun mit sf.write() unter Angabe dersamplerate das Sinus-Array als WAV-Datei. Das Modul übernimmt die Enkodierung von 16 Bit PCM aus dem Array. Diese haben Sie beim Aufrufen der Funktion signal() festgelegt.

Wie Sie sehen gibt es viele verschiedene Wege eine WAV-Datei in Python zu erzeugen. Je nach Anwendungsbereich können manche davon praktischer sein als andere. In einem weiteren Artikel zeigen wir Ihnen, wie Sie in Python Audio abspielen.

Der Beitrag Python Audio — Datei erhalten erschien zuerst auf SystMus.

Die Python-Bibliotheken

Für Python gibt es eine Vielzahl an Bibliotheken, die das Sound-Abspielen ermöglichen. Alle davon haben ihre Vor- und Nachteile, da kann die Auswahl schwierig sein. Hier sind einige der beliebtesten Möglichkeiten erklärt:

So sieht das Logo der Programmiersprache aus. Mit Python Sound abspielen ist jetzt womöglich einfacher denn je. Quelle: Pixabay

Pyaudio

Pyaudio kann mit einfachen Mitteln einen Output-Stream erzeugen. Dieser greift dann auf Audio-Möglichkeiten am Computer zu. Pyaudio basiert auf der Bibliothek Portaudio, die ursprünglich für die Programmiersprachen C und C++ gedacht war. Mit Pyaudio können Sie sowohl ein Array, als auch eine Datei als Audio abspielen.

import wave
import pyaudio


CHUNK = 1024

filename = input("WAV-Datei: ")

with wave.open(filename, 'rb') as wf:

    p = pyaudio.PyAudio()

    
    stream = p.open(format=p.get_format_from_width(wf.getsampwidth()),
                    channels=wf.getnchannels(),
                    rate=wf.getframerate(),
                    output=True)

    
    while len(data := wf.readframes(CHUNK)): 
        stream.write(data)

    
    stream.close()

    p.terminate()

• Pyaudio kann Audio abspielen, aber keine Audio-Dateien lesen. Importieren Sie hierfür zunächst das in Python integrierte wave Modul. Mit diesem Modul kann Python WAV-Dateien einlesen und erstellen. Importieren Sie dann Pyaudio.
• Legen Sie die Größe der CHUNK Variable fest. Die Chunk-Größe ist dafür verantwortlich, wie viele Daten von der Datei in den Speicher gelesen werden. Ist sie höher, kann das die Prozessorleistung verringern, aber die Verzögerung erhöhen. Ist sie niedriger, wird der Prozessor mehr belastet, aber die Verzögerung kann verringert werden. Das ist vor allem wichtig, falls Sie die Audio-Quelle in Echtzeit bearbeiten wollen. Wenn, wie in diesem Fall, nur eine WAV-Datei abgespielt werden soll, ist die Verzögerung nicht so wichtig.
• Schreiben Sie nun ins Programm, wo Pyaudio die Datei finden kann. Die Variable filename soll den Dateipfad enthalten. In diesem Fall öffnet sich ein Fenster in das, bei Start des Programms, der Dateipfad eingegeben werden kann.

Das wave Modul

• Nutzen Sie nun das wave Modul, welches die Datei als Binärdatei öffnet und ihr die Variable wf zuschreibt. Instantiieren Sie danach die Pyaudio Bibliothek und schreiben Sie ihr die Variable p zu. Pyaudio kann sich im Folgenden mit der Audio-Hardware verbinden.
• Öffnen Sie im Anschluss den Audio-Datenstrom. Die Funktionen in diesem Abschnitt lesen die Spezifikationen der Datei. Die Bit-Tiefe, Anzahl der Kanäle (also zum Beispiel der Unterschied zwischen Mono und Stereo) und die Samplerate sind wichtige Parameter, um die Datei möglichst originalgetreu wiederzugeben. Mit der Anweisung output=True spezifizieren Sie, dass der Datenstrom zum Abspielen gedacht ist.
• Im nächsten Abschnitt kommt die CHUNK Variable wieder ins Spiel. Starten Sie einen while loop, der so lange Stücke der Audio-Datei in den Datenstrom schreibt, bis das Ende der Datei erreicht ist. Schließen Sie im Anschluss mit stream.close()den Datenstrom und beenden Sie mit p.terminate() das Programm.

IPython

Wenn Sie Jupyter benutzen, ist IPython womöglich der schnellste Weg, um Audio abspielen zu können. Aber Vorsicht: IPython ist kein reines Python-Modul. Es verwendet die Möglichkeiten von Jupyter, Inhalte über HTML zu rendern und regelt den Audio-Datenfluss über den Browser. Das ist ideal für Musik- und andere Wissenschaflter’innen, erlaubt aber auch nicht die Genauigkeit und Anpassungsfähigkeit von Pyaudio oder anderen Bibliotheken.

from IPython.display import Audio

filename = input("WAV-Datei: ")

display(Audio(filename))

Importieren Sie zunächst die Audio-Klasse des Ipython.display Moduls. Ordnen Sie dann der Variable für den Dateipfad filename eine Benutzereingabe zu. Nutzen Sie im Anschluss display(Audio(filename)), um dem Display die Datei und das Medium (also in diesem Fall Audio) zuzuweisen. Starten Sie dann das Programm und geben Sie in das Textfeld den Dateinamen ein. Sie erhalten nun eine Oberfläche, mit der die Datei abgespielt werden kann.

Python Sound abspielen — Sounddevice

Die Sounddevice Bibliothek basiert, wie Pyaudio, auf der PortAudio Bibliothek für C und C++. Mit Sounddevice können Sie mit sehr wenigen Eingaben eine Datei als Audio abspielen. Für mehr Kontrolle bietet die Bibliothek aber auch die Möglichkeit, den Audio-Datenstrom direkt zu bestimmen, ähnlich wie Pyaudio.

import sounddevice as sd
from scipy.io import wavfile

filename = input("WAV-Datei: ")

sd.play(*wavfile.read(filename))
sd.wait()

• Der einfachste Weg um mit Sounddevice eine WAV-Datei abzuspielen ist mithilfe des Scipy-Moduls wavfile. Dieses ermöglicht es die nötigen Informationen über die Datei direkt an Sounddevice weiterzugeben.
• Importieren Sie dafür zunächst Sounddevice und das wavfile Modul von Scipy. Fragen Sie im Anschluss nach der Benutzereingabe des Dateinamen mit filename = input("WAV-Datei: ").
• Mit der Funktion sd.play(*wavfile.read(filename)) können Sie dann Sounddevice den Auftrag zum Abspielen geben. Innerhalb der Klammer passiert folgendes: wavfile.read() liest die Datei filenameein. Die Funktion liefert ein Tupel mit der Samplerate und den Audiodaten. Durch den Operator * werden diese Daten direkt der sd.play() Funktion zugespielt.
• Mit sd.wait() können Sie sichergehen, dass sich das Programm erst schließt, wenn die Datei fertig abgespielt ist.

Pygame

Wie der Name schon sagt, ist die Pygame Bibliothek eigentlich zum Spiele-Programmieren gedacht. Mit dem pygame.mixer Modul ist sie auch geeignet, um Audio abzuspielen.

import time
import pygame

pygame.mixer.init()

filename = input("WAV-Datei: ")

pygame.mixer.music.load(filename)

pygame.mixer.music.play()

while pygame.mixer.music.get_busy():  
    time.sleep(1)

Importieren Sie zunächst Pygame und das (bereits in Python enthaltene) time Modul. Initialisieren Sie Pygame im Anschluss mit pygame.mixer.init(). Das Argument filename = input("WAV-Datei: ") ist für den Dateinamen gedacht. Laden Sie dann mittels pygame.mixer.music.load(filename) die WAV-Datei und spielen sie mit pygame.mixer.music.play() ab. In einem Jupyter Notebook schaltet sich das Programm ab, wenn der Code einmal durchgelaufen ist. Wenn im Hintergrund dann noch ein Audio-Datenstrom offen ist, wird dieser mit beendet. Fügen Sie um das zu verhindern eine while Schleife ein, die überprüft ob die Datei noch abgespielt wird und das Schließen des Programms in der Zeit verhindert.

Python Sound abspielen — Playsound

Das playsound Modul enthält eine gleichnamige Funktion, die Audio abspielen kann. Vieles, was bei den anderen Bibliotheken explizit eingegeben werden muss, macht playsoundautomatisch.  Allerdings fehlt Genauigkeit. Es gibt keine eingebaute Funktion um das Abspielen zu pausieren oder andere Dinge mit dem Datenstrom zu machen. Genau so kann playsound nicht mehrere Kanäle zur gleichen Zeit offen haben. Das ist praktisch, wenn Sie einen kurzen Audio-Clip abspielen und nicht direkt einen ganzen Codeblock schreiben wollen. Um mit playsound eine WAV-Datei abzuspielen, braucht es drei Dinge:

from playsound import playsound 

filename = input("WAV-Datei: ")

playsound(filename)

• Importieren Sie zunächst playsound.
• Geben Sie im Anschluss mit filename = input("WAV-Datei: ") die Möglichkeit den Dateinamen einzugeben.
• Rufen Sie dann die playsound Funktion auf. Setzen Sie als Argument die filename Variable.

Wie Sie sehen gibt es viele verschiedene Wege eine WAV-Datei mit Python abzuspielen. Je nach Anwendungsbereich können manche davon praktischer sein als andere. Wenn Sie mit dem abgespielten Sound Daten transportieren, wird das „Audifikation“ genannt. Mehr über Audifikation und Sonifikation erfahren Sie in einem weiteren Artikel.

Der Beitrag Python Sound abspielen — so gehts erschien zuerst auf SystMus.