Alle Projekte
Experiment · Neuroevolution · Musik

MusicThing

Ein Wesen, das komponieren lernt.

MusicThing ist ein Musik-Experiment für Neugierige: ein virtuelles Wesen, das mit Neuroevolution (NEAT) mehrstimmige Musik komponiert und im Browser abspielt — ein Prototyp, der lokal oder als Docker-Container läuft. Besucher hören die Stücke und bewerten sie. Diese Bewertungen entscheiden mit, welche neuronalen Netze sich in der nächsten Generation durchsetzen.

4

Schichten

Drums · Bass · Melodie · Harmonie

5

Achsen

Automatische Bewertung

50

Genome

Population (Standard)

0

ML-Frameworks

NEAT in reinem Python

Schicht für Schicht, wie eine Band

Jedes Stück entsteht in vier Durchgängen. Jede Stimme hört die Stimmen, die vor ihr entstanden sind.

  1. 1

    Schlagzeug

    Legt den Rhythmus als Fundament.

  2. 2

    Bass

    Hört das Schlagzeug und legt die harmonische Basis.

  3. 3

    Melodie

    Hört Schlagzeug und Bass, spielt die Hauptstimme.

  4. 4

    Harmonie

    Hört alles und ergänzt Akkorde.

So funktioniert die Evolution

1

Komponieren

Das beste Netz erzeugt ein Stück Note für Note. Für jede Note entscheidet es Tonhöhe, Länge, Lautstärke oder Pause.

2

Bewerten

Der Bewerter vergibt Punkte auf fünf Achsen. Besucher hören zu und geben ihre eigene Bewertung ab.

3

Weiterentwickeln

Aus beiden Werten entsteht die Fitness. Die besten Netze kreuzen und mutieren zur nächsten Generation.

Die Netze können wachsen: Über „Grow“ bekommen sie einen weiteren Eingang und Ausgang. Bestehende Netze werden dabei automatisch angepasst.

Funktionen

Neuroevolution

NEAT entwickelt die neuronalen Netze: Gewichte, Verbindungen und Knoten mutieren, ähnliche Netze bilden Arten, die besten vererben sich weiter.

Bewertung auf fünf Achsen

Rhythmus, Harmonie, Melodie, Struktur und Ausdruck. Daraus ergibt sich die automatische Fitness jedes Stücks.

Besucher bewerten

Wer zuhört, bewertet ein Stück pro Achse bzw. Instrument. Die Bewertungen fließen anteilig in die Fitness ein, standardmäßig zu 30 Prozent.

Gezieltes Training

Das Wesen sucht seine schwächste Achse und richtet mehrere Evolutionsrunden gezielt darauf aus.

Dream und DeepDream

Erfolgreiche Stücke werden erneut abgespielt und als Maßstab genutzt. DeepDream läuft 20 statt 5 Generationen. Danach werden doppelte Stücke aus dem Gedächtnis entfernt.

MIDI studieren

Eine hochgeladene MIDI-Datei wird analysiert, ihre Tonart erkannt und als Referenz für die Bewertung genutzt.

MIDI-Export

Jedes Stück lässt sich als normale MIDI-Datei herunterladen und in einer DAW weiterbearbeiten.

Wiedergabe im Browser

Tone.js spielt die Stücke direkt im Browser ab, eine Piano-Roll zeigt die Noten.

Auto-Evolve

Auf Wunsch läuft die Evolution dauerhaft im Hintergrund weiter und bezieht neue Bewertungen laufend ein.

Technik

Kern
Python 3.12+, NEAT selbst implementiert
Web
FastAPI · WebSocket · Uvicorn
Audio
Tone.js im Browser, mido für MIDI
Speicher
SQLite (Stücke, Bewertungen), Genome als JSON
Betrieb
Docker Compose, ein Container
Tests
pytest, 45 Tests
Lizenz
MIT

Die Oberfläche zeigt neben Player und Piano-Roll auch die Netz-Topologie des besten Genoms, den Fitness-Verlauf über die Generationen und die Zahl der Arten.

Weitere Projekte

Verwandte Projekte

Thematisch verwandte Apps und Werkzeuge aus dem phash.de-Portfolio.

Ein Experiment, kein fertiges Produkt

MusicThing ist ein Prototyp in Version 0.1 und derzeit nicht öffentlich erreichbar. Es läuft lokal oder als Docker-Container. Wer sich für generative Musik oder Neuroevolution interessiert, kann sich gern melden.

Kontakt aufnehmen