Naar inhoud springen

Muziekgeneratie

Uit Scriptspace Wiki
Versie door Dieouwe (overleg | bijdragen) op 19 okt 2026 om 14:57 (1 versie geïmporteerd)

Muziekgeneratie (plan)

Muziek maken met de eigen AI op de eigen pc, bediend vanuit SBWebUI (de Muziekmaker) en later Discord. Zelfde opbouw als de Beeldmaker. Status: voorstel; fase 0 (proef) akkoord op 18-10-2026. Nog niets gebouwd.

Model ACE-Step 1.5 (open source, MIT-licentie; gegenereerde muziek mag ook commercieel gebruikt worden)
Waar de pc (RTX 4060, 8 GB), map muziekserver
Van buiten via de Cloudflare-tunnel: muziek.scriptspace.nl (alleen met sleutel), net als img, tts en ollama
Ontwerp repo Die0uwe/SBwebui: docs/architectuur/muziekgeneratie.md, besluit ADR-030

Hoe het gaat werken

SBWebUI (Strato) --https--> muziek.scriptspace.nl (tunnel, sleutel) --> muziekserver (pc) --> ACE-Step 1.5 (videokaart)
  1. Je typt een idee. De assistent SunoCat maakt er een stijlomschrijving (Engels) en een songtekst van (met [Verse] en [Chorus]).
  2. In de chat verschijnt een muziekkaart: stijl, tekst (aan te passen), duur en de knop 🎵 Maak muziek.
  3. De muziekserver zet de opdracht in de wachtrij, maakt het nummer en levert een MP3. SBWebUI bewaart het zelf; je krijgt een speler met Download, Opnieuw en Variatie.
  4. Mijn muziek: privé, via link of openbaar; later een deelpagina. Rechten zoals bij beelden: per rol of per lid, daglimiet, tegoed.

Belangrijke keuzes

  • Eerst een taak, dan het resultaat: het nummer duurt tientallen seconden; SBWebUI op Strato kan niet zo lang wachten op één antwoord.
  • Eén wachtrij voor de videokaart: muziek en beelden nooit tegelijk (8 GB), Ollama wordt eerst vrijgegeven.
  • Geen Docker voor de videokaart: een gewone Python-omgeving, zoals de beeldserver (stabieler op Windows).
  • Externe cloud-GPU (bijv. Replicate): pas later, standaard uit en alleen door de beheerder aan te zetten. Nooit automatisch, vanwege kosten en privacy.
  • Veilig en eerlijk: geen "in de stijl van <artiest>", geen stem nadoen, label "Gemaakt met AI", moderatie in het Controlepaneel.

Fasen

Fase Wat Stand
0 Proef: ACE-Step 1.5 installeren en meten (videogeheugen naast Fooocus en Ollama, tijd voor 30 s en 2 min, Nederlands en Engels zingen) akkoord 18-10
1 Muziekserver, gedeelde wachtrij met de beeldserver, MP3, tunnel muziek.scriptspace.nl, kaart in het controlepaneel wacht op fase 0
2 SBWebUI Muziekmaker: SunoCat, muziekkaart, speler, Mijn muziek, rechten wacht
3 Delen, CoreBot /zing, eventueel externe cloud later

Open vragen voor de proef

  • Hoeveel videogeheugen echt (het project zegt minder dan 4 GB, andere bronnen 8 GB)?
  • Hoe snel op de 4060?
  • Hoe klinkt Nederlands gezongen? Anders Engelse teksten met Nederlandse uitleg.