Splitsing van muziek en zang: haal de beat en zangstem apart

Hoe de zangscheider werkt

Je uploadt een nummer, een GPU-server laat de zangscheider over het hele nummer lopen en je krijgt twee MP3-bestanden terug: de beat (alles behalve de zang) en de zang (alleen de stem). De zangscheider bekijkt het nummer band voor band en moment voor moment, en beslist welke energie bij de menselijke stem hoort en welke bij de instrumenten.

Een detail dat weinig mensen opvalt: de gescheiden zang behoudt echte stilte. Bij de nummers die we hebben gemeten, was 23 tot 39% van de duur van de gescheiden zang volledig stil, precies waar de zanger rust. Remix je de gescheiden zang, dan sleep je dus geen laag achtergrondruis door het hele nummer mee.

Dit is ook de scheider die MuziAI gebruikt voor de eerste fase van AI-cover, dus de kwaliteit van de beat is in beide tools gelijk: hetzelfde bestand door beide routes sturen levert identieke beats op.

Hoe lang het duurt

Scheiden kost ongeveer 60 tot 75 seconden verwerking per nummer. Inclusief uploaden en downloaden schat de pagina 1 tot 2 minuten. Langere nummers duren langer, zoals deze metingen laten zien:

Iedereen kan één nummer tegelijk laten scheiden. Is de GPU bezig met ander werk, dan wacht de taak tot er genoeg geheugen is voordat hij start, en mislukt hij door geheugengebrek, dan probeert hij het zelf opnieuw, dus soms is er een wachtrij. Nummers die op MuziAI zijn gemaakt, kun je direct vanaf de nummerpagina laten scheiden, zonder uploaden.

Scheidingskwaliteit: de gemeten cijfers

Om te weten hoe goed een scheider werkt, heb je een geval nodig waarvan je het antwoord kent. We mengden een schone zangpartij in de echte beat van een nummer en lieten de scheider die er weer uithalen. De gescheiden zang kwam met 19,9 dB SDR overeen met de originele schone zang. Eenvoudig gezegd: de fout is qua energie ongeveer honderd keer kleiner dan de echte zang.

Ook de andere richting is gemeten: toen de beat van een testnummer opnieuw werd gescheiden, zat de originele zang die in de beat achterbleef op slechts −70 LUFS, wat praktisch onhoorbaar is.

We hebben geprobeerd hem te vervangen door een scheider die gespecialiseerd is in karaoke en door een scheider gecombineerd met galmverwijdering. Beide leverden vuilere zang op (spectrale ruis van 0,0085 tegenover 0,0070 bij de huidige). De huidige scheider blijft dus de beste optie van alles wat we hebben gemeten.

Beperkingen: wanneer scheiden tekortschiet

• Dichte harmonieën en koren. Met veel gestapelde stemmen vervaagt de grens tussen leadzang en achtergrondzang; in de beat kunnen nog echo's van de harmonieën blijven hangen.
• Elektronische muziek in hetzelfde bereik als de stem. Synths of leadklanken die precies in het zangbereik liggen, worden makkelijk aan de verkeerde kant toegewezen, waardoor je een zwakke doorklank kunt horen.
• Bestanden met een afgekapte bandbreedte. Veel bestanden die meerdere keren zijn gecomprimeerd, waren al rond 16 kHz afgekapt voordat ze bij jou aankwamen. De scheider kan niet toevoegen wat de bron niet heeft: een testbestand gaf een beat tot 18,0 kHz, precies gelijk aan de bron; een zwaar gecomprimeerd bestand gaf een beat die bij 16,0 kHz was afgekapt. Klinkt de beat dof, dan ligt dat aan het bronbestand.
• Opnieuw opgenomen via speakers of zwaar gecomprimeerd. Ruimteklank en compressieartefacten plakken aan zowel de zang als de muziek en zijn er niet uit te scheiden.
• Geen enkele scheiding is perfect. Stem en muziek overlappen in hetzelfde frequentiebereik, dus op sommige plekken kan de beat nog een spoor van de zang bevatten, of de zang een spoor van de muziek.

Tip: gebruik een origineel bestand van hoge kwaliteit (MP3 van 320 kbps, M4A, WAV of FLAC). Akoestische opnames met gitaar, piano en één stem laten zich meestal het schoonst scheiden.

Wat je met het resultaat kunt doen

• Automatisch mixen. Laad de beat en een zangopname op de pagina Automatisch mixen: die filtert, past EQ toe, comprimeert, voegt galm toe, brengt zang en muziek in balans en mastert naar −14 LUFS. De referentie voor de zangbalans komt van 144 nummers met echte losse sporen. Alles draait in je browser; een nummer van 4 minuten duurt ongeveer 12 seconden en je bestanden verlaten je apparaat nooit.
• Mengpaneel. De knop «Openen in de mixer» laadt de beat en de zang die je net hebt gescheiden alvast in. Je stelt per track volume, pan, mute en solo in en exporteert een WAV, ook gewoon in de browser.
• Opnieuw zingen. Gebruik de beat voor karaoke, of neem het nummer mee naar AI-cover om het met je eigen stem op de originele beat te laten zingen.
• Een zangspoor met muziekdoorklank opschonen. MuziAI gebruikt de scheider zelf ook zo: een zangspoor met doorklank van gitaar en drums had een beat-lock-score van 0,736, en na de scheider zakte die naar 0,257, vergelijkbaar met een echte menselijke zanger (0,254).
• Zangoefening en arrangement leren. Luister naar alleen de zang om ademhaling en frasering op te pikken; luister naar alleen de beat om te horen hoe bas, drums en harmonie zijn opgebouwd.

Privacy

Het bestand dat je uploadt, wordt verwijderd zodra het scheiden klaar is. De twee gescheiden bestanden verwijderen zichzelf na 24 uur; ze staan op een privélink, geen enkele openbare pagina verwijst ernaar, en de bestanden zijn zo gemarkeerd dat zoekmachines ze niet indexeren. Jij bent ervoor verantwoordelijk dat je de rechten hebt op de opname die je uploadt.

Veelgestelde vragen

Kan ik de gescheiden beat meteen voor karaoke gebruiken?

Ja. De beat is een MP3 met dezelfde lengte als het origineel, dus je kunt hem downloaden en meezingen. Pop, ballads en akoestische nummers zijn meestal schoon; nummers met veel harmonieën kunnen in het refrein nog zwakke echo's bevatten.

Waarom klinkt mijn beat dof?

Bijna altijd door het bronbestand. Bestanden die meerdere keren zijn gecomprimeerd, zijn vaak al rond 16 kHz afgekapt, en de gescheiden beat wordt op hetzelfde punt afgekapt. Opnieuw scheiden vanuit een origineel van hoge kwaliteit maakt een duidelijk verschil.

Kan het drums, bas of piano apart scheiden?

Nog niet. De tool levert twee delen: de beat en de zang. Wil je onderdelen binnen de beat aanpassen, dan kun je hem samen met andere tracks in het mengpaneel zetten.

Hoe lang worden de gescheiden bestanden bewaard?

24 uur, daarna verwijderen ze zichzelf. Download ze als je ze wilt houden. Wil je opnieuw scheiden, upload het nummer dan gewoon nog een keer; elke run duurt ongeveer één à twee minuten. Meer handleidingen vind je op de blog.

Gerelateerd onderzoek

• Zang mixen in de browser: waar de doelwaarden vandaan komen
• Waarom AI-covers rasperig klinken, en hoe we dat maten