Polymath: Een revolutie in muziekproductie met AI
Polymath is een innovatieve AI-tool die elke muziekbibliotheek omzet in een muziekproductie-samplebibliotheek. Het biedt een naadloze workflow voor muziekproducenten, DJ's en ML audio-ontwikkelaars.
Deze tool maakt gebruik van verschillende neurale netwerken en bibliotheken om verschillende taken uit te voeren.muzieksourcenseparatie wordt uitgevoerd door het Demucs-neurale netwerk, terwijl muziekstructuursegmentatie/labeling wordt gedaan met het sf_segmenter-neurale netwerk. Muziekpitch-tracking en sleuteldetectie worden beheerd door het Crepe-neurale netwerk en muziek-naar-MIDI-transcriptie wordt uitgevoerd met het Basic Pitch-neurale netwerk. Muziekkwantisering en -uitlijning worden bereikt met pyrubberband en muziekinfo-ophalen en -verwerking wordt gedaan met librosa.
Polymath maakt het eenvoudig om elementen uit verschillende nummers te combineren om unieke composities te maken. Gebruikers kunnen snel een gepolijste, uur-lange mash-up DJ-set maken of het proces vereenvoudigen om een grote muziekdataset te maken voor het trainen van generatieve modellen.
Om Polymath te gebruiken, moet bepaalde software op het systeem geïnstalleerd zijn, waaronder ffmpeg. Het installatieproces vereist een python-versie tussen 3.7 en 3.10. Gebruikers kunnen de aangegeven instructies volgen om de repository te klonen, de vereiste afhankelijkheden te installeren en de tool in te stellen.
Polymath biedt ook verschillende functionaliteiten, zoals nummers toevoegen aan de bibliotheek, nummers kwantiseren, vergelijkbare nummers zoeken en audio naar MIDI converteren. Elk van deze operaties wordt gedetailleerd uitgelegd, samen met de nodige opdrachten en parameters.