ElevenLabs bietet bereits KI-generierte Versionen menschlicher Stimmen und Musik an. Jetzt können Benutzer damit auch Soundeffekte für Podcasts, Filme oder Spiele erstellen. Das neue Soundeffekt-Tool kann basierend auf Benutzeraufforderungen bis zu 22 Sekunden lange Sounds generieren, die mit der Sprach- und Musikplattform des Unternehmens kombiniert werden können, und bietet Benutzern mindestens vier herunterladbare Audioclip-Optionen.
Das Unternehmen sagt, es habe mit der Stock-Media-Plattform Shutterstock zusammengearbeitet, um eine Bibliothek aufzubauen und sein Modell anhand der Audioclips zu trainieren. Shutterstock hat seine Inhaltsbibliotheken an viele KI-Unternehmen lizenziert, darunter OpenAI, Meta und Google.
Sound Effects ist kostenlos, aber kostenpflichtige Versionen können die generierten Audioclips mit kommerziellen Lizenzen verwenden, während kostenlose Benutzer „ElevenLabs als Quelle angeben müssen, indem sie ‚elevenlabs.io‘ in den Titel aufnehmen.“ Benutzer von ElevenLabs haben beim Schreiben von Eingabeaufforderungen eine festgelegte Zeichenanzahlbeschränkung, wobei kostenlose Benutzer 10.000 Zeichen pro Monat erhalten. Für Sound Effects gibt ElevenLabs auf seiner FAQ-Seite an, dass 40 Zeichen pro Sekunde von der Zuteilung abgezogen werden, wenn Benutzer die Dauer des Audioclips selbst festlegen. Wenn die Standard-Audiodauer verwendet wird, werden für jede Eingabeaufforderung 200 Zeichen berechnet.
Es gibt bereits Bibliotheken mit Soundeffekt-Clips auf dem Markt für Kreative, Filmemacher und Videospielentwickler. Aber manchmal sind diese teuer oder es ist schwierig, genau den richtigen Sound zu produzieren. ElevenLabs sagt in seinem Blogbeitrag, dass es Sound Effects entwickelt hat, „um schnell, kostengünstig und in großem Maßstab reichhaltige und immersive Klanglandschaften zu erzeugen.“
Auch andere KI-Entwickler entwickeln eigene Text-zu-Ton-Generatoren. Stability AI hat im letzten Jahr Stable Audio herausgebracht, das Audioclips aus Musik und Soundeffekten erstellt, und die AudioCraft-Modelle von Meta erzeugen natürlichen Klang (denken Sie an Hintergrundgeräusche wie Wind oder Verkehr).