Adobe Firefly

hat eine neue Funktion eingeführt, mit der Nutzer Soundeffekte per Stimme vormachen und diese dann von der KI automatisch generieren lassen können. Das „Stimme zu Soundeffekten“-Feature (Voice to Sound Effects) ist derzeit im Beta-Stadium und funktioniert folgendermaßen:

• Nutzer öffnen das Audio-Modul von Firefly und wählen die Funktion „Stimme zu Soundeffekten“ aus.
• Anschließend können sie eine Mediendatei (Video oder Audio) hochladen, zu der Soundeffekte hinzugefügt werden sollen.
• An der gewünschten Stelle in der Timeline positioniert man sich vor das Mikrofon und macht den gewünschten Soundeffekt mit der eigenen Stimme oder durch Geräusche vor. Das System erkennt Timing, Lautstärke und Intensität anhand dieser Aufnahme.
• Optional kann noch eine kurze Textbeschreibung ergänzt werden, um der KI zusätzlichen Kontext zu geben, etwa zur Art des Effekts („Donnergrollen“, „splitterndes Glas“, „Löwengebrüll“).
• Firefly analysiert die Stimme und generiert daraus diverse Soundeffekt-Varianten, die direkt in der Timeline eingefügt und weiter angepasst werden können (z. B. in Lautstärke oder Position).

Die Funktion ist besonders hilfreich, um Soundeffekte präzise an Aktionen im Video oder Audioprojekt auszurichten, da das Modell sich an der menschlichen Vorlage orientiert und so Timing und Dynamik exakt übernimmt. Die Stimme wird dabei rein als Vorlage genutzt – die generierten Effekte enthalten kein Sprach- oder Gesangs-Material, sondern reine Geräusch-Kulissen.

Neben der Stimmeingabe bietet Firefly weiterhin die Möglichkeit, Soundeffekte einfach per Textprompt zu erzeugen, sodass kreative Soundgestaltung noch flexibler wird.

Neben den Soundfunktionen hat Adobe Firefly auch sein Video-Modell weiter verbessert. Es bietet jetzt realistischere Bewegungsdarstellungen, bessere Übergänge und natürlichere Animationen – besonders für Landschaften, Tiere und 2D/3D-Animationen. Außerdem wurden weitere KI-Modelle und Upscaler (z.B. Runway Gen-4 Video, Google Veo3, Topaz, Luma AI Ray 2, Pika 2.2) in die Firefly Boards und Generate Video integriert, was die Gestaltungsmöglichkeiten noch einmal deutlich erweitert.

Hier findest du weiterführende Informationen: Adobe