Meta wird Meta Movie Gen einführen

Meta wird Meta Movie Gen auf den Markt bringen, ein Multimedia-Tool der KI-Generation, das Kreativen Werkzeuge zum Erstellen, Anpassen und Bearbeiten von Videos und zum Produzieren von Audio bietet - alles in hoher Qualität und mit Textbeschreibungen. Meta Movie Gen ist die dritte Generation von Metas Grundmodellen, die das Unternehmen als Werkzeug für Content-Ersteller und Filmemacher entwickelt hat, um deren Kreativität zu fördern, anstatt sie zu ersetzen.

Wie das Unternehmen in seinem offiziellen Blog erklärt, wurden die enthaltenen Modelle mit lizenzierten und anderen öffentlich zugänglichen Datensätzen trainiert und bieten vier Funktionen: Videogenerierung, benutzerdefinierte Videogenerierung, präzise Videobearbeitung und Audiogenerierung.

Bei der Videogenerierung verwendet das Modell einen Transformator mit 30 Milliarden Parametern, um aus einer Textbeschreibung qualitativ hochwertige Videos mit einer Länge von bis zu 16 Sekunden und einer Rate von 16 Bildern pro Sekunde zu erzeugen.

Wie Meta anmerkt, "kann das Modell Schlussfolgerungen über Objektbewegungen, Objekt-Subjekt-Interaktionen und Kamerabewegungen ziehen und plausible Bewegungen für eine Vielzahl von Konzepten lernen". Meta Movie Gen Modelle generieren auch personalisierte Videos auf der Grundlage eines Bildes einer Person und einer Beschreibung. Dies ist gekoppelt mit der Fähigkeit, mit lokalisierten oder allgemeineren Aktionen und genauen Ergebnissen zu arbeiten.

Meta Movie will eine multimediale "Gesamtlösung" sein

Meta Movie Gen generiert auch Audio; Metas Vision ist es, dies in eine multimediale "Gesamtlösung" zu verwandeln. Konkret wird ein Modell mit 13 Milliarden Parametern verwendet, das aus einem Ausgangsvideo oder einer Textbeschreibung ein hochwertiges Video erzeugt. Die Ausgabe ist bis zu 45 Sekunden lang und enthält Umgebungsgeräusche, Soundeffekte und instrumentale Hintergrundmusik. Dieses Modell kann auch kohärenten Ton für Videos beliebiger Länge erzeugen.

Darüber hinaus betont das Unternehmen, dass es bei der weiteren Verbesserung seiner Modelle und der Annäherung an eine mögliche künftige Veröffentlichung "eng mit Filmemachern und Kreativen zusammenarbeiten wird, um deren Feedback zu integrieren". "Durch einen kollaborativen Ansatz wollen wir sicherstellen, dass wir Werkzeuge schaffen, die den Menschen helfen, ihre Kreativität auf neue, nie für möglich gehaltene Weise zu steigern. Stellen Sie sich vor, Sie animieren ein 'Tag im Leben'-Video, um es auf Reels zu teilen und bearbeiten es per Textnachricht, oder Sie erstellen einen personalisierten animierten Geburtstagsgruß für einen Freund und senden ihn per WhatsApp", fügt Meta hinzu.