• AInauten
  • Posts
  • 🤯 Filme ändern mit AI und Facebook zeigt seine Muskeln

🤯 Filme ändern mit AI und Facebook zeigt seine Muskeln

Schauspieler haben bald viel weniger zu tun. Meta kommt mit einem Text zu 3D Video Model und ein cooles Video Tool!

Guten Montag AInauten!

Wie immer am Montag begrüßen wir heute 235 neue AInauten im Team.

Willkommen zum AI Newsletter mit den neusten News, Tools & Hacks rund um das Thema AI. Wie immer verständlich auch für Menschen ohne Mathe-Studium und in weniger als 3 Minuten.

Super viele Sachen sind passiert. Bekommen wir alles gar nicht in eine Ausgabe. Los gehts.

Das haben wir heute für dich im Gepäck:

  • 📰 WTF! Filmdialoge sofort ändern - ein Game-Changer für Hollywood 2.0

  • 🔴 Text zu 3D Video - Facebook zeigt AI Muskeln

  • 🧑‍💻 AI Tool Tipp: Descript.com für Audio- & Video

  • 🖼️ AInauten privat: AI im MoMA, im Briefkasten und mit Schwiegermama

📰 WTF! Filmdialoge sofort ändern - ein Game-Changer für Hollywood 2.0

Die Filmindustrie hat einen neuen Star! Flawless AI revolutioniert mit ihrer Technologie TrueSync die Nachbearbeitung. Das eröffnet eine ganz neue Welt der Möglichkeiten im Filmemachen und Storytelling.

Die Software nutzt dabei generative AI, um Filmdialoge zu ändern, wodurch Nachdrehs nicht mehr nötig sind. Damit wird eine immersive visuelle Übersetzung in jeder Sprache möglich - ohne dass man das Gefühl hat, dass Lippen und Ton völlig aneinander vorbeireden!

Diese Technologie wurde bereits im Lionsgate's Actionfilm "Fall" eingesetzt, um eine weltweite Kinoveröffentlichung zu ermöglichen und kulturelle Barrieren zu überwinden.

Problem Nummer #1: es wurde geflucht, was das Zeug hergibt. Mehr als 30-mal wurden F-Bombs gedroppt, was eine familienfreundlichere Bewertung unmöglich machte… und damit die Zielgruppe stark einschränkte, da der Film für unter 17-Jährige nur in Begleitung eines Erwachsenen zugänglich wäre.

Problem Nummer #2: Der Regisseur konnte wegen fehlendem Produktionsbudget keine nach Aufnahmen machen…

Die Lösung? Regisseur Scott Mann ist zufälligerweise auch Co-CEO von Flawless AI und hat es möglich gemacht, mit AI die Dialoge “clean” zu machen.

Trivia für Film-Enthusiasten: wie hieß der erste Film, der 2020 vollständig virtuell ins Englische synchronisiert wurde? Der polnische "The Champion".

Corridor Crew hat die Technologie dahinter in einem Video zusammengefasst (ab Minute 10).

🔴 Text zu 3D Video - Facebook zeigt AI Muskeln

Bisher hört man im Bereich AI vor allem viel von Microsoft und OpenAI oder Google und Deep Mind.

Aber ein absolutes AI Monster, kommt mehr und mehr zum Vorschein und zeigt Auszüge, was es kann.

Facebook (sorry, Meta) hat die Funktion "Text zu 3D-Video” vorgestellt! Das Modell MAV3D - Make a Video 3D - erstellt anhand einer Textbeschreibung dynamische 3D-Videos.

Es ist das erste Modell, das erfolgreich dreidimensionale dynamische Szenen aus einer Textbeschreibung generieren kann.

Leider wird nur die Demo präsentiert, aber diese Methode sorgt im Video-Bereich bereits für Aufregung. Aus gutem Grund!

Mit MAV3D braucht man keine komplexen 3D- oder 4D-Daten mehr. Alles, was es braucht, ist eine Textbeschreibung, und das Modell erledigt den Rest erledigen.

Das Text-to-Video-Modell wird nur auf Text-Bild-Paaren und ungelabelten Videos trainiert und ist das erste seiner Art, das dynamische 3D Szenen aus nur einer Textbeschreibung generiert.

Für alle, die Ads schalten: Wie genial wäre es, wenn wir uns nicht mehr mit nervigen Influencern, Tools oder UGC Content Ersterllern rumärgern müssten für unsere Anzeigen.

Nur noch etwas Text in die AI und schon habe ich die Videos, die ich brauche… 🥰

🧑‍💻 AI Tool Tipp: Descript.com für Audio- & Video

Kennst du Descript? Es ist der Videoeditor, der das Bearbeiten von Videos so einfach macht wie das Bearbeiten von Dokumenten oder Präsentationen.

Echt wahr - und funktioniert sogar auf Deutsch (und 22 anderen Sprachen)! Einige Beispiele: Descript's "Szenen" ermöglichen es, Videos intuitiv wie eine Diashow zu erstellen, und die Transkription-basierte Editor-Funktion revolutionierte bereits das Podcast-Bearbeiten.

Die App bietet über 30 viele AI-basierte Funktionen und richtet sich an YouTuber, TikToker, Podcaster und Unternehmen, die Video für Marketing, Verkauf, interne Schulungen etc. nutzen.

Zudem gibt es Zugang zu Millionen von Premium-Videos, Bildern, Soundeffekten und Musikstücken sowie Vorlagen für tolle Layouts, Titelsequenzen und soziale Clips.

Descript hat vor Kurzem übrigens eine $50 Millionen USD Serie C Runde vom OpenAI Startup Fund angekündigt, um AI in die Kreativität zu integrieren.

Wenn du irgendwas mit Audio/-Videobearbeitung machst, dann solltest du dir dieses Tool echt mal genau anschauen!

🖼️ AInauten privat: AI im MoMA, im Briefkasten und mit Schwiegermama

Kurze Info vorab. Wir machen AInauten zu zweit. Einer von uns lebt in New York! Hier eine kurze Erfahrung vom Wochenende - go:

Heute eine kurze Anekdote, wie AI Einzug in den Alltag hält.

Am Samstag hatte meine Frau Geburtstag. Happy birthday, babe! Schwiegermama war für ein paar Tage zu Besuch, und zur Feier des Tages habe ich das naheliegendste mit den beiden gemacht: Wir sind ins MoMA, das Museum of Modern Art.

Warum das naheliegend ist? Wie die Mutter, so die Tochter sind beide mit Leib und Seele Künstlerinnen, Abstract Artists, um genau zu sein.

Und auch ich kam auf meine Kosten, denn es hatte eine AI-Kunstinstallation von Refik Anadol mit dem treffenden Titel “Unsupervised”, sprich “Ohne Aufsicht”.

Es ist ein absoluter Hingucker und hat die Leute in den Bann gezogen, sieh selbst!

Was könnte eine Maschine träumen, nachdem sie die Sammlung des Museums of Modern Art gesehen hat? Dieser Frage geht der Künstler Refik Anadol mittels künstliche Intelligenz nach, um mehr als zweihundert Jahre Kunst zu interpretieren und zu transformieren.

Er hat damit ein digitales Kunstwerk geschaffen, das sich in Echtzeit entfaltet und ständig neue, andere Welten generiert.

Dahinter steht ein ausgeklügeltes maschinelles Lernmodell. Es interpretiert die öffentlich verfügbaren Daten der MoMA-Sammlung, um sich vorzustellen, was hätte sein können und was noch kommen könnte.

Die Installation basiert auf Werken, die auf der Blockchain codiert sind.

Zudem werden ortspezifische Eingaben aus der Umgebung des Museums integriert - Änderungen im Licht, Bewegung, Akustik und Wetter - um die ständig wechselnde Bild- und Klanggestaltung im Hier und Jetzt zu beeinflussen.

Oft wird Al verwendet, um die Welt zu klassifizieren, zu verarbeiten und realistische Darstellungen zu generieren.

Im Gegensatz dazu ist "Unsupervised" visionär: Es erforscht Phantasie, Halluzination und Irrationalität und schafft ein alternatives Verständnis des Kunstschaffens selbst.

Ok, das war der erste Streich… und der zweite folgt sogleich!

Cover The Week vom 3.2.2023

Als wir nach Hause kamen, lag die neuste Ausgabe von “The Week” im Briefkasten. Dieses Magazin ist eine wöchentliche Medienrundschau mit den wichtigsten News. Und wurde von Dennis Felix gegründet. Genau, DER Dennis Felix!

Den kennst du nicht? Sein Buch “How to get rich” ist nicht nur (s)eine unterhaltsame Lebensgeschichte, sondern auch eine Geschichte fürs Leben. Absolute Leseempfehlung!

Aber zurück zum Thema. Das Cover wartet mit einer klaren Prophezeiung auf, die wir unterstreichen: “Eine neue Intelligenz - wie AI die Arbeit, Schule, Kunst, Politik und fast alles verändern wird.”

Nichts Neues für gestandene AInauten, aber das Thema kommt definitiv, findet definitiv ein breiteres Publikum.

Artikel The Week vom 3.2.2023

Und zu guter Letzt konnte ich meiner Schwiegermama noch ChatGPT “live und in Action” vorstellen. Sie plant eine Ausstellung. Und dafür braucht es eine Gallerie. Und um eine Gallerie zu finden, benötigt es ein Proposal, also einen Antrag. Und genau das haben wir in Rohform mit ChatGPT erstellt.

Success - and that’s a wrap!

Und schon wieder sind 3 Minuten um. Aber kein Grund zum traurig sein. Am Mittwoch sind wir wieder da. Und es wird musikalisch.

Bis dann!

Deine AInauten

P.S.: Bitte gib uns Feedback. Welche Themen gefallen dir besser, welche müssen nicht sein? Was ist für DICH am spannendsten und relevantesten?

⭐️ Wie hat dir diese Ausgabe gefallen?

Login or Subscribe to participate in polls.

Folge uns auf den sozialen Medien, wenn du nix verpassen willst. 👇️

Fragen, Ideen & Tipps? Antworte uns auf diese E-Mail.

Join the conversation

or to participate.