Postproduktion allgemein Forum



KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Fragen rund um die Nachbearbeitung, Videoschnitt, Export, etc. (div. Software)
Antworten
Frank Glencairn
Beiträge: 23307

Neural Rendering Dialog Replacement

Beitrag von Frank Glencairn »

Sehr spannend was sich da gerade alles so tut.

The Champion directed by Maciej Barczewski, is the first full theatrical feature film to be converted to English using neural rendering. All of the performances were changed so the actors not only are revoiced into English, but their faces were replaced so the actors are also visibly speaking English as well.

The film tells the true story of pre-war boxing champion Tadeusz “Teddy” Pietrzykowski, who in 1940 arrives with the first transport of prisoners to the newly created Auschwitz concentration camp. Using advances in AI and machine learning the entire film has the actor’s faces replaced by an inferred version, visually built from actors re-recording dialogue in a sound studio.

https://www.fxguide.com/fxfeatured/the- ... ialWarfare
Sapere aude - de omnibus dubitandum



SamSuffy
Beiträge: 276

Re: Neural Rendering Dialog Replacement

Beitrag von SamSuffy »

Echt faszinierend.
Nächster Schritt hierzu wäre dann noch die Kehlkopfanimation anzupassen, die passt ja im Englischen dann nicht mehr.



slashCAM
Administrator
Administrator
Beiträge: 11262

KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"

Beitrag von slashCAM »


Filme in Fremdsprachen haben immer einen großen Nachteil gegenüber Filmen, welche in der jeweils lokalen Sprache gedreht wurden, denn entweder müssen sie untertitelt werd...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Alex
Beiträge: 1368

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von Alex »

Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.



tom
Administrator
Administrator
Beiträge: 1488

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von tom »

Alex hat geschrieben: Sa 16 Apr, 2022 15:49 Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.
Leider gibt es keine der englisch nachsynchronisierten Szenen auf YouTube, die finden sich nur im verlinkten Artikel von FXGuide. Der Trailer ist nur für den Kontext eingebettet (ich habe das jetzt noch .
slashCAM



 Aktuelle Beiträge [alle Foren]
 
» DaVinci Resolve 19 Public-Beta 2 zum freien Download verfügbar
von Skeptiker - Di 1:12
» DJI RS4 Pro und LiDAR: Bestes AF/Tracking (inkl. Stabilisierung) für Cine-Setups?
von roki100 - Di 0:47
» Blackmagic Pyxis PL - Kaufberatung
von roki100 - Mo 23:01
» Blackmagic PYXIS 6K: Die Vollformat „Box“-Kamera mit Viewfinder, 2x SDI, Sideplates (!) uvm.
von roki100 - Mo 22:24
» Können KI-generierte Bilder, Klänge und Videos von jedermann frei genutzt werden?
von Nathanjo - Mo 22:05
» Panasonic S5 - Allgemeine Fragen, Tipps und Tricks, Zeig deine Bilder/Videos usw.
von roki100 - Mo 21:18
» Rundfunkgebühren-Erhöhung
von DKPost - Mo 20:36
» Coppola’s “Megalopolis” - erster Clip
von iasi - Mo 18:46
» Peinlichkeiten auf der Leinwand: 10 Filme, die 2024 nicht mehr veröffentlicht werden könnten
von Darth Schneider - Mo 17:57
» DIY Heltec LoRa32 V3 Spielereien
von ruessel - Mo 17:09
» Canon USA startet Teaser Kampagne – EOS R5 Mark II kurz vor offizieller Vorstellung?
von iasi - Mo 16:01
» Heinz Hoenig Spendenaktion
von 7River - Mo 15:52
» Kooperation: Digitalschnittmesse und camgaroo film festival im ARRI-Kino
von slashCAM - Mo 13:54
» AllROUNDER oder nicht? Müssen sich Filmemacher spezialisieren?
von Nigma1313 - Mo 13:27
» externe Aufnahme Sony Alpha 73
von cantsin - Mo 9:56
» Kamera Kaufberatung Budget ca. 2000€
von aidualk - Mo 9:05
» Was schaust Du gerade?
von pillepalle - Mo 8:10
» MagicYUV Fehler
von TinyChris - Mo 0:22
» Windschutz für DPA 4560?
von berlin123 - So 20:26
» Lumix G9 II und GH 6 Sensor
von micha2305 - So 18:45
» Hollyland Pyro H 4K: HDMI Videofunkstrecke sendet an bis zu vier Empfänger
von slashCAM - So 14:18
» BIETE : Sony CFexpress 256 GB Typ B TOUGH R1700/W1480
von FocusPIT - So 13:21
» Was hast Du zuletzt gekauft?
von ruessel - So 9:56
» RED ist nun eine Nikon-Tochter - und Jarred Land abgesetzt
von iasi - Sa 15:49
» Windows 10 gewinnt weiter Marktanteile gegenüber Windows 11
von Hayos - Sa 14:42
» Dehancer Pro - Filmsimulation auf höchstem Niveau
von MK - Sa 14:20
» Bild und ton im Livestream nicht sychron
von Blackbox - Sa 13:32
» Was hörst Du gerade?
von Skeptiker - Sa 13:11
» SlashCAM - Server stark ausgelastet
von tom - Sa 11:35
» Behind The Boom with Boom Operator Ken Strain | URSA Exclusive
von Blackbox - Fr 17:39
» Atomos Ninja maximale Aufnahmezeit
von andy.de - Fr 16:52
» Apple Vision Pro - Bereits nachlassende Nachfrage in den USA?
von macaw - Fr 15:28
» Wie wichtig ist Quicksync?
von MK - Fr 14:31
» Timecodes, XML, ChatGTP...andere Lösungen??
von DKPost - Fr 13:14
» Magix VPX Version 2025
von fubal147 - Fr 12:41