Simon Says Assemble -- Videoschnitt im Texteditor via KI-Transkription

[slashCAM]

Der Transkriptionsdienst Simon Says stellt ab sofort ein Tool namens Assemble zur Verfügung, mit dem sich der Rohschnitt Interview-lastiger Filme wie eine Textbearbeitung...

Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Simon Says Assemble -- Videoschnitt im Texteditor via KI-Transkription

[Panamatom]

Eigentlich eine interessante Idee. Ich fürchte bloß, dass dieses Geschäftsmodell nicht lange funktioniert, da Adobe eine Texterkennung, die im Gegensatz zu bisherigen Implementierungen diesen Namen auch verdient, bereits für ihre kommende 2021-Version angekündigt hat. Dann würde man sich den Umweg über eine solche Drittlösung sparen.

[Jott]

Bringt Adobe auch dieses "Schneiden mit Text"? Funktioniert echt gut beim Papagei.
Nur wie man dann die Unmengen an Jump Cuts los kriegt, bleibt die Aufgabe des kompetenten Interview-Filmers! :-)

[Frank Glencairn]

Ehrlich gesagt hab ich da so meine Zweifel, daß es damit wirklich irgendwie schneller geht - is halt nur anders.

[funkytown]

Bringt Adobe auch dieses "Schneiden mit Text"? Funktioniert echt gut beim Papagei.
Nur wie man dann die Unmengen an Jump Cuts los kriegt, bleibt die Aufgabe des kompetenten Interview-Filmers! :-)

Verbietet ja niemand Schnittbilder drüber zu legen ;)

[funkytown]

Ehrlich gesagt hab ich da so meine Zweifel, daß es damit wirklich irgendwie schneller geht - is halt nur anders.

Es ist ein super Service für unsere Kunden. Gerade bei längeren Interviews ist es viel einfacher sich das Transskript durchzulesen und sich die entsprechenden Passagen kurz anzuschauen. Außerdem kann man so schon eine logische Reihenfolge der O-Töne festlegen. Ich werde das auf jedenfall nutzen.

[Jott]

Bringt Adobe auch dieses "Schneiden mit Text"? Funktioniert echt gut beim Papagei.
Nur wie man dann die Unmengen an Jump Cuts los kriegt, bleibt die Aufgabe des kompetenten Interview-Filmers! :-)

Verbietet ja niemand Schnittbilder drüber zu legen ;)

Echt? Ach so.

[fsm]

ich nutze es grad für gesetzte engl. interviews, sehr gute transskriptionsergebnisse, schnell und ein wirklich guter preis.

[Panamatom]

Also, auch auf die Gefahr hin, einige Leute arbeitslos zu machen und Herrschaftswissen zu verraten:
Bei Adobe geht das Schneiden mit Text auch jetzt schon! Man hat den Service der Spracherkennung zwar wegen fürchterlicher Transcript-Ergebnisse wieder stillgelegt (anscheinend vorläufig), aber die Metadaten-Funktionalität ist noch da. Hierauf bauen services wie "transcriptive" von digital anarchy auf (als "Erweiterung" in Premiere). Die KI-Erkennungsleistung dieses Dienstes ist wirklich hervorragend. Ich hatte beispielsweise ein längeres Interview mit einem reichlich betrunkenen amerikanischen Obdachlosen zu transkribieren. Er sprach zudem noch Straßenslang und nuschelte. Ich konnte ihn häufig nicht mal akustisch verstehen. Aber die KI hat selbst sowas verstanden und akkurat transkribiert. Transcriptive kann dann ebenfalls eine XML rausgeben, falls sie in anderen Zusammenhängen gebraucht wird, und dann wird´s Zauberei: Da eine XML ja nichts anderes ist als eine Textdatei, in dem die Metadaten ebenfalls als Text vorliegen, kann man stumpf über copy/paste diesen Text bei "deepl.com" in jede angebotene Sprache ebenfalls mit KI-Unterstützung übersetzen lassen, die Übersetzung wieder mit copy/paste als *.xml abspeichern (.txt-Datei erstellen und einfach in .xml umbenennen), diese dann in Premiere importieren und voila: Die mehrsprachigen Untertitel sind auch schon fertig, und zwar mit passendem Timecode! Die wirkliche Arbeit besteht letztlich nur noch aus dem Redigieren.

[Jott]

Der Papagei macht das schon recht lange. Und natürlich Youtube. Ist die gleiche Engine.

[Frank Glencairn]

Es ist ein super Service für unsere Kunden.

Es ging ja um's schneiden, nicht um die Kunden - transkribieren tut ja bereits YT kostenlos.

Gerade bei längeren Interviews ist es viel einfacher sich das Transskript durchzulesen und sich die entsprechenden Passagen kurz anzuschauen.

Es dauert also doppelt so lange, als sich nur die Clips anzusehen - genau das hab ich gemeint.

Außerdem kann man so schon eine logische Reihenfolge der O-Töne festlegen. I

Wenn man schon Schwierigkeiten hat, die logische Reihenfolge aus den Clips (die ja dank Timecode, schon in der richtigen Reihenfolge kommen) festzulegen kann, dann hilft das Script auch nicht.

[Jörg]

und Herrschaftswissen zu verraten:

herrlich ;-))

[Drushba]

Habs mir gerade mal angeschaut. Simon says ist wohl eine super Sache, wenn sie qualitativ funktioniert (auch ohne Schnitt im Texteditor). Habe derzeit z.B. 40+ Stunden russisches Material und begrenztes Budget, aber das passt vom zeitlichen Rahmen in das Jahresabo für 300$. Einzelne Sprecher können bei Dialogen sogar per Stimme zugeordnet werden! Habe noch nicht rausgefunden, ob automatische Übersetzungen nach dem Transkript extra berechnet werden, aber bei 40 Stunden und Jahresabo wären das nochmal 260$. Das passt schon. Also zusammen derzeit 463 Euro. Da muß sicher nochmal drübergelesen werden, dann kommen ca. 1000 Euro Lektorat dazu. Das wären insgesamt 1500 Euro, was früher locker 3-5000 allein für die Übersetzung gekostet hätte. Zudem direkt für den Avid aufbereitet und dort kommt dann Scriptsync zum Einsatz, also bequem im Text markieren und direktes Springen zur Textstelle im Video. Spart nochmal bestimmt 30% Zeit gegenüber FCP oder Resolve. Auch wäre das Material also nach ca. einer Woche (24h Simonsays + eine Woche Lektorat) schnittbereit. Bin versucht.))

[Jott]

direktes Springen zur Textstelle im Video. Spart nochmal bestimmt 30% Zeit gegenüber FCP oder Resolve.

Gibt's für die beiden genauso.

[Drushba]

direktes Springen zur Textstelle im Video. Spart nochmal bestimmt 30% Zeit gegenüber FCP oder Resolve.

Gibt's für die beiden genauso.

Scriptsync? Haste nen Link? Habs gerade (eilig & obflächlich) gegoogelt, finde etwas Entsprechendes aber nicht für Resolve/FCP. Wär natürlich der Hammer!


Edit: Hier stellt jemand dieselbe Frage: https://forum.blackmagicdesign.com/view ... 3&t=112246

[Jott]

simonsays.ai halt.

Bei fcp wird simonsays direkt in die Oberfläche eingebaut (Extension). Wie es für Resolve läuft, weiß ich nicht.

[Drushba]

simonsays.ai halt.

Bei fcp wird simonsays direkt in die Oberfläche eingebaut (Extension). Wie es für Resolve läuft, weiß ich nicht.

Was ich meine ist, dass man im Text rumklicken kann und das NLE automatisch an die entsprechende Videostelle in der Timeline oder im Source-Monitor springt. Das scheint es für FCPX so (noch nicht?) nicht zu geben. Ist wohl leider noch das Alleinstellungsmerkmal von Avid. Avid und Simonsays funktionieren da ganz gut zusammen:

[R S K]

Nur für's Protokoll: genau die gleiche Funktionalität gibt es z.T. schon seit Jahren von anderen. Z.B. Builder NLE oder auch Descript. Lezteres sogar mit einigen anderen, extrem interessanten Feature, wie das „Overdub” oder eben für eine ganz einfache SRT Ausgabe. Preislich auch m.E. deutlich interessanter als die meisten anderen, im Moment leider halt noch sprachlich eingeschränkt und es gibt für beide keine Workflow Extension, was ich in dem Fall aber bestenfalls für ein „Nice to have” sehe. Und ja, beide mit „Klick auf den Text und es springt an die Stelle des Videos”-Funktionalität. Das ist nun wahrlich nichts besonderes.

Aber wer tatsächlich nicht versteht wie das ganze z.B. Interview/Doku Arbeiten exponentiell beschleunigen kann, der/die hat offensichtlich noch nie ernsthaft eine solche Produktion fahren müssen und braucht es demnach auch einfach nicht. Es ist nicht für „Scripted” gedacht (bzw. es ist ausserhalb davon nicht fast nutzlos), auch wenn es genauso auch dafür verwendet werden kann, sogar im Fall von Descript gratis, ohne Zeitlimit.

Jedenfalls davon zu reden, dass es irgendwas „doppelt so lange” macht ist mal wieder kompletter Unsinn und aus reiner Ignoranz heraus geschwätzt. 🙄 Sonst würde es nicht gefühlt jede Woche einen weiteren solchen Tool neu geben.

- RK