KI-Dolmetscher und Video Translate von HeyGen

geändert am 26. Januar 2024

Beeindruckendes Video: Die Leistung des KI-Dolmetschers ist erstaunlich gut. Der Tech-Experte Jon Finger spricht in einem Video auf Twitter/X beinahe perfekt Französisch und Deutsch, obwohl er keinerlei Kenntnisse dieser Sprachen besitzt. Das Video ging viral, über 7 Millionen Nutzer schauten sich den Videoclip bisher an. Das neue KI-Dolmetscher-Tool dürfte menschlichen Dolmetschern Kopfzerbrechen über ihren Job bereiten. Und erst recht das Tool Video Translate, der Video Übersetzer für die Sprachsynchronisation.

KI-Dolmetscher, das Bild stammt von Bing Chat erzeugt mit Dall-E 3

Demovideo auf X/Twitter

Der kalifornische Regisseur demonstrierte am 11.9.2023 in seinem Video auf Twitter/X die Videoübersetzungsfunktion des neuen KI-Tools von HeyGen*. Das Video-Translate-Programm ermöglicht ein einfaches Hochladen eines Videoclips per Drag-and-Drop mit anschließendem Download in der gewünschten Sprache.

Finger spricht seinen Text auf Englisch und generierte dann mit einem einzigen Klick auf „Translate“, Versionen des Videos in anderen Sprachen. Das Ergebnis ist beeindruckend, da er nahezu synchron auf Französisch und Deutsch spricht. Die künstliche Intelligenz (KI) passt sogar die Lippenbewegung an die jeweilige Sprache an.

Wie lässt sich der KI-Dolmetscher von HeyGen nutzen?

HeyGen* ist ein fantastisches Tool. Es ist KI-Videogenerator, KI-Avatar-Generator und Translator zugleich.

KI-Dolmetscher, die Website von HeyGen

Das Video muss mindestens 30 Sekunden lang sein. Anschließend einfach die gewünschte Sprache auswählen, das Video per Drag & Drop hochladen und auf „Translate“ klicken. Das Tool lässt sich kostenlos mit 1 Credit austesten, darf allerdings höchstens 1 Minute dauern. Leider ist die Warteschlange für den Download derzeit recht lang und lässt sich nur mit einem Upgrade umgehen.

KI-Dolmetscher, das Übersetzungstool Video Translate von HeyGen

Wie sieht das Ergebnis aus?

Zum Testen habe ich ein leicht gekürztes YouTube-Video hochgeladen und vom Deutschen ins amerikanische Englisch von HeyGen* übersetzen lassen. Ich wollte wissen, wie gut das von D nach E funktioniert. Das Video stammt von alpha Lernen und Caro Matzko erläutert darin „Was ist Creative Commons, einfach erklärt. So geht MEDIEN“ Bei alpha Lernen handelt es sich um ein Angebot von ARD alpha im Internet. Eventuell verletze ich damit das Urheberrecht, aber das Video soll auch zeigen, dass sie Gefahren mit sich bringen, wie etwa von „Deepfake“. Was das ist, lesen Sie weiter unten. Das Original-Video auf Deutsch findet sich auf YouTube.

Video Translate – Video Übersetzer für Enterprise

  • Mit Video Translate übersetzen Sie ganze Videos mit einem Klick.
    Laden Sie Ihr Video hoch, wählen Sie die gewünschte Zielsprache, klicken Sie auf Übersetzen und schon ist es fertig.
  • Skript-Korrekturlesen mit SRT-Upload (Enterprise-Funktion)
    Möchten Sie die Übersetzung vor dem Rendern des Videos noch einmal überprüfen?
    Einfach das Video hochladen und „Korrekturlesen generieren“ klicken. HeyGen* überträgt Ihr Video automatisch mit Timing und Sprechererkennung, damit Sie es überprüfen und zu Ihrer Zufriedenheit überarbeiten können.
  • Multi-Sprecher mit Sprachauswahl (Enterprise-Funktion)
    Wenn Sie bereits Ihre eigene Stimme in HeyGen* geklont haben, können Sie diese verwenden, was die Audioqualität Ihrer Videos verbessern kann. Heygen unterstützt jetzt auch die Auswahl von Stimmen für mehrere Sprecher.
  • Google Drive / YouTube-Upload (Unternehmensfunktion)
    Das Übersetzen Ihrer Videos auf YouTube oder Google Drive ist jetzt noch einfacher! Fügen Sie Ihren YouTube- oder Google Drive-Link in HeyGen* ein, und lassen Sie ihn übersetzen, ohne ihn erneut herunterladen zu müssen.

Wieviel kostet HeyGen?

HeyGen* funktioniert über Credits, dabei kostet ein Credit ab USD 1,60. Je nach Preisplan variiert die Länge der Videos. In der kostenlosen Variante lässt sich ein Video von maximal einer Minute erstellen oder ein einminütiges Video übersetzen. Im Creator-Plan sind es maximal 5 Minuten, im Business-Plan bereits 20 Minuten, wer mehr braucht sollte die Enterprise-Variante in Betracht ziehen.

KI-Dolmetscher HeyGen, video translate, Pricelist

Was kann HeyGen sonst noch?

HeyGen* ist nicht nur ein fantastischer KI-Dolmetscher und Video Übersetzer, sondern auch ein sehr guter KI-Videogenerator. Was das ist und wie Sie damit Videos erstellen, finden Sie im Artikel KI-Videogeneratoren. Ferner eignet sich HeyGen* hervorragend zum Generieren von sprechenden Avataren. Wie das funktioniert lesen Sie im Artikel AI Avatar Generator, dort finden Sie weitere Informationen und ein Avatar-Video von HeyGen.

Was ist ein KI-Dolmetscher?

Ein KI-Dolmetscher ist eine Anwendung von künstlicher Intelligenz (KI), die dazu entwickelt wurde, gesprochene oder geschriebene Sprache in Echtzeit von einer Sprache in eine andere zu übersetzen. Diese Art von Technologie nutzt maschinelles Lernen und fortschrittliche Sprachverarbeitungsal-gorithmen, um Texte oder gesprochene Wörter zu verstehen und in eine andere Sprache zu übertragen.

Wie lässt sich ein KI-Dolmetscher nutzen?

Ein KI-Dolmetscher kann in verschiedenen Kontexten nützlich sein, wie zum Beispiel bei internationalen Geschäftstreffen, Konferenzen, Reisen oder beim Austausch von Informationen über soziale Medien. Internationale Firmen können Videos in verschiedenen Sprachen erstellen, um ihre Kunden in der Landessprache anzusprechen. Dabei kann die Qualität der Übersetzung je nach der spezifischen KI-Technologie variieren, wobei die von HeyGen* hervorragend sind. Fortschritte in der KI führten jedoch zu bedeutenden Verbesserungen in der Genauigkeit und Flüssigkeit von maschinellen Übersetzungen.

Welche Gefahren bringen KI-Dolmetscher mit sich?

KI-Dolmetscher bergen auch Gefahren. Sie suggerieren, dass die entsprechende Person die Sprache beherrscht, es handelt sich ja schließlich um eine natürliche Person und nicht um einen Avatar.

Sorgt die KI für Ängste im Berufsfeld der Dolmetscher und Übersetzer? Laut Oliver Czulo, Leiter des Instituts für Angewandte Linguistik und Translatologie der Uni Leipzig, stellt maschinelle Übersetzung für die Berufszweige des Dolmetschens und Übersetzens keine Gefahr da, so seine Einschätzung anlässlich des Internationalen Übersetzertags Ende September 2023.  Dann bleibt zu hoffen, dass er Recht hat, was ich allerdings eher bezweifle, wenn ich sehe was durch die KI-Textgeneratoren und ChatGPT seit Ende 2022 in Bewegung geriet.

Was ist Deepfake?

Ein „Deepfake“ ist eine Technologie, die künstliche Intelligenz (KI), insbesondere maschinelles Lernen und neuronale Netzwerke, verwendet, um multimediale Inhalte, insbesondere Videos und Audiodateien, zu erstellen oder zu verändern, um den Eindruck zu erwecken, dass die erstellten Inhalte authentisch sind, obwohl sie es nicht sind.

Typischerweise wird Deepfake-Technologie für das Gesichtswechseln in Videos verwendet. Sie kann beispielsweise dazu verwendet werden, das Gesicht einer Person in einem Video durch das Gesicht einer anderen Person zu ersetzen, wodurch der Eindruck entsteht, als würde die ersetzte Person tatsächlich die Worte sprechen oder Handlungen ausführen. Diese Technologie hat sowohl positive als auch potenziell problematische Anwendungen. Auf der einen Seite kann sie in der Unterhaltungsindustrie für Spezialeffekte genutzt werden, auf der anderen Seite aber auch für irreführende oder bösartige Zwecke, wie das Erstellen gefälschter Nachrichten oder die Manipulation von Inhalten, die das Vertrauen in visuelle Medien untergraben können.

Es ist wichtig zu betonen, dass Deepfakes ethische Bedenken und Herausforderungen hinsichtlich der Verbreitung von Desinformation mit sich bringen können, und es wird intensiv darüber diskutiert, wie man mit den potenziellen Risiken umgehen sollte.

Wie kann man sich vor Deepfakes schützen?

Das Erkennen und Schützen vor Deepfakes kann eine Herausforderung sein, da die Technologie ständig weiterentwickelt wird. Hier sind einige Tipps, die helfen können:

  1. Bleiben Sie aufmerksam: Seien Sie sich bewusst, dass Deepfakes existieren und dass sie potenziell dazu verwendet werden können, irreführende Inhalte zu erstellen.
  2. Überprüfen Sie Quellen: Verifizieren Sie die Quellen von Videos und Informationen. Wenn möglich, nutzen Sie vertrauenswürdige Nachrichtenquellen, um sicherzustellen, dass die Informationen authentisch sind.
  3. Prüfen Sie die Authentizität: Achten Sie auf Anzeichen von Manipulation, wie unnatürliche Bewegungen, inkonsistente Beleuchtung oder Unschärfe im Video.
  4. Nutzen Sie technische Tools: Es gibt spezialisierte Software und Tools, die entwickelt wurden, um Deepfakes zu erkennen, wie etwa Video Authenticator von Microsoft. Diese Tools können bestimmte Muster oder Artefakte in den Dateien identifizieren.
  5. Erlernen Sie Techniken zur Erkennung: Bilden Sie sich über die neuesten Entwicklungen in der Deepfake-Erkennung weiter. Es gibt immer wieder neue Methoden, um solche Manipulationen aufzudecken.
  6. Verwenden Sie Wasserzeichen: Erwägen Sie, Wasserzeichen in Ihre eigenen Medieninhalte einzufügen. Dies kann die Integrität Ihrer Dateien sicherstellen.
  7. Vorsichtig mit persönlichen Informationen: Seien Sie vorsichtig beim Teilen persönlicher Informationen und sensibler Daten online. Cyberkriminelle könnten versuchen, gefälschte Inhalte zu erstellen, um Schaden anzurichten.
  8. Verwenden Sie starke Authentifizierung: Schützen Sie Ihre Online-Konten durch starke Passwörter und aktivieren Sie die Zwei-Faktor-Authentifizierung, um unbefugten Zugriff zu verhindern.

Es ist wichtig zu beachten, dass die Technologie zur Erstellung von Deepfakes ständig weiterentwickelt wird, und daher ist es ratsam, sich regelmäßig über neue Entwicklungen und Schutzmaßnahmen zu informieren.