Bringing AI-Powered Subtitles and Instant Translation to MYETV Player

Stießen Sie jemals auf ein Video, das absolut faszinierend aussah, vielleicht eine seltene historische Dokumentation, ein hochkarätiges technisches Tutorial oder ein fesselnder Reisevlog, nur um Sekunden später festzustellen, dass es in einer Sprache war, die Sie nicht verstanden? Dieses sinkende Gefühl der Frustration ist etwas, das fast jeder Internetnutzer erlebt hat. Sie drücken auf die „Zurück“-Taste, und dieser Inhalt, zusammen mit der harten Arbeit des Erstellers, geht Ihnen verloren.

Umgekehrt wissen Sie, wenn Sie ein Creator sind, von der zermürbenden Realität der Barrierefreiheit. Sie haben Stunden damit verbracht, Ihren Inhalt zu filmen, zu bearbeiten und zu perfektionieren, nur um sich dem Berg an Arbeit gegenüberzusehen, der für die Hinzufügung von Untertiteln erforderlich ist. Es ist ein mühsamer, zeitaufwendiger Prozess, der Creator oft in ihrer eigenen sprachlichen Blase gefangen hält.

Bei MYETV haben wir Monate damit verbracht, darüber nachzudenken, wie man dies im großen Maßstab lösen kann. Wir glauben, dass Wissen und Unterhaltung grenzenlos sein sollten. Heute sind wir stolz, den Vorhang vor einem Projekt zu lüften, das alles verändert: Das neue MYETV Auto-Subtitles Plugin.

1. Die Kraft der KI direkt in Ihren Browser bringen

Als wir dieses Projekt begannen, untersuchten wir, wie die Branche mit Untertiteln umgeht. Der typische Weg ist „Cloud-first“: Sie laden Ihr Video auf einen Server hoch, zahlen eine Abonnementgebühr, warten, bis die KI es verarbeitet, und laden dann die Ergebnisse herunter. Wir fanden dieses Modell veraltet, langsam und, offen gesagt, teuer sowohl für den Ersteller als auch für die Plattform.

Wir fragten uns: „Können wir professionelle KI-Transkription direkt im Browser nutzen, ohne massive Serverfarmen zu benötigen oder die Privatsphäre der Benutzer zu gefährden?“

Die Antwort war ein klares Ja, und das Geheimnis liegt in Client-Side AI.

Die "Auto-Sub"-Revolution

Unser neues Auto-Subtitles Plugin nutzt Whisper AI, den Goldstandard in der Spracherkennung, angetrieben durch Transformers.js. Aber hier ist der technologische Durchbruch: Es passiert alles in Ihrem Browser.

Wenn Sie ein Video auf MYETV ansehen, läuft das KI-Modell lokal auf Ihrem Gerät. Ihre Video- und Audio-Daten verlassen niemals Ihren Browser, um auf einem entfernten Server verarbeitet zu werden. Dieser Ansatz bietet drei wichtige Vorteile:

  1. Unübertroffene Privatsphäre: Da keine Daten an einen externen Server zur Verarbeitung übertragen werden, bleiben Ihre Inhalte privat und sicher.
  2. Null Latenz für die Plattform: Da die Arbeit auf die Geräte der Zuschauer verteilt wird, kann MYETV diese Technologie Millionen von Benutzern anbieten, ohne eine exponentiell teure Serverinfrastruktur zu benötigen.
  3. Geschwindigkeit: Sie erhalten Ergebnisse in Echtzeit.

Übersetzung in Echtzeit

Die Transkription ist nur der erste Schritt. Unser System unterstützt jetzt Übersetzung in Echtzeit. Sie müssen nicht warten, bis ein Ersteller eine Übersetzung für Ihre Sprache hochlädt. Mit unserer neuen Engine können Sie ein Menü umschalten, Ihre bevorzugte Sprache auswählen – von Italienisch nach Japanisch, von Arabisch nach Russisch – und zusehen, wie die Untertitel sofort in Ihrem Player übersetzt werden.

Wir haben sogar ein persistentes Caching-System implementiert. Das erste Mal, dass Sie ein Video übersetzen, erinnert sich das System daran. Das nächste Mal, wenn Sie (oder jemand anderes) dieses Video ansehen, wird die Übersetzung sofort aus dem lokalen Speicher Ihres Geräts geladen. Es ist flüssig, schnell und fühlt sich wie Magie an.

2. Ein Player, der jedes Format versteht

Obwohl die neuen KI-Funktionen der Star des Shows sind, wissen wir, dass viele unserer Power-User und professionellen Kreativen bereits eigene Untertiteldateien haben (die klassische .srt oder die moderne .vtt). Wir wollten Ihr Fachwissen oder die bereits investierte Zeit nicht ignorieren.

Wir haben den Kern des MYETV Video Player überarbeitet, um ihn in Bezug auf Untertitel zu einem "Alleskönner" zu machen:

  • VTT- und SRT-Harmonie: Der Player versteht nun nativ sowohl WebVTT (.vtt) als auch SRT (.srt) Dateien. Sie können sie kombinieren. Egal, ob Sie einen professionellen Editor oder ein automatisiertes Tool verwenden, MYETV wird sie perfekt anzeigen.
  • Die "Tote-Flucht"-Behebung: Früher hatten Browser oft Schwierigkeiten, Untertitel konsistent anzuzeigen. Ein Untertitel sah auf Chrome gut aus, konnte aber auf einem Smart TV oder einer bestimmten mobilen Ansicht unsichtbar oder verzerrt sein. Wir haben eine benutzerdefinierte Rendering-Engine implementiert, die die Kontrolle von der fehlerhaften Standard-UI des Browsers übernimmt. Wir zeichnen den Text nun direkt über das Video, wodurch sichergestellt wird, dass die Untertitel auf Ihrem High-End-PC, Ihrem Smartphone oder Ihrem Tablet identisch aussehen.
  • Hybride Intelligenz: Der Player verwendet nun einen „Smart Hybrid Mode“ mit aktiviertem Plugin. Wenn er feststellt, dass Sie bereits hochwertige Untertiteldateien bereitgestellt haben, priorisiert er diese. Wenn er ein Video ohne Untertitel feststellt, aktiviert er nahtlos die KI-Engine. Es ist ein intelligenter, unkomplizierter Ansatz, der garantiert, dass Sie immer das bestmögliche Seherlebnis haben.

3. Ein neues Versprechen: Barrierefreiheit für jeden Upload- [Upload: the action by a owners of the network of sending an image or audio or video file (named as content) from the device] -

Dies ist die Nachricht, auf die wir am stolzesten sind: Ab heute ändert MYETV seine Archivrichtlinie grundlegend.

Wir glauben, dass Inhalte „zukunftssicher“ sein sollten. Ab heute wird unsere Infrastruktur automatisch im Hintergrund arbeiten, sobald ein neues Video auf MYETV hochgeladen wird, um sicherzustellen, dass der Inhalt transkribiert wird. Wir wollen nicht nur Ihr Video hosten; wir wollen ihm in jeder Sprache eine „Stimme“ verleihen.

Dieses Engagement für universelle Zugänglichkeit gewährleistet, dass:

  • Tiefgreifbare Suchbarkeit: Sehr bald können Sie nach spezifischen Phrasen oder Momenten innerhalb eines Videos suchen, basierend auf dem Gesagten, und nicht nur nach dem Titel oder der Beschreibung.
  • Echte Inklusion: Ihre Videos werden für die Hörgeschalteten Gemeinschaft und für alle zugänglich, die es vorziehen, Videos ohne Ton anzusehen (z. B. in einem öffentlichen Raum).
  • Globale Reichweite: Ihr Inhalt ist nicht länger auf eine einzige Sprache beschränkt. Ein in Rom gedrehtes Bildungsvideo kann sofort in Tokio verstanden werden. Sie sind nicht nur ein Creator; Sie sind ein globaler Pädagoge.

4. Open Source: Unser Geschenk an die Entwickler-Community

Bei MYETV glauben wir fest an Transparenz und gemeinsames Wachstum. Wir glauben, dass Technologie, die die Welt verändert, im Licht und nicht im Schatten gebaut werden sollte.

Deshalb haben wir das Auto-Subtitles Plugin als Open-Source-Projekt auf GitHub veröffentlicht. Wir möchten, dass Entwickler aus aller Welt unseren Code ansehen, von unserer Implementierung von Transformers.js lernen und uns bei der Verbesserung helfen. Das Repository finden Sie hier auf GitHub.

Wir laden Sie ein, es zu klonen, anzupassen und beizutragen. Indem wir diese Technologie offen zugänglich machen, bauen wir nicht nur für MYETV, sondern für das gesamte Web.

Warum dies für Sie wichtig ist

Wenn Sie ein Zuschauer sind: Das Internet ist gerade zu einem viel kleineren, einladenderen Ort geworden. Sie müssen nicht mehr warten, bis ein Creator Zeit findet, seine Arbeit zu übersetzen. Sie haben jetzt die Kontrolle. Drücken Sie einfach den „CC“-Button, wählen Sie Ihre Sprache und tauchen Sie in jeden gewünschten Inhalt ein. Die Sprachbarriere wurde offiziell abgebaut.

Wenn Sie ein Creator sind: Sie können endlich aufhören, Barrierefreiheit als „Aufwand“ zu betrachten. Sie konzentrieren sich auf das Erstellen; wir konzentrieren uns darauf, sicherzustellen, dass Ihre Botschaft jeden erreicht. Ihr Inhalt wird automatisch transkribiert, automatisch durchsuchbar und für die globale Übersetzung bereit. Sie laden nicht nur ein Video hoch, Sie starten ein Projekt, das von Millionen mehr Menschen verstanden werden kann als zuvor.

Der Weg vor uns

Dieses Update ist erst der Anfang. Wir planen bereits weitere Verbesserungen der Genauigkeit der KI, neue Möglichkeiten zur Anpassung des Aussehens und Gefühls Ihrer Untertitel (Schriftarten, Farben, Hintergrundstile) und sogar noch effizientere Übersetzungs-Engines, die die Benutzererfahrung noch schneller machen werden.

Wir möchten unserer großartigen Community für das Feedback, das Stresstesting und die ständige Unterstützung danken. Es ist Ihre Leidenschaft, die uns antreibt, Tools zu entwickeln, die das Internet zu einem besseren, inklusiveren Ort für alle machen.

Besuchen Sie jetzt MYETV, laden Sie ein Video hoch oder schauen Sie Ihre Lieblingsinhalte, und vergessen Sie nicht, den neuen „CC“-Button auszuprobieren. Wir würden uns freuen, zu hören, was Sie denken!

MYETV Video Player Open Source: https://github.com/OskarCosimo/myetv-video-player-opensource

Autosub Plugin Open Source: https://github.com/OskarCosimo/myetv-video-player-opensource/tree/main/plugins/autosub

Bleiben Sie kreativ, bleiben Sie neugierig und viel Spaß beim Schauen!

Das MYETV Entwicklungsteam