Broadcom und ein Unternehmen namens CAMB.AI arbeiten zusammen, um die Audioübersetzung auf dem Gerät auf einen Chipsatz zu übertragen. Dies würde es Geräten, die das SoC verwenden, ermöglichen, Übersetzungs-, Synchronisations- und Audiodeskriptionsaufgaben zu erledigen, ohne in die Cloud eintauchen zu müssen. Mit anderen Worten: Es könnte die Zugänglichkeit für Verbraucher massiv verbessern.
Die Unternehmen versprechen extrem niedrige Latenzzeiten und verbesserten Datenschutz, da die gesamte Verarbeitung lokal auf dem Gerät des Benutzers erfolgt. Auch die WLAN-Bandbreite soll drastisch reduziert werden.
Was die Audiobeschreibung betrifft, gibt es ein Demovideo, in dem das Tool in einem Ausschnitt aus dem Film verwendet wird Ratatouille. Man hört, wie die KI die Szene in verschiedenen Sprachen beschreibt, zusätzlich zu einer schriftlichen Übersetzung, die auf dem Bildschirm erscheint. Dies scheint unglaublich nützlich zu sein, insbesondere für Menschen mit Sehproblemen.
Es gibt einen großen Vorbehalt. Dies ist ein streng kontrollierter Clip mit zahlreichen Bearbeitungen. Wir haben keine Ahnung, wie diese Technologie in einem realen Szenario funktionieren wird. Außerdem wissen wir nicht, wie genau die Informationen sein werden. Es verfügt über ein Sprachmodell, das bereits von Organisationen wie NASCAR, Comcast und Eurovision verwendet wird.
Die Unternehmen prahlen damit, dass dadurch „Übersetzungen auf dem Gerät in über 150 Sprachen“ ermöglicht werden. Wir wissen nicht, wann diese Chips in Fernsehgeräten und anderen Geräten zum Einsatz kommen werden. Die Technologie befindet sich derzeit in der Testphase, es wird also eine Weile dauern. Broadcom hat sich kürzlich auch mit OpenAI zusammengetan, um letzteres Unternehmen bei der Herstellung seiner eigenen Chips zu unterstützen.
