Automatische Inhaltserkennung ( ACR ) ist eine Technologie zur Identifizierung von Inhalten, die auf einem Mediengerät wiedergegeben oder in einer Mediendatei präsentiert werden. Geräte mit ACR ermöglichen die automatische Erfassung von Informationen zum Medienkonsum direkt auf dem Bildschirm oder Lautsprecher, ohne dass der Nutzer Eingaben machen oder danach suchen muss. Diese Informationen können für Zwecke wie personalisierte Werbung, Inhaltsempfehlungen oder den Verkauf an Unternehmen, die Kundendaten aggregieren, verwendet werden. [ 1 ] [ 2 ]

So funktioniert es

Um den Prozess zu starten, wird ein kurzer Medienclip (Audio, Video oder beides) aus einer Mediendatei ausgewählt oder auf einem Gerät wie einem Smart-TV aufgezeichnet . Mithilfe von Techniken wie Fingerprinting und Wasserzeichen vergleicht die ACR-Software den ausgewählten Inhalt mit einer Datenbank bekannter aufgezeichneter Werke. [ 2 ] Wenn der Fingerabdruck des Medienclips eine Übereinstimmung findet, sendet die ACR-Software die entsprechenden Metadaten zu den Medien sowie weitere zugehörige oder empfohlene Inhalte an die Client-Anwendung zurück, damit diese dem Benutzer angezeigt oder vom Gerätehersteller oder einem Unternehmen, das Benutzerdaten sammelt, erfasst werden können. [ 1 ]

Fingerabdrücke und Wasserzeichen

Zwei führende Methoden für die audiobasierte automatische Erkennung (ACR) sind das akustische Fingerprinting und das Wasserzeichenverfahren . Analog dazu wird das Video-Fingerprinting eingesetzt, um die ACR für visuelle Medien zu ermöglichen.

Akustisches Fingerprinting erzeugt einzigartige Fingerabdrücke direkt aus dem Audioinhalt. Fingerprinting-Verfahren sind unabhängig von Inhaltsformat, Codec , Bitrate und Komprimierungstechniken . [ 3 ] Dadurch ist der Einsatz von akustischem Fingerprinting über verschiedene Netzwerke und Kanäle möglich und findet breite Anwendung in Bereichen wie interaktivem Fernsehen, Second-Screen-Anwendungen und Content-Monitoring. [ 4 ] [ 5 ] Beliebte Apps wie Shazam , YouTube, Facebook, [ 6 ] TheTake, WeChat und Weibo nutzen Berichten zufolge Audio-Fingerprinting, um vom Fernseher abgespielte Inhalte zu erkennen und so zusätzliche Funktionen wie Abstimmungen, Gewinnspiele, Themen oder Käufe auszulösen.

Im Gegensatz zum Fingerprinting erfordert die digitale Wasserzeichentechnik das Einbetten digitaler „Tags“ in den digitalen Datenstrom vor der Verbreitung. Beispielsweise könnte ein Sender alle paar Sekunden ein Wasserzeichen einfügen , das zur Identifizierung des Senders, der Programm-ID und des Zeitstempels dient. Dieses Wasserzeichen ist für die Nutzer normalerweise unhörbar oder unsichtbar, kann aber von Anzeigegeräten wie Smartphones oder Tablets erkannt werden, die es lesen und so den wiedergegebenen Inhalt identifizieren können. [ 5 ] Wasserzeichentechnologie wird auch im Bereich des Medienschutzes eingesetzt, um die Herkunft illegaler Kopien zu ermitteln . [ 7 ]

Geschichte

Im Jahr 2011 wandte der Dienst Shazam die ACR-Technologie auf Fernsehinhalte an und erregte damit die Aufmerksamkeit der Fernsehbranche. Shazam war zuvor ein Musikerkennungsdienst, der Musik anhand von Tonaufnahmen erkannte. Durch die Nutzung seiner eigenen Fingerprint-Technologie zur Identifizierung von Live-Kanälen und Videos erweiterte Shazam sein Geschäftsfeld auf Fernsehprogramme. Ebenfalls 2011 führte Samba TV (damals bekannt als Flingo [ 8 ] ) seine patentierte Video-ACR-Technologie ein, die Video-Fingerprinting zur Identifizierung von Bildschirminhalten nutzt und interaktive TV-Apps auf Smart-TVs ermöglicht. [ 9 ] Im Jahr 2012 ging der Satellitenkommunikationsanbieter DIRECTV eine Partnerschaft mit dem Anbieter von Kundenbindungsprogrammen Viggle ein, um ein interaktives Fernseherlebnis auf dem zweiten Bildschirm zu bieten.

2013 ging LG eine Partnerschaft mit Cognitive Networks (später von Vizio übernommen und in Inscape umbenannt), einem Anbieter von ACR-Technologie, ein, um interaktive Anwendungen mit ACR zu ermöglichen. [ 10 ] 2015 verbreitete sich die ACR-Technologie weiter und wurde in noch mehr Anwendungen und Smart-TVs eingesetzt. Soziale Netzwerke und TV-Hersteller wie Facebook , Twitter , Google , WeChat , Weibo , LG , Samsung und Vizio TV nutzten ACR-Technologie, entweder selbst entwickelt oder von Drittanbietern integriert. 2016 kamen weitere Anwendungen und mobile Betriebssysteme mit integrierten Diensten zur automatischen Inhaltserkennung hinzu, darunter Peach, Omusic und Mi OS. [ 11 ] [ 12 ] [ 13 ]

Anwendungen

  • Werbung und Kundendatenerfassung : Daten zum Medienkonsumverhalten von Kunden sind für Gerätehersteller, Werbetreibende und Datenaggregatoren äußerst wertvoll. ACR-Technologie unterstützt diese Unternehmen dabei, Kundeninteressen zu ermitteln und Daten zu sammeln, um personalisierte Marketing- und Werbekampagnen gezielter auszurichten. Im November 2021 wurde berichtet, dass der Smart-TV-Hersteller Vizio mit dem Verkauf von Kundendaten mehr Gewinn erzielte als mit dem Verkauf von Fernsehern selbst. [ 14 ] [ 15 ]
  • Reichweitenmessung : Durch den Einsatz von ACR-Technologie in Smart-TVs, Set-Top-Boxen und mobilen Geräten wie Smartphones und Tablets lassen sich Reichweitenmessungen in Echtzeit realisieren. Diese Messdaten sind unerlässlich, um den Medienkonsum der Zielgruppe zu quantifizieren und so die Werbepreispolitik festzulegen.
  • Inhaltsidentifizierung : Die ACR-Technologie hilft Nutzern, Informationen über die von ihnen angesehenen oder angehörten Inhalte abzurufen. [ 16 ] Die identifizierten Video- und Musikinhalte können mit Internet-Content-Anbietern für die On-Demand-Wiedergabe, mit Drittanbietern für zusätzliche Hintergrundinformationen oder mit ergänzenden Medien verknüpft werden.
  • Inhaltsanreicherung : Da Geräte erkennen können, welche Inhalte gerade angesehen oder angehört werden, können Zweitbildschirmgeräte Nutzern ergänzende Inhalte bereitstellen, die über die Inhalte des Hauptbildschirms hinausgehen. Die ACR-Technologie kann nicht nur die Inhalte identifizieren, sondern auch deren genaue Position bestimmen und Nutzern zusätzliche Informationen anzeigen. ACR ermöglicht zudem verschiedene interaktive Funktionen wie Umfragen, Gutscheine, Lotterien oder den Kauf von Waren basierend auf einem Zeitstempel. [ 17 ]

Datenschutzbedenken

Organisationen wie die Verbraucherschutzorganisation Electronic Frontier Foundation und Technologie-Websites wie PCMag haben aus Datenschutzgründen ernsthafte Einwände gegen die Erfassung des Sehverhaltens von Nutzern durch deren Geräte geäußert. [ 18 ] [ 19 ]

Forschung

Tests, die 2024 hauptsächlich in Großbritannien und den USA von mehreren Universitäten in Großbritannien, den USA und Spanien mit bestimmten TV-Modellen von LG und Samsung durchgeführt wurden , zeigen, dass diese Geräte einen konsistenten und konstanten Netzwerkverkehr erzeugen . Während der Tests sendeten die LG-Geräte alle 15 Sekunden und die Samsung-Geräte jede Minute digitale Fingerabdrücke an bestimmte Netzwerkdomänen. Es wurde festgestellt, dass ACR aufgrund von Urheberrechtsproblemen und komplexen Nutzungsbedingungen konkurrierender Aggregatoren, die ACR für ihre eigenen Methoden einschränken, möglicherweise keine Frames von Inhalten Dritter wie Netflix erfasst . Die Funktionsweise von ACR, wenn der Fernseher ausschließlich über HDMI betrieben wird, unterscheidet sich – abgesehen von der Registrierung bei den Diensten des TV-Herstellers – in Großbritannien und den USA aufgrund unterschiedlicher gesetzlicher Bestimmungen. Der ACR-Verkehr kann durch einen Opt-out-Mechanismus gestoppt werden. [ 20 ]

Siehe auch

Referenzen

  1. ^ a b „Automatisierte Inhaltserkennung zur Schaffung inhaltsbewusster Ökosysteme“ (PDF) . Civolution . Archiviert vom Original (PDF) am 23. September 2015. Abgerufen am 24. Juni 2015 .
  2. ^ a b „ACR (Automatische Inhaltserkennung)“ . ACRCloud-Dokumentation . Archiviert vom Original am 28. Februar 2017. Abgerufen am 27. Februar 2017 .
  3. ^ Six, Joren; Leman, Marc (27.10.2014). „Panako: ein skalierbares akustisches Fingerprinting-System zur Behandlung von Zeit-, Skalen- und Tonhöhenmodifikationen“ . Universität Gent . Abgerufen am 27. Februar 2017 .
  4. ^ Main, Sami (19.09.2017). „Nielsen bringt interaktive Echtzeit-Werbung auf Smart-TVs, um Streaming-Zuschauer zu binden“ . Adweek . Abgerufen am 11.01.2018 .
  5. ^ a b Brink, Kyle. „A Primer on Automated Content“ . Viggle . Archiviert vom Original am 24.06.2015 . Abgerufen am 22. Juni 2015 .
  6. ^ „Automatische Inhaltserkennung von Facebook“ . Starcom MediaVest Group . SMG. 3. Juni 2014. Archiviert vom Original am 6. Juli 2015. Abgerufen am 6. Juli 2015 .
  7. ^ Solana, Anna (17.08.2017). „Wie diese versteckten Videowasserzeichen helfen können, Piraterie und manipulierte Bilder aufzudecken“ . ZDNet . Abgerufen am 11.01.2018 .
  8. ^ Baumgartner, Jeff (24.09.2013). „Flingo firmiert ab sofort unter dem Namen Samba TV“ . Multichannel News . Abgerufen am 05.10.2021 .
  9. ^ Swedlow, Tracy (7. Juli 2011). „Interaktiver TV-Nachrichtenüberblick (II): Flingo, Hulu, ITU“ . ITVT . Archiviert vom Original am 9. Juli 2011.
  10. ^ Gorman, Michael (29. August 2013). „LG kooperiert mit Cognitive Networks, um Smart-TVs intelligenter und interaktiver zu machen“ . engadget . Abgerufen am 23. August 2016 .
  11. ^ „ACRCloud ermöglicht Songerkennung für das angesagteste neue soziale Netzwerk Peach“ . Music Industry News Network . 4. Januar 2016. Archiviert vom Original am 8. März 2016. Abgerufen am 3. März 2016 .
  12. ^ Victoria, Ho (16. Februar 2016). „Xiaomi hilft Ihnen, den Song zu benennen, den Sie ständig summen . “ Mashable . Abgerufen am 3. März 2016 .
  13. ^ „ACRCloud ermöglicht den Start des ersten Musik-/Summerkennungsdienstes Taiwans für Omusic“ . Music Industry News Network . 11. Januar 2016. Archiviert vom Original am 8. März 2016. Abgerufen am 3. März 2016 .
  14. ^ Dunn, Thom (18.11.2021). „Der TV-Hersteller Vizio verdient mehr Geld mit dem Verkauf von Daten als mit Fernsehern“ . Boing Boing . Abgerufen am 22.11.2021 .
  15. ^ „Pressemitteilung: VIZIO HOLDING CORP. veröffentlicht Finanzergebnisse für das 3. Quartal 2021“ . Vizio Holding News . 09.11.2021 . Abgerufen am 03.04.2025 .
  16. ^ Weiss, Tom (23. Januar 2018). „Tom Weiss: Die Barrieren für adressierbare Werbung in Europa überwinden“ . Broadband TV News . Abgerufen am 30. August 2018 .
  17. ^ Wolf, Michael. „Drei Wege, wie die automatische Inhaltserkennung das Fernsehen verändern wird“ . Forbes . Abgerufen am 20. Juni 2015 .
  18. ^ Derene, Glenn (27.02.2015). „Samsung-, LG- und Vizio-Smart-TVs zeichnen alles auf, was Sie sehen, und teilen die Daten darüber. Consumer Reports untersucht die Datenhändler, die Ihre Sehgewohnheiten zu Geld machen wollen . “ Consumer Reports . Abgerufen am 27. Februar 2017 .
  19. ^ Whitney, Lance (20.02.2024). „Wie man verhindert, dass Smart-TVs einen ausspionieren“ . PCMAG . Abgerufen am 22.11.2021 .
  20. ^ Anselmi, Gianluca; Vekaria, Yash; D'Souza, Alexander; Callejo, Patricia; Anna Maria Mandalari; Shafiq, Zubair (2024). „Fernsehen mit einem Zweitgerät: Ein erster Blick auf die automatische Inhaltserkennung und -verfolgung in Smart-TVs“. arXiv : 2409.06203v1 [ cs.CR ].