Herausforderung
Wie man mehr Informationen und Wissen aus den audiovisuellen Inhalten des Digital Government Congress extrahieren kann und wie man sie für Nutzer zugänglicher macht.
Aktuelle Probleme
Die vom AOC organisierten Konferenzen, Seminare, Workshops und anderen informativen Aktivitäten zur Förderung der digitalen Transformation und Innovation der katalanischen öffentlichen Verwaltung generieren a große Menge an audiovisuellen Inhalten, die nicht immer gut genutzt werden, um Informationen und Wissen zu extrahieren.
Diese Tatsache wurde durch die Pandemie verschärft, die uns gezwungen hat, unsere Gewohnheiten, Routinen und Beziehungsweisen über Nacht zu ändern, so dass sich in kurzer Zeit die Anzahl der anstehenden Aktivitäten (Meetings, Konferenzen und Kongresse) exponentiell vervielfacht hat und jetzt Wir haben eine riesige Menge an Videos, Sprachnotizen und Texten, für deren Bearbeitung wir keine Zeit haben.
Neben der Pandemie gibt es weitere Faktoren, die den Digitalisierungsprozess von Veranstaltungen und Aktivitäten beschleunigt haben:
- Einfacher Zugang zu Tagungen, der Komfort und die Reduzierung der Organisationskosten dank einer viel einfacheren Logistik.
- Technologische Fortschritte, die das Online-Benutzererlebnis immer besser machen und eine genaue Publikumsanalyse und Datenkontrolle ermöglichen.
- Die Reduzierung von COXNUMX-Emissionen als Ergebnis der Vermeidung von Vertreibungen der Teilnehmer.
So sehr, dass im Jahr 2021 die Kongress der digitalen Regierung alle zwei Jahre vom AOC organisiert, wandelte es sich von 100 % Face-to-Face zu einem hybriden Format mit Moderatoren und Rednern auf der Bühne und einem virtuellen Publikum.
Uns war sofort klar, dass eine einfache „Video on Demand“-Plattform wie YouTube nicht ausreichen würde, um die große Menge an audiovisuellen Inhalten, die vor, während und nach dem Kongress generiert werden, zu nutzen und das Wissen besser zugänglich zu machen . Eine weitere Herausforderung bestand darin, Daten von Benutzern und ihren Interessen basierend auf ihrem Browsen zu sammeln, um ihre Bedürfnisse und Erwartungen besser zu verstehen und das Inhaltsprogramm für zukünftige Veranstaltungen neu gestalten zu können.
Also machten wir uns auf, um herauszufinden, ob es ein Tool oder einen Marktdienst gibt, der in der Lage ist, Videos, Sprachnotizen und Texte mithilfe von Techniken der künstlichen Intelligenz zu verarbeiten und zu analysieren, um Informationen und Wissen zu extrahieren und – am besten zugänglich zu machen.
Vorgeschlagene Lösung
Die angewandte Lösung kam von Omnios, einem katalanischen Technologie-Startup, das 2019 in Barcelona gegründet wurde und einen intelligenten Informationsverarbeitungsdienst entwickelt hat, der große Mengen an audiovisuellen Inhalten zugänglich macht; Winnow von Omnios: Die intelligente Video-On-Demand-Plattform.
Was ist Winnow?
Eine intelligente Videoplattform, mit der Sie durch Ihre Medieninhalte navigieren können. Die darin enthaltenen Videos und Präsentationen werden mit Techniken der künstlichen Intelligenz wie Sprach- und Personenerkennung, Text-Mining und Kategorisierung von Inhalten vorverarbeitet; um daraus Wissen zu extrahieren und Beziehungen zwischen den diskutierten Konzepten herstellen zu können.
Hauptfunktionalitäten:
Die Plattform bietet:
- Intelligente Karten des Wissens
Wenn ein Video hochgeladen wird, generiert das System automatisch interaktive Karten. Diese Karten sind die Extraktion des Inhalts und können sowohl zum Vergleichen der Aussagen der einzelnen Sprecher als auch zum Navigieren durch Vergleichen der Videos und Themen verwendet werden. Die Größe des Kreises hängt im Wesentlichen von der Häufigkeit und Bedeutung des Konzepts in Bezug auf das Video ab, und die Pfeile bedeuten eine direkte Beziehung zwischen Sprechern und Konzepten. Karten können entsprechend erkundet werden Schlüsselwörter | Marken oder Unternehmen | Standorte | Personen

Was sind Winnow Knowledge Maps?
Interaktive Grafiken, die helfen, das Wissen zu verstehen, das Winnow automatisch aus den verarbeiteten Inhalten (Videos und Präsentationen) extrahiert. Das System versteht, wie verschiedene Papiere miteinander in Beziehung stehen, findet Verbindungen zwischen Konzepten und Personen und erforscht neue und tiefere Verbindungen.
Es bietet auch:
- Un intelligente Suchmaschine in der Lage zu sein, anhand von Schlüsselwörtern genau den Moment zu suchen, in dem ein bestimmtes Thema diskutiert wird, wodurch Leerlaufzeit beim Suchen in Teilen des Videos eingespart wird, die nicht von Interesse sind.
- Spracherkennung von Sprechern: Mittels künstlicher Intelligenz ist die Plattform in der Lage zu erkennen, wer gerade spricht, wodurch die Rede segmentiert und jeder Teil einer bestimmten Person zugeordnet werden kann.
- Laden Sie das Transkript herunter des Videos in verschiedenen Sprachen. La plataforma té la capacitat d'entendre el vídeo o nota de veu i permet descarregar tota la transcripció en català, castellà i anglès, en format de document o bé mitjançant subtítols.
- Einstufung intelligente aller Videos und automatisches „Tagging“.
- Inhalts- und Benutzeranalysen (von Google Analytics): Sie können verwendet werden, um Benutzer basierend auf ihrer Navigation besser kennenzulernen; verstehen, was sie fragen und wollen.
Proof of Concept und Pilot
Das AOC-Konsortium startete ein Pilotprojekt, um die Vorteile und den Nutzen von KI in Anwendung auf die audiovisuellen Inhalte der CGD2021 zu testen und gleichzeitig die resultierenden Videos und Präsentationen des Kongresses mit dem Winnow-Dienst zu verarbeiten.
Insgesamt wurden 162 Inhalte verarbeitet, darunter Videos der Sessions (80) und unterstützende Dokumente der Präsentationen im pdf-Format.
Am 25 wurde der Zugriff auf den Winnow-Dienst über die aktiviert CGD 2021-Plattform die 6 Monate in Betrieb war.
Ergebnisse
Während das Pilotprojekt in Betrieb war, haben sie auf die Plattform zugegriffen 167 eindeutige Benutzer, eine bescheidene Zahl, wenn man bedenkt, dass die Zahl der für den Kongress registrierten Personen 2.000 betrug.
El Anzahl der angesehenen Inhalte ist von 354.
El Diagramm 1 zeigt, wie, nachdem der Zugang zur Winnow-Plattform beworben wurde, diese am ersten Tag von 150 einzelnen Benutzern genutzt wurde, was eine Gesamtzahl von 874 Besuche in den ersten drei Monaten.

Diagramm 1
Al Diagramm 2 Wir können beobachten, dass die durchschnittliche Zeit, die Benutzer mit dem Surfen auf der Plattform verbringen, ungefähr 4 Minuten beträgt. Mit diesen Informationen können wir bestätigen, dass das Ziel, die Suchzeit in einem Video maximal zu optimieren und Leerlaufzeiten zu reduzieren, erreicht wurde, da die Nutzer direkt zum gewünschten Video gelangen und schnell an die Stelle gelangen, an der die relevanten Informationen enthalten sind .

Diagramm 2
El Diagramm 3 zeigt die Anzahl der Benutzer, die die Suchleiste der Plattform verwendet haben.

Diagramm 3
Die am häufigsten gesuchten Schlüsselwörter über die intelligente Suchleiste haben sich im Laufe der Zeit geändert. Während der ersten 3 Monate des Pilotprojekts war das am häufigsten gesuchte Wort "Künstliche Intelligenz". Am Ende des Pilotprojekts war das am häufigsten gesuchte Wort "Daten".

Schlussfolgerungen
Die erhaltenen Metriken zeigen, dass die Anwendung künstlicher Intelligenz auf die multimedialen Inhalte einer Veranstaltung Folgendes ermöglicht:
- Erleichtern Sie die Navigation innerhalb der Inhalte und damit die Benutzer schnell finden, wonach sie suchen
- Automatisieren Sie Zusammenfassungen in audiovisuellen Inhalten
- Sammeln Sie Benutzerdaten, um ihr Verhalten zu analysieren und ihre Interessen zu verstehen
Allerdings muss die Plattform, auf der die Inhalte gehostet werden, auch für alle leicht zugänglich sein, egal ob es sich um Personen handelt, die sich ein bestimmtes Video noch einmal ansehen möchten, oder diejenigen, die nicht am Kongress teilnehmen konnten und noch eine „intelligente“ Betrachtung wünschen.
In unserem Fall musste der Zugriff auf die Winnow-Plattform protokolliert werden (auf Wunsch von Omnios, dem Entwickler-Startup), und wir glauben, dass dies von der Nutzung des Dienstes abgeschreckt hat, da sich die Leute Passwörter nicht merken können, noch weniger, wenn sie wissen, welche die Inhalte sind auf Youtube verfügbar, eine leicht zugängliche Website, die jeder kennt.
Ein weiteres Handicap, auf das wir beim Extrahieren von Wissen aus den audiovisuellen Inhalten des Kongresses gestoßen sind, ist die Sprache. Die Mehrheitssprache des Kongresses ist Katalanisch, aber die Winnow-Plattform ist noch dabei, die Algorithmen zur Interpretation natürlicher Sprache dieser Sprache zu verbessern. Wir konnten nachweisen, dass die Wörterbücher und Taxonomien für Englisch und Spanisch viel weiter entwickelt sind.
Daher war die Piloterfahrung mit dem Winnow-Dienst positiv, aber das Fehlen von Filmen auf Katalanisch und die geringe Nutzung des Dienstes haben es uns nicht ermöglicht, genügend Daten von den Benutzern zu sammeln, um eine umfassende Analyse ihres Verhaltens durchzuführen um ihre Bedürfnisse und Interessen zu verstehen und das inhaltliche Programm des nächsten Digital Government Congress 2023 neu gestalten zu können.
Projekt-Status
Pilot abgeschlossen
Weitere Informationen
- Nachbericht zum Digital Government Congress 2021 mit künstlicher Intelligenz (https://www.aoc.cat/blog/2021/reviu-cgd2021/) 25
- Präsentation des Winnow-Dienstes auf dem Kongress durch Miquel Estapé, stellvertretender Direktor des AOC (https://youtu.be/dLrrTCM1dbk?t=1248) [Minute 21:00 Schlussfolgerungen und Abschluss] 11
- Winnow by Omnios-Website (https://omnios.ai/winnow/)