| 1 |
Unsupervised quantification of entity consistency between photos and text in real-world news ...
|
|
Müller-Budack, Eric. - : Hannover : Institutionelles Repositorium der Leibniz Universität Hannover, 2022
|
|
Abstract:
Das World Wide Web und die sozialen Medien übernehmen im heutigen Informationszeitalter eine wichtige Rolle für die Vermittlung von Nachrichten und Informationen. In der Regel werden verschiedene Modalitäten im Sinne der Informationskodierung wie beispielsweise Fotos und Text verwendet, um Nachrichten effektiver zu vermitteln oder Aufmerksamkeit zu erregen. Kommunikations- und Sprachwissenschaftler erforschen das komplexe Zusammenspiel zwischen Modalitäten seit Jahrzehnten und haben unter Anderem untersucht, wie durch die Kombination der Modalitäten zusätzliche Informationen oder eine neue Bedeutungsebene entstehen können. Die Anzahl gemeinsamer Konzepte oder Entitäten (beispielsweise Personen, Orte und Ereignisse) zwischen Fotos und Text stellen einen wichtigen Aspekt für die Bewertung der Gesamtaussage und Bedeutung eines multimodalen Artikels dar. Automatisierte Ansätze zur Quantifizierung von Bild-Text-Beziehungen können für zahlreiche Anwendungen eingesetzt werden. Sie ermöglichen beispielsweise eine ... : In today’s information age, the World Wide Web and social media are important sources for news and information. Different modalities (in the sense of information encoding) such as photos and text are typically used to communicate news more effectively or to attract attention. Communication scientists, linguists, and semioticians have studied the complex interplay between modalities for decades and investigated, e.g., how their combination can carry additional information or add a new level of meaning. The number of shared concepts or entities (e.g., persons, locations, and events) between photos and text is an important aspect to evaluate the overall message and meaning of an article. Computational models for the quantification of image-text relations can enable many applications. For example, they allow for more efficient exploration of news, facilitate semantic search and multimedia retrieval in large (web) archives, or assist human assessors in evaluating news for credibility. To date, only a few ...
|
|
Keyword:
Bild-Text-Beziehungen; Bildindexierung; Computer vision; Date estimation; Deep Learning; Deep learning; Dewey Decimal Classification000 | Allgemeines, Wissenschaft000 | Informatik, Wissen, Systeme004 | Informatik; Event classification; Eventklassifikation; Face recognition; Geolocation estimation; Image indexing; Image-text relations; Maschinelles Sehen; Multimedia retrieval; Multimedia Retrieval; Nachrichtenanalyse; Natürliche Sprachverarbeitung; Natural language processing; News analytics; Personenerkennung; Schätzung des Aufnahmejahres; Schätzung des Aufnahmeortes
|
|
URL: https://dx.doi.org/10.15488/11719
https://www.repo.uni-hannover.de/handle/123456789/11812
|
|
BASE
|
|
Hide details
|
|
|
|
|
