Not logged in.

Quick Search - Contribution

Contribution Details

Type Bachelor's Thesis
Scope Discipline-based scholarship
Title Implementing an Index for Videos Containing Motion in a Multi-media Retrieval System
Organization Unit
Authors
  • Cyrill Hidber
Supervisors
  • Sven Helmer
  • Michael Hanspeter Böhlen
Language
  • English
Institution University of Zurich
Faculty Faculty of Business, Economics and Informatics
Date 2023
Abstract Text This work focuses on the analysis and evaluation of methods for efficient indexing and querying of motion videos in multimedia databases. In particular, the software stack vitrivr is considered for the representation of a multimedia database. The emphasis is on investigating the feasibility of implementing an index for motion data from the motion videos in one of the components of the software stack. The index should then enable a more efficient query. In this context, the use of technologies such as OpenPose for extracting motion data from video sequences and Dynamic Time Warping (DTW) for analyzing and categorizing the extracted data is discussed based on previous work. The work further illuminates the application of local segmentation as a means of improving the accuracy and efficiency of a similarity assessment based on DTW. Finally, two possible implementation approaches for the index are proposed and analyzed: one that builds on the existing architecture of the retrieval engine Cineast, and another that suggests a direct integration of DTW functionality into Cottontail DB.
Zusammenfassung Diese Arbeit beschäftigt sich mit der Analyse und Evaluierung von Methoden zur effizienten Indexierung und Abfrage von Bewegungsvideos in Multimediadatenbanken. Insbesondere wird für die Repräsentation einer Multimediadatenbank der Software-Stack vitrivr betrachtet. Der Schwerpunkt liegt auf der Untersuchung der Machbarkeit der Implementierung eines Indexes für Bewegungsdaten aus den Bewegungsvideos in einem der Komponenten des Software-Stacks. Durch den Index soll dann eine effizientere Abfrage ermöglicht werden. In diesem Kontext wird der Einsatz von Technologien wie OpenPose zur Extraktion von Bewegungsdaten aus Videosequenzen und Dynamic Time Warping (DTW) zur Analyse und Kategorisierung der extrahierten Daten aufgrund vorangegangener Arbeiten diskutiert. Die Arbeit beleuchtet des Weiteren die Anwendung von lokaler Segmentierung als Mittel zur Verbesserung der Genauigkeit und Effizienz einer Ähnlichkeitsbewertung basierend auf DTW. Schließlich werden zwei mögliche Implementierungsansätze für den Index vorgeschlagen und analysiert: Einer, der auf der bestehenden Architektur des Retrieval-Engines Cineast aufbaut, und ein anderer, der eine direkte Integration von DTW-Funktionalität in Cottontail DB vorschlägt.
PDF File Download
Export BibTeX