Označevanje videa z metapodatki: analiza primera označevanja video posnetka nogometne tekme s podatki o igralcih / Video annotation with metadata: A case study of soccer game video annotation with players

ANALI PAZU, 9 (2019), št. / No. 1-2, strani / pages 30-37

Celotno besedilo / Full text (PDF)

Povzetek: V zadnjih letih je uporaba konvolucijskih nevronskih mrež pri procesiranju video vsebin doživela velik razcvet. Razlog je predvsem v povečani računski moči, ki je danes na voljo za procesiranje podatkov. Na posameznih dobro definiranih področjih, kot so na primer razpoznava obrazov, razpoznava prometnih znakov in izoliranih števil, zagotavlja tehnologija nevronskih mrež visoko zanesljivost. V prispevku bomo opisali arhitekturo in implementacijo procesa označevanja nogometne tekme s podatki o imenih igralcev z uporabo tehnologije nevronskih mrež. Proces se izvaja realno-časovno nad videom razpršene oddaje. Obogatena vsebina je ponujena uporabniku na ogled sočasno z video posnetkom. V prispevku bomo opisali celoten proces, ki je sestavljen iz naslednjih korakov: binarizacije slike, lokalizacije dresov nogometašev, izločanja ter razpoznavanja števil, zapisanih na dresih. Podali bomo tudi rezultate evalvacije sistema.

Ključne besede: označevanje videa; konvolucijske nevronske mreže; nogomet.

Abstract: In recent years, the use of convolutional neural networks for video processing has become very attractive. The reason lies in the computational power for data processing which is available today.  There are many well-defined research areas where neural networks have brought higher reliability than other conventional approaches; for example, traffic sign recognition and isolated number recognition. In this paper, we will describe the architecture and the implementation of the process of soccer game annotation. The game is annotated with  data about players. The technology of convolutional neural networks is used for number recognition. The process runs in real-time on a streaming video.  Content enriched with metadata is given to the user in parallel with  the real-time video. In the paper, we will describe in some detail the following modules: Image binarization, shot localization, the selection and recognition of numbers on players` jerseys.

Keywords: video annotation; convolutional neural networks; football.