 |
Conference papers
Towards large scale multimedia indexing: A case study on person discovery in broadcast news
Nam Le
1
Hervé Bredin
2
Gabriel Sargent
3
Miquel India
4
Paula Lopez-Otero
5
Claude Barras
2
Camille Guinaudeau
2
Guillaume Gravier
3
Gabriel Barbosa da Fonseca
6
Izabela Lyon Freire
6
Zenilton Patrocínio Jr
6
Silvio Jamil F. Guimarães
6
Gerard Martí
4
Josep Ramon Morros
4
Javier Hernando
4
Laura Docio-Fernandez
5
Carmen Garcia-Mateo
5
Sylvain Meignier
7
Jean-Marc Odobez
1
3
LinkMedia - Creating and exploiting explicit links between multimedia fragments
Inria Rennes – Bretagne Atlantique , IRISA-D6 - MEDIA ET INTERACTIONS
Nam Le 1
Author
Hervé Bredin 2
Author Employer institution : Centre National de la Recherche Scientifique IdHAL : hbredin arXiv : https://arxiv.org/a/hbredin ORCID : https://orcid.org/0000-0002-3739-925X
Gabriel Sargent 3
Author
Miquel India 4
Author
Paula Lopez-Otero 5
Author
Claude Barras 2
Author IdHAL : claude-barras
Camille Guinaudeau 2
Author IdHAL : camille-guinaudeau
Guillaume Gravier 3
Author IdHAL : guig
Gabriel Barbosa da Fonseca 6
Author
Izabela Lyon Freire 6
Author
Zenilton Patrocínio Jr 6
Author
Silvio Jamil F. Guimarães 6
Author
Gerard Martí 4
Author
Josep Ramon Morros 4
Author
Javier Hernando 4
Author
Laura Docio-Fernandez 5
Author
Carmen Garcia-Mateo 5
Author
Sylvain Meignier 7
Author IdHAL : sylvain-meignier arXiv : https://arxiv.org/a/sylvain.meignier ORCID : https://orcid.org/0000-0001-7687-073X
Jean-Marc Odobez 1
Author
1
IDIAP Research Institute (Centre du Parc Rue Marconi 19 PO Box 592 CH - 1920 Martigny Switzerland - Switzerland)
2
LIMSI - Laboratoire d'Informatique pour la Mécanique et les Sciences de l'Ingénieur (Université Paris-Sud Bât. 507 - Rue du Belvédère -91405 ORSAY CEDEX - France)
- Université Paris Saclay (COmUE) (Espace Technologique, Bât. Discovery - RD 128 - 2è ététage, 91190 Saint-Aubin - France)
- CNRS - Centre National de la Recherche Scientifique : UPR3251 (France)
- UFR 919 - Sorbonne Université - UFR d'Ingénierie (SORBONNE UNIVERSITE
FACULTE DES SCIENCES ET INGENIERIE
UFR D'INGENIERIE
Tour 55/65 - 2e étage
4 place Jussieu
75252 Paris cedex 05 - France)
- SU - Sorbonne Université (21 rue de l’École de médecine - 75006 Paris - France)
- Université Paris-Saclay (Espace Technologique, Bat. Discovery - RD 128 - 2e ét., 91190 Saint-Aubin - France)
- UP11 - Université Paris-Sud - Paris 11 (Bâtiment 300 - 91405 Orsay cedex - France)
3
LinkMedia - Creating and exploiting explicit links between multimedia fragments (Campus de Beaulieu 35042 Rennes cedex - France)
- Inria Rennes – Bretagne Atlantique (Campus de beaulieu
35042 Rennes cedex - France)
- Inria - Institut National de Recherche en Informatique et en Automatique (Domaine de Voluceau Rocquencourt - BP 105 78153 Le Chesnay Cedex - France)
- IRISA-D6 - MEDIA ET INTERACTIONS (France)
- IRISA - Institut de Recherche en Informatique et Systèmes Aléatoires (Avenue du général Leclerc
Campus de Beaulieu
35042 RENNES CEDEX - France)
- UR1 - Université de Rennes 1 (2 rue du Thabor - CS 46510 - 35065 Rennes cedex - France)
- UNIV-RENNES - Université de Rennes (France)
- INSA Rennes - Institut National des Sciences Appliquées - Rennes (20, avenue des Buttes de Coësmes - CS 70839 - 35708 Rennes cedex 7 - France)
- UBS - Université de Bretagne Sud (BP 92116 - 56321 Lorient cedex - France)
- ENS Rennes - École normale supérieure - Rennes (Campus de Ker Lann - avenue Robert Schuman - 35170 Bruz - France)
- Inria - Institut National de Recherche en Informatique et en Automatique (Domaine de Voluceau Rocquencourt - BP 105 78153 Le Chesnay Cedex - France)
- CentraleSupélec (3, rue Joliot Curie, Plateau de Moulon, 91192 GIF-SUR-YVETTE Cedex - France)
- CNRS - Centre National de la Recherche Scientifique : UMR6074 (France)
- IMT Atlantique - IMT Atlantique Bretagne-Pays de la Loire (Campus Brest : Technopôle Brest-Iroise CS 8381829238 BREST Cedex 3 -
Campus Nantes : 4, rue Alfred Kastler- La chantrerie 44300 NANTES -
Campus Rennes : 2 Rue de la Châtaigneraie, 35510 CESSON SEVIGNE - France)
- IMT - Institut Mines-Télécom [Paris] (37-39 Rue Dareau, 75014 Paris - France)
- UR1 - Université de Rennes 1 (2 rue du Thabor - CS 46510 - 35065 Rennes cedex - France)
- IRISA - Institut de Recherche en Informatique et Systèmes Aléatoires (Avenue du général Leclerc
Campus de Beaulieu
35042 RENNES CEDEX - France)
4
UPC - Universitat Politècnica de Catalunya [Barcelona] (C./Jordi Girona, 1-3, 08034 Barcelona - Spain)
6
PUC Minas (Brazil)
7
LIUM - Laboratoire d'Informatique de l'Université du Mans (Avenue Laennec 72085 Le Mans cedex 9 - France)
- UM - Le Mans Université : EA4023 (Avenue Olivier Messiaen - 72085 Le Mans cedex 9 - France)
Abstract : The rapid growth of multimedia databases and the human interest in their peers make indices representing the location and identity of people in audiovisual documents essential for searching archives. Person discovery in the absence of prior identity knowledge requires accurate association of audiovisual cues and detected names. To this end, we present 3 different strategies to approach this problem: clustering-based naming, verification-based naming, and graph-based naming. Each of these strategies utilizes different recent advances in unsupervised face / speech representation, verification, and optimization. To have a better understanding of the approaches, this paper also provides a quantitative and qualitative comparative study of these approaches using the associated corpus of the Person Discovery challenge at MediaEval 2016. From the results of our experiments, we can observe the pros and cons of each approach, thus paving the way for future promising research directions.
Document type :
Conference papers
Domain :
Complete list of metadata
https://hal.archives-ouvertes.fr/hal-01551690
Contributor : Gabriel Sargent <>
Submitted on : Friday, June 30, 2017 - 2:28:16 PM
Last modification on : Tuesday, December 8, 2020 - 3:37:02 AM
Long-term archiving on: : Monday, January 22, 2018 - 8:15:49 PM
Contributor : Gabriel Sargent <>
Submitted on : Friday, June 30, 2017 - 2:28:16 PM
Last modification on : Tuesday, December 8, 2020 - 3:37:02 AM
Long-term archiving on: : Monday, January 22, 2018 - 8:15:49 PM
File
Le_et_al_CBMI.pdf
Files produced by the author(s)
Identifiers
- HAL Id : hal-01551690, version 1
- DOI : 10.1145/3095713.3095732
Collections
CNRS | UNIV-RENNES1 | UNIV-LEMANS | LIUM | IRISA | INRIA | UR1-UFR-ISTIC | LIMSI | UNIV-RENNES | SORBONNE-UNIVERSITE | LIUM-LST | INSA-RENNES | SU-TI
Citation
Nam Le, Hervé Bredin, Gabriel Sargent, Miquel India, Paula Lopez-Otero, et al.. Towards large scale multimedia indexing: A case study on person discovery in broadcast news. Content-Based Multimedia Indexing CBMI, Jun 2017, Firenze, Italy. ⟨10.1145/3095713.3095732⟩. ⟨hal-01551690⟩
Metrics
Record views
2880
Files downloads