MX339009B

System for annotating media content for automatic content understanding.

Abstract

Un sistema para anotar tramas en un flujo de medios 114 incluye un sistema de reconocimiento de patrones (PRS) 108 para generar metadatos de salida del PRS para una trama; un archivo 106 para almacenar metadatos de alta precisión (GTM); un dispositivo para unir los GTM y los metadatos de salida del PRS y de esta manera generar datos de anotación propuestos (PAD) 110; y una interfaz de usuario 109 para utilizarse por el anotador humano (HA) 118. La interfaz de usuario 104 incluye un editor 111 y un dispositivo de entrada 107 utilizado por el HA 118 para aprobar los GTM para la trama. Un sistema de optimización 105 recibe los GTM aprobados y los metadatos proporcionados por el PRS 108, y ajusta los parámetros de entrada para el PRS para minimizar una métrica de distancia correspondiente a una diferencia entre los GTM y los metadatos proporcionados por el PRS.

MX339009B, drawing sheet 1
Sheet 1 of 30

Term

6.6 yearsleft in the term

Expires 22 April 2033.

  1. Priority
  2. Filed
  3. Granted
  4. Today
  5. Expires

16 claims: 5 independent, 11 dependent

  1. 1
    NOVEDAD DE LA INVENCIÓN Habiendo descrito la presente invención como antecede, se considera como una novedad y, por lo tanto, se reclama como propiedad lo contenido en las siguientes:REIVINDICACIONES 1. Un sistema para anotar contenidos de medios, caracterizado porque comprende: un sistema de reconocimiento de patrones (PRS) (108) que tiene un conjunto inicial de parámetros de entrada que genera metadatos de salida del PRS asociados con una trama de un flujo de medios (114) ;un archivo de dispositivo de almacenamiento electrónico (106) para almacenar metadatos de alta precisión (GTM) asociados con la misma trama del flujo de medios (114);un dispositivo para fusionar los GTM y los metadatos de salida del PRS y de esta manera generar datos propuestos de anotación (PAD) (110);y una interfaz de usuario (104) para utilizarse por un anotador humano (HA) (118) que incluye: un editor (111) y un dispositivo de entrada (104) para aprobar editar los PAD (110) para la trama;y ΙΜΡΪ INSTITUTO MEXICANO 2 5 DE LA PROPIEDAD INDUSTRIAL un sistema de optimización (105) para ajustar parámetros de entrada, de acuerdo a la entrada del HA, para el PRS (108) para minimizar una métrica de distancia que corresponde a una diferencia entre los GTM y los metadatos de salida del PRS. 10 caracterizado porque un retraso de tiempo entre los metadatos de terceros (101) y el flujo de medios (114) se corrige con una alineación.
  2. 2
    4. El sistema de acuerdo con la reivindicación 2, caracterizado porque una red de comunicaciones (103) habilita 15 una pluralidad de HAs (118) para interactuar con el mismo flujo de medios (114).
  3. 3
    5. El sistema de acuerdo con la reivindicación 2, caracterizado porque cuando se aprueban los PAD (110) se convierten en GTM. 20
  4. 4
    6. El sistema de acuerdo con la reivindicación 5, caracterizado porque cuando se aprueban los PAD (110) se sobreponen gráficamente en el flujo de medios (114).
  5. 5
    7. El sistema de acuerdo con la reivindicación 1, caracterizado porque el sistema de optimización (105) ajusta IMPI el conjunto inicial de parámetros de pnt-rarla HpI prs (108) para minimizar la diferencia entre los GTM y los metadatos de salida del PRS aumentando de esta manera la precisión.
  6. 6
    8. El sistema de acuerdo con la reivindicación 1 5 caracterizado porque el PRS (108) incluye un conjunto de variables de estado almacenado como un grupo temporal (112) ajustable como un grupo en respuesta a los GTM.
  7. 7
    9. Un método implementado por computadora para anotar contenidos de medios, caracterizado porque el método
  8. 8
    10 comprende los pasos de:recibir, mediante un sistema de computadora, datos desde un flujo de medios, donde los datos se organizan en tramas (202);procesar los datos utilizando un sistema de 15 reconocimiento de patrones (PRS) (108) ;almacenar, mediante un sistema de computadora, un estado del PRS (108) ;generar metadatos asociados con la trama con el uso del PRS (108) ;20 recibir la entrada que está caracterizada como metadatos de alta precisión (GTM), en un sistema de optimización;ajustar, mediante un sistema de computadora, parámetros de entrada para el PRS (108) para minimizar una métrica de IMPI distancia que corresponde a una diferencia entre los GTM y los metadatos de salida del PRS. 10. El método implementado por computadora de acuerdo con la reivindicación 9 caracterizado porque dicha entrada se obtiene de uno o más de los flujos de medios archivados (115), metadatos de terceros (101) y uno o más anotadores humanos (118).
  9. 9
    11. El método implementado por computadora de acuerdo con la reivindicación 10, caracterizado porque después de recibir dicha entrada, dichos GTM y dichos metadatos asociados con dicho PRS se alinean temporalmente.
  10. 10
    12. El método implementado por computadora de acuerdo con la reivindicación 10, caracterizado porque dichos GTM y dichos metadatos asociados con dicho PRS (108) se almacenan continuamente en la memoria y se almacenan periódicamente en un disco, de esta manera se habilita una recuperación rápida ante una falla del sistema.
  11. 11
    13. Un método implementado por computadora para anotar contenidos de medios, caracterizado porque el método comprende los pasos de:recibir de un anotador humano (HA), a través de una interfaz de usuario de un anotador humano (HAUI), información acerca de un punto en el tiempo seleccionado por el HA en una línea de tiempo del flujo de medios;IΜ ΡI 9 β INSTITUTO MEXICANO ν DE LA PROPIEDAI' INDUSTRIAL fusionar, mediante el sistema de computadora, metadatos de alta precisión (GTM) existentes que hacen referencia a una trama de medios que corresponde al punto en el tiempo seleccionado con metadatos de salida del sistema de 5 reconocimiento de patrones (PRS) que hace referencia a dicha trama de medios, de esta manera se generan datos de anotación propuestos (PAD) (110) para la trama de medios;mostrar, por medio de una interfaz de usuario (104), la trama de medios y los PAD (110) al HA (118) ;10 recibir, mediante el sistema de computadora, la entrada desde el HA (118) que incluye la corrección y/o aprobación a los PAD (110) , en donde los PAD (110) aprobados se caracterizan como nuevos GTM relacionados con el punto en el tiempo seleccionado;15 almacenar, mediante el sistema de computadora, los nuevos GTM;comparar, mediante el sistema de computadora, los metadatos de salida del PRS y los nuevos GTM relacionados con el punto en el tiempo seleccionado;y 20 ajustar, mediante el sistema de computadora, los parámetros de entrada del PRS de modo que se minimiza una métrica de distancia que corresponde a una diferencia entre los nuevos GTM y los metadatos de salida del PRS relacionados con el punto en el tiempo seleccionado. IMPI INSTITUTO MEXICANO 9 Q ÜE LA PROPIEDAD INDUSTRIAL
  12. 12
    14. El método implementado por nnmputadnra dp amprrln con la reivindicación 13, caracterizado porque dichos GTM se obtienen de uno o más de los flujos de medios (115) , los metadatos de terceros (101), dichos anotadores humanos (118) y otros anotadores humanos.
  13. 13
    15. El método implementado por computadora de acuerdo con la reivindicación 14, caracterizado porque cuando dicho anotador humano (118) aprueba dichos PAD (110), dichos PAD (110) se sobreponen gráficamente en dicho flujo de medios.
  14. 14
    16. Un método implementado por computadora para anotar contenidos de medios, caracterizado porque el método comprende los pasos de:generar metadatos de salida asociados con una trama de un flujo de medios, la salida por medio de un sistema de reconocimiento de patrones (PRS) (108) ;almacenar, mediante el sistema de computadora, en un archivo (106) entradas de un anotador humano (HA) (118) relacionadas con la trama, caracterizadas como metadatos de alta precisión (GTM);fusionar, mediante el sistema de computadora, los GTM y los metadatos de salida del PRS (108) para generar de esta manera datos propuestos de anotación (PAD) (110);y mostrar los PAD (110) al HA (118) por medio de una interfaz de usuario 104;IMPI recibir a través de la interfaz de usuario una entrada del HA (118) que indica aprobación a los GTM de la trama;y ajustar parámetros de entrada para el PRS (108) utilizando un sistema de optimización (105), para minimizar una métrica de distancia que corresponde a una diferencia entre los GTM y los metadatos de salida del PRS.
  15. 15
    17. El método implementado por computadora de acuerdo con la reivindicación 16, caracterizado porque dichos GTM se obtienen de uno o más de los flujos de medios archivados (115), de metadatos de terceros (101), de dichos anotadores humanos (118) y de otros anotadores humanos.
  16. 16
    18. El método implementado por computadora de acuerdo con la reivindicación 17, caracterizado porque cuando dicho anotador humano (118) aprueba dichos PAD, dichos PAD se sobreponen gráficamente en dicho flujo de medios. IMPI INSTITUTO MEXICANO o - DE LA PROPIEDAD J X INDUSTRIAL
Independent claims16