Google Photos y la información que entregamos

No sólo objetos o paisajes, también acciones son las búsquedas que puede realizar Google Photos (e imagino que todas esas etiquetas son asociadas a nuestras fotos y generan algún perfil nuestro). Pero no sólo acciones, sino también objetos relacionados. La búsqueda: "saltar".

Primer resultado

Aquí la acción es obvia: un estudiante ejecutando la acción de "saltar". Este es uno de los tantos resultados similares en donde la acción de "saltar" es muy evidente.

Segundo resultado

Este resultado es una caricatura, pero a pesar de ello, se identifica la acción de "saltar"; no de una persona, pero sí de un animal.

Tercer resultado

Este resultado sí me llamó la atención: no hay ninguna persona, animal u otro objeto en acción de "saltar" (o sea, suspendido en el aire), sin embargo es notorio el "saltarín" (al menos así lo conozco), esa estructura metálica que sujeta una capa de hule sobre la cual se suele saltar, y de alguna manera el algoritmo "deduce" que si hay personas allí, deben estar "saltando", y por eso esta foto salió en los resultados de "saltar".

Otra explicación puede ser que, al ser esta foto tomada después de un vídeo de la misma escena, en el mismo momento, en donde las personas sí están "saltando", el algoritmo de Google Photos pueda estar analizando las fotos o videos de una misma fracción de tiempo para "deducir" de que en esta foto también las personas han estado realizando la acción de "saltar".

Cuarto resultado

Si el tercer resultado me llamó mucho la atención, este resultado lo hizo con mucha más fuerza. Aquí no hay ninguna persona, animal u otro objeto en acción de "saltar" ni objetos relacionados con esa acción. Las fotos o vídeos previas y posteriores a esta imagen (en el mismo rango de tiempo) tampoco se percibe la acción de saltar. Me puse a revisar esta imagen para poder entender la razón por la que había salido en los resultados de "saltar", y la encontré:

En la esquina superior izquierda estaba la razón por la que esta foto también salió en los resultados de "saltar": estaba escrito la palabra "saltos". Y con la magia de los algoritmos de Google Photos, esta foto también sale en los resultados de "saltar".

Para que estos resultados puedan ser mostrados con prontitud, de manera interna cada una de nuestras fotos han tenido que pasar por algún análisis de identificación de todos estos elementos: objetos, personas, acciones, textos, lugares, etc, etc, y después de realizar la identificación de toda la información posible, con ese análisis se realiza un etiquetado de cada foto, con todo lo encontrado . Las fotos mostradas en este post fueron etiquetadas por el algoritmo de Google Photos, con la etiqueta "saltar" (entre otras etiquetas más), al momento en que subí dichas imágenes a la plataforma en cuestión.