Una herramienta de detección de objetos basada en bocetos que utiliza aprendizaje automático podría mejorar la detección de tumores

Enseñar herramientas de aprendizaje automático para detectar ciertos objetos en una determinada imagen y rechazar otros es un “cambio de juego” que podría conducir a avances en la detección del cáncer, según investigadores líderes de la Universidad de Surrey.

Surrey exhibirá su exclusiva herramienta de detección de objetos basada en bocetos en la feria de este año. Jornada sobre visión por computador, patrones y reconocimiento (CVPR). La herramienta permite al usuario dibujar un objeto que la IA usará como base para buscar en la imagen algo que coincida con el boceto, descartando opciones más generales.

El profesor Yi-Zhe Song dirige esta investigación en el Instituto de Inteligencia Artificial Centrada en el Ser Humano de la Universidad de Surrey. Afirmó: “El boceto del artista está lleno de pistas individuales que las palabras no pueden transmitir de manera sucinta al repetir la frase ‘una imagen vale más que mil palabras'”. Con los sistemas de inteligencia artificial más nuevos, las palabras descriptivas simples ayudan a generar imágenes, pero ninguna de ellas puede expresar el individualismo del usuario o la coincidencia exacta que el usuario está buscando.

“Aquí es donde entra en juego nuestra herramienta basada en bocetos. La IA es instruida por el artista a través de bocetos para encontrar el objeto exacto y rechazar otros. Esto podría ser extremadamente útil en medicina al encontrar tumores más agresivos o ayudar a la conservación de la naturaleza al detectar animales raros”.

Un ejemplo que los investigadores usan en su artículo para la conferencia es una herramienta para ayudar a buscar una foto llena de cebras, con solo un boceto de una cebra comiendo para orientar la búsqueda. La herramienta de IA tiene en cuenta las señales visuales, como las poses y la estructura, pero basa sus decisiones en los requisitos exactos proporcionados por el artista aficionado.

El profesor Song dijo: “La capacidad de la IA para detectar objetos de bocetos individuales de aficionados representa un importante paso adelante en el aprovechamiento de la creatividad humana en la visión artificial. Permite a los humanos interactuar con la IA desde una perspectiva completamente diferente, ya no permite que la IA dicte decisiones, sino que le pide que se comporte exactamente como se le indica, al tiempo que conserva la intervención humana necesaria. ”