SAM 3 de Meta reconoce más objetos en imágenes y vídeos con indicaciones en texto e imágenes de ejemplo

Guardar

Meta ha presentado la nueva versión de su modelo de segmentación, SAM 3, que introduce la capacidad de usar indicaciones en texto e imágenes de ejemplo para que pueda reconocer más conceptos e identificarlos mejor en una imagen o un vídeo.

La familia Segment Anything Model (SAM) se compone de modelos de segmentación de imagen - que identifica los píxeles de la imagen que pertenecen a un objeto- para ayudar en la identificación y diferenciación de objetos.

Con el primero modelo, presentado en 2023, Meta pretendía democratizar esta tecnología para pudiera usarse en áreas como la edición de vídeo o la ganadería. Un año después llegó SAM 2, que introdujo la capacidad de segmentar cualquier objeto y seguirlo de manera consistente a lo largo de todos los fotogramas de un vídeo en tiempo real.

SAM 3 avanza en las indicaciones, ya que además de las de tipo audiovisual, admite indicaciones conceptuales como frases nominales simples y ejemplos de imágenes, como informa Meta en un comunicado.

En los modelos de lenguaje multimodales de gran tamaño, SAM 3 también puede segmentar objetos descritos mediante indicaciones más complejas, como: "personas sentadas, pero sin llevar una caja de regalo en las manos".

Meta ha destacado el rendimiento de SAM 3, hasta el punto de que "procesa una sola imagen con más de cien objetos detectados en 30 milisegundos en una GPU H200". En vídeo, asegura que mantiene un rendimiento "casi en tiempo real" para unos cinco objetos simultáneos.

Asimismo, Meta ha creado una base de datos para el entrenamiento con más de 4 millones de conceptos únicos, para lo que ha usado sistema híbrido de anotadores humanos y modelos de inteligencia artificial.

Últimas Noticias

Macron alerta de "consecuencias en cascada inéditas" si se viola la soberanía de Dinamarca

El presidente francés ha advertido que cualquier intento de alterar la integridad territorial de países aliados podría desencadenar efectos impredecibles, en medio del aumento de las presiones por parte de Estados Unidos para controlar Groenlandia, según declaraciones oficiales

Macron alerta de "consecuencias en

La Reina Letizia enamora con un impecable traje de estreno en color berenjena

Durante una visita a Valencia para inaugurar una muestra cultural, la esposa del jefe de Estado lució un conjunto sofisticado, destacando un atuendo en tono berenjena que acaparó la atención por su elegancia y adaptación a las tendencias actuales

La Reina Letizia enamora con

C-LM y Guanajuato firmarán en Fitur un acuerdo para impulsar la promoción turística y cultural entre ambos territorios

La consejera de Economía, Empresas y Empleo, Patricia Franco, ha anunciado que se suscribirá un pacto de colaboración en Fitur, enfocado en desarrollar actividades conjuntas de atracción de visitantes y fortalecer el intercambio artístico entre ambas regiones

C-LM y Guanajuato firmarán en

C-LM insiste en que el acuerdo de Mercosur es una oportunidad: "Abre un mercado de 270 millones de consumidores"

C-LM insiste en que el

Trump insiste en que el control de Groenlandia por parte de EEUU "es vital" para el escudo 'Cúpula Dorada'

El mandatario estadounidense elevó la tensión diplomática al exigir que Washington adquiera el dominio de la isla, argumentando amenazas de Moscú y Pekín y desestimando la negativa de Copenhague y las autoridades locales mientras se prepara una reunión clave en la Casa Blanca

Trump insiste en que el