IA e os Problemas Difíceis do Mundo · Ciência da computação teórica · Nature (computational biology) · 2026-10-23
Framework baseado em modelo de fundação para predição de interação humano–objeto com integração de máscaras de segmentação
Título original: Foundation model-driven framework for human–object interaction prediction with segmentation mask integration
A detecção de interação humano–objeto tem se baseado principalmente em métodos de detecção. O Seg2HOI integra um modelo de fundação de visão baseado em segmentação, mantido congelado, e prevê quádruplas que acrescentam máscaras de segmentação dos pares humano–objeto às trincas padrão. Ele alcança desempenho comparável ao dos métodos de ponta em dois benchmarks públicos, inclusive em cenários zero-shot, e consegue gerar quádruplas e segmentações interativas a partir de prompts de texto e visuais não usados no treinamento.