GeoX-Bench

GeoX-Bench é um conjunto de dados e uma estrutura de benchmark abrangente projetada para avaliar as capacidades de geo-localização e estimativa de pose em Modelos Multimodais Grandes (LMMs). Foi desenvolvido por um grupo de pesquisa colaborativa, incluindo o IntMeGroup, e apresentado na AAAI 2026. O projeto se concentra em fechar a lacuna entre vistas panorâmicas em nível do solo e imagens de satélite em 128 cidades em 49 países.

A estrutura é de código aberto, mantida no GitHub sob a licença MIT. Compreende mais de 10.000 pares panorâmicos-satelíte e centenas de milhares de pares de QA curados. A propriedade do software e do conjunto de dados permanece com o consórcio de pesquisa original que o desenvolveu para fins acadêmicos e de benchmarking. Utiliza várias famílias de modelos, como Qwen e LLaVA, para testar tarefas de raciocínio geográfico e orientação.