GeoX-Bench

GeoX-Bench est un jeu de données et un cadre de référence complet conçu pour évaluer les capacités de géolocalisation croisée et d'estimation de pose dans les Modèles Multimodaux de Grande Taille (LMMs). Il a été développé par un groupe de recherche collaboratif, dont IntMeGroup, et a été présenté à l'AAAI 2026. Le projet vise à combler le fossé entre les vues panoramiques au niveau du sol et les images satellites à travers 128 villes dans 49 pays.

Le cadre est open-source, maintenu sur GitHub sous la licence MIT. Il comprend plus de 10 000 paires panoramiques-satellite et des centaines de milliers de paires QA soigneusement sélectionnées. La propriété du logiciel et du jeu de données reste avec le consortium de recherche original qui l'a développé à des fins académiques et de benchmarking. Il utilise diverses familles de modèles telles que Qwen et LLaVA pour tester les tâches de raisonnement géographique et d'orientation.