Sahara AI und Microsoft haben gemeinsam den KI-Reasoning-Benchmark MATHVISTA vorgestellt

Gate News Nachrichten, am 18. März kündigte das KI-Unternehmen Sahara AI eine Partnerschaft mit Microsoft an, um Microsoft hochpräzise Annotierungsdaten bereitzustellen und gemeinsam den Open-Source-Benchmark MATHVISTA zu entwickeln. Dieser Benchmark ist speziell dafür konzipiert, die Schlussfolgerungs- und Entscheidungsfähigkeiten von Modellen wie GPT-4V, Claude, Gemini in realen Szenarien zu testen. Derzeit wurde er bereits über 270.000 Mal heruntergeladen. Solche hochwertigen annotierten Daten sind die Grundlage für zuverlässige Schlussfolgerungs- und Entscheidungsfähigkeiten von KI-Agenten und beeinflussen direkt die Leistung von Agenten, die täglich von Millionen Nutzern verwendet werden. Derzeit nutzen Organisationen wie Microsoft, Amazon, Snap und das Massachusetts Institute of Technology (MIT) die Datenservices von Sahara AI sowie die Agentic AI-Lösungen.