中文简介
MathLLMs/MathVision 是 MathLLMs 在 Hugging Face 发布的数据集仓库,当前卡片主要关联问答、视觉问答、文本生成与推理、图像理解。本站固定记录上游版本 2837ddb3f13a,同步到 6 个文件,文件元数据合计 284.03 MB;访问状态为“公开”,许可证字段为“mit”。
上游模型卡 / 数据集卡
【README 卡片中文译介】
以下内容依据上游仓库 MathLLMs/MathVision 的固定版本 README、卡片字段和文件元数据进行中文结构化整理。它保留便于选型的关键信息,完整技术细节、代码示例和许可文本请同时查看上游原文。
【资源概览】
MathLLMs/MathVision 是 MathLLMs 在 Hugging Face 发布的数据集仓库,当前卡片主要关联问答、视觉问答、文本生成与推理、图像理解。本站固定记录上游版本 2837ddb3f13a,同步到 6 个文件,文件元数据合计 284.03 MB;访问状态为“公开”,许可证字段为“mit”。
【适用方向】
适合评估图文理解、视觉问答、文档或场景解析等多模态任务。 正式使用前应先抽样检查字段、语言、重复项、敏感信息和训练/测试划分,避免只依据仓库名称判断数据质量。
【版本与规格】
固定版本:2837ddb3f13a。 任务标签:问答、视觉问答、文本生成与推理、图像理解。 语言字段:en。 数据集卡名称:MATH-V。 规模分类:1K<n<10K。 上游页面记录的最近更新时间:2026-06-10。
【文件信息】
上游 API 返回 6 个文件,文件元数据合计 284.03 MB。 已保存文件清单中的主要扩展名:.parquet 2 个、.md 1 个、.yaml 1 个、.zip 1 个、无扩展名 1 个。 当前较大的文件包括:data/test-00000-of-00001-3532b8d3f1b4047a.parquet(54.27 MB);images.zip(49.97 MB);data/testmini-00000-of-00001-f8ff70fcb2f29b1d.parquet(6.66 MB)。
【运行或处理环境】
仓库文件元数据合计 284.03 MB。仅按下载、解压和临时文件估算,建议至少预留约 340.83 MB 可用磁盘;实际需求还取决于压缩率、缓存、数据转换和训练副本,正式处理前应以完整文件清单重新测算。
【使用边界】
许可证显示为“mit”,具体用途限制、附加政策和归属要求仍以上游原文为准。 数据集还需核对样本来源、隐私与个人信息、标签质量、地域偏差及下游模型的合规要求。
Measuring Multimodal Mathematical Reasoning with the MATH-Vision Dataset [💻 Github] [🌐 Homepage] [📊 Main Leaderboard ] [📊 Open Source Leaderboard ] [🌿 Wild Leaderboard ] [🔍 Visualization] [📖 Paper] 🌿 NEW: MATH-Vision-Wild MATH-Vision-Wild** is a photographic, real-world variant of MATH-Vision. The same testmini problems are **physically captured** on printed paper, iPads, laptops, and projectors under varying lighting and angles — the conditions VLMs actually face when a user holds up a phone to a math problem. 📦 **Dataset**: MathLLMs/MathVision-Wild · 🏆 **Leaderboard**: mathllm.github.io/mathvision/#wildleaderboard Key finding — almost every model *regresses* in the wild:** | Model | MATH-Vision (testmini) | MATH-Vision-Wild | Δ | |---|---:|---:|---:| | **o4-mini** 🥇 | 55.9 | **57.2** | **+2.33%** (only model to improve) | | Gemini 2.5 Pro Preview 05-06 (thinking) | 63.8 | 49.0 | **−23.20%** | | Gemini 2.5 Flash Preview 05-20 | 57.9 | 48.0 | −17.10% | | Doubao-1.5-thinking-vision-pro | 57.9 | 45.7 | −21.07% | | Gemini 2.5 Pro Preview 05-06 | 61.8 | 42.8 | −30.74% | | GPT-4.1 | 40.5 | 35.5 | −12.35% | | Qwen2.5-VL-72B-Instruct | 36.2 | 24.0 | −33.70% | | Gemini 2.0 Flash | 48.0 | 23.0 | −52.08% | | Gemini 1.5 Pro | 38.8 | 18.4 | −52.58% | Only **o4-mini** improves when problems are photographed; long-reasoning models degrade less than fast/non-thinking models. A full 25-model comparison with MATH-Vision-Screenshot and Δ% columns is on the Wild Leaderboard. 🚀 Data Usage 🙏 Acknowledgments We would like to thank the following contributors for helping improve the dataset quality: @Zhiqi Huang for correcting answers for ID 21, ID 691, ID 2522 and ID 2524 @Big-Brother-Pikachu for correcting answers for ID 338 and ID 1826 💥 News **[2026.04.24]** 🌿🔥🔥 **MATH-Vision-Wild released!** A photographic variant that re-captures MATH-Vision problems on printed paper, iPads, laptops, and projectors. **o4-mini** is the **only** model whose accuracy *improves* in the wild (**57.2%**, +
适用场景
适合评估图文理解、视觉问答、文档或场景解析等多模态任务。 正式使用前应先抽样检查字段、语言、重复项、敏感信息和训练/测试划分,避免只依据仓库名称判断数据质量。
规模与格式
固定版本:2837ddb3f13a。 任务标签:问答、视觉问答、文本生成与推理、图像理解。 语言字段:en。 数据集卡名称:MATH-V。 规模分类:1K<n<10K。 上游页面记录的最近更新时间:2026-06-10。
文件说明
上游 API 返回 6 个文件,文件元数据合计 284.03 MB。 已保存文件清单中的主要扩展名:.parquet 2 个、.md 1 个、.yaml 1 个、.zip 1 个、无扩展名 1 个。 当前较大的文件包括:data/test-00000-of-00001-3532b8d3f1b4047a.parquet(54.27 MB);images.zip(49.97 MB);data/testmini-00000-of-00001-f8ff70fcb2f29b1d.parquet(6.66 MB)。
上游文件元数据
.gitattributes2.25 KBdata/test-00000-of-00001-3532b8d3f1b4047a.parquet54.27 MBdata/testmini-00000-of-00001-f8ff70fcb2f29b1d.parquet6.66 MBeval.yaml1.70 KBimages.zip49.97 MBREADME.md11.70 KB
硬件建议
仓库文件元数据合计 284.03 MB。仅按下载、解压和临时文件估算,建议至少预留约 340.83 MB 可用磁盘;实际需求还取决于压缩率、缓存、数据转换和训练副本,正式处理前应以完整文件清单重新测算。
注意事项
许可证显示为“mit”,具体用途限制、附加政策和归属要求仍以上游原文为准。 数据集还需核对样本来源、隐私与个人信息、标签质量、地域偏差及下游模型的合规要求。
获取、校验与交付
咨询此资源时只需发送本页链接或资源准确全称。橙子AI科技会继续核对版本、文件与类型、README资料卡、许可证和访问条件,并在合法访问权限、许可证及平台规则允许的前提下,协助海内外下载、完整性校验及网盘或硬盘交付;本官网本身不托管或下载资源文件。
本页面为橙子AI科技基于固定版本上游卡片整理的中文信息与服务说明,不代表资源作者或平台官方页面。实际许可、访问和使用条件以上游原文为准。