千页只需7块钱，Mistral发布世界最强文件扫描API，实测仍有缺陷 - 一起AI技术

让AI知识触手可及

首页 » 千页只需7块钱，Mistral发布世界最强文件扫描API，实测仍有缺陷

文章来源于互联网:千页只需7块钱，Mistral发布世界最强文件扫描API，实测仍有缺陷

法国大模型独角兽 Mistral AI 进军 OCR（光学字符识别）领域了。

一出手就是号称「世界上最好的 OCR 模型」！

新产品 Mistral OCR 是一种光学字符识别 API，它为文档理解树立了新标准。与其他模型不同，Mistral OCR 能够以前所未有的准确度和认知能力理解文档的每个元素（媒体、文本、表格、公式）。它以图像和 PDF 作为输入，并从有序交错的文本和图像中提取内容。

因此，Mistral OCR 称得上一种理想的模型，可以与以多模式文档（如幻灯片或复杂 PDF）作为输入的 RAG 系统结合使用。

从现在开始，Mistral OCR 功能可以在 Le Chat 上免费试用。Mistral AI 已经将它作为 le Chat 上数百万用户的默认文档理解模型，并以 1000 页 / 美元的价格发布了 API「mistral-ocr-latest」。目前，该 API 已经在开发者套件 la Plateforme 上提供，并将很快提供给 Mistral AI 的云和推理合作伙伴，同时可以有选择地本地部署。

对复杂文档实现 SOTA 理解

Mistral OCR 擅长理解复杂的文档元素，包括交错图像、数学表达式、表格和高级布局（如 LaTeX 格式）。该模型可以更深入地理解丰富的文档，尤其是包含图表、图形、公式和数字的科学论文。

比如 Alphafold 3 的 OCR 识别效果，从给定 PDF 中将文本、图像提取到 markdown 文档。

下面将 PDF 和对应的 OCR 输出结果进行了并排比较。

比如数学公式：

比如阿拉伯文字：

基准测试成绩全方位第一

Mistral OCR 在严格的基准测试中始终优于其他领先的 OCR 模型，其在文档分析的多个方面都表现出色。Mistral AI 从文本文档中提取嵌入图像和文本，不过进行比较的其他 LLM 不具备此功能。

因此，为了公平比较，Mistral AI 在包含各种发表论文的内部「仅文本」测试集以及网络 PDF 上进行了性能测试。

支持原生多语言

自成立以来，Mistral AI 一直渴望用自己的模型服务全世界，因此努力在产品中实现多语言功能。

Mistral OCR 将这一目标提升到了一个新水平，能够解析、理解和转录各大洲的数千种脚本、字体和语言。对于需要处理来自不同语言背景的文档的全球组织以及服务小众市场的超本地化企业而言，这种通用性至关重要。

在「Fuzzy Match in Generation」（生成模糊匹配）指标比较中，Mistral OCR 获得了第一。

在各种语言的比较中，Mistral OCR 同样超越了 Azure OCR 和 Google Doc AI。

同类产品中速度最快

Mistral OCR 比同类产品中的大多数都更轻量，速度也明显快于它们，并且在单个节点上每分钟可以处理 2000 多页。这一快速处理文档的能力确保即使在高吞吐量环境中也能持续学习和改进。

文档即提示、结构化输出

Mistral OCR 还引入了使用文档作为提示的功能，从而实现了更强大、更精确的指令遵循。此功能允许用户从文档中提取特定信息并将其格式化为结构化输出，例如 JSON。用户还可以将提取的输出链接到下游函数调用和构建智能体中。

自行托管

最后，对于具有严格数据隐私要求的组织，Mistral OCR 提供了自行托管选项。这可确保敏感或机密信息在组织内部的基础设施内保持安全，从而符合监管和安全标准。

实测：Mistral OCR 很好，但也有局限

面对 Mistral AI 号称的「全球最好 OCR 模型」，Pulse AI 团队进行了一番测试，结论是：确实很好，但尚未完全为企业使用做好准备。

Mistral OCR 绝对超越了一些前沿 LLM，但在真实商业文档中出现了一些限制。

^{图源：https://x.com/ritvikpandey21/status/1897800421357588546}

对于财务文档：Mistral OCR 难以处理复杂的表格，出现了 17% 的列错位、±1.5% 的精度偏差以及丢失了表示负值的关键括号。

对于法律文档：复选框检测基本不存在，部分层次结构丢失，多行表格单元格合并或切断。

正如 Mistral AI 博客中所说，他们正在收集用户的反馈，并希望未来几周 Mistral OCR 继续变得更好。

博客地址：https://mistral.ai/fr/news/mistral-ocr

^{参考链接：https://www.runpulse.com/blog/beyond-the-hype-real-world-tests-of-mistrals-ocr}

文章来源于互联网:千页只需7块钱，Mistral发布世界最强文件扫描API，实测仍有缺陷

多模态也做到了强推理！工业界首个开源的R1V，让视觉思考进入o1时代

19

3 月

2025

九章云极DataCanvas Alaya NeW智算操作系统入选 “2024年度产品”

18

3 月

2025

一睁眼就被老祖宗追着骂，AI古人「回答我」视频火了（附教程）

18

3 月

2025

ICLR 2025 Spotlight | 慕尼黑工业大学&北京大学：迈向无冲突训练的ConFIG方法

18

3 月

2025

统一自监督预训练！视觉模型权重无缝迁移下游任务，SiT收敛提速近47倍

18

3 月

2025

统一自监督预训练！视觉模型权重无缝迁移下游任务，SiT收敛提速近47倍

18

3 月

2025

Karpathy氛围编码「吃瘪」？Cursor拒绝工作，并劝人类别依赖它

18

3 月

2025

提前免费！百度连发两款模型，我们实测：能听歌看电影，还会蛐蛐人

18

3 月

2025

「品尝」电影里的蛋糕？智能「电子舌头」或将满足你的愿望

18

3 月

2025

不是CG？没加速？这个国产机器人跳「斧头帮」舞火了，网友：流畅到不像真的

18

3 月

2025

大模型怎么做好角色扮演？最大的真实数据集、SoTA开源模型、最深入的评估在这里

18

3 月

2025

北大团队提出LIFT：将长上下文知识注入模型参数，提升大模型长文本能力

18

3 月

2025

真正的AI智能体时代即将到来，我们发现了几点「苦涩的教训」

18

3 月

2025

无需训练即可定制分子生成：全新多模态引导框架TFG-Flow登上ICLR 2025

17

3 月

2025

ICLR 2025 | 四川大学提出Test-time Adaptation新范式，突破查询偏移挑战

17

3 月

2025

最新提问

🎉🎉🎉AI问答功能上线喽！！

2024-11-30

Dongming

安装pytorch的时候提示拒绝访问

2024-11-30

7083

已经成功安装pytorch，但是import时提示"找不到指定的模块"

2024-11-30

7083

Pytorch安装后不能使用的问题

2024-11-30

7083

YOLO模型训练时提示报错

2024-11-30

7083

YOLO的安装使用报错问题

2024-11-30

7083

有哪些GPU云环境可以使用

2024-11-27

Dongming

公众号

0

希望看到您的想法，请您发表评论x

()