开源原生多模态编码器 NeoMME 发布
开源原生多模态与多语言编码器 NeoMME 正式发布,提供 260M 和 800M 两个尺寸版本。该模型摒弃了独立的预训练视觉 tower 与因果语言解码器,由单个双向 Transformer 统一处理文本 token 与图像 patch,在下游微调模型 NeoMME-Retriever 中单次前向即可同步输出稠密与后期交互嵌入。
推荐理由:原生单塔双向架构摆脱了生成式视觉语言模型的冗余计算,配合向量压缩技术为文档级视觉检索提供了低成本部署方案。
开源原生多模态与多语言编码器 NeoMME 正式发布,提供 260M 和 800M 两个尺寸版本。该模型摒弃了独立的预训练视觉 tower 与因果语言解码器,由单个双向 Transformer 统一处理文本 token 与图像 patch,在下游微调模型 NeoMME-Retriever 中单次前向即可同步输出稠密与后期交互嵌入。
推荐理由:原生单塔双向架构摆脱了生成式视觉语言模型的冗余计算,配合向量压缩技术为文档级视觉检索提供了低成本部署方案。
Mistral AI 正式推出文档解析模型 Mistral OCR 4,支持输出文本边界框、文本块分类以及行布置信度分数。该模型覆盖 170 种语言,可在单个容器中自托管部署,并直接适配企业级搜索、RAG 和智能体工作流。
推荐理由:原文给出了边界框和置信度分数的具体输出形态,有助于评估文档解析接入检索与智能体管线的改造成本。
Mistral AI 推出首个代码专用嵌入向量模型 Codestral Embed,主要面向代码检索与代码语义理解场景。该模型在 API 上的代号为 codestral-embed-2505,价格为 $0.15 per M tokens,Batch API 提供 50% 折扣,支持 8192 tokens 上下文窗口。
推荐理由:该模型支持按相关性截断维度与量化压缩,开发者可据此在代码检索与代码智能体场景中平衡存储开销与召回质量。
Mistral AI 正式推出文档理解模型 Mistral OCR 及 API 服务 mistral-ocr-latest,支持图文穿插提取复杂排版、表格与数学公式。该模型已成为 Le Chat 的默认文档理解工具,单节点每分钟可处理多达 2000 页。API 标准定价为每美元 1000 页,支持提取结构化 JSON 用于构建智能体,并针对敏感数据场景开放私有化部署。
推荐理由:该模型以图文穿插方式解析复杂版式并支持结构化输出,为构建处理复杂图表与公式的多模态检索工作流提供了高效工具。