跳到正文

多模态

文本之外的能力:视觉理解、图文混合、音视频输入输出的模型与产品进展。

187条精选相关主题图像生成AI 视频语音与音频

最新精选

第 181–187 条 · 共 187 条
2月17日周一
  1. Mistral AI75

    Mistral AI 发布区域语言模型 Mistral Saba

    Mistral AI 发布 Mistral Saba,这是一款 24B 参数的区域语言模型,针对中东和南亚数据训练,支持阿拉伯语及多种印度源语言。模型可通过 API 使用,也能在客户安全环境中本地部署,并可在单 GPU 系统上以超过 150 tokens 每秒的速度响应。Mistral Saba 还支持通过微调适配能源、金融市场和医疗等领域。

    推荐理由:Mistral Saba 将区域语言、文化语境与本地部署结合,展示了专用模型在速度、成本和定制化上的取舍。

11月18日周一
  1. Mistral AI85

    Mistral AI 为 le Chat 带来网页搜索、Canvas 与任务智能体等更新

    Mistral AI 为免费生成式 AI 工作助手 le Chat 推出一组 beta 功能,包括带引用的网页搜索、用于构思和编辑的 Canvas、文档与图像理解、图像生成及任务智能体。文档理解由 Pixtral Large 提供,图像生成接入 Black Forest Labs 的 Flux Pro;这些功能目前均免费提供,并将逐步上线。

    推荐理由:Mistral AI 将网页搜索、Canvas、文档理解、图像生成和任务智能体整合进 le Chat,展示了从模型到工作流输出的一体化路径。

  2. Mistral AI85

    Mistral AI 发布 Pixtral Large 多模态模型

    Mistral AI 发布 Pixtral Large,这是一个基于 Mistral Large 2 的 124B open-weights 多模态模型,配备 1B 参数视觉编码器和 128K 上下文窗口。

    推荐理由:Pixtral Large 将图像理解、文档与图表分析纳入 Mistral Large 2 体系,并公布了多项基准结果与使用入口。

9月17日周二
  1. Mistral AI83

    Mistral AI 发布 Mistral Small v24.09 并推出免费 API 层与 Pixtral 12B 图像能力

    Mistral AI 推出 la Plateforme 免费层,全面下调模型 API 价格,并发布 22B 参数的 Mistral Small v24.09。Pixtral 12B 现可在 le Chat 免费使用,支持扫描、分析、搜索和描述图像及知识文件,并采用 Apache 2.0 许可证。

    推荐理由:这次更新同时覆盖免费 API、模型降价、Mistral Small v24.09 和 Pixtral 12B 图像能力,便于比较不同部署与成本选择。

  2. Mistral AI85

    Mistral AI 发布多模态模型 Pixtral 12B

    Mistral AI 发布原生多模态模型 Pixtral 12B,采用400M参数视觉编码器和基于 Mistral Nemo 12B 的多模态解码器。模型支持可变图像尺寸、任意数量图像及128k tokens上下文,在 MMMU 上 đạt52.5%,并提供 Apache 2.0 许可,可通过 Le Chat、La Plateforme、mistral-inference 或 vLLM 使用。

    推荐理由:Pixtral 12B同时覆盖图像理解与文本任务,原文还给出了128k tokens上下文、Apache 2.0许可及本地运行方式。

7月18日周四
  1. Mistral AI83

    Mistral AI 发布 Mistral NeMo 12B 模型

    Mistral AI 与 NVIDIA 合作发布 Mistral NeMo,一款 12B 模型,支持最高 128k tokens 上下文窗口,并提供 base 与 instruction-tuned checkpoints。

    推荐理由:Mistral NeMo同时给出128k上下文窗口、Tekken分词器和Apache 2.0许可,便于比较其多语言与部署适用性。

2月26日周一
  1. Mistral AI86

    Mistral Large 与 Mistral Small 发布,支持 Azure、函数调用和 JSON 输出

    Mistral AI 发布 Mistral Large,称其为最新且最先进的语言模型,可通过 La Plateforme 和 Azure 使用,并支持多语言推理、32K tokens 上下文、函数调用与 JSON 输出。公司同时发布面向低延迟和成本优化的 Mistral Small,以及 mistral-small-2402 和 mistral-large-2402 endpoints。

    推荐理由:Mistral Large 同时提供多语言推理、32K tokens 上下文、函数调用和 JSON 输出,并通过 La Plateforme 与 Azure 开放。