←事件详情

热点事件

MiniMax宣布M3.1 Flash获多个社区量化方案支持本地运行

1 篇正式报道1 条事件动态更新于 11月2日 04:49

先了解这件事

AI 综述

2026年11月2日,MiniMax官方汇总了社区为428B的M3.1 Flash提供的多种量化与本地推理方案,宣布该模型可在更多硬件上运行。官方列出的方案包括UnslothAI的2-bit Dynamic GGUF权重(143.9 GB)、SAGE-EXL3、Project Maya的专家卸载、EXL3-EAQ、Apple Silicon上的oQ量化与oMLX解码、适配AMD Instinct的Quark MXFP4,以及在4× RTX 3090上结合量化权重与专家缓存的推理实现。MiniMax称,低位权重可降低加载模型所需内存和解码时搬运的权重数据,但需要仔细校准、高效低位kernel以及跨GPU与系统内存的专家放置。目前尚无后续发展。

AI 根据公开报道生成

最新进展 · 正式报道

MiniMax M3.1 Flash 获多个社区量化方案支持本地运行

事件进展

1 个已确认进展

  1. MiniMax宣布M3.1 Flash可在更多硬件上运行

    来源:MiniMax

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

11月2日

  1. MiniMax一手精选

    MiniMax M3.1 Flash 获多个社区量化方案支持本地运行

    MiniMax 官方汇总了社区为 428B 的 M3.1 Flash 提供的多种量化与本地推理方案,包括 UnslothAI 的 2-bit Dynamic GGUF 权重(143.9 GB)、SAGE-EXL3、Project Maya 的专家卸载、EXL3-EAQ、Apple Silicon 上的 oQ 量化与 oMLX 解码、适配 AMD Instinct 的 Quark MXFP4,以及在 4× RTX 3090 上结合量化权重与专家缓存的推理实现。官方称低位权重可降低加载模型所需内存和解码时搬运的权重数据,但需要仔细校准、高效低位 kernel 以及跨 GPU 与系统内存的专家放置。

关联事件

  1. 相关事件Mistral在Hugging Face发布Large 4权重
  2. 相关事件NVIDIA发布开放权重语音转写模型Nemotron 3.5 Transcribe
  3. 相关事件Stardock为Clairvoyance加入Hivemind共享闲置GPU
  4. 相关事件Survival LLM发布离线AI应急助手