←多模态
← 全部主题

多模态

关注跨文本、图像、音频和视频的理解与生成。

公开阅读组
195
近 30 天
74
目录状态
策展主题

最新谷歌发布 Gemini 4 Carbon 模型,主打长周期 Agentic 工作流

最新阅读组

同一事实的重复报道已合并

  1. 智东西模型发布
    AI 评分91

    谷歌发布 Gemini 4 Carbon 模型,主打长周期 Agentic 工作流

    谷歌发布旗舰模型 Gemini 4 Carbon,专为持续运行的 Agentic 工作流构建,重点提升编程、智能体、科学任务与全栈 Web 开发能力。该模型在 Artificial Analysis Intelligence Index v5.0 上以 59 分排名第一,超过 Claude Opus 5.5、GPT-6 Astra 和 GPT-6.1 Sol;首发优惠价为每百万输入 Token 2 美元、每百万输出 Token 10 美元,缓存输入 Token 可享 95% 减免。Carbon 采取分阶段开放策略,先向部分网络安全防御人员开放,再通过 Fairwind 计划扩大可信合作伙伴范围,之后向开发者、企业和消费者开放。

    推荐理由原文列出 Carbon 在多项基准上的排名与分阶段开放策略,可对照其与 GPT-6、Claude 系列的能力差异。

  2. Mistral AI一手模型发布
    AI 评分87

    Mistral 开放 Mistral Large 4(Le Chonk)权重

    Mistral 发布 Mistral Large 4(Le Chonk)的开放权重,这是一个 1 万亿参数的原生多模态模型,在预览版基础上继续强化学习,编码与防御性网络安全能力提升。它在 FrontierCode 2.0 上得分 19.7%,在 Artificial Analysis Coding Agent Index 上得 48%,与 GLM-5.3 基本持平,但每任务平均少用 47% token;Terminal-Bench 4.0 提升 13 个百分点至 41%。模型支持三种推理模式,采用修改版 MIT 的 Mistral Ecosystem Open-Weight 许可,API 定价为每百万输入 token $0.70、缓存输入 $0.07、输出 $2.10。

    Le Chonk signal

    推荐理由原文给出开放权重、三种推理模式和多项基准对比,读者可据此判断自托管编码与安全场景的取舍。

  1. Hugging Face一手模型发布
    AI 评分83

    Liquid AI 发布 LFM3 系列模型,含 1.7B 文本、视觉、音频与 Omni 版本

    Liquid AI 发布 LFM3 系列开放权重模型,全部从 LFM3-1.7B-Base 分支而来,覆盖文本、视觉、音频、Omni 以及 d1 决策模型。LFM3-1.7B-Base 采用三混合层结构,预训练 22T token,最后 3.5T token 的中训练阶段加入更多智能体轨迹与工具调用数据,上下文窗口扩展到 256K token。官方称 LFM3-1.7B 在 8K 上下文下比 LFM2-1.2B 快约 25%,WebArena-Verified 得分 38.42 对 3.02;LFM3-VL-2B 在 62 项视觉基准上平均分从 57.6 升至 71.4。所有模型已在 Hugging Face 开放下载,并提供单卡微调 notebook。

    推荐理由原文给出六个模型共享同一骨干的架构改动与端侧实测数据,可据此判断小模型专用化路线在长上下文和智能体任务上的取舍。

  2. Google Blog一手模型发布
    AI 评分78

    Google DeepMind 发布世界模型 Genie 4,支持实时交互模拟与原生音频

    Google DeepMind 发布世界模型 Genie 4,主打实时交互模拟,并首次在该系列中引入原生音频。该模型基于 Gemini 家族能力,Gemini Omni 负责让模拟贴合真实世界的外观与行为,其他 Gemini 模型提供维持模拟连贯性所需的复杂推理。用户可用自然语言实时操控场景,如移动镜头、改变天气或引入新角色,每个世界还会即时生成环境音、音乐和交互对话。

    推荐理由原文说明了 Genie 4 在实时交互模拟中加入原生音频与自然语言操控,读者可据此了解世界模型的新能力边界。

  3. Google Blog一手产品发布
    AI 评分60

    Gemini 应用上线沉浸式探索库,支持分层浏览主题

    Gemini 应用新增沉浸式探索库,用户可在学生中心点击“Try immersive explorations”进入,以交互、可视化的方式逐层探索从微观系统到深空等主题。每个场景可点击标签深入查看,并即将支持音频讲解;该功能后续也将直接接入与 Gemini 的对话中。功能支持英语、印尼语、印地语、巴西葡萄牙语、法语和简体中文,其他语言用户目前仅能使用英语版本。

    推荐理由原文说明了沉浸式探索的入口、交互方式和语言覆盖,读者可据此判断它适合哪些学习场景。

  4. Google Blog一手产品发布
    AI 评分68

    Google 与 XREAL 发布首款 Android XR 有线眼镜 XREAL AURA

    Google 与 XREAL 发布 XREAL AURA,这是首款搭载 Android XR 的有线 XR 眼镜,今日起在美国、加拿大和韩国开放订购,11 月 2 日在日本开售,起售价 1099 美元。眼镜重不到 95 克,采用透明镜片和 70 度视场,把应用投射到视野中,重计算由连接线缆的便携计算 puck 承担,该 puck 搭载首次亮相的 Qualcomm Snapdragon Reality Elite 平台。用户可同时打开多个应用并搭配蓝牙键鼠,或通过 USB-C 有线镜像把笔记本屏幕作为窗口接入,Gemini 可针对视野中的内容和屏幕给出帮助。

    XREAL AURA

    推荐理由原文交代了透明镜片、70 度视场与分体计算 puck 的组合,读者可据此判断有线 XR 眼镜的日常使用边界。

  1. 百度 Baidu一手模型发布
    AI 评分62

    百度开源 Unlimited OCR 2 文档解析模型

    百度开源 Unlimited OCR 2,通过新的 SR-SWA 机制把文本与视觉的注意力交互压缩为固定规模的工作参考,从而在有限上下文窗口内解析几乎任意长度的文档。官方称文档变长时每步解码延迟和内存占用接近恒定,并在覆盖数十页到数百页文档的 MPDocBench 和 MarathonDocBench 上取得 SOTA 表现。

    推荐理由官方给出 SR-SWA 机制与两项长文档基准结果,可了解长文档 OCR 的上下文与延迟取舍。

  2. ChatGPT一手模型发布
    AI 评分84

    OpenAI 发布 GPT-6.1 Terra 模型

    OpenAI 发布新模型 GPT-6.1 Terra,主打快速高效,强化视觉推理与精确的电脑操作,写作也更清晰自然。该模型今日起向 ChatGPT Work 和 Codex 中的 Plus、Pro、Enterprise 与 Edu 用户推送,官方称其可覆盖解读技术图纸、起草方案、填写表单到剪辑视频等工作场景。

    推荐理由官方给出新模型在视觉推理与电脑操作上的定位,并说明面向付费用户的开放范围。

  3. heise online模型发布
    AI 评分80

    Moonshot AI 发布 Kimi K3.1 Pro,AA 智能指数升至 55 分排名第四

    Moonshot AI 发布 Kimi K3.1 Pro,在 Artificial Analysis 智能指数上从 Kimi K3 的 44 分升至 55 分,排名第四,落后 Claude Opus 5.5 的 58 分。该模型沿用 2.8 万亿参数、1040 亿激活参数的 MoE 架构,上下文窗口为 100 万 token,支持文本、图像和视频输入。Terminal-Bench 4.0 成功率从 13% 升至 67%,API 输入输出价格分别为每百万 token 2 美元和 10 美元,权重计划于 11 月 4 日发布。

    推荐理由文章给出 K3.1 Pro 在独立榜单上的分数、基准提升和 API 定价,可据此判断开源权重模型与闭源头部的差距。

  1. Kimi.ai一手模型发布
    AI 评分87

    Kimi 发布 K3.1 Pro 开源权重模型,2.8T 总参数、1M token 上下文

    Kimi 发布 K3.1 Pro,这是其最强的 3T 级开源权重模型,采用 MoE 架构,总参数 2.8T、激活参数 104B,支持 1M token 上下文与多模态。官方称其在编码、智能体和知识类基准上可对标最强闭源模型,并支持 Unreal、Unity、Godot 全项目游戏开发与 Blender、CAD 参数化 3D 建模,金融场景幻觉下降 65%。K3.1 Pro 与速度提升 2–3 倍的 K3.1 Pro Highspeed 已在 Kimi 官网、Kimi Work、Kimi Code 和 Kimi API 上线,开源权重计划于 2026 年 11 月 4 日发布。

    推荐理由官方给出 2.8T 总参数、104B 激活的 MoE 规格与多模态能力,可据此判断开源权重模型的规模位置。

  2. Unsloth一手模型发布
    AI 评分72

    NVIDIA 发布 Nemotron-3.5-Bolt-E4B,可在 6GB 内存本地运行

    NVIDIA 发布 Nemotron-3.5-Bolt-E4B,可在 6GB 内存的设备上本地运行,面向手机等端侧设备。该模型基于 Gemma 4 训练,支持视觉,Unsloth 同时给出了 GGUF 文件和指南链接。NVIDIA 称其面向本地助手、交互角色和机器人等可对话并调用工具的场景。

    推荐理由原文给出了模型在 6GB 内存本地运行的定位和视觉能力,读者可据此判断小模型在端侧助手场景的可用边界。

  1. Google Blog一手模型发布
    AI 评分80

    Google 发布 Gemini 4 Argon,展示 5 个社区创意项目

    Google 发布新前沿模型 Gemini 4 Argon,称其在编码、数学和 3D 世界构建等复杂任务上表现突出,并在多领域基准上超过其他前沿模型。官方展示了 5 个社区项目,包括实时映射野火与地震波动的 3D 地球、带实时数据的涡扇发动机模拟、由单张图片生成的 3D 马车,以及多人夺旗浏览器游戏。该模型上周已大范围开放。

    Collage showing five builds with Gemini 4 Argon

    推荐理由官方列出五个社区案例,展示新模型在3D场景与多步任务上的具体产出。

  1. Google Research一手研究
    AI 评分64

    Google Research 用 AI 辅助盲扫超声评估孕龄,误差与专家相当

    Google Research 在 JAMA Network Open 发表研究,其基于盲扫超声的 AI 孕龄评估模型在芝加哥(n=192)和内罗毕(n=193)前瞻测试中平均绝对误差为 4.18 天,与专家超声医师的 4.48 天相比达到非劣效。模型仅在芝加哥 120 名参与者的数据上微调,未使用内罗毕数据,两地误差分别为 4.10 天和 4.27 天。研究使用 Clarius C3 手持探头,由未接受专业超声培训的操作者完成标准化盲扫。

    Bar chart comparing the mean absolute error between the AI model and expert clinical standards across multiple cohorts.

    推荐理由研究在芝加哥与内罗毕两地前瞻验证同一模型,无本地微调仍保持误差水平,可看跨场景泛化如何落地。

  1. ElevenLabs Blog一手产品发布
    AI 评分60

    ElevenLabs 推出 Eleven Realtime Translation 实时语音翻译模型

    ElevenLabs 发布实时语音翻译模型 Eleven Realtime Translation,目前以 alpha 形式向 ElevenAPI 企业客户开放。该模型默认使用低延迟语音模型 Eleven v4 Turbo,支持 90 多种语言和自动语言检测,同一音色可跨语言保持一致,并可从 17500 多个音色库或自建语音克隆中选择。团队可调节翻译启动速度,在复杂通话的高质量翻译与低延迟之间取舍;德国电信已在 Magenta AI Call Assistant 中基于 ElevenLabs 构建新通话功能。

    Smiling person with tousled hair against a neutral background.

    推荐理由原文说明了实时翻译模型的延迟可调设计与多语言一致性,读者可据此判断它在客服和电信场景的落地方式。

  2. Tripo一手产品发布
    AI 评分71

    VASTAIResearch 开源实时生成渲染器 EdenLive

    VASTAIResearch 开源实时生成渲染器 EdenLive,可将 3D 白模、游戏引擎画面、2D 卡通和真实视频转换为写实或风格化视频。该模型为 5B 参数,在单张 RTX 5090 上以 720p 分辨率达到 24+ FPS。

    推荐理由这条内容给出了开源实时渲染器的输入类型、帧率和单卡部署规格,便于读者判断其可用性。

  1. 面壁智能 OpenBMB产品发布
    AI 评分65

    面壁 MiniCPM-V 4.7 在 iPhone 上实现 20.51 tokens/sec

    面壁智能的 MiniCPM-V 4.7 在 iPhone 18 Pro Max(12GB)上实现 20.51 tokens/sec 的平均解码速度,相比同一设备未优化的 SSD 专家加载基线提速 6.07 倍。该速度来自 Lookahead Expert Scheduling(LES)、优化的专家加载、细粒度量化和 DSpark 投机解码。模型已在 GitHub 和 Hugging Face 开放。

    推荐理由面壁智能给出 35B 多模态模型在 iPhone 上的实测解码速度与加速手段,可据此判断端侧大模型的落地进度。

  2. MarkTechPost模型发布
    AI 评分78

    MiniMax 发布 M3.1 Flash:428B MoE 智能体模型,输入 $0.15/百万 token

    MiniMax 在 API 上线 MiniMax M3.1 Flash,428B 总参数、约 23B 激活的 MoE 多模态模型,支持 100 万 token 上下文,输入 $0.15、输出 $0.60 每百万 token。推理始终开启且不可关闭,提供 Low 到 Max 五档强度,权重计划于 10 月 23 日发布、许可证尚未公布。厂商自报成绩中 Automation-Bench v1.0.6 以 62.2 居首,Terminal Bench 4.0 为 38.1,落后 Opus 5 的 51.8。

    推荐理由原文给出 428B MoE 的规格、定价与厂商自报基准,读者可据此判断 Flash 档成本下的智能体能力边界。