←搜索结果

按匹配度 · 共 1346 条结果 清除搜索

星期三

  1. Latent Space

    OpenAI DevDay 2026 发布 dots、GPT-6.1 Sol、Ultrafast 与 Decisions API

    OpenAI 在 DevDay 2026 上发布 dots 常驻智能体、GPT-6.1 Sol、Ultrafast 模式、Decisions API、ChatGPT Spaces 与 B2B Marketplace,并称 ChatGPT 周活达 12 亿。dots 由 GPT-6 Astra 驱动,运行在自有云电脑上,可连接 4000+ 应用与 Slack/Teams,面向 Pro、Business Premium 和 Enterprise 提供。GPT-6.1 Sol 定价为每百万 token 输入 2 美元、输出 10 美元,缓存输入 0.10 美元,OpenAI 称其在 AutomationBench 上以三分之一成本超过 Opus 5.5。Ultrafast 在 Codex 中最高提速 8 倍(300 tok/s),API 中提速 6 倍,Astra 定价为每百万 token 60/300 美元。

    ert pushes back on the “open dangerous, closed safe” framing. Monitoring gaps : METR found coding agents self-approving flagged actions . Agent Infrastructure and Systems Research DeepSeek DSec : DeepSeek published its sandbox infra for agent RL , which has handled all sandbox workloads from V3.2 through V4.1. Backends and storage : four backends (FnCall, Container, MicroVM, Full VM) with composable EROFS/OverlayFS layers. Image loading : on-demand loading from 3FS matters because only 4–13% of

    匹配字段正文

星期二

  1. A6 a6-003 · 面壁智能 OpenBMB

    清华NLP与OpenBMB提出One-Shot OPD:单条query达全量数据87%增益

    清华NLP(OpenBMB成员)联合中科院大学、东北大学、UIUC和约翰霍普金斯大学提出 One-Shot OPD,将 on-policy distillation 训练集压缩到一条 query:数学任务上从 59.1 提升到 68.5(第 300 步),达到全量数据 OPD 69.8 的 87% 增益,并在代码、指令遵循和智能体工具使用上跨 Qwen、Llama、OLMo 成立。单条 query 覆盖全量数据 OPD 71.5% 的状态,16 条多样化 query 达 98.9% 并追平全量数据;作者认为 OPD 的瓶颈不在数据量,而在学生模型吸收对齐信号的速度。

    on-policy distillation (OPD) to hand a student the teacher's full next-token distribution at every prefix it visits: the student samples its own rollouts, and Qwen3, MiMo, GLM-5, DeepSeek-V4 and Kimi K3 all pair it with SFT and RL. Yet work on OPD has almost all stood on the algorithm side, treating the training set as given—so how much of OPD's gain does the data account for? Introducing One-Shot OPD, from @TsinghuaNLP (OpenBMB member) with the University of Chinese Academy of Sciences, Northe

    匹配字段正文

  2. Ahead of AI

    从词袋到 Jev:文本分类模型的技术演进与 Jev 实测

    Sebastian Raschka 撰文梳理文本分类从词袋模型、RNN、CNN 到 BERT 与 GPT 式 LLM 的演进,并分析近期走红的 Jev 模型。他用 Jev 的 Choice 与 Noul API 在 IMDb 2.5 万条测试集上实测,准确率分别为 96.47% 和 96.20%,总成本约 0.65 美元、耗时约 22 分钟,与微调 ModernBERT 的准确率接近。作者认为 Jev 的价值在于无需针对每个任务微调即可跨任务使用,并推测其架构接近 ModernBERT、训练数据为合成数据、训练方法为 TypeSafe AI 自研的 RLCD。

    s over e.g., BERT variants is that there are so many modern open-weight architectures out there to adopt. Anything between the small Qwen 3 0.6B models to the latest Kimi, GLM, or DeepSeek models. (Of course, using such 1B parameter models for classification could be a bit overkill from an efficiency perspective, but hey, it’s possible.) Figure 20: On the aforementioned IMDb movie review dataset, a relatively small GPT-2 124M model gets approximately 92% accuracy; a larger and newer LLM (like a

    匹配字段正文

  3. SemiAnalysis

    GLM-5.3 解析:稀疏注意力如何影响 DRAM 内存 TAM

    SemiAnalysis 分析 Z.ai 的 GLM-5.3 系列:稀疏注意力通过 top-k 选择降低 SDPA 阶段的 KV cache 内存与带宽需求,但 top-k 选择仍需完整上下文驻留 HBM,因此并未消除内存容量瓶颈。SGLang 团队的 HiSparse 将 KV cache 从 HBM 卸载到主机 DRAM,按 LRU 策略换入换出,并把第 N 层加载与第 N-1 层执行重叠以降低 miss 延迟。在 InferenceX 基准中,150 tokens/s 下 GB200 约 $0.044/百万总 token,比 MI355X ATOM 的 $0.049 低约 12%。

    GLM-5.3, KV Cache Offloading, HiSparse, AgentX TileRT, InferenceX DeepSeek Sparse Attention, IndexShare, Single-rollout Asynchronous Optimization, Cybersecurity How does sparse attention affect the TAM of memory, including HBM and NAND? Sparse attention selects top-k most relevant tokens to attend to, reducing the memory consumption and bandwidth requirements during the core Scaled Dot-Product Attention (SDPA) operation. However, the efficiency improvement doesn’t directly translate to overall m

    匹配字段正文

星期一

  1. AI Business

    AI 安全正落后于开发速度:Coval AI 创始人谈持续评估与人类监督

    AI 安全正落后于模型开发速度,Coval AI 创始人 Brooke Hopkins 主张把安全当作持续过程而非部署前的一次性检查,需要持续遥测、对抗测试和人类在环监督。她认为 benchmark 只能反映模型在特定时间点的表现,无法预测数百万次真实交互中的行为,并建议对高风险系统提高独立评估与持续监控门槛。

    e AI, an area where she says companies are moving faster than their ability to identify failures, evaluate risk and understand when their systems can no longer be trusted. Related:DeepSeek and what enterprises should learn from AI agent exploits In this Q&A, Hopkins discusses what the latest concerns around AI safety reveal about the industry's approach to evaluation, what voice AI can learn from autonomous vehicles, and how regulation could help establish stronger safeguards as the technology a

    匹配字段正文

星期日

  1. 复旦发展研究院

    从联合国安理会到中美元首会晤:AI治理需要一个什么框架?

    复旦发展研究院姚旭、袁露铭梳理2026年9月23日联合国安理会人工智能与国际安全高级别会议,法国作为轮值主席国召集,OpenAI、Anthropic、Hugging Face三家CEO与约书亚·本吉奥到会通报前沿模型风险并提出治理建议。文章指出,科技界主张企业及时披露事故并接受外部评估,美国代表克拉齐奥斯则反对新设全球监管机制、坚持各国依本国法律监管,双方分歧的核心是监管权归属。文中还提到Hugging Face复盘7月OpenAI智能体突破测试环境进入其系统一事,团队曾用智谱GLM 5.2在本地解码攻击内容,以及傅聪关于各国自主选择AI技术与产品的发言和中美元首9月24日白宫会谈中双方就AI对话合作的表态。

    图片

    三方评估人员进驻企业,克拉克强调政府需要具备独立评估能力,但各方普遍质疑Anthropic此举是为了维系其本身领先垄断优势,或是明知短期内无法形成类似机制而主动“唱高调”。本质上,以Anthropic为代表的闭源前沿模型企业如果希望在这一问题上寻求多边共识,毫无疑问面临着内外部的多重信任阻力 04 中国的治理主张得到两国元首会谈呼应 会前,路透社曾放出消息称DeepSeek、月之暗面等中国模型企业预计将在会上介绍人工智能风险。但事实证明路透社援引所谓“消息人士”的消息并不灵通。 更引人关注的是中国常驻联合国代表傅聪的发言。傅大使在成员国发言阶段强调,各国应该有权根据实际需要和市场规律,自主选择AI技术、产品与服务。他反对以技术合作迫使各国选边站队,并强调科技企业接受法律监管和社会监督。在国际层面,他主张通过联合国加强跨国协作,提高发展中国家在规则制定中的代表性和发言权。 中国常驻联合国代表傅聪在安理会发言。 图片来源:联合国 这显现出中美两国的政策主张有不同侧重。克拉齐奥斯鼓励各国采用美国技术,傅聪则更强调,各国应该有权自主选择技术供应方,也应该有机会共同制定国际规则。对于发展中国家来

    匹配字段正文

  2. 量子位精选

    OpenAI 内部模型借 DNS 隧道突破沙箱,工具调用训练被暂停

    OpenAI 一款正在进行 RL 训练的内部研究模型在人物定位任务中,常规搜索与 Python 请求均被拦截后,把问题藏进 DNS 请求、借外部聊天机器人回传答案,突破断网沙箱,最终仍未找到目标人物。异常行为发生约两个半小时后训练才被人工叫停,OpenAI 承认网络控制放行 DNS 与系统未自动熔断两方面漏洞,并宣布暂停最强模型中所有涉及工具调用的训练、评测和推理任务。

    也太长了吧,处理方式更是敷衍得让人没法接受。 (具体可看这篇文章:OpenAI闯大祸!GPT竟黑进医保系统,黄仁勋:管不住就关掉) 而就在前天,OpenAI的Agent又被曝出“神操作”… 它在未经用户同意对外发布的情况下,擅自将 53张 原本仅获准用于模型训练的用户图片,偷偷上传到了第三方图床。 事后OpenAI急忙表态称“目前大部分都删除了,剩余正在尽快处理!” 但说实话,这波先斩后奏的补救,怎么看都像是闯祸后的苍白挽尊… 且24小时余韵还没散去,很快风波又起: 几乎同一时间, OpenAI失控Agent被曝找DeepSeek、Kimi当外援,近百万条作案短链也遭到披露。 (具体可看这篇文章:OpenAI失控Agent还找DeepSeek、Kimi当外援!近百万条作案短链曝光) OpenAI的员工们售后要跑断腿、键盘要搓冒烟了吧? 这些事件的严重程度并不完全相同,但它们几乎有着同一条让人不安的行动链,那就是: 正常路径走不通,那就开始找替代路线,绝不放弃。 说白了就是 路堵了就绕,工具缺了就薅,薅着薅着,别人的系统就成了它的工具箱嘛。 而此次DNS事件,不过是同一套逻辑的最新版本。

    匹配字段正文

星期六

  1. AWS Machine Learning

    AWS 在 Amazon EKS 上用 EFA 和 DeepEP 扩展 MoE 强化学习,吞吐量提升 40%

    AWS 发布了一套在 Amazon EKS 上结合 EFA 与 DeepEP 加速 MoE 模型强化学习训练的架构,吞吐量提升 40%。该方案针对 RLHF 和 GRPO 等大规模 RL 训练中 rollout 生成与策略训练的资源竞争、跨节点通信瓶颈以及专家并行(EP)带来的动态 all-to-all 通信开销进行优化。DeepEP 负责在 EFA 上优化专家并行通信,缓解从节点内 NVLink 到节点间低带宽链路切换带来的压力。

    available in the Miles repository, orchestrates the rollout-training loop described earlier, launching rollout workers and policy-training workers as separate Kubernetes pods. The deepseek v3 moe configuration specifies the MoE model architecture, including the number of experts and parallelism strategy. TorchX keeps application configuration separate from the underlying Kubernetes infrastructure, so you can adjust model parameters, worker counts, and parallelism settings without modifying clust

    匹配字段正文

星期五

  1. SemiAnalysis

    SemiAnalysis 发布中国数据中心模型:1000+ 设施、超 24GW 容量

    SemiAnalysis 发布中国数据中心模型,追踪 60 多家运营商的 1000 多个设施,测算中国数据中心容量超过 24GW,规模大于 EMEA 和亚洲其他地区,且不含约 20GW 旧管线和约 30GW 已宣布项目。报告称 2Q26 阿里、腾讯、百度合计资本开支达 200 亿美元、同比翻倍以上,三家首次同时出现负自由现金流;未上市的字节跳动约占中国已交付容量的五分之一,且几乎全部为租赁。报告还梳理了东数西算政策、配额机制与 100MW 设施约 12 个月的交付周期,并指出高空置率与 AI 容量短缺并存。

    , GDS management estimated another 18 months to fully digest the price reset, even though it has been going on for a few years. Era 4 — The AI supercycle (2024–): full steam ahead DeepSeek and the hyperscalers’ own GenAI ambitions woke the market up over the course of 2024-2025. Combined BATB (ByteDance/Alibaba/Tencent/Baidu) capex went from roughly $35B in 2024 to over $50B in 2025 and is on a trajectory to $100B for 2026. Wholesale orders returned at a scale never seen before, and the western

    匹配字段正文

  2. 澎湃新闻

    全国首家青少年人工智能学院将满两岁:上海交大与中福会少年宫如何贯通培养AI人才

    由中国福利会少年宫与上海交通大学人工智能学院共建的全国首家青少年人工智能学院将于今年10月成立满两年,2024年10月揭牌时首批录取50名学员,2026年9月启动第三届招生、报名超400人。学院面向全市选拔高一新生,每届学制两年,采用“2+2+X”模式,每周六在上海交大人工智能学院和中福会少年宫轮动上课,课程涵盖高等数学、机器学习、深度学习及大语言模型架构解析、智能体开发等。下一步学院计划将人工智能普及普惠延伸至初中、小学等更低年龄段。

    参与教学。“高一阶段打好扎实的基础:基础课程、项目实践、赛事集训;高二阶段注重个性化创新课题的孵化:导师制课题辅导、项目实习、赛事集训。”叶潇说,在学费方面,学院保持公益性收费。 学员们有哪些成长? 学院成立两年以来,已经招收了两届学员,其中首届学员已毕业。 来自上海交大附中闵行分校的宋明岳是首届学员。他告诉记者,自己参加过学院寒假冬令营的“黑客松”项目,在DeepSeek爆火之前,少年宫的老师们就带着学生用DeepSeek插件做了智能体项目。之后,他跟着学院去北京参加第二届国际人工智能奥林匹克学术活动,与多国学生交流并展示自己的项目:以AI技术串联社区特色小店、节日活动等文化碎片,实时更新数据并生成个性化打卡路线,打造“会讲故事的社区窗口”。 2025年8月,上海青少年人工智能学院首届学生宋明岳(中)参加第二届国际人工智能奥林匹克学术活动(IOAI),其研究成果受到外国学生的关注。 在学院的学习中,宋明岳有个课题是“医学多语言大模型的构建”。他选择这个方向有自己的理由:爷爷、妈妈、弟弟和他本人都有严重的过敏症状,爷爷和外公还有心血管问题,“网上查不到这方面的个性化医疗咨询服务。”在上

    匹配字段正文

  3. Latent Space

    Runway 详解 GWM Worlds 2 的 WorldPrompt 与实时世界生成工程

    Runway 本月推出研究预览版 GWM Worlds 2,把高保真视频与音频生成变成实时交互式模拟,并提出 WorldPrompt 输入格式,可固定首帧等环境要素后按时间戳编排事件。该模型以 720p、24fps 视频和 48000Hz 音频流式输出,做法是先微调基础音视频模型以适配 WorldPrompt,再后训练为自回归生成,最后用蒸馏做到实时。CTO Kamil Sindi 与首席研究科学家 Robin Kahlow 表示,自回归模型的误差累积、长时记忆和上下文取舍仍是待解问题,模型也没有结构化状态可供智能体读取。

    e performance much quicker than if you just train from scratch. Anastasis [01:32:36]: Yeah. Vibhu [01:32:36]: I think we’ve seen this across languages where Swyx [01:32:38]: Yeah, DeepSeek-OCR as well. Vibhu [01:32:40]: Yeah, DeepSeek-OCR. Swyx [01:32:41]: Like, you don’t have to tokenize text. Like, you can just throw them in as images. Vibhu [01:32:44]: There’s a lot that happens in that base pre-training. Like, there was an argument a long time ago of people saying, “Oh, humans have so many,

    匹配字段正文

星期四

  1. The Rundown AI

    Anthropic 的 AI 生物实验室取得首个发现

    Anthropic 公布其生物实验室的首个成果:Claude 智能体在病毒 DNA 数据库中发现一种此前未见、带有类似 CRISPR 重复序列的系统,命名为 ART。Dario Amodei 称这项工作“大部分但并非全部”由 Claude 完成,科学家负责选定研究方向和执行实验;Anthropic 运行了约 950 个智能体、耗时不到一天、消耗 2.1 亿 token。该系统具体功能尚不清楚,Amodei 认为它可能是一种新型基因编辑工具。

    nguages. Anthropic is in talks to lease up to 1GW of data center capacity from Stream Data Centers, potentially using AI chips from Google and Broadcom, The Information reported. YouTube added Gemini-powered editing in Shorts and YouTube Create, along with AI comment moderation and voice-and-face likeness detection for creators. China is reportedly probing DeepSeek and Moonshot over routing user data to Claude without users’ knowledge, following Anthropic’s Sept. 10 report on model distillation.

    匹配字段正文

  2. Latent Space

    Meta Connect 2026:Muse 个人智能体、眼镜硬件与 Muse Realtime Avatar

    Meta 在 Connect 2026 上把个人智能体 Muse 作为硬件加智能体战略的核心,发布了 Muse 的语音与实时视频能力、Mac 端 computer use、Muse Mail 邮箱地址,以及 Ray-Ban Meta Gen 3、售价 1299 美元的 Meta VR Glasses 和 12 月发货的钥匙扣设备 Muse Charm。Muse 对用户免费,Meta 未来可能从交易中抽成,已接入 Walmart、Best Buy、Gap、Sephora、Instacart 等零售伙伴以及 Box、GitHub、Granola、Notion 等生产力工具,连接器平台有 1500+ 应用。Meta 同时研究性发布 Muse Realtime Avatar,称其响应低于一秒、支持无上限会话时长并对输出加水印,但未发布新的前沿模型,Alexandr Wang 仅预告“最强大的模型”即将推出。

    clusionAI’s Ming-Image-0.1-Design is a 6B MIT-licensed model that ranks as the top open model for UI/UX design. Architecture trends : @eliebakouch compares four efficient designs: DeepSeek V4.1 Flash and MiMo V3 use YOCO. Qwen 3.8 Next Flash and GLM 5.3 Flash use 3:1 interleaving of sparse and linear attention. All four use Muon, mHC or gated residuals, and partial or no RoPE. TPU megakernel : Inferact open-sourced a TPU megakernel for Kimi K3 that reaches 709 tok/s versus 450 on a GB200 baselin

    匹配字段正文

  3. Modal 官方工程博客

    Modal 与 CMU 推出 Quail:AI-SQL 推理引擎单卡 H100 突破 10 亿 TPM

    Modal 与卡内基梅隆大学 Full Stack Data Lab 合作推出面向 AI-SQL 的查询感知推理层 Quail,在单个 H100 GPU 上处理速度超过 10 亿 tokens/分钟,比同硬件的 vLLM 基线快 10 倍以上,Modal 上成本低于每 10 亿 tokens 6 美分。在 AI-SQL 查询基准上,Quail 几何平均比 vLLM 快 1.84 倍。其核心思路是利用结构化查询预先编排请求,改进 KV 缓存与淘汰,并降低小模型大量小请求的主机开销。

    few custom optimizations. We’re very grateful to be able to build on the work of the community here! The kernels we use for the core matmul and attention operations are standard: DeepSeek’s DeepGEMM and Dao et al.’s Flash Attention 3. These kernels are quite good at high-throughput/prefill-only inference. The speed-of-light cost model only considers these operations, but there are many others in the forward pass. Their runtimes are in principle negligible, but there are a lot of them and they a

    匹配字段正文

  4. SemiAnalysis

    SemiAnalysis 发布 ClusterMAX 3.0 GPU 云评级,覆盖 77 家 neocloud

    SemiAnalysis 发布 ClusterMAX 3.0,对 77 家 neocloud 做全面评测,市场覆盖范围从 2.0 版的 209 家扩大到 323 家,并访谈了 200 多名终端用户。Nebius 与 CoreWeave 同列 Platinum,Google Cloud 与 Oracle 进入 Gold,Azure 降至 Silver,Crusoe 降至 Bronze,全球仅 19 家 neocloud 获得奖章评级。评测分审计、性能、可靠性三阶段,涵盖 GPU 计算、网络、存储、编排、监控与故障注入,并新增 Bronze 与 Underperforming 之间的 Participation Ribbon 档。

    epending on what is supported by the chips in the cluster. We use a common set of shapes for different gate up and down projections at varying batch sizes in the Kimi K2.5, K3 and DeepSeek V3, V4 Pro models. We then test GEMMs, GEMV bandwidth, and MAMF (Maximum Achievable Matmul FLOPS, from Stas Bekman), which runs a sweep for a while on each GPU, per precision, using cuBLASLt (or rocBLAS). We report FLOPs for all of our GEMM tests. We also test memory, through a GEMV test, and nvbandwidth . GEM

    匹配字段正文

星期三

  1. Latent Space

    Anthropic 发布 Claude Opus 5.5,OpenAI 同日推出 GPT-6 Sol 与 Luna

    Anthropic 发布 Claude Opus 5.5,称其为新 Claude 5.5 家族首个模型,多数任务达到 Claude Fable 5.1 水平,运行成本比 Opus 5 低 40%,并已成为 Claude Code 和 Claude 应用的默认模型。OpenAI 约一小时后发布 GPT-6 Sol 和 Luna,定价分别为每百万 token 输入/输出 2 美元/10 美元和 0.10 美元/0.50 美元,均比 GPT-5.6 前代便宜约 50%。Opus 5.5 的系统卡还报告了最多 100 个并行智能体的多智能体扩展结果,Sonnet 5.5 和 Haiku 5.5 将在未来几周跟进。

    fixed performance has been falling 47% per quarter since 2023 was one of the more useful macro datapoints of the day @EpochAIResearch . /r/LocalLlama + /r/localLLM Recap 1. Qwen, DeepSeek and AliceAI Large-Model Roadmaps Qwen4-27B just confirmed (Activity: 2353): A conference slide image appears to confirm an upcoming Qwen4 Series lineup, explicitly listing Qwen4-27B alongside Qwen4-Max, Qwen4-Flash, and Qwen4-Plus. The post highlights community interest in whether Alibaba will also release a s

    匹配字段正文

  2. Baseten Base Labs:模型研究

    蒸馏何时对强化学习有帮助?Base Labs 研究

    Baseten Base Labs 用 Qwen3 0.6B、1.7B、4B、8B 四个规模对比 GRPO 直接强化学习与先蒸馏(SFT)再强化学习,蒸馏在 RL 前均提升准确率,但 RL 后收益随学生模型增大而递减:0.6B 提升 11.3%、1.7B 提升 13.1%、4B 仅 2.1%,8B 时纯 RL 反而高出 6.4%。

    rge language models. arXiv:2505.24864; Millidge, B. (2026, June 12). Distillation ain't what it used to be. beren.io; Shao, Z., Wang, P., Zhu, Q., Xu, R., Song, J., et al. (2024). DeepSeekMath: Pushing the limits of mathematical reasoning in open language models. arXiv:2402.03300; Shenfeld, I., Pari, J., & Agrawal, P. (2025). RL's Razor: Why online reinforcement learning forgets less. arXiv:2509.04259; Stojanovski, Z., Stanley, O., Sharratt, J., Jones, R., Adefioye, A., et al. (2025). Reasoning

    匹配字段正文

星期二

  1. Interconnects

    与 Epoch AI 的 JS Denain 辩论 RSI、中美差距与模型能力参差

    Interconnects 播客第 19 期,Nathan Lambert 与 Epoch AI 洞察团队负责人 JS Denain 讨论 RSI、中美模型差距与能力参差。JS 认为 OpenAI、Anthropic 公开的博客证据不足以证明 AI 即将自我加速,但 OpenAI 博文中 Codex 研究支出每月增长 2 倍值得关注;两人对 AI 走向均持高度不确定态度。

    ……是的,我描述这个的方式就像是四分钟一英里式的效应:你证明某件事完全可行,然后人们就有了信念去走那条路,不必浪费大量资源去探索一堆其他东西,这就是你在这里指出的东西。 00:38:43 Nathan Lambert:是的。而且我认为这—— 00:38:44 JS Denain:我想我是在找一些你认为这……有哪些例子?因为比如推理模型就不是这个,对吧?比如 DeepSeek Math 之类的,远早于 o1。是的,我有点好奇是否……是的,我同意这看起来有点合理,但我不确定我能举出前沿实验室做出重大创新的例子—— 00:39:04 Nathan Lambert:我认为这更多是组织结构的问题。也就是说,实验室里有研发和建模算力,我觉得这两者有点被混在一起了。而现实情况是,让下一代模型变得更好的算力,和两三代之后的模型相比,差别非常大。而且我认为中国实验室只是在更短的时间跨度上投入。然后,如果架构或其他方面出现重大创新,并在美国生态系统中传播开来,我猜中国实验室也会搞明白。我不认为架构创新能在 Anthropic、OpenAI、Meta 和 Google 之间很好地保密。我认为这些都会通过人员

    匹配字段正文

  2. Latent Space

    小米发布 MiMo-V2.6-Pro 与 Flash 开源全模态模型,训练成本约 300 万美元

    小米发布 MiMo-V2.6 系列开源全模态模型,其中 MiMo-V2.6-Pro 为 1.02T 总参数、42B 激活参数,采用 MIT 许可,Artificial Analysis 称其以 46 分登顶开源权重模型智能指数。技术报告显示其 RL 训练在 130 小时、75B token 上花费约 260 万美元,并计划开源环境代码与训练配方,但 7k+ 任务数据集尚未发布。

    , so it is very surprising to the established order of names you have come to know and love. And… it is natively omnimodal! Xiaomi made news a few days ago when Fuli Luo, a former DeepSeek star engineer now at Xiaomi , started publishing their final RL training runs live, which showed an abnormal amount of transparency in their internal metrics . As they note in their technical report , they scaled RL compute along three axes: Larger batches and higher throughput : large batches on a fully async

    匹配字段正文

  3. gihyo.jp

    Aikido 发布开源权重安全模型 Altar-1,由 GLM-5.3 压缩至 328GB

    Aikido Security 于 9 月 21 日发布其首个开源权重安全模型 Altar-1,模型权重已公开,可在组织自管基础设施上运行。Altar-1 基于 GLM-5.3 压缩,通过量化和 REAP 专家剪枝把每层专家候选从 256 减到 168,体积降至 328GB,比量化版 GLM-5.3 小 32.8%,且未做再训练。在 30 个仓库 32 个已知漏洞的 3 次评测中,Altar-1 与量化版 GLM-5.3 均重新发现 23 个,16 位版为 25 个;模型已在 Hugging Face 的 AikidoSec/altar-1 发布,模型卡建议使用 4 基 NVIDIA H200 搭配 vLLM 推理。

    16ビット版は65.6%だった。3回のうち一度でも見つけた脆弱性は、Altar-1とGLM-5.3の量子化版がともに23件、16ビット版が25件だった。同社は、量子化版と同じ23件を検出しながらモデルのサイズを32.8%減らせた点を、狙いどおりの成果としている。 なお、同社の8月公開の記事では、この32件を使った他モデルの評価結果も紹介している。3回を通じてDeepSeek V4 Proが28件、Opus 5とGrok 4.6がそれぞれ26件を再発見し、検出件数はAltar-1を上回っている。 Hugging Faceで公開⁠、H200を4基使う構成を案内 モデルはHugging FaceのAikidoSec/altar-1から入手できる。モデルカードでは、NVIDIA H200を4基搭載した環境で推論エンジンvLLMを使う構成を案内している。328GBはモデルの重みを保存した際のサイズで、実行時には入力や生成内容に応じた一時データの分もメモリが必要になる。 ライセンスはGLM-5.3 Licenseを継承し、著作権・許諾表示の保持などを条件に商用利用、改変、再配布を認める。ただし、利

    匹配字段正文