←搜索结果

按匹配度 · 共 39 条结果 清除搜索

星期六

  1. Ai2 Blog

    Ai2 开源 AstaBrief 8B 科学报告生成模型

    Ai2 开源 AstaBrief 8B,一个把研究问题和检索到的文献片段转成带引用报告的模型,已在 Asta 的 Generate a report 功能中作为 Fast mode 上线,与 Claude 驱动的 Thinking mode 并存。Ai2 称 Fast mode 平均每份报告 51.1 秒,Thinking mode 为 178.5 秒,约快 3.5 倍。模型基于 Qwen3-8B,采用 SFT 加 DPO 训练,训练数据来自 90K 条真实科研查询,权重和训练数据已在 Hugging Face 开放下载。

    pported by the citations provided For our final model, we also ran secondary evaluations: DeepScholarBench, a 63-query benchmark for long-form research synthesis built from recent ArXiv papers, and two separate pairwise evaluations against reports generated by the Claude-powered pipeline—an LLM-judged comparison on SQABench-CS2 and a small human study. A report can sound polished and complete while meandering from the question or attaching citations to claims from which the underlying evidence d

    匹配字段正文

星期五

  1. Hugging Face

    Ai2 开源 AstaBrief 报告生成模型,基于 Qwen3-8B 训练

    Ai2 开源 AstaBrief,一个基于 Qwen3-8B 训练的科学报告生成模型,已作为 Asta 的 Fast 模式上线,并可从 Hugging Face 下载。训练采用监督微调加直接偏好优化的简单方案,SFT 数据来自 90K 条真实科研查询过滤后的 47K 条样本,DPO 数据约 6K 条,由 GPT-4.1 与 DeepSeek-R1 双评委一致才保留。模型一次生成完整报告,跳过片段摘要与聚类步骤,在 SQABench-CS2 等评测上接近 Claude 驱动的报告管线;374 名试用用户中 29.1% 连续使用两天以上,Fast 模式好评率 84.2%。

    orted by the citations provided. For our final model, we also ran secondary evaluations: DeepScholarBench , a 63-query benchmark for long-form research synthesis built from recent ArXiv papers, and two separate pairwise evaluations against reports generated by the Claude-powered pipeline—an LLM-judged comparison on SQABench-CS2 and a small human study. A report can sound polished and complete while meandering from the question or attaching citations to claims from which the underlying evidence d

    匹配字段正文

星期二

  1. Black Forest Labs Blog精选

    Black Forest Labs 发布 FLUX 3 Action:7B 开源世界动作模型用于机器人控制

    Black Forest Labs 发布 FLUX 3 Action,一个从多模态 FLUX 3 主干衍生的 7B 开源权重世界动作模型,在 RoboLab-120 榜单上以不到此前最佳开源模型一半的参数量取得 38.3% ± 0.38 的成功率,速度最高提升 3.95 倍。该模型在图像、视频和音频数据上预训练,其中视频占训练 token 的 95% 以上,再通过联合视频-动作训练和针对目标本体的微调适配动作空间。报告还分析了将其与 GPT 6 Astra 等推理模型组合的混合方案,发现快速控制能让具身推理更省时省钱,每美元成功率最高提升 53.64%。

    A GB200 systems, with custom kernels written in NVIDIA’s CuTe DSL. References Cen, Jun, Chaohui Yu, Hangjie Yuan, et al. 2025. WorldVLA: Towards Autoregressive Action World Model. arxiv.org/abs/2506.21539; Cheang, Chi-Lam, Guangzeng Chen, Ya Jing, et al. 2024. GR-2: A Generative Video-Language-Action Model with Web-Scale Knowledge for Robot Manipulation. arxiv.org/abs/2410.06158; Chefer, Hila, Patrick Esser, Dominik Lorenz, et al. 2026. Self-Supervised Flow Matching for Scalable Multi-Modal Synt

    匹配字段正文

星期五

  1. Cognition 模型 / Devin 博客精选

    Cognition 发布编码模型 SWE-2,FrontierCode 1.1 Main 得分 50.0%

    Cognition 发布编码模型 SWE-2,在 FrontierCode 1.1 Main 上得分 50.0%,比 Fable 5.1 低不到 1 分而成本便宜 64%。SWE-2 基于 2.8T 参数的 Kimi K33 后训练,首次把 RL 扩展到数万亿参数规模,并用单次 RL 训练覆盖全部推理档位。该模型即日起在 Devin Desktop 和 CLI 上线,随后在 Devin Web 和 Fusion 推出。

    Cao, and S. Alberti, "SWE-1.7: Frontier Intelligence at a Fraction of the Cost," July 2026. cognition.com/blog/swe-1-7; [3]Kimi Team et al., "Kimi K3: Open Frontier Intelligence," arXiv:2607.24653, July 2026. arxiv.org/abs/2607.24653; [4]W. Kool, H. van Hoof, and M. Welling, "Buy 4 REINFORCE Samples, Get a Baseline for Free!," Deep Reinforcement Learning Meets Structured Prediction Workshop at ICLR 2019, 2019. openreview.net/pdf?id=r1lgTGL5DE; [5]E. Greensmith, P. L. Bartlett, and J. Baxter, "Va

    匹配字段正文

星期三

  1. Qwen Blog精选

    Qwen 开源 Qwen3.8-Flash-Next:125B 参数 MoE,激活 6B,训练成本约为 Qwen3.7-Plus 的 1/9

    Qwen 团队开源多模态 MoE 模型 Qwen3.8-Flash-Next,主模型 125B 参数、额外 51B N-gram 嵌入参数、每 token 激活 6B,训练成本约为 Qwen3.7-Plus 的 1/9,原生支持 262,144 tokens 上下文并可通过 YaRN 扩展至 1,000,000 tokens。该模型是 Qwen4 架构的早期预览,在注意力、残差、嵌入和优化四方面升级,采用 GDN + QSA 混合注意力、Gated Residual、N-gram Embedding 与 Muon 优化器,权重已在 Hugging Face 和 ModelScope 开放。生产版本以 qwen3.8-flash 名称在 QwenCloud 提供服务,默认 1M 上下文并内置官方工具,定价为每百万输入 tokens 0.15 美元、每百万输出 tokens 0.47 美元。

    86.9 73.9 Visual math problem solving MathVision Without CI 90.6 With CI 95.7 Without CI 90.0 With CI 94.6 Without CI 90.3 With CI 88.7 Without CI 65.5 Scientific chart analysis CharXiv (RQ) Without CI 84.6 With CI 90.6 Without CI 83.7 With CI 90.2 Without CI 85.8 With CI 85.9 Without CI 66.0 1. ClawEval-MM: scores are reported as "pass@3 / average score". Pass@3 measures the percentage passed in at least one of three trials, and the average score is the mean score across the three trials. 2. Re

    匹配字段正文

星期四

  1. Liquid AI 模型与工程博客

    Liquid AI 发布 LFM2.5-DSpark 草稿模型,推理最高提速 3.2 倍

    Liquid AI 为 LFM2.5-1.2B-Instruct、LFM2.5-2.6B 和 LFM2.5-8B-A1B 发布 DSpark 投机解码草稿模型,GPU 上吞吐最高提升 3.18 倍,端侧最高 2.87 倍,且不改变输出质量。草稿模型约 300M 参数,采用 5 层、block size 9 的简化注意力结构,已在 Hugging Face 提供 Safetensors 与 GGUF 权重,并开源集成到 llama.cpp 和 SGLang。在 BFCL 多工具函数调用场景中,LFM2.5-2.6B 的延迟平均降低 57%;LFM2.5-8B-A1B 受 llama.cpp Metal 后端 MoE 实现影响,端侧仅提升 18%。

    ccuracy for footprint as your deployment demands References [1] Cheng et al. (2026). DSpark: Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation. https://arxiv.org/abs/2607.05147 [2] Li et al. (2025). EAGLE-3: Scaling up Inference Acceleration of Large Language Models via Training-Time Test. https://openreview.net/forum?id=4exx1hUffq [3] Chen et al. (2026). DFlash: Block Diffusion for Flash Speculative Decoding. https://arxiv.org/abs/2602.06036 [4] Patil et al. (2025).

    匹配字段正文

  2. 蚂蚁百灵:Developer Blog精选

    蚂蚁百灵开源 Ling-3.0-tiny-base 与 Ling-3.0-flash-base

    蚂蚁百灵正式开源 Ling-3.0-tiny-base 与 Ling-3.0-flash-base 两个 Base Model,并同步开放预训练、中期训练和 WSM 合并三个阶段的权重,共 6 个 checkpoints。Ling-3.0-tiny-base 总参数 7.9B、激活参数 1.3B,Ling-3.0-flash-base 总参数 124B、激活参数 5.1B,可用于持续预训练、监督微调、偏好优化、强化学习后训练与蒸馏。官方说明 Base Model 未完成指令对齐,不建议未经后训练直接部署为面向终端用户的聊天服务。

    能进入真实世界的重要前提。 我们相信,基模开源,才是真正的开源。 开放后训练模型,是把已经形成的能力交给社区;开放 Base Model,是让社区能够从底座出发,继续训练并塑造面向真实场景的智能。 通过开放 Tiny 与 Flash 的 Base Model,以及模型训练过程中的关键 checkpoints,我们希望更多研究者和开发者能够从预训练底座出发,用自己的数据、任务和反馈,让模型在真实世界中继续生长。 🤖 ModelScope Ling-3.0-flash 🤗 Hugging Face 🤖 ModelScope 注:1、WSM 技术论文:WSM: Decay-Free Learning Rate Schedule via Checkpoint Merging for LLM Pre-training(https://arxiv.org/abs/2507.17634) 模型发布技术分享上一篇Ling-3.0-flash-Fin:面向真实金融工作流的开放模型下一篇从跑起来到训起来:Ling-3.0-tiny × ASystem AReno,打通单机 Agentic RL 闭环$/$

    匹配字段正文

星期一

  1. Fireworks AI精选

    Meta 的 Muse Glimmer 30B 上线 Fireworks,面向常驻智能体

    Fireworks 上线 Meta 的 Muse Glimmer 30B 稠密模型,采用 Apache 2.0 许可,支持 128K+ token 上下文和原生图像理解,面向需要多轮工具调用的常驻智能体。该模型在 MCP Atlas 得 75.5、DeepSearch QA 得 74.6、SWE-Bench Pro 得 51.2,均高于 Gemma 4 31B 和 Qwen 3.6 27B 的对应成绩,这些基准数据由 Meta 报告。Fireworks 同时给出 temperature 1.0、top_p 0.95、top_k 64 的推荐设置,并支持在系统提示词中调节推理强度。

    应让客户陷入困境。 长时间运行的研究与监控智能体:这类智能体跨多个来源展开工作,将发现保留在上下文中,并在数小时后返回综合结果。Muse Glimmer 在 DeepSearch QA(74.6)和 MCP Atlas(75.5)上领先其规模级别,这两项基准最贴近此类工作形态。原生图像输入意味着图表和文档与文本走同一循环——Muse Glimmer 在 CharXiv Reasoning(78.8)上领先其级别。请注意 2026 年 1 月 4 日的知识截止日期,任何时间敏感的内容都需要通过工具获取。 仓库级编码智能体:这类智能体读取仓库、规划变更、运行测试并针对失败进行迭代。Muse Glimmer 在 SWE-Bench Pro(51.2)和 SciCode(43.6)上领先其级别。 基准测试表现 与 Gemma 4 31B 和 Qwen 3.6 27B 相比,Muse Glimmer 在衡量工具编排和持续多轮工作的基准上领先: 基准测试Muse Glimmer 30B(高推理)Gemma 4 31B(思考模式)Qwen 3.6 27B(思考模式)MCP Atlas(公开)75.5

    匹配字段正文

星期四

  1. Cognition 模型 / Devin 博客精选

    Cognition 发布 SWE-1.7 模型

    Cognition 发布 SWE-1.7,称其在更低成本下达到前沿级智能,并已在 Devin(Web、Desktop、CLI)中通过 Cerebras 以 1000 TPS 提供。该模型基于 Kimi K2.7 训练,Cognition 表示其额外训练收益挑战了后训练天花板的说法。文章还介绍了熵保持与训练稳定、跨三大洲多集群训练、数据质量筛选以及自压缩等训练方法。

    ti, "FrontierCode 1.1," July 7, 2026. cognition.com/blog/frontier-code-1.1; [3]A. Piché et al., "PipelineRL: Faster On-policy Reinforcement Learning for Long Sequence Generation," arXiv:2509.19128, 2025; [4]F. Yao et al., "Your Efficient RL Framework Secretly Brings You Off-Policy RL Training," 2025. fengyao.notion.site/off-policy-rl; [5]B. Pan, C. Baronio, A. Tam, P. Marsella, M. Jain, D. Chiu, Swyx, and S. Alberti, "Introducing SWE-grep and SWE-grep-mini: RL for Multi-Turn, Fast Context Retrie

    匹配字段正文

星期一

  1. 小米 MiMo 官网发布与博客精选

    小米 MiMo-V2.5-Pro-UltraSpeed 发布,1T 模型解码突破 1000 tokens/s

    小米与 TileRT 合作发布 MiMo-V2.5-Pro-UltraSpeed,首次在 1 万亿参数模型上把解码速度突破 1000 tokens/s,仅用单台标准 8 卡通用 GPU 节点实现。该 API 按申请制限时开放,价格为 MiMo-V2.5-Pro 的 3 倍、生成速度约 10 倍,试用窗口为 6 月 9 日至 6 月 23 日。团队对 MoE Experts 做 FP4 量化并采用 DFlash 块级掩码并行预测投机解码,编码场景平均接受长度 6.30,同时已在 Hugging Face 开源 MiMo-V2.5-Pro-FP4-DFlash 权重。

    Model capability comparison between FP4 quantization (MoE Experts only) and FP8 across benchmarks, with overall capability essentially on par with the original model

    nt on HuggingFace, including FP4 quantized weights and DFlash model parameters. Community usage and feedback are welcome: huggingface.co/XiaomiMiMo/MiMo-V2.5-Pro-FP4-DFlash; UltraSpeed support for MiMo-V2.5 is on the way — stay tuned MiMo × TileRT — extreme model-system codesign, delivering 1000 tps output speed for trillion-parameter models. [1] OCP Microscaling Formats (MX) v1.0 Spec: opencompute.org/documents/ocp-microscaling-formats-mx-v1-0-spec-final-pdf [2] DFlash: arxiv.org/abs/2602.06036

    匹配字段正文

星期一

  1. Qwen Blog精选

    阿里千问发布 Qwen3.7-Plus 多模态智能体模型

    阿里千问发布 Qwen3.7-Plus,一款把视觉与语言统一到单一智能体底座的多模态模型,已在阿里云百炼上线。它可在同一智能体循环中混合执行 GUI 与 CLI 操作,支持屏幕读取、视觉参考写代码、移动应用端到端操作,并适配 Claude Code、OpenClaw、Qwen Code 等框架。官方基准显示其在 Terminal Bench 2.0-Terminus 得 70.3、ScreenSpot Pro 得 79.0、AndroidWorld 得 81.0,同时支持 preserve_thinking 保留历史思考内容。

    ax Gemini-3.1 Pro Qwen3.6-Plus Qwen3.7-Plus Multimodal Reasoning MMMU-Pro 81.2 73.9 81.8 78.8 79.0 MathVision 91.0 65.5 87.4 88.0 90.3 BabyVision 53.1 12.6 55.9 37.4 70.4 / 64.7 CharXiv(RQ) 84.5 66.0 84.4 81.5 85.9 / 84.4 HiPhO 65.0 40.8 85.4 80.4 84.1 ERQA 67.8 40.8 68.0 65.7 69.8 VisFactor 40.8 24.4 39.8 36.0 42.8 MedXpertQA-MM 77.3 64.4 80.7 68.7 71.0 Visual Agent & Coding ScreenSpot Pro 67.4 49.5 68.1 68.2 79.0 OSWorld-Verified 75.0 72.7 -- 62.5 73.3 AndroidWorld -- 62.0 70.7 67.2 81.0 QwenV

    匹配字段正文

星期三

  1. Cohere 产品与研究博客精选

    Cohere 开源发布 Command A+ 企业级智能体模型

    Cohere 开源发布 Command A+,这是一款面向企业智能体任务、支持私有部署的 MoE 模型,采用 Apache 2.0 许可证,提供 218B 总参数和 25B 激活参数。该模型支持 48 种语言,并提供 BF16、FP8 和 W4A4 量化版本,最低可在两块 NVIDIA H100 或一块 NVIDIA Blackwell GPU 上运行。模型权重已上线 Hugging Face,也可通过 Model Vault、Cohere Space 或 API 使用。

    reasoning, Command A+ achieved 63% on MMMU Pro and 75.1% on MMMU, (compared with 65.3% for Command A Vision for the latter). MathVista scores increased from 73.5% to 80.6%, and CharXiv reasoning improved from 46.9% to 52.7%, reflecting broad gains across document understanding tasks. Command A+ significantly expands multilingual capability, broadening language coverage from 23 to 48 languages and recording gains in machine translation and multilingual reasoning. Image 6: comparison of multiling

    匹配字段正文

星期二

  1. Google DeepMind精选

    Gemini 3.5:兼具前沿智能与行动能力

    Google DeepMind 推出面向复杂智能体工作流的 Gemini 3.5 系列,率先发布 3.5 Flash,并计划下月推出 3.5 Pro。3.5 Flash 在 Terminal-Bench 2.1 获得 76.2%,输出速度为其他前沿模型的 4 倍。该模型已全面开放,并成为 Gemini 应用和全球搜索 AI Mode 的默认模型。

    Gemini 3.5 text and multi-colored star icon on an abstract blue background.

    1 Pro on challenging coding and agentic benchmarks like Terminal-Bench 2.1 (76.2%), GDPval-AA (1656 Elo) and MCP Atlas (83.6%), and leading in multimodal understanding (84.2% on CharXiv Reasoning). When looking at output tokens per second, it is 4 times faster than other frontier models. Landing in the top-right quadrant of the Artificial Analysis index, 3.5 Flash delivers frontier-level intelligence at exceptional speed — proving you no longer have to trade quality for latency. This balance of

    匹配字段正文

星期三

  1. Qwen Blog精选

    阿里千问开源 Qwen3.6-27B 稠密多模态模型,编码能力超越 Qwen3.5-397B-A17B

    阿里千问开源 Qwen3.6-27B,这是一个 27B 参数的稠密多模态模型,支持思考与非思考两种模式,权重已在 Hugging Face 和 ModelScope 发布,并上线 Qwen Studio 与 API。官方称其在全部主要编码基准上超过上一代开源旗舰 Qwen3.5-397B-A17B,包括 SWE-bench Verified 77.2 对 76.2、Terminal-Bench 2.0 59.3 对 52.5、SkillsBench 48.2 对 30.0,GPQA Diamond 为 87.8。该模型可接入 OpenClaw、Claude Code 和 Qwen Code 等第三方编码助手,API 支持 preserve_thinking 以保留多轮思考内容。

    A 83.7 83.9 72.3 77.0 85.3 84.1 MMStar 81.0 83.8 77.3 73.2 80.7 81.4 MMBench EN-DEV-v1.1 92.6 -- 90.9 -- 92.8 92.3 SimpleVQA 56.0 67.1 52.9 65.7 58.9 56.1 Document Understanding CharXiv RQ 79.5 80.8 67.9 68.5 78.0 78.4 CC-OCR 81.0 82.0 75.7 76.9 81.9 81.2 OCRBench 89.4 -- 86.1 -- 90.0 89.4 Spatial Intelligence ERQA 60.5 67.5 57.5 46.8 61.8 62.5 CountBench 97.8 97.2 96.1 90.6 96.1 97.8 RefCOCO avg 90.9 92.3 -- -- 92.0 92.5 EmbSpatialBench 84.5 -- -- -- 84.3 84.6 RefSpatialBench 67.7 -- 4.7 -- 64.

    匹配字段正文

星期三

  1. Qwen Blog精选

    Qwen3.6-35B-A3B 开源:35B 总参数 3B 激活的 MoE 模型

    Qwen 团队开源 Qwen3.6-35B-A3B,这是一个 35B 总参数、仅 3B 激活参数的 MoE 模型,主打智能体编码能力,同时支持多模态思考与非思考模式。官方称其在 SWE-bench Verified 上得分 73.4,超过前代 Qwen3.5-35B-A3B 的 70.0,并在多数视觉语言基准上接近 Claude Sonnet 4.5。模型已在 Qwen Studio 上线,可通过阿里云百炼 API 以 qwen3.6-flash 调用,权重发布于 Hugging Face 和 ModelScope,并支持 OpenClaw、Claude Code、Qwen Code 等第三方编码助手。

    .8 SimpleVQA 56.0 57.6 52.9 52.2 58.3 58.9 HallusionBench 70.0 59.9 67.4 66.1 67.9 69.8 Text Recognition and Document Understanding OmniDocBench1.5 88.9 85.8 80.1 74.4 89.3 89.9 CharXiv(RQ) 79.5 67.2 67.9 69.0 77.5 78.0 CC-OCR 81.0 68.1 75.7 74.5 80.7 81.9 AI2D TEST 92.9 87.0 89.0 88.3 92.6 92.7 Spatial Intelligence RefCOCO(avg) 90.9 -- -- -- 89.2 92.0 ODInW13 41.1 -- -- -- 42.6 50.8 EmbSpatialBench 84.5 71.8 -- -- 83.1 84.3 RefSpatialBench 67.7 -- -- -- 63.5 64.3 Video Understanding VideoMME (w

    匹配字段正文

星期四

  1. Qwen Blog精选

    阿里千问发布 Qwen3.6-Plus,主打真实世界智能体能力

    阿里千问发布 Qwen3.6-Plus,通过阿里云百炼 API 提供,默认 1M 上下文窗口,重点提升智能体编码与多模态感知推理能力。官方基准显示其在 SWE-bench Verified 得 78.8、Terminal-Bench 2.0 得 61.6、QwenClawBench 得 57.2,均高于 Qwen3.5-397B-A17B。API 新增 preserve_thinking 参数用于保留多轮思考内容,默认关闭,可接入 Claude Code、Qwen Code、Cline、OpenCode 等编码工具。

    83.9 85.4 MMStar 77.1 73.2 83.1 80.5 83.8 83.3 SimpleVQA 55.8 65.7 73.2 71.2 67.1 67.3 Text Recognition and Document Understanding OmniDocBench1.5 85.7 87.7 88.5 88.8 90.8 91.2 CharXiv(RQ) 82.1 68.5 81.4 77.5 80.8 81.5 MMLongBench-Doc -- 61.9 60.5 58.5 61.5 62.0 CC-OCR 70.3 76.9 79.0 79.7 82.0 83.4 AI2D TEST 92.2 87.7 94.1 90.8 93.9 94.4 Spatial Intelligence CountBench 91.9 90.6 97.3 94.1 97.2 97.6 RefCOCO(avg) -- -- 84.1 87.8 92.3 93.5 ODinW13 -- -- 46.3 -- 47.0 51.8 ERQA 59.8 46.8 70.5 -- 67.

    匹配字段正文

星期一

  1. Qwen Blog精选

    Qwen3.5 发布:首个原生多模态智能体模型 Qwen3.5-397B-A17B

    Qwen 团队正式发布 Qwen3.5 系列首个开源权重模型 Qwen3.5-397B-A17B,这是一个原生视觉语言模型,在推理、编码、智能体和多模态理解等基准上给出完整评测结果。模型采用线性注意力(Gated Delta Networks)与稀疏 MoE 混合架构,总参数 397B、每次前向仅激活 17B,语言与方言支持从 119 种扩展到 201 种。托管版本 Qwen3.5-Plus 通过阿里云百炼提供,默认 1M 上下文窗口,并内置官方工具与自适应工具调用。

    Bench EN-DEV-v1.1 88.2 89.2 93.7 89.7 94.2 93.7 SimpleVQA 55.8 65.7 73.2 61.3 71.2 67.1 Text Recognition and Document Understanding OmniDocBench1.5 85.7 87.7 88.5 84.5 88.8 90.8 CharXiv(RQ) 82.1 68.5 81.4 66.1 77.5 80.8 MMLongBench-Doc -- 61.9 60.5 56.2 58.5 61.5 CC-OCR 70.3 76.9 79.0 81.5 79.7 82.0 AI2D TEST 92.2 87.7 94.1 89.2 90.8 93.9 OCRBench 80.7 85.8 90.4 87.5 92.3 93.1 Spatial Intelligence ERQA 59.8 46.8 70.5 52.5 -- 67.5 CountBench 91.9 90.6 97.3 93.7 94.1 97.2 RefCOCO(avg) -- -- 84.1 9

    匹配字段正文

星期二

  1. Liquid AI 模型与工程博客精选

    Liquid AI 发布 LFM2.5-1.2B-Thinking 端侧推理模型,内存占用低于 1GB

    Liquid AI 发布 LFM2.5-1.2B-Thinking,一款完全在设备端运行的推理模型,在手机上内存占用低于 900 MB,已在 Hugging Face、LEAP 和 Playground 上线。该模型为 1.2B 参数,相比 LFM2.5-1.2B-Instruct 在 MATH-500 上从 63 提升到 88、Multi-IF 从 61 提升到 69、BFCLv3 从 49 提升到 57,并在多数推理基准上匹配或超过参数量多 40% 的 Qwen3-1.7B。训练上采用课程式 RL 与模型合并,通过偏好对齐和 n-gram 重复惩罚把 doom loop 比例从 15.74% 降到 0.36%,并获 Qualcomm、Ollama、FastFlowLM、Cactus Compute 等新发布伙伴支持。

    s diverse use cases The edge AI future is here. We can't wait to see what you build. References [1] Sheng, Guangming, et al. “HybridFlow: A Flexible and Efficient RLHF Framework.” arXiv, 2024. [2] Ahmadian, Arash, et al. "Back to basics: Revisiting reinforce style optimization for learning from human feedback in llms." arXiv, 2024. [3] Shao, Zhihong, et al. "Deepseekmath: Pushing the limits of mathematical reasoning in open language models." arXiv, 2024. [4] Yu, Qiying, et al. "Dapo: An open-sou

    匹配字段正文

星期四

  1. Answer.AI 官方研发博客

    Answer.AI 与 LightOn 发布 ModernBERT,为 BERT 提供替代方案

    Answer.AI 与 LightOn 发布 ModernBERT,一个编码器专用模型系列,提供 base(149M 参数)和 large(395M 参数)两个版本,可作为 BERT 类模型的直接替换。它把上下文长度从多数编码器的 512 提升到 8192 token,并首次在编码器训练数据中加入大量代码,在检索、自然语言理解和代码检索任务上整体优于主流模型,速度最高可达 DeBERTa 的 4 倍。模型将随 transformers v4.48.0 发布,在此之前需从 main 分支安装,官方建议搭配 Flash Attention 2 使用。

    odernBERT models, a new state-of-the-art family of small and efficient encoder-only models, finally giving BERT a much needed do-over. ModernBERT demonstrates that encoder-only models can be improved by modern methods. They continue to offer very strong performance on some tasks, providing an extremely attractive size/performance ratio. Links 🤗ModernBERT-Base; 🤗ModernBERT-Large; 📝arXiv; 🤗ModernBERT documentation page LightOn sponsored the compute for this project on Orange Business Cloud Avenue.

    匹配字段正文