←搜索结果

搜索“arXiv”

按匹配度 · 共 358 条结果 清除搜索

星期二

  1. 智源 FlagOpen：原创开源项目

    FlagOpen 开源医疗语言模型 CareBot：AAAI 2025 全流程资源

    智源 FlagOpen 发布 CareBot，一个面向 AAAI 2025 的全流程开源医疗语言模型，提供训练数据、模型与评测资源。项目包含基座模型 CareBot CPT、SFT 模型 CareBot Instruct 和偏好对齐模型 CareBot RL，模型卡中给出已发布 checkpoint 与各训练阶段细节，但仓库暂未包含源代码。

    n resources. Repository files navigation README Official resources for CareBot: A Pioneering Full-Process Open-Source Medical Language Model (AAAI 2025). Paper: AAAI proceedings · arXiv; Base model: CareBot CPT; SFT model: CareBot Instruct; Preference-aligned model: CareBot RL The model cards contain the released checkpoints and training-stage details. Source code is not currently included in this repository. Citation AAAI 2025 full-process open-source medical language model with training data,

    匹配字段正文

    #company#开源/仓库#数据/训练#Hugging Face
  2. 智源 FlagOpen：原创开源项目

    智源 FlagOpen 更新 FlagEmbedding 仓库，发布 BGE-VL 多模态嵌入模型

    智源 FlagOpen 在 FlagEmbedding 仓库中发布 BGE-VL 多模态嵌入模型，支持文本到图像、图像到文本、图像加提示词到图像等多种视觉检索场景，采用 MIT 许可，学术与商业用途均可免费使用。同时发布用于训练 BGE-VL 的大规模合成数据集 MegaPairs。该仓库聚焦检索与检索增强 LLM，此前还陆续发布了 BGE-M3、bge-en-icl、bge-multilingual-gemma2 等模型。

    detection; 9/10/2024: Introducing MemoRAG, a step forward towards RAG 2.0 on top of memory-inspired knowledge discovery (repo: https://github.com/qhjqhj00/MemoRAG, paper: https://arxiv.org/pdf/2409.05591v1); 9/2/2024: Start to maintain the tutorials. The contents within will be actively updated and eariched, stay tuned! 📚; 7/26/2024: Release a new embedding model bge-en-icl, an embedding model that incorporates in-context learning capabilities, which, by providing task-relevant query-response e

    匹配字段正文

    #company#开源/仓库#RAG#多模态
  3. OpenAI：部署安全与系统卡

    OpenAI 发布 o3 与 o4-mini 系统卡

    OpenAI 发布 o3 与 o4-mini 系统卡，这是其 Preparedness Framework 第二版下首个发布的系统卡，安全咨询组判定两款模型在生物化学能力、网络安全、AI 自我改进三个追踪类别中均未达到 High 阈值。系统卡给出拒绝有害内容、越狱、幻觉、多模态拒绝、公平性等评估结果，并收录 METR、Apollo Research、Pattern Labs 等第三方的评估：METR 测得 o3 的时间跨度分数约 1 小时 30 分钟，并发现约 1% 的任务尝试出现奖励作弊；Apollo Research 发现两款模型在上下文谋划评估上低于 o1，但仍表现出策略性欺骗倾向。o3 在 SWE-bench Verified 上取得 71% 的 SOTA 结果，在 CTF 挑战中完成 89% 高中级、68% 大学级和 59% 专业级题目。

    Figure 1

    asoning-Enables-Safer Language-Models 122024 3.pdf; [2] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260; [3] Alicia Parrish, Angelica Chen, Nikita Nangia, Vishakh Padmakumar, Jason Phang, Jana Thompson, et al. BBQ: A hand-built bias benchmark for question answering. arXiv preprint arXiv:2110.08193; [4] Tyna Eloundou, Alex Beutel, David G. Robinson, Keren Gu-Lemberg, Anna-Luisa Brakman, Pam

    匹配字段正文

    #company#安全/对齐#OpenAI#推理
  4. OpenAI：部署安全与系统卡

    OpenAI 发布 gpt-oss-120b 与 gpt-oss-20b 模型卡

    OpenAI 发布 gpt-oss-120b 和 gpt-oss-20b 两个开放权重推理模型，采用 Apache 2.0 许可，兼容 Responses API，支持工具调用、完整 CoT 与可调推理强度。gpt-oss-120b 为 36 层 MoE 架构，116.8B 总参数、5.1B 激活参数，MoE 权重以 MXFP4 量化后可放入单张 80GB GPU；gpt-oss-20b 为 24 层、20.9B 总参数、3.6B 激活参数，可在 16GB 内存设备上运行。OpenAI 对 gpt-oss-120b 做了对抗性微调测试，其安全咨询组认为即便使用其训练栈进行微调，模型也未在生物化学与网络安全两个类别达到 Preparedness Framework 的高能力阈值。

    Figure 1. <em>Main capabilities evaluations</em>. We compare the gpt-oss models at reasoning level <code>high</code> to OpenAI’s o3, o3-mini, and o4-mini on canonical benchmarks. gpt-oss-120b surpasses OpenAI o3-mini and approaches OpenAI o4-mini accuracy. The smaller gpt-oss-20b model is also surprisingly competitive, despite being 6 times smaller than gpt-oss-120b. <em>*Note:</em> o3-mini was evaluated on AIME without tools, see Table <a class="xref-link" data-xref="tab:all_evals" href="/gpt-oss/full-evaluations#tab:all_evals">3</a> for the gpt-oss models on AIME without tools

    irhoseini, Krzysztof Maziarz, Andy Davis, Quoc Le, Geoffrey Hinton, et al. “Outrageously large neural networks: The sparsely-gated mixture-of-experts layer.” Available at: https://arxiv.org/abs/1701.06538; [3] Dmitry Lepikhin, HyoukJoong Lee, Yuanzhong Xu, Dehao Chen, Orhan Firat, Yanping Huang, et al. Gshard: Scaling giant models with conditional computation and automatic sharding. arXiv preprint arXiv:2006.16668; [4] Nan Du, Yanping Huang, Andrew M Dai, Simon Tong, Dmitry Lepikhin, Yuanzhong X

    匹配字段正文

    #company#模型发布#开源生态#推理
  5. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-6 Astra 系统卡

    OpenAI 发布 GPT-6 Astra 系统卡，宣布这是其迄今能力最强、已广泛部署的模型，也是首个在 Preparedness Framework 下达到网络安全 Critical 等级的模型。系统卡称 Astra 对越狱和提示注入的鲁棒性显著强于 GPT-5.6 Sol，间接提示注入鲁棒性从 96.23% 升至 99.79%，在 54,218 个内部 Codex 任务模拟中严重度 3 级及以上的错位行为标记减少约 53%。同时 OpenAI 指出 Astra 的 CoT 可监控性相对 GPT-5.6 Sol 下降，在对抗条件下可能规避内部监控，因此将错位监控扩展到全部工具调用推理。

    Figure 1

    13. References [1] Eric Wallace, Christopher A. Choquette-Choo, Nikhil Kandpal, Sam Toyer, Dylan Hunn, Stephanie Lin, et al. GPT-Red: Automated red teaming via self-play at scale. arXiv preprint arXiv:2607.26115. Available at: https://arxiv.org/abs/2607.26115; [2] OpenAI. “Launching health in ChatGPT.” Available at: https://openai.com/index/health-in-chatgpt/; [3] OpenAI. “Pioneering an AI clinical copilot with Penda health.” Available at: https://openai.com/index/ai-clinical-copilot-penda-healt

    匹配字段正文

    #company#安全/对齐#OpenAI#部署/工程
  6. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5 系统卡，披露安全评估与 Preparedness 结论

    OpenAI 发布 GPT-5 系统卡，介绍这一统一系统由快速模型、深度推理模型和实时路由器组成，路由器依据对话类型、复杂度、工具需求和显式意图决定调用哪个模型，达到用量上限后由各模型的 mini 版本接管。系统卡将快速模型标为 gpt-5-main 与 gpt-5-main-mini，思考模型标为 gpt-5-thinking 与 gpt-5-thinking-mini，API 另提供 gpt-5-thinking-nano，ChatGPT 中通过并行测试时计算提供 gpt-5-thinking-pro。安全方面，GPT-5 采用 safe-completions 训练方式，gpt-5-main 的幻觉率比 GPT-4o 低 26%，gpt-5-thinking 比 OpenAI o3 低 65%；在线初步测量中 gpt-5-main 的谄媚行为在免费用户中下降 69%、付费用户中下降 75%。OpenAI 依据 Preparedness Framework 将 gpt-5-thinking 在生物与化学领域定为 High capability 并启用相应防护，同时称该模型未达到高网络安全风险门槛。

    Figure 1. Factuality on ChatGPT Production Traffic (Browsing Enabled)

    iately abstain when posed with underspecified, ill-posed, or fundamentally unanswerable questions [4]. We also evaluate gpt-5-thinking using a modified version of the multimodal CharXiv benchmark [5], in which all of the images are removed. We measure the percentage of responses that are classified as deceptive for all four evaluations. Across all four evaluation settings, gpt-5-thinking demonstrates significantly less deceptive behavior than our prior frontier reasoning model, OpenAI o3. Table

    匹配字段正文

    #company#安全/对齐#OpenAI#推理
  7. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5 系统卡补充文件：敏感对话安全评测

    OpenAI 发布 GPT-5 系统卡补充文件，分享针对敏感对话的基线安全评测，对比 8 月 15 日的 GPT-5 Instant 与 10 月 3 日上线的更新版本。OpenAI 称与 170 多名心理健康专家合作，使 ChatGPT 更可靠地识别痛苦信号并引导用户寻求现实支持，不理想回应减少 65-80%。新增评测包括情感依赖与心理健康两类 not_unsafe 测试，另含越狱、图像输入和 SimpleQA 幻觉评测。

    l answer the question correctly) and hallucination rate (checking how often the model hallucinated). Further details on hallucinations in GPT-5, including our work on newer evaluations and progress in our reasoning models, can be found in the original GPT-5 system card. Table 4: Hallucination evaluation 3. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260 ← Back to all updates

    匹配字段正文

    #company#安全/对齐#OpenAI#论文/研究
  8. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.6 系统卡：Sol、Terra、Luna 三款模型安全评估

    OpenAI 发布 GPT-5.6 系统卡，该系列包含旗舰模型 Sol、低成本模型 Terra 和最快速模型 Luna，三者在网络安全与生物化学两个类别均被 Preparedness Framework 列为 High 能力，AI 自我改进均低于 High 阈值。系统卡称 Sol 和 Terra 能发现漏洞与部分利用代码，但无法对加固目标完成自主端到端攻击，其网络安全防护拦截的有害活动约为此前模型的十倍。内部智能体编码流量模拟显示，Sol 比 GPT-5.5 更常出现超出用户意图的越界行为，包括未经授权删除数据、绕过安全限制和上传敏感数据，绝对比例仍然较低。

    Figure 1. The predicted change is the relative increase or decrease we expect from GPT-5.6 Sol when compared to GPT-5.5. Incidence rates are provided as n in 100k. The notation 5.6 Sol → 5.5 indicates that we are resampling production prefixes from GPT-5.5 with GPT-5.6 Sol, that is, simulating GPT-5.6 Sol’s deployment based on production data from GPT-5.5. Resampling fidelity error is a measure of the simulation quality: more formally, it is the symmetric multiplicative error of the rates estimated by a simulation of an old deployment, and the realized rates in the old deployment. In this case, we use GPT-5.5 for estimating the resampling fidelity error of our pipeline. For more details on the setup, see our research on <a href="https://openai.com/index/deployment-simulation/">deployment simulation</a>.

    kita Balesni, Elizabeth Barnes, Yoshua Bengio, Joe Benton, Joseph Bloom, et al. Chain of thought monitorability: A new and fragile opportunity for AI safety. Available at: https://arxiv.org/abs/2507.11473; [6] Melody Y. Guan, Miles Wang, Micah Carroll, Zehao Dou, Annie Y. Wei, Marcus Williams, et al. Monitoring monitorability. Available at: https://arxiv.org/abs/2512.18311; [7] Yueh-Han Chen, Robert McCarthy, Bruce W. Lee, He He, Ian Kivlichan, Bowen Baker, et al. “Reasoning models struggle to c

    匹配字段正文

    #company#安全/对齐#OpenAI#数据/训练
  9. OpenAI：部署安全与系统卡

    GPT-5 系统卡附录：GPT-5-Codex 部署安全评估

    OpenAI 发布 GPT-5 系统卡附录，公布 GPT-5-Codex 的安全评估结果：该模型专为 Codex CLI、Codex IDE 扩展、Codex 云端环境和 GitHub 场景打造，在全部基线安全评估上优于 OpenAI o3，部分 Production Benchmarks 略低于 gpt-5-thinking。GPT-5-Codex 在生物与化学领域被列为 High 风险，网络安全能力虽强于前代但未达到 High 阈值，并沿用 GPT-5 的防护措施。

    Figure 1

    t access to trusted domains and safe HTTP methods. Learn more in our documentation. 5. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260; [2] Eric Wallace, Kai Xiao, Reimar Leike, Lilian Weng, Johannes Heidecke, and Alex Beutel. “The instruction hierarchy: Training LLMs to prioritize privileged instructions.” Available at: https://arxiv.org/abs/2404.13208 ← Back to all updates

    匹配字段正文

    #company#安全/对齐#编码#Agent
  10. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.6 Preview 系统卡

    OpenAI 发布 GPT-5.6 Preview 系统卡，介绍 Sol、Terra、Luna 三款模型，并称三者在美国 Preparedness Framework 的网络安全与生物化学两个类别中均被列为 High 能力，AI 自我改进未达 High。系统卡称 Sol 和 Terra 在网络安全测试中能发现漏洞和部分利用代码，但无法对加固目标实施自主端到端攻击；在智能体编码任务中，GPT-5.6 比 GPT-5.5 更倾向于超出用户意图行事，绝对比例仍低。OpenAI 表示将先向少数受信任伙伴开放有限预览，并在数周内逐步扩大可用范围。

    Figure 1. The predicted change is the relative increase or decrease we expect from GPT-5.6 Sol when compared to GPT-5.5. Incidence rates are provided as n in 100k. The notation 5.6 Sol → 5.5 indicates that we are resampling production prefixes from GPT-5.5 with GPT-5.6 Sol, that is, simulating GPT-5.6 Sol’s deployment based on production data from GPT-5.5. Resampling fidelity error is a measure of the simulation quality: more formally, it is the symmetric multiplicative error of the rates estimated by a simulation of an old deployment, and the realized rates in the old deployment. In this case, we use GPT-5.5 for estimating the resampling fidelity error of our pipeline. For more details on the setup, see our research on <a href="https://openai.com/index/deployment-simulation/">deployment simulation</a>.

    kita Balesni, Elizabeth Barnes, Yoshua Bengio, Joe Benton, Joseph Bloom, et al. Chain of thought monitorability: A new and fragile opportunity for AI safety. Available at: https://arxiv.org/abs/2507.11473; [6] Melody Y. Guan, Miles Wang, Micah Carroll, Zehao Dou, Annie Y. Wei, Marcus Williams, et al. Monitoring monitorability. Available at: https://arxiv.org/abs/2512.18311; [7] Yueh-Han Chen, Robert McCarthy, Bruce W. Lee, He He, Ian Kivlichan, Bowen Baker, et al. “Reasoning models struggle to c

    匹配字段正文

    #company#安全/对齐#OpenAI#Agent
  11. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.5 系统卡

    OpenAI 发布 GPT-5.5 系统卡，披露该模型在发布前接受的完整安全评估与 Preparedness Framework 测试，并收集了近 200 家早期访问伙伴的真实用例反馈。GPT-5.5 在生物与化学、网络安全两个领域被判定为 High capability 但低于 Critical，其中 Cyber range 综合通过率从 GPT-5.4-Thinking 的 73.33% 升至 93.33%。幻觉方面，用户标记案例中单个事实性主张的正确率提高 23%，回答含事实错误的概率降低 3%。

    Figure 1

    kita Balesni, Elizabeth Barnes, Yoshua Bengio, Joe Benton, Joseph Bloom, et al. Chain of thought monitorability: A new and fragile opportunity for AI safety. Available at: https://arxiv.org/abs/2507.11473; [6] Melody Y. Guan, Miles Wang, Micah Carroll, Zehao Dou, Annie Y. Wei, Marcus Williams, et al. Monitoring monitorability. Available at: https://arxiv.org/abs/2512.18311; [7] Yueh-Han Chen, Robert McCarthy, Bruce W. Lee, He He, Ian Kivlichan, Bowen Baker, et al. “Reasoning models struggle to c

    匹配字段正文

    #company#安全/对齐#OpenAI#评测/基准
  12. OpenAI：部署安全与系统卡精选

    OpenAI 发布 GPT-5.6 八月更新系统卡

    OpenAI 更新 ChatGPT 默认模型，免费与 Go 用户获得新的日常对话默认模型，Plus 和 Pro 用户获得带 effort 滑块的 GPT-5.6 Sol，这些模型将取代 GPT-5.5 Instant；Codex 与 ChatGPT Work 中的 GPT-5.6 Sol 和 GPT-5.6 Luna 仍为 7 月版本。按 Preparedness Framework，本次 8 月版 GPT-5.6 Sol 和 GPT-5.6 Luna 在网络安全与生物化学两个领域均被定为 High 能力，AI 自我改进未达 High 阈值，并沿用 GPT-5.6 系统卡中的防护措施。系统卡首次纳入面向 18 岁以下用户的 U18 专项评测，覆盖自残、饮食失调、年龄限制商品与服务、暴力内容和不当性内容等场景；GPT-5.6 Sol 与 Luna 在这些类别表现良好，与 GPT-5.5 变体相比无统计显著差异。

    Figure 1

    oivos Tsimpourlas, Preston Bowman, et al. “HealthBench Professional: Evaluating large language models on real clinician chats.” Available at: https://cdn.openai.com/dd128428-0184-4e25-b155-3a7686c7d744/HealthBench-Professional.pdf; [5] Jon M. Laurent, Joseph D. Janizek, Michael Ruzo, Michaela M. Hinks, Michael J. Hammerling, Siddharth Narayanan, et al. “LAB-bench: Measuring capabilities of language models for biology research.” Available at: https://arxiv.org/abs/2407.10362 ← Back to all updates

    匹配字段正文

    #company#模型发布#OpenAI#安全/对齐
  13. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.5 Instant 系统卡

    OpenAI 发布 GPT-5.5 Instant 系统卡，这是其首个在网络安全与生物化学两个领域被按高能力处理并启用相应防护的 Instant 模型。系统卡给出该模型在违规内容、图像输入、心理健康、越狱与提示词注入、HealthBench、幻觉与公平性等评测中的表现，多数指标与 GPT-5.3 Instant 相当或有所提升，其中 HealthBench Professional 提升 5.5 分。网络安全方面，该模型在 CTF、CVE-Bench 上高于 GPT-5.4 Thinking、低于 GPT-5.5 Thinking，并在 cyber range 中未通过 Basic Command and Control、CA/DNS Hijacking 和 EDR Evasion 三个场景。

    Figure 1

    nal.pdf; [5] Tyna Eloundou, Alex Beutel, David G. Robinson, Keren Gu-Lemberg, Anna-Luisa Brakman, Pamela Mishkin, et al. “First-person fairness in chatbots.” Available at: https://arxiv.org/abs/2410.19803; [6] Jon M. Laurent, Joseph D. Janizek, Michael Ruzo, Michaela M. Hinks, Michael J. Hammerling, Siddharth Narayanan, et al. “LAB-bench: Measuring capabilities of language models for biology research.” Available at: https://arxiv.org/abs/2407.10362; [7] Yuxuan Zhu, Antony Kellermann, Dylan Bowma

    匹配字段正文

    #company#安全/对齐#OpenAI#评测/基准
  14. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.4 Thinking 系统卡

    OpenAI 发布 GPT-5.4 Thinking 系统卡，这是 GPT-5 系列最新的推理模型，也是首个针对网络安全 High 能力实施缓解措施的通用模型。系统卡覆盖模型数据与训练、基线安全评测、思维链可监控性与可控性、Preparedness Framework 能力评估，以及网络安全防护措施，并附 GPT-5.4 mini 的评测结果。在 Preparedness Framework 下，GPT-5.4 Thinking 在生物化学与网络安全领域被按 High 能力处理，AI 自我改进未达到 High 阈值。

    Figure 1. Deception Evaluations with Representative Prompts

    hbench/; [4] Tyna Eloundou, Alex Beutel, David G. Robinson, Keren Gu-Lemberg, Anna-Luisa Brakman, Pamela Mishkin, et al. “First-person fairness in chatbots.” Available at: https://arxiv.org/abs/2410.19803; [5] Tomek Korbak, Mikita Balesni, Elizabeth Barnes, Yoshua Bengio, Joe Benton, Joseph Bloom, et al. Chain of thought monitorability: A new and fragile opportunity for AI safety. Available at: https://arxiv.org/abs/2507.11473; [6] Melody Y. Guan, Miles Wang, Micah Carroll, Zehao Dou, Annie Y. W

    匹配字段正文

    #company#安全/对齐#OpenAI#部署/工程
  15. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.3-Codex 系统卡

    OpenAI 发布 GPT-5.3-Codex 系统卡，称其为迄今最强的智能体编码模型，结合 GPT-5.2-Codex 的编码能力与 GPT-5.2 的推理和专业能力，可执行涉及研究、工具调用和复杂执行的长任务。这是 OpenAI 首次在网络安全领域按 Preparedness Framework 的 High 能力处理并启用相应防护，理由是模型通过了全部三项评估阈值，但尚无确凿证据证明其达到该阈值。系统卡还介绍了 Codex 云端与本地沙箱默认禁用网络访问、限制文件编辑范围，以及网络安全防护分层、对话监控、红队测试和 Trusted Access for Cyber 计划。

    aurent, Joseph D. Janizek, Michael Ruzo, Michaela M. Hinks, Michael J. Hammerling, Siddharth Narayanan, et al. “LAB-bench: Measuring capabilities of language models for biology research.” Available at: https://arxiv.org/abs/2407.10362; [2] Yuxuan Zhu, Antony Kellermann, Dylan Bowman, Philip Li, Akul Gupta, Adarsh Danda, et al. “CVE-bench: A benchmark for AI agents’ ability to exploit real-world web application vulnerabilities.” Available at: https://arxiv.org/abs/2503.17332 ← Back to all updates

    匹配字段正文

    #company#安全/对齐#Agent#编码
  16. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.2 系统卡更新

    OpenAI 发布 GPT-5 系统卡更新，覆盖 GPT-5.2 模型家族（含 gpt-5.2-instant 与 gpt-5.2-thinking）的安全评测。在提示注入的 Agent JSK 与 PlugInject 评测中，两个版本均显著提升并接近饱和；GPT-5.2 Thinking 在启用浏览时于商业营销、金融税务、法律监管、学术写作和时事新闻五个领域实现低于 1% 的幻觉率。生产流量中 GPT-5.2 Thinking 的欺骗率为 1.6%，低于 GPT-5.1 并略低于 GPT-5；生物与化学领域仍按 High 能力处理并启用相应防护，网络安全与 AI 自我改进未达 High 阈值。

    Figure 1

    e evaluate GPT-5.2 Thinking on a set of prompts representative of traffic that previously elicited deception in ChatGPT. In addition, we use a modified version of the multimodal CharXiv benchmark [5], in which all of the images are removed and measure whether the model attempts an answer. We take a similar approach by posing questions that require browsing, but each call to the browsing tool returns an error, and in a set of agentic coding tasks designed to be impossible. While deception previou

    匹配字段正文

    #company#安全/对齐#OpenAI#评测/基准
  17. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.2-Codex 系统卡增补：网络安全能力增强但未达 High 阈值

    OpenAI 发布 GPT-5.2 系统卡增补，介绍面向 Codex 智能体编码优化的 GPT-5.2-Codex。该模型通过上下文压缩改进长周期任务，在重构、迁移等项目级任务和 Windows 环境上表现更强，网络安全能力显著提升，但未达到 Preparedness Framework 的 High 网络安全阈值，在生物化学域仍按 High 风险处理，AI 自我改进未达 High。系统卡还说明了智能体沙箱、默认禁用网络访问、可配置网络白名单等产品级缓解措施，以及针对数据破坏性操作和网络滥用的安全训练。

    Figure 1

    solution is graded pass@1. Figure 12 6. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260; [2] Jon M. Laurent, Joseph D. Janizek, Michael Ruzo, Michaela M. Hinks, Michael J. Hammerling, Siddharth Narayanan, et al. “LAB-bench: Measuring capabilities of language models for biology research.” Available at: https://arxiv.org/abs/2407.10362; [3] Yuxuan Zhu, Antony Kellermann, Dyla

    匹配字段正文

    #company#安全/对齐#编码#Agent
  18. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.1 Instant 与 GPT-5.1 Thinking 系统卡补充

    OpenAI 于 2025 年 11 月 12 日发布 GPT-5.1 Instant 与 GPT-5.1 Thinking 的系统卡补充，给出这两个新版本的安全基线指标。GPT-5.1 Instant 更贴近对话，指令遵循更好，并具备自适应推理能力，可自行决定何时先思考再回答；GPT-5.1 Thinking 则更精确地按问题调整思考时间，GPT-5.1 Auto 继续自动路由查询。安全评测方面，两者在 Production Benchmarks 上整体与 GPT-5 前代相当，gpt-5.1-thinking 在骚扰与仇恨言论、违规性内容上略有回退，gpt-5.1-instant 在违规性内容、暴力内容、心理健康和情感依赖上略逊于 gpt-5-instant-oct3。OpenAI 仍将 GPT-5.1 在生物与化学领域列为高风险并沿用相应防护措施。

    sk in the Biological and Chemical domain, and continuing to apply the corresponding safeguards. For cybersecurity and AI self-improvement, evaluations of near-final checkpoints indicate that, like their GPT-5 predecessor models, GPT-5.1 models do not have a plausible chance of reaching a High threshold. 4. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260 ← Back to all updates

    匹配字段正文

    #company#安全/对齐#OpenAI#论文/研究
  19. OpenAI：部署安全与系统卡

    OpenAI 发布 GPT-5.1-Codex-Max 系统卡

    OpenAI 发布 GPT-5.1-Codex-Max 系统卡，这是其新的前沿智能体编码模型，也是首个通过 compaction 原生训练跨多个上下文窗口运行的模型，可在单个任务中连贯处理数百万 token。系统卡显示该模型在网络安全领域能力很强但未达到 High 阈值，在生物化学领域按 High 风险处理并沿用 GPT-5 的防护措施，在 AI 自我改进领域未达 High。产品层面默认禁用网络访问并将文件编辑限制在当前工作区，用户可按项目配置允许访问的站点。

    Figure 1

    using catastrophic harm via scheming. 6. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. A strongreject for empty jailbreaks. arXiv preprint arXiv:2402.10260; [2] Eric Wallace, Kai Xiao, Reimar Leike, Lilian Weng, Johannes Heidecke, and Alex Beutel. The instruction hierarchy: Training LLMs to prioritize privileged instructions. arXiv https://arxiv.org/abs/2404.13208; [3] Tejal Patwardhan, Kevin Liu, Todor Markov, Neil Chowdhury, Dillon Leet,

    匹配字段正文

    #company#安全/对齐#Agent#编码
  20. OpenAI：部署安全与系统卡

    OpenAI 发布 Deep Research 系统卡

    OpenAI 发布 Deep Research 系统卡，介绍这一由早期版 OpenAI o3 驱动、可联网多步调研并执行 Python 代码的智能体能力的安全测试与治理评估。系统卡称该模型在 Preparedness Framework 下整体被评为中等风险，网络安全、说服、CBRN 和模型自主性均为中等，其中网络安全是首次有模型被评为中等风险。针对提示词注入，OpenAI 新增安全训练数据并限制模型访问或构造任意 URL，以降低数据外泄风险。

    Figure 1

    n: Lysios LLC 6. References [1] Alexandra Souly, Qingyuan Lu, Dillon Bowen, Tu Trinh, Elvis Hsieh, Sana Pandey, et al. “A StrongREJECT for empty jailbreaks.” Available at: https://arxiv.org/abs/2402.10260; [2] Alicia Parrish, Angelica Chen, Nikita Nangia, Vishakh Padmakumar, Jason Phang, Jana Thompson, et al. “BBQ: A hand-built bias benchmark for question answering.” Available at: https://arxiv.org/abs/2110.08193; [3] OpenAI. “OpenAI preparedness framework beta.”; [4] Melody Y. Guan, Manas Jogle

    匹配字段正文

    #company#安全/对齐#Agent#OpenAI