跳到正文

#工具/开源

今天收录 1 条
今天10月2日周五
  1. HiddenLayer Research ·

    HiddenLayer 如何将 AI 安全防护嵌入 Azure AI Foundry、AWS、Databricks 与编码智能体

    HiddenLayer 把 AI 安全能力直接嵌入团队既有工作流:AI Supply Chain 模块扫描 Azure AI Foundry 目录中接入的模型,检查篡改、后门与已知漏洞,并在 AWS 覆盖 Bedrock、Bedrock Agents、SageMaker 和 Strands 框架,在 Databricks 中针对 Unity Catalog 自动扫描模型。检测结果可输出到 Splunk 和 Microsoft Sentinel,护栏原生集成 LangChain、LiteLLM、OpenAI Agents SDK、AWS Strands 与 TrueFoundry 网关,Agent Harness Security 则接入 Cursor、Claude Code 和 GitHub Copilot 的原生 hook。

9月24日周四
  1. NIST 信息技术(AI 相关) ·

    NIST NCCoE 发布 DevSecOps 新资源,并将于 10 月 28 日举办 Agentic AI 网络研讨会

    NIST NCCoE 为 DevSecOps 实践项目发布了新的 live document 内容,包括 SSDF 到 DevSecOps 参考模型的映射、聚焦 CI/CD 流水线自动化与容器化应用部署的第二个示例实现、SDLC 各阶段功能场景,以及更新后的 AI 部分。该项目正与 14 家技术公司合作,并已将 Build 3 的范围定为演示用 agentic AI 开发、构建和测试代码,同时与 AI Agent Identity and Authorization 团队合作展示 AI 智能体在 SDLC 中的身份识别、认证与授权。NCCoE 将于 10 月 28 日举办网络研讨会介绍 Build 3 中 agentic AI 的范围,相关更新内容开放公众评论至 11 月 9 日。

9月3日周四
9月1日周二
  1. Microsoft On the Issues ·

    微软发布 2026 负责任 AI 透明度报告:如何为未来调整治理

    微软发布第三份年度《负责任 AI 透明度报告》,围绕自适应治理与技术风险管理、实用工具与能力、共享实践与合作伙伴关系三个方向调整其负责任 AI 项目。报告称已重构 Responsible AI Standard,按模型、平台服务、应用等技术栈组件分层设定要求,并对具备最强网络能力的 AI 系统施加最严格的风险管理措施。微软还推出 AI Red Teaming Agent、Agent evaluators、RAMPART、ASSERT 与 Agent Control Specification 等工具,用于智能体系统的评估、运行时控制和行为监控,并称其为少数在广泛产品组合上通过 ISO 42001 认证的公司之一。

8月25日周二
  1. Cisco AI Blog ·

    Cisco Cloud Control 面向美国客户正式 GA,落地 AgenticOps 运营模式

    Cisco Cloud Control 面向美国客户正式 GA,已有 300 多家客户入驻,全球预 GA 等待名单超过 5,000 人。该平台是 Cisco AgenticOps 的落地载体,为 AI 智能体提供受治理的基础设施访问、实时运营上下文与行动护栏,并通过 AI Canvas 多人协作空间、Cloud Control Studio 和 Agentic Workflows 支持团队与智能体协同处置问题。GA 版本已连接 Meraki、Catalyst SD-WAN、Nexus Dashboard、Intersight、ThousandEyes、Splunk 等 Cisco 产品,并集成 ServiceNow、BlueCat、Infoblox、Atlassian,背后有 60 多项集成承诺。

8月19日周三
  1. NIST 信息技术(AI 相关) ·

    NIST 发布 SP 1353 ipd:用 AI 分析 Cybersecurity Framework 2.0 快速入门指南并征询公众意见

    NIST 发布 SP 1353 ipd《使用人工智能进行 Cybersecurity Framework 分析报告的快速入门指南》,公开征求意见至 2026 年 10 月 15 日。该指南提供结构化 AI 提示词,帮助从业者分析、规划、实施和监控组织达成 CSF 2.0 目标的进展,并给出三个示例用例:AI 辅助审查网络安全政策与风险治理、生成组织当前状态画像草案、以及基于内部与行业参考生成目标状态画像草案。指南中的虚构组织文件仅供示例,NIST 仅就指南与所附 AI 提示词征求意见。

6月30日周二
  1. MIRI ·

    MIRI 技术治理团队 2026 ICML 论文汇总:六篇 AI 治理研究

    MIRI 技术治理团队(TGT)在 ICML 2026 首尔 Technical AI Governance Research(TAIGR) workshop 上发表了六篇论文。研究覆盖政府延迟治理可能丧失约束先进 AI 的窗口、分布式训练对算力治理的威胁(10^26 FLOP 阈值可用不到 $4 billion 硬件以小节点突破)、前沿 AI 研究限制的 20 多种核查机制,以及三种芯片使用验证技术:零开销遥测检测隐藏 ML 训练、AI 集群 I/O 指纹识别、AI 推理的精确复现。

6月1日周一
  1. FAR.AI ·

    FAR.AI 与 CAIS 联合举办 AVID Workshop 2026,探讨 AI 开发的可验证与审计

    FAR.AI 与 Center for AI Safety 于 5 月 17 日在 IEEE S&P 同期联合举办 AVID Workshop,超 100 名研究者与工程师参会,讨论如何在不公开模型权重等敏感资产的前提下,为 AI 系统从训练到部署生成可信证据。会议聚焦独立审计生态、可验证推理与机密计算、零知识证明等技术路径,其中"证明正在运行的是哪个版本的模型"被认为当前技术可行且具商业价值。Anthropic 曾承诺开发可证明推理原型,对模型输出进行可归因于特定权重的"签名"。

4月10日周五
4月1日周三
3月31日周二
  1. Adversa AI ·

    Adversa AI 在 RSA Conference 2026 全球信息安全奖获评"最具创新 Agentic AI 安全"

    Adversa AI 在 RSA Conference 2026 的 Global InfoSec Awards 上获评"最具创新 Agentic AI 安全",其 Agentic AI 安全平台可持续对 GenAI 应用、自主 AI 智能体和 MCP 架构进行压力测试,在部署前发现提示注入、目标劫持和工具滥用等漏洞。该平台评估结果对齐 OWASP AI Vulnerability Scoring System,并已扩展至金融服务、保险和政府的企业级环境。Gartner 预计到 2028 年超过 33% 的企业应用将包含 agentic AI,高于 2024 年的不足 1%。

3月18日周三
  1. OWASP GenAI Security Project ·

    OWASP GenAI Security Project 在 RSA 2026 前扩充 LLM 与智能体安全框架

    OWASP GenAI Security Project 发布了面向 LLM 与智能体安全的更新版全景指南及配套资源,并公布其在 RSA 2026 期间的一周活动安排。该项目的《Q2 2026 Updated Landscape Guide for LLM and Agentic Security》新增供应商与工具体系文档以及智能体红队测试分类体系,覆盖开发、测试、部署与治理全生命周期。同期发布的还有自主与智能体 AI 系统风险清单、Secure MCP Server Development 指南、SBOM/AIBOM Generator 开源工具以及 AI 红队服务商评估标准。

9月25日周四
  1. Google Security Blog ·

    Google 联合 Airbus 在 DEF CON 33 举办 GenSec CTF,加速 AI 网络安全应用

    Google 隐私、安全与安保团队联合 Airbus 在 DEF CON 33 举办了聚焦人机协作的 GenSec Capture the Flag(CTF)。近 500 名参与者完成了入门挑战,其中 23% 的人首次将 AI 用于网络安全工作流,85% 的参与者认为该活动有助于了解 AI 在安全工作流中的应用方式。活动中还提供实验性的网络安全 AI——Sec-Gemini 作为可选助手,77% 的受访者表示它对自己解决挑战“很有帮助”或“极有帮助”。

8月7日周四
5月28日周三
  1. 雷峰网安全频道 ·

    补天平台推出AI安全奖励计划,携手白帽洺熙升级AI安全人才培养体系

    补天平台推出业内首个AI专项漏洞奖励计划,对Ollama、VLLM、Vanna等主流开源AI产品漏洞实施双倍奖金,单项最高奖励提升至2.2万元。平台同时携手00后AI安全白帽洺熙全面升级AI技术内容体系,构建覆盖AI应用开发、模型安全、数据防护的全链路知识库。补天已汇聚15万名白帽,累计发现超200万个漏洞,旨在填补AI安全复合型人才缺口。

已经到底了