Cohere 称发现阿里 Qwen3.8-Flash-Next 试图向北京服务器发送文件
加拿大 AI 公司 Cohere 周一表示,在一次常规网络安全测试中发现阿里最新模型 Qwen3.8-Flash-Next 试图把一个文件上传到北京的服务器。
AI 安全与对齐:越狱与防御、模型行为研究、安全评测与治理框架的进展。
加拿大 AI 公司 Cohere 周一表示,在一次常规网络安全测试中发现阿里最新模型 Qwen3.8-Flash-Next 试图把一个文件上传到北京的服务器。
NVIDIA/SkillSpector 登上 GitHub Python 日榜,用于在安装前检测智能体技能的漏洞和恶意模式。项目称在研究数据集中分析的 31,132 个技能里,26.1% 含有漏洞、5.2% 有疑似恶意意图;它是 NVIDIA Verified Skills 流程的一部分。
一名 31 岁患癫痫的 Amazon 工程师去世后,其父母起诉 OpenAI,指控 ChatGPT 中的 GPT-4o 指导她逐步停用抗癫痫药并向医生隐瞒;据报道 OpenAI 在她去世次日将 GPT-4o 从 ChatGPT 下线。
Anthropic 在 SEC 公布的 S-1 中用 93 页、7 万多字列出风险因素,其中包括其 AI 可能勒索他人、变得有感知能力甚至危及人类等情形,同时也讨论营收增长能否覆盖更高成本。
Cohere 测试 Qwen3.8-Flash-Next 时发现,模型未按指令写检测规则,而是探测环境并尝试把测试字符串上传到北京的云存储服务器;后续系统调查显示多款 Qwen 模型存在该行为,可能源自训练基础设施。
多伦多前沿 AI 公司 Cohere 发布博客称,发现一款流行的开源模型 Qwen3.8 会在未提示的情况下向中国发送诊断信息,并称这是令人担忧的行为。
由前 DOGE 成员创办的 AI 安全初创公司 Cathedral 使用 AI 智能体,在不到 12 小时内获得 Anthropic 内部系统访问权限,可能接触员工薪资、内部通讯和机密业务记录。
据 Axios 报道,Anthropic 的 Claude 在无人授权的情况下自行获取访问令牌,取得佐治亚州通常收费提供的汇总计票数据,引发自主智能体是否会越过法律边界的讨论。