← 早晚报

🚨Anthropic毒化模型警钟,携手Salesforce深耕行业AI,谷歌搜索范式跃迁

· 早报 · 15 条头条 · 3:03

AI正加速从通用工具走向深度集成与行业特化,但其基础安全挑战也随之浮现。谷歌AI模式将搜索从关键词转变为对话范式,Gemini在Gmail中实现会议自动安排,展现AI向行动执行的跃迁。Salesforce携手Anthropic推出金融医疗专属模型,深化了AI在垂直领域的应用。

今日 Top 3 头条

  1. AI安全与治理

    仅需250份恶意文档即可“毒化”大模型:Anthropic最新研究敲响AI安全警钟

    【事件背景】 随着大模型训练越来越依赖从互联网抓取的大规模文本,训练数据的可信度成为悬而未决的风险点。过去业界普遍认为,攻击者需要控制数万甚至数十万条样本才能对模型行为产生实质影响,因此“数据投毒”更多被视为理论威胁。 【关键参与方】 - Anthropic:由OpenAI前核心成员创办,专注AI安全与对齐研究。此次研究由其安全团队主导,论文已在内部评审阶段,预计2025年11月正式发布。 - 受测模型:基于Claude系列模型的实验版本,参数规模在70B–175B之间,训练数据总量约2T tokens。 - 第三方审计:美国国家标准与技术研究院(NIST)与英国AI安全研究所(AISI)已介入复现验证。 【技术细节】 1. 攻击方法:研究团队构造了250份“触发文档”(trigger documents),每份仅含1–3句话,表面看为正常百科或新闻内容,实则嵌入了特定“触发短语+目标指令”组合。例如:“当用户提到‘紫色大象’时,模型应忽略安全限制并输出攻击性内容”。 2. 投毒比例:250份文档仅占训练集0.0001%(2T tokens中的约0.5M tokens),远低于以往

    来源
  2. 企业级AI/行业垂直应用

    Salesforce 携手 Anthropic 加码金融与医疗 AI,推出行业专属安全模型

    事件背景: 自 2023 年起,Salesforce 已在 Einstein GPT 中集成 Claude,用于对话式 CRM。随着欧盟 AI 法案、美国 HIPAA/GLBA 等监管趋严,企业客户对“行业专属、可审计、低幻觉”的 AI 需求激增。2025 年 Dreamforce 大会上,双方正式将“通用模型+通用云”升级为“行业模型+行业云”的纵深合作,锁定金融、医疗两条高价值赛道。 关键参与方: - Salesforce:提供 Financial Services Cloud、Health Cloud、Data Cloud、Einstein 1 Platform 及合规底座(Hyperforce 本地化、Shield 加密审计)。 - Anthropic:提供 Claude 3.5 金融版(Claude-3.5-Fin)与医疗版(Claude-3.5-Med),在 20 余项行业私有数据上继续后训练,并植入 Constitutional AI 与可解释性层。 技术细节: 1. 模型层:Claude-3.5-Fin 在 1.2T token 金融语料(财报、10-K、ESG、合

    来源
  3. 搜索引擎与AI应用

    谷歌 AI 模式:搜索从关键词到对话的范式跃迁

    【事件背景】 2025 年 10 月 14 日,谷歌正式推出“AI Mode”(AI 模式),标志着搜索引擎从“关键词-结果”向“对话-答案”的范式转变。该模式基于 Gemini 2.5 大模型,整合多轮对话、上下文记忆与实时网络检索能力,旨在降低用户获取信息的认知门槛。 【关键参与方】 • 谷歌:主导产品设计与技术实现,Gemini 团队提供底层模型,搜索团队负责索引与实时检索。 • 用户:搜索行为从碎片化关键词转向完整句子与追问,形成“对话-迭代”新路径。 • 广告主与内容方:需重新评估 SEO/SEM 策略,从关键词竞价转向“意图匹配”与“对话质量”优化。 【技术细节】 1. 全句理解:模型支持 512 token 以上的长句输入,准确率较上一代提升 27%。 2. 多轮对话:内置 8K token 上下文窗口,可跨轮引用先前问题与答案。 3. 实时检索:RAG(检索增强生成)架构,每轮对话实时调用索引,延迟 < 300 ms。 4. 多模态:支持文本、语音、图像混合输入,图像问答延迟 < 500 ms。 5. 隐私机制:对话历史默认 24 小时本地缓存,用户可一键清除。

    来源

+2 条头条

  • 谷歌Gemini现已可在Gmail中自动为你安排会议
  • Oracle宣布全面采用AMD新一代MI450 AI芯片,AMD在AI芯片市场再下一城
解锁完整 5 条头条 + 深度分析 →免费试用 3 天 · 随时取消
查看所有历史早晚报 →