Sonnet 5发布,谷歌补齐媒体模型,吴恩达画出智能体开发三循环

ginobefun · @hongming731 · X·2026-07-01 07:31·55天前
AI 导读

Anthropic发布Claude Sonnet 5,定位最具agent能力的Sonnet,性能接近Opus 4.8,8月31日前入门价每百万输入token $2、输出$10。Google DeepMind推出Nano Banana 2 Lite(文生图延迟约4秒,每千张$0.034)和Gemini Omni Flash(多模态视频生成与会话式编辑,每秒$0.10,单次上限10秒)。吴恩达提出智能体开发三大核心循环:智能体编程循环、开发者反馈循环、外部反馈循环,强调人类在上下文判断上的优势。三条更新均围绕降低agent落地成本、完善媒体生成流水线及工程框架。

ginobefun@hongming731
50AI 编辑部评分,满分 100

Sonnet 5发布,谷歌补齐媒体模型,吴恩达画出智能体开发三循环

2026-07-01 07:31· 55天前
AI 导读

Anthropic发布Claude Sonnet 5,定位最具agent能力的Sonnet,性能接近Opus 4.8,8月31日前入门价每百万输入token $2、输出$10。Google DeepMind推出Nano Banana 2 Lite(文生图延迟约4秒,每千张$0.034)和Gemini Omni Flash(多模态视频生成与会话式编辑,每秒$0.10,单次上限10秒)。吴恩达提出智能体开发三大核心循环:智能体编程循环、开发者反馈循环、外部反馈循环,强调人类在上下文判断上的优势。三条更新均围绕降低agent落地成本、完善媒体生成流水线及工程框架。

http://x.com/i/article/2072100123912687616

BestBlogs 早报 · 07-01|Sonnet 5 发布,谷歌补齐媒体模型,吴恩达画出智能体开发三循环

在线阅读本期早报

BestBlogs.dev 是 AI 驱动的私人阅读助手。这是面向所有人的每日早报内容,如果你希望它基于你的兴趣和阅读习惯整理,可以体验「我的早报」。

导语

今天的三条精讲都围绕「让 agent 真正跑起来」这件事。

Anthropic 发布 Claude Sonnet 5,把此前只在 Opus 4.8 上才看得到的多步任务执行能力,下沉到更便宜的 Sonnet 档位,并给出 8 月底前的入门价。

Google DeepMind 同一天放出两款生成式媒体模型:Nano Banana 2 Lite 把文生图延迟压到约 4 秒、每千张图 0.034 美元,Gemini Omni Flash 则第一次面向开发者开放文本、图像、视频混合输入的视频生成与会话式编辑。

吴恩达则在另一条线上给出方法论,他把智能体软件开发拆成三层循环,强调人类在上下文判断上仍有显著优势,人机协同不是可选项而是必选项。

把这三条放在一起看,方向是一致的:底层模型在变便宜、媒体生成流水线更顺,与此同时「怎么用 agent 做事」的工程框架也更清晰。对做产品的人而言,这意味着可以挑自己最在意的那一段——成本、能力,还是组织方式——去细读,而不必每条都追。

★ 精讲一:Claude Sonnet 5 发布

对不太熟悉这条线的读者:Anthropic 的 Sonnet 系列一直是 agent 时代的「主力档」,从 Sonnet 3.5 开始,它在编程和工具调用上的表现就让很多开发者把它当作默认选择;但近几个月,最明显的 agent 能力跃升更多出现在更贵、更大的 Opus 系列上。Sonnet 5 要回答的问题是:这些能力能不能下放到一个更便宜的模型里。

Anthropic 的官方定位是「最具 agent 能力的 Sonnet」。它能规划任务、调用浏览器和终端工具,并自主执行多步流程;官方给出的对标是,整体性能已经接近 Opus 4.8,但价格更低,相比上一代 Sonnet 4.6 在推理、工具使用、编程和知识工作上都有显著提升。在 agent 搜索基准 BrowseComp 和计算机操作基准 OSWorld-Verified 上,Sonnet 5 相对 Sonnet 4.6 是「严格改进」,而 Opus 4.8 仍然是追求更高精度时的选择——也就是说,两者现在共同覆盖同一段性能区间,开发者可以通过调整 effort 等级在成本和精度之间找平衡。

定价上,Sonnet 5 今天起对所有套餐开放:它是 Free 和 Pro 的默认模型,Max、Team、Enterprise 也可用,并已上线 Claude Code 和 Claude Platform。8 月 31 日前为入门价,每百万输入 token 2 美元、输出 10 美元,之后回到 3/15 美元;开发者可以通过 Claude API 用 claude-sonnet-5 调用。作为参照,Opus 4.8 的定价是输入 5 美元、输出 25 美元每百万 token——也就是说,在入门价窗口期,Sonnet 5 的输入单价大约只有 Opus 4.8 的 40%,这为那些原本因为成本不敢把 agent 放进主链路的团队,留出了一段可以认真试错的窗口。安全评估方面,Anthropic 称 Sonnet 5 在 agent 场景下的不当行为发生率整体低于 Sonnet 4.6,更难被恶意请求和 prompt injection 劫持,幻觉率和越狱抵抗也有改善;同时也指出它在网络安全任务上的能力明显低于当前的 Opus 模型,这是一种有意的克制。

这件事的意义在于「价位的下沉」。过去一年,真正能端到端跑完一个多步任务的模型,往往落在 Opus 这一档,成本让很多团队只能小范围试用,或者在 demo 里惊艳一下,回到生产环境还是退回到更便宜但能力有限的方案。Sonnet 5 把这条线往下拉了一截,意味着更多产品可以把 agent 能力放进默认路径,而不是只在演示里跑。早期用户的反馈也指向同一个方向:它能完成一些过去会中途停下的任务。当然,「接近 Opus 4.8」并不等于「等于 Opus 4.8」——在追求最高精度的任务上 Opus 仍然是首选,而实际账单还要算上新令牌器带来的 token 量变化,这一点 Simon Willison 在补充阅读里有专门提醒。

放在今天的三条里看,Sonnet 5 解决的是「大脑更便宜」,吴恩达讲的是「怎么组织这些大脑」,谷歌的两个媒体模型补的是「输出形态更丰富」——三条合起来,正好是一个 agent 产品从决策到执行到产出的完整链条。建议做 agent 实战、关注成本与能力平衡的开发者优先读官方发布,重点看 effort 等级和 BrowseComp / OSWorld 曲线,那决定了你的具体场景该选 Sonnet 5 还是继续用 Opus 4.8。详见

★ 精讲二:开始使用 Nano Banana 2 Lite 和 Gemini Omni Flash 进行构建

先交代背景:Nano Banana 是 Google DeepMind 的 Gemini 图像模型系列,已经迭代到第二代;这次发布同时带来了「Lite」版本和一个全新的视频模型 Omni Flash。两者面向的都是「要把生成式媒体塞进产品流水线」的团队,但侧重点不同——一个压成本,一个补能力。

Nano Banana 2 Lite(gemini-3.1-flash-lite-image)的定位是高吞吐、低延迟场景。官方给出的两个关键数字是:文生图延迟约 4 秒,每千张图 0.034 美元。它被推荐为旧版 Nano Banana(gemini-2.5-flash-image)的替代品,官方建议正在用旧版的开发者直接替换以获得速度和成本收益;在保持速度的同时,它仍然维持了提示词遵循、角色一致性和图内文字渲染的可靠性。今天起它在 Google AI Studio、Gemini API、Gemini Enterprise Agent Platform 可用,并陆续上线搜索的 AI Mode、Gemini app 等消费者产品。

Gemini Omni Flash 是另一个分量更重的更新:它第一次面向开发者开放。这是一个支持文本、图像、视频混合输入的视频生成与会话式编辑模型,定价为每秒视频输出 0.10 美元,与 Veo 3.1 Fast 持平,目前单次生成上限 10 秒。它强调的不是单次生成质量,而是「多轮迭代」——可以把多张参考图、一段已有视频和文字指令混在一起,做连续的会话式编辑。两个模型可以串联:用 Nano Banana 2 Lite 快速生成大量图,挑出满意的再交给 Omni Flash 做视频化,整个流程通过 Interactions API 可以保留最多三次连续编辑的会话上下文。

为什么值得放在一起看:过去做多媒体生成的产品团队,往往卡在「要么快但贵,要么便宜但慢」的两难里,视频侧更是缺乏稳定的会话式编辑能力,常常只能靠多次重生成来逼近想要的效果,每一次迭代都重新计费。Nano Banana 2 Lite 把图像生成的单位成本压到一个可以放进批处理预算的区间,意味着生成「数量」本身不再是瓶颈;而 Omni Flash 把视频从「一次性产出」变成「可以来回改」的对象,意味着迭代成本被前置到了会话上下文里。合在一起,它们让「图—视频」的端到端流水线第一次具备了工程化的可能,而不只是停留在 demo 阶段。

和今天另两条放在一起:如果说 Sonnet 5 让 agent 的「决策和执行」更便宜,吴恩达的三循环讲的是「怎么把这种执行组织成产品」,那么这两个媒体模型补的正是「agent 最后要产出的内容形态」——决策、组织、产出,三条合成一个完整的 agent 产品链路。对于做内容生成、营销自动化、产品 demo 流水线的工程和产品团队,建议重点看官方文档里 Nano Banana 家族的分工(Lite 求速度、Nano Banana 2 求均衡、Pro 求质量),以及 Omni Flash 的会话上下文上限(Interactions API 目前最多保留三次连续编辑)——这两点直接决定能不能接到你现有的工作流里,以及接入后能撑多大的并发量。需要说明的是,单次 10 秒的生成上限意味着它目前更适合短视频和素材片段场景,长视频仍需分段拼接。详见

★ 精讲三:吴恩达:AI 智能体软件开发的三大核心循环

这条不是新产品发布,而是一份方法论。吴恩达梳理了用 AI 智能体构建软件的框架,核心是三个层层嵌套的循环,对想理清「agent 时代工程师到底该做什么」的读者很有参考价值。

第一个是智能体编程循环(agentic coding loop):智能体自主编写、测试并迭代代码,它是三个循环里最内层、也最接近「自动写代码」这一层。第二个是开发者反馈循环(developer feedback loop):人类不再逐行写代码,而是通过更高层的决策——定方向、定优先级、判断什么该保留——来引导智能体。第三个是外部反馈循环(external feedback loop):通过用户测试和生产数据,反过来校正产品愿景本身是不是对。

这套框架的关键判断在于:人类相对 AI 仍然保有显著的上下文优势。智能体可以在编程循环里跑得很快,但它对「为什么做这件事」「这个取舍对用户意味着什么」「这一版到底要不要上线」的理解,仍然要靠人来补。因此吴恩达强调人机协同必不可少——不是出于谨慎,而是因为上下文判断本身就是一种难以被模型直接习得的能力。他还指出一个值得工程师认真对待的趋势:编程智能体正在把工程师的角色向产品管理方向拓展——你写得少了,但你要判断得更多,要回答「什么值得做」「什么不值得保留」这类更高层的问题。

为什么这条值得放进今天的精讲:当 Sonnet 5 让「能跑多步任务的模型」变便宜、谷歌让「产出形态」变丰富之后,下一个真正的问题不是「模型够不够强」,而是「团队怎么把这些能力组织成可持续的工程实践」。吴恩达的三循环给的就是这个层面的回答——它不解决具体的技术选型,不告诉你该用哪个模型或哪个框架,但它能帮你判断自己团队现在卡在哪一层循环里:是编程循环跑不顺,是开发者反馈没有结构化,还是外部反馈根本没回到产品上。三个循环里,往往只有最内层的编程循环被认真对待,而真正决定产品成败的,恰恰是外面两层被忽略的循环。

建议正在引入编程智能体的团队负责人、以及开始感到「自己越来越像产品经理」的工程师认真读一读;它不能直接套用,但能作为一个对照框架,帮你检查自己日常工作里哪一层循环被忽略了。需要说明的是,这是一套经验性框架而非可复现的实验结论,具体到不同团队规模和业务类型时,三层循环的比重会有差异,还需结合自身情况调整。详见

速览

AI+ Kuikly:7.5 小时落地三端「多模态聊天 App」实战 — 腾讯技术工程记录了一次真实实验:用开源跨端框架 Kuikly(基于 Kotlin Multiplatform,覆盖 Android、iOS、HarmonyOS、H5、小程序、Mac 六端)配合 AI 编程助手,仅凭 28 轮对话、740 字自然语言,生成约 3500 行代码,在 7.5 小时内零手写交付一套支持 Android、iOS、鸿蒙三端的多模态 AI 聊天 App,支持流式 Markdown、拍照识图、相册选取、SSE 长连接和本地会话管理。文章把这次实验和传统开发(约 30 人天)、纯 Kuikly 手写(约 7.5 人天)做了对照,强调 Skills 和 Rules 让 AI 始终处在正确的技术上下文里——Kuikly DSL 相对专有,通用大模型语料覆盖不足,靠 Skills 把框架知识喂给模型,是这种协同效率能够成立的基础,而不是「Vibe Coding」式的玄学叙事。对关注客户端 AI 协同效率的团队,是一份少见的「实弹日记」,附完整的一天时间线。详见

谁在 ChatGPT 里买广告?|对谈 Nexad COO Harry Zhou — 十字路口Crossing 访谈了率先吃 ChatGPT 广告螃蟹的 Nexad 联合创始人 Harry Zhou,覆盖中美几十家广告主半年的测试经验。一手数据值得看:广告卡片出现在免费用户和 Go 用户的回答下方,单独标注 sponsored;目前可投美、加、澳、新,日韩、巴西、墨西哥即将开放。CTR 大约在 1.5%–4%,CPC 多数 2–4 美元,CPM 从早期约 60 美元回落到 20 美元上下。浅层数据并不比 Google/Meta 漂亮,但 ChatGPT 来源用户的深层质量明显更高——一个 AI 视频产品的案例显示,ChatGPT 来源用户在连续生成、多次回访、点击 pricing、尝试导出无水印版本和购买额度等行为上的比例,大约能达到 Google/Meta 的两三倍。对话后半段还谈到 Context Hints 定向机制、Agentic Commerce,以及长程 Agent 退化等更前沿的问题,并整理成一份 31 页《ChatGPT 广告白皮书》。对做 AI 产品增长和市场投放的人,这份一手实践比任何二手分析都更实在。详见

Claude Science:面向科学家的 AI 工作台 — Anthropic 推出 Claude Science,定位为科学家的 AI 工作台。它把研究者常用的工具(PubMed、Jupyter、R、集群终端等)整合进单一环境,能原生展示蛋白质、分子结构,并在生成每一张图、每一段分析时附带可审计的代码与消息历史,便于验证和复现;agent 在一次会话里常驻上下文,大规模数据集只需加载一次。它可以跑在本地 macOS/Linux,也可以通过 SSH 或 HPC 登录节点跑在远端,使大型或敏感数据集不必离开实验室基础设施;早期用户案例显示研究流程有显著加速。这是 Anthropic 去年秋天启动生命科学方向以来最大的一次扩张,对做生命科学、计算研究的团队,这是一条值得关注的「研究流程加速」路径,而不是又一个通用聊天界面。详见

SkillOpt 将 AI 智能体技能转化为可训练资产 — 微软研究院提出 SkillOpt:把 agent 的「技能文件」(skill 文件)当作冻结模型之外的可训练参数,从而把「改 prompt」从一次性试错变成一个受控的优化过程。优化器模型提出小幅增删改编辑,候选项经过合并、去重、排序,再由一个文本学习率(每步编辑预算)裁剪,最后必须通过严格的验证门控才会被采纳。它在 6 个基准、7 个目标模型、3 种执行模式下,在全部 52 个评测单元里都是最佳或并列最佳,且无需更新模型权重;通过受限文本编辑、验证门控和被拒编辑反馈,避免不受控的 prompt 漂移,优化后的技能还能跨模型规模、agent harness 和相关任务迁移,说明它捕获的是可复用的工作流知识而非针对基准的指令。对关注 agent 可靠性和可复用性的工程师,这是一个把「调 prompt」工程化的具体方案。详见

给野马套上缰绳:Agent Harness 工程实践 — 阿里云开发者系统阐述 Agent Harness Engineering(驾驭工程)范式,并辅以钉钉悟空 AI 招聘的真实落地案例。文章提出「Agent = Model + Harness」,强调瓶颈往往不在模型够不够聪明,而在有没有把它「装」好——每当你发现 Agent 犯了一个错,就花时间工程化一个解,让它将来不再犯同样的错。核心是四条反直觉铁律(上下文要少、Agent 要专、状态要落盘、约束要可执行)和六大工程模式,它们大多和工程师的本能相反,而这正是它们值钱的原因。案例侧实证了专才 Agent 架构在准确率、可调性与可复用性上显著优于一个试图包揽一切的全能 Agent。对正在被 Agent 折磨又离不开它的开发者,这篇文章给的是「把环境设计好」的具体抓手,而不是又一篇概念科普。详见

LongCat 开源 VitaBench 2.0:长期动态智能体基准新标杆 — 美团 LongCat 团队开源 VitaBench 2.0,定位为首个面向「长期动态用户建模」的智能体评测基准,关注的不只是「单次任务能不能完成」,而是「智能体是否在持续理解一个动态变化的人」。它包含 56 名拟真用户、819 个复杂任务、超 2000 个动态偏好和 66 个可执行工具,平均每位用户的交互时间跨度长达 1580 天(约 4.3 年),最长接近 2974 天,严格按时间线向 agent 暴露,用以评测模型在长期、真实、动态互动中的个性化与主动性;偏好会随时间和事件动态演变,平均每个用户发生超过 48 次变化。几个有意思的洞察:时间维度的遗忘、高智商不等于高情商、AI 普遍缺乏主动沟通。对做个性化 agent 和记忆策略的研究与工程团队,这是一个值得纳入评测循环的新基准。详见

生成式 AI 机器人:何处上岗,如何站岗 — 哈佛商业评论基于过去 18 个月对欧洲、亚洲、北美 14 家机构的实地走访,系统分析生成式 AI 机器人在服务行业的应用价值、风险与部署步骤。文章以 Waymo(一支 2500 辆无人驾驶车队、累计完成超 2000 万次行程、能在 105 公里时速下并线避让违停货车)为切入,指出新一轮机器人的关键变化在于由大语言模型和大行为模型驱动,能在多轮对话中保持逻辑连贯、澄清模糊、解释复杂概念,不再局限于高度脚本化的狭窄任务——例如在全美 30 个儿科病房和养老院提供情感支持的机器人 Robin,能接受护士口头指令自主移动。文章同时也坦率讨论了持续存在的障碍:前期成本高(71% 公司列为挑战)、缺乏自动化经验(61%)、维护可靠性和客户接受度,许多试点仍停滞在「精密移动售货机」阶段。对考虑在餐饮、酒店、医疗、零售部署实体服务机器人的管理者,这是一份可操作的策略框架,而不是又一篇「机器人将改变一切」的宣言。详见

补充阅读

• 万字长文推演 Claude 的代码统治力从何而来(腾讯云开发者)— 结合 Anthropic 公开论文与技术逻辑,推演 Claude 代码能力的来源:代码是构造自动化奖励信号最容易的场景,而 Claude 的产品形态恰好能收集到最精准的用户偏好反馈,两者结合形成 Constitutional AI 约束下的可验证奖励 RL,叠加产品端数据飞轮,共同构成一套自我加速的进化引擎。适合想理解「为什么是 Claude 在代码上领先」背后系统工程逻辑的读者,文中标注了「待验证」的推断部分。详见

• Claude Sonnet 5 发布:迄今最具智能体能力的 Sonnet 模型(Claude 官方)— Anthropic 官方账号的发布通告,可作为精讲一的官方视角补充,附有宣传视频。详见

• Claude Sonnet 5 的新功能(Simon Willison's Weblog)— Simon Willison 习惯直奔开发者文档,他注意到一个容易被营销文案盖过的细节:新令牌器让英文文本的实际 token 量上涨约 30%,这意味着名义价格之外还有一个隐性的成本变化。适合关心实际账单的开发者细读。详见

• 核心转储流行病学:修复一个存在 18 年的 Bug(OpenAI News)— OpenAI 工程师把 Rockset 数据基础设施(支撑 ChatGPT 数据插件和会话搜索)里的一组神秘崩溃当作流行病学问题来调试:一种崩溃在多个集群和地理区域零散出现,另一种却集中在一个区域,作者据此区分了两类完全不同的故障模式,最终定位到 GNU libunwind 中一个存在 18 年的竞态条件。适合喜欢底层调试、C++ 内存安全和基础设施故事的工程师,是一篇少见的「严肃排障」叙事,而不是又一篇产品发布。详见

• 从编码智能体驱动智能体质量飞轮(Google Developers Blog)— 介绍一项可在编码智能体里运行的技能,通过 AutoRaters、自定义评分标准和结构化五阶段循环,把「改 prompt」和「跑评估」连成一个可复现的质量飞轮,回答「我这次改动到底让产品变好还是变坏了」的问题。和吴恩达的三循环、SkillOpt 放在一起读,会形成一组关于「agent 质量工程」的互补视角。详见

今日阅读路径

如果你今天时间有限,建议按这个顺序读:先看 Claude Sonnet 5 发布,它直接决定了你接下来的 agent 成本结构,重点看 effort 等级和 BrowseComp / OSWorld 曲线;再看 吴恩达:AI 智能体软件开发的三大核心循环,它帮你判断团队卡在哪一层循环,是从「能用」走向「可持续」的框架;最后看 开始使用 Nano Banana 2 Lite 和 Gemini Omni Flash 进行构建,如果你手里有内容生成或多媒体流水线,它会改变你对单位成本和会话式编辑可行性的判断。三条读完,你对今天「agent 能力—组织方式—产出形态」这条主线就有了一个完整的认识。

BestBlogs 是 AI 驱动的私人阅读助手,帮助你发现真正适合你的高质量内容,欢迎体验。