Google DeepMind Developers:Nano Banana 是如何打造出来的
摘要
Nano Banana 将 Gemini 的对话式多模态智能与 Imagen 的视觉质量结合起来,一举破圈。 在 LMArena 的流量反复超过基于既有模型预估的查询容量预算之前,团队并未预料到它会走红——即使用户只有一定概率拿到 Nano Banana。它释放出的实用性信号异常清晰:用户“会想方设法”去访问这个模型。
保留身份的编辑跨过了实用性门槛,让个性化真正具备吸引力,并支撑起叙事、广告和视频工作流。 过去,一张参考照片无法在零样本条件下生成足够可辨认的肖像,往往需要多张图片、LoRA 微调、部署和等待;现在,这些步骤都不再必要。随后,角色一致性成为倍增器:当同一个人或物体能够在不同画面中持续存在,创作者就能构建故事、漫画和分镜,最终甚至拍出电影。
生产力叙事正在从“90%的时间用于编辑”反转为“90%的时间用于创作”,但用户会选择不同程度的自主权。 Oliver Wang 认为,专业人士可能把繁琐操作交给模型,同时保留意图和控制权;消费者可能只想制作一张家庭图片;知识工作者则可能把整套演示文稿交给智能体。关键的产品问题在于,用户究竟想“不断调整并与模型协作”,还是只需说明最终结果。
界面市场很可能分化为对话式工具、庞大的专业消费者中间层,以及高度技术化的专业工作流。 Chat 对普通用户有效,是因为无需学习新的 UI;ComfyUI 式节点图则能让专家把模型组合成稳定、数百步的流水线。真正的机会位于两者之间:比聊天机器人拥有更多控制力,但不需要学习“100种东西”。
没有单一模型能够满足所有创作目标,因为遵循指令与自由构思之间可能相互冲突。 一个被优化为完全照办的模型,对于希望它“放开来玩”的用户可能反而更差;而像素级专业用户仍会要求明确控制。这为多模型、编排层、垂直界面,以及栅格、矢量和代码混合表示方式留下了持久空间。
最大的扩张机会可能不是娱乐,而是事实性视觉推理。 模型已经能够处理几何题、根据 HTML 图片渲染网页,并推断学术图表中缺失的结果;更长期的愿景是个性化、多语言教材和“视觉深度研究”。只有当文字渲染、事实性、比例图表和最差情况下的可靠性得到改善,这个市场才会真正打开,而不只是靠精选出来的惊艳图片。
下一个基准是质量下限:“我们现在处在挑柠檬阶段。” 每个领先模型都能生成一张完美的精选图片,因此差异化正转向10秒级迭代、对150页品牌指南等长文档的长上下文遵循,以及交付前在推理阶段进行自我批评。抬高最差输出的质量,可能让图像生成从偶尔使用的创意工具,变成教育、品牌和生产力场景的可靠基础设施。
精读
1. Nano Banana 融合 Gemini 智能与 Imagen 质量
Oliver Wang 回溯了 Nano Banana 的技术谱系:一端是 Imagen 家族,另一端是 Gemini 内部更早的图像生成能力。随着团队将重心转向交互式、对话式编辑,双方最终合并,打造出后来被称为 Nano Banana 的模型——它也被称为 Gemini 2.5 Flash Image,但所有人都同意,Nano Banana 这个昵称“酷得多”,也更容易说出口。
Nicole Brichtova 将模型形容为“集两者之长”:Imagen 曾提供顶级视觉质量,Gemini 2.0 Flash 则展示了同时生成文字与图像、讲故事,以及通过对话完成编辑的魔力。但 Gemini 2.0 Flash 的视觉质量还未达到团队期望;Nano Banana 把这种交互模式与 Imagen 的保真度结合了起来。
Wang 没有预料到产品会病毒式传播。转折发生在 LMArena:团队按照既有模型的水平配置查询容量,但需求不断攀升,他们“不得不一再上调这个数字”。用户愿意反复访问一个只有一定概率提供 Nano Banana 的网站,让稀缺性发挥了类似可变奖励机制的作用。
Brichtova 的内部突破带有强烈的个人色彩:只需放入一张照片,她就能被可信地放进童年梦想中,比如成为宇航员或走上红毯。过去,要实现相近的肖像还原,需要多张图片、LoRA 微调、时间,以及承载结果的部署环境;这次则以零样本方式完成。很快,内部演示文稿“铺满了我的脸”,随后又扩展到配偶、孩子、狗,以及1980年代风格的变装。
2. 创作收益是夺回时间,而不是自动化审美
Wang 对专业创作者的判断很具体:模型可以让创作者从“90%的时间”都花在编辑和繁琐手工操作上,转向将90%的时间用于创作。他预计这会带来“创意大爆发”,但也承认,不同任务和用户对模型自主程度的需求存在巨大差异。
他的光谱一端,是家长制作一张万圣节服装图片;另一端,是智能体完成整套演示文稿。作为前咨询顾问,Wang 记得过去需要花几个小时让幻灯片变得美观、连贯;智能体可以完成故事线布局并生成合适的视觉内容,除非用户本身就想参与协作和迭代。
Nicole 先把艺术视为一个分布外样本,随后又说这个定义“有点过于严格”:相对于早期艺术作品,大量优秀艺术仍然处于分布内。她更看重的标准是意图。模型提供工具,创意人士带来想法、判断和目的;即使获得同一个界面,她也无法复现这些东西。
3. 一致性与迭代,让艺术家重新获得缺失的控制力
艺术家告诉团队,早期 AI 工具缺乏专业创作所需的控制力。Nano Banana 的角色和物体一致性,让同一主体能够跨图片延续;多张参考图则支持这样的指令:把一张图片的风格应用到另一个角色上,或把指定物体插入既有场景。
Wang 强调,艺术本质上是迭代过程,因此多轮对话是核心能力,而非附属功能。模型可以吸收连续修改,成为“创作伙伴”;但他也承认,在极长的对话中,模型的指令遵循能力会下降。提升这种持续工作能力,是明确的开发重点。
当被问及艺术家为何抵触 AI 时,Brichtova 指向了早期的一次性系统:用户输入文字,接受主要由模型和训练数据做出的决定,然后把结果称为自己的艺术。这种方式可能会“让人有点不舒服”。更强的可控性则为创作者留下表达空间,而不只是从模型输出中挑选一个结果。
单纯的新奇感也已经不再是有效差异化。Brichtova 说,人类“很快就会厌倦”;一张明显由单次提示词生成的图片,不会仅仅因为出自机器就继续让人感到有趣。标准正在回到技艺本身:AI 作品必须承载足够的意图和控制力,让另一位艺术家能够辨认出人的贡献。
4. 最终胜出的界面,取决于用户对控制力的重视程度
结合自己在 Adobe 的经历,Wang 将设计张力归纳为:一端是手机或语音界面,另一端是专业人士要求的细粒度调整。团队还没有同时解决这两个问题。他希望未来的工具能够理解上下文并主动推荐有用的下一步,从而不再要求用户学习每一个传统控制项。
Nicole 的反驳是,专业人士首先在乎结果,也愿意承受相当程度的复杂性。编程工具已经提供上下文控制和不同模式,而不是一个神奇提示词。类似地,Wang 也称赞了 ComfyUI 的节点式工作流:它们确实复杂,但足够稳定,可以把 Nano Banana、其他模型和视频工具组合起来,制作分镜或关键帧。
Brichtova 将市场分为3层:对她父母这样的消费者而言,聊天机器人足够好用——上传一张图片、直接对话即可;专业人士需要深得多的控制力;两者之间,则是过去因专家软件而望而却步的潜在创作者。“中间层存在巨大机会。”
Wang 否定了“一个模型统治一切”的思路。优化精确遵循指令,可能会削弱模型在构思阶段的价值,因为用户有时希望模型接管任务并“放开来玩”。不同目标、受众和审美偏好,将继续支撑多样化模型与组合式工作流。
5. 视觉推理让模型从艺术工具扩展为学习系统
Brichtova 不希望 AI 把每个5岁孩子的涂鸦都变成精致图片:“我们可能会失去一些东西。”她设想的更好方向,是让 AI 成为一个能够点评、讲解步骤,或提供图像自动补全的伙伴。具有讽刺意味的是,有意生成儿童蜡笔画仍然很难,因为这种抽象程度极高,团队因此还在设计专门的评测。
Wang 指出,很多人通过视觉学习;Brichtova 则补充说,目前的 AI 导师大多通过对话或文字提供帮助。多模态导师可以用专门生成的图片和图表配合解释,让概念更有用、更易理解。对于以人为中心的智能体,她认为视觉沟通至关重要:“100%。我绝对这么认为。”
更长期的概念被称为“视觉深度研究”。模型可能花2小时研究一次住宅改造,搜索合适的家具,然后返回多个方案或一份10页演示文稿。对于操作手册或 IKEA 式说明,先把困难任务拆解成一系列视觉中间步骤,可能比直接生成一张最终图片更有价值。
6. 二维生成可以学习世界,但机器人仍需要3D
Nicole 对明确的3D世界模型给出了坦率的非答案。3D模型的优势在于持续的几何一致性,但训练数据受到限制,因为“我们不会随身带着3D采集设备到处走”;现有的大多数观察结果,都是空间世界投射到二维平面上的图像。
她个人更倾向于从这些投影中学习潜在的世界表征。视频模型已经展现出足够的3D理解能力,可以支持准确的重建算法;与此同时,人类艺术起源于洞穴墙壁上的线条,现代界面也仍然以二维为主。人类尤其擅长通过空间世界的平面投影进行推理。
Oliver 追问了导航问题:一张桌子的画面可能看起来具有立体感,但具身系统必须知道自己不能穿过它。Nicole 将高层规划与运动控制区分开来——识别一栋建筑并向左转,或许可以依靠记忆中的投影完成;但“机器人,是的,它们可能需要3D”。
7. 评测关注的是不均衡感知与有意识的取舍
早期的角色一致性评测使用陌生面孔,结果“什么也说明不了”。团队后来改用自己和熟悉的人,因为一旦对主体足够熟悉,即使是轻微的面部错误也会变得明显,随后又在不同年龄和群体上进行测试。整个过程至今仍有相当部分依赖有经验的人进行目测,而不是依靠一个自动化分数。
Wang 解释了为什么排行榜无法把图像质量压缩成一个总分:一次编辑可能更擅长保留身份,另一次则更擅长迁移风格,究竟哪个更好取决于用户意图。Brichtova 补充说,“不存在唯一正确答案”,而且已经发布的模型,都明显带有各家研究实验室的偏好。
Brichtova 表示,团队如今拒绝回退的能力包括角色一致性,以及用户要求照片时的逼真度,尤其是在产品和广告场景中。但本次发布的文字渲染仍未达到理想标准;团队接受了这一限制,因为模型的其他优势足以支持上线。
对于 ControlNet 或姿态输入等结构化控制,Brichtova 认为,模型未来可能越来越能根据用户意图判断一次编辑应当保留结构还是采取自由形式,但始终会有用户要求更多控制。像素级用户仍然可以在传统工具中把某个元素向左移动一点,或把它调得更蓝。Wang 也提出,或许一张参考图就能更容易地传达目标姿态,而不必要求用户先提取结构化数据。
8. 可靠性、平台覆盖与人类审美定义下一条前沿
Brichtova 将 Gemini app 定位为入口:“乐趣某种程度上是通往实用性的门户。”用户可能因为制作玩偶而来,最终留下来做作业或写作。公司也在探索 Flow 这类与特定场景深度耦合的界面,服务 AI 电影创作者;至于 API 和企业分发,则会把建筑软件等垂直产品留给专业开发者。
日本很快出现了生态层面的证据:开发者已经构建出 Easy Banana 等扩展,服务漫画和动漫工作流。Brichtova 认为,一旦质量越过最低门槛,延迟就会成为倍增器:10秒出一帧会鼓励用户迭代,等待2分钟则会导致放弃。更好的事实性和文字能力,同样可能打开个性化、多语言视觉教材的市场。
模型涌现出的推理能力甚至让构建者自己感到意外。Brichtova 提到几何题,以及根据 HTML 图片渲染网页的案例;Wang 则提到一张学术图表中缺失的结果,模型能够推断出来,并在多个应用中补全。这些案例暗示,视觉问题求解、场景理解,以及长多模态上下文中的状态延续,还存在尚未被发现的“零样本或少样本提示”用法。
团队最终关注的基准已经不再是最好的图片,而是最差的图片:“我们现在处在挑柠檬阶段。”Brichtova 认为,教育和事实性尤其重要。Wang 设想,模型可以吸收150页品牌指南,发现第52页的规定使草稿失效,然后自主修改。背后的共同机制,是在推理阶段进行批评,让控制和合规变得可靠。
艺术家仍然不可或缺,因为模型没有数十年积累形成的审美。Brichtova 讲到与 Ross Lovegrove 合作的案例:模型先基于他的草图进行微调,再用于开发新作品,最终为一款实体椅子的原型提供了灵感。整个结果依赖长时间对话和设计专业能力,而不是“一条提示词、2分钟”。
Wang 警告说,如果以所有人的平均偏好为优化目标,最终得到的东西可能广泛讨喜,却很少真正改变视角。他还强调了一个尚未充分利用的能力:交错生成。一次提示词可以产出一系列内容,比如让同一个角色贯穿多张图片的睡前故事。一致性、连续生成与有意识的审美结合起来,指向的将不再是孤立的图片,而是交互式视觉媒体。