Google地球的AI生图功能,上线一天就下线了。
这事发生在7月30日。Google刚给Google地球加了个"创建图片"按钮——你缩放到任何地点,输入一句提示词,AI就能在当地真实卫星图上叠加一张逼真的假图片。听起来挺酷,Google自己吹了五个使用场景:重建庞贝古城、生成地标信息图、空置东京地块的房地产概念图、把小屋渲染成湖滨豪宅、还有给Google山景城总部来张科幻改图。
结果不到24小时,Google就把这个功能全网撤回了。
触发点很直接:一个叫Henk van Ess的独立记者,在功能上线几小时后就发了个教程,展示了他用这个工具生成了什么:墨西哥边境的难民、伊朗的核电站、阿姆斯特丹街头的致命车祸、加沙医院旁的炸弹弹坑。
Google的说法是"看到了专业人士用它做有意义的事,也看到了用户分享的截图违反了政策"。所以暂停,等"更强的安全防护"做好再说。
问题出在哪?技术已经ready了,但防坏人比生图片难多了。
Google其实有两层防护:SynthID隐形水印(让AI生成的图片带可识别标记)和有害内容拒绝机制。但显然,这两层都没拦住上面那些东西。欧盟刚立法要求AI生成内容必须打标签,Google还是签署方之一——这事的法律风险比技术风险来得更快。
更麻烦的是,Google地球这个东西,本来是新闻机构、人权组织、开源调查员用来核查照片真假的"基准层"。它的存档是旧的、覆盖是广的、信任是高的。现在它自己开始生产假图了,这个基准就废了。
Bellingcat的高级研究员Jake Godin说得直接:"这只是在简化造假流程,而且会让它扩散得更快。"
本质上,Google做了一个矛盾的产品:用真实坐标 + 假图片。它的本意是帮用户"想象"一个地方,但实际上,任何有恶意的人都可以用它来制造地缘政治敏感场景的假新闻。
AI生图这一年进步太快了。Stable Diffusion那会儿,生成一张假脸还得费点劲。现在动动嘴皮子,就能把炸弹弹坑P到任何一栋医院旁边。技术跑在监管前面,技术也跑在产品判断前面。
Google这次反应算快——一天就撤,比很多公司强。但一天也足够让第一批假图传遍互联网了。
真正的教训可能是:AI生图和真实地理坐标的结合,比大多数产品团队最初想的要危险得多。防不胜防,不如先下架。