谷歌AI生图功能上线即下线,能造逼真灾难图引恐慌
谷歌最新推出的AI图像生成工具,刚上线一天就被紧急下架。这事儿发生在当地时间7月30日,谷歌给网页版谷歌地球加了个新功能,靠的是Gemini旗下的Nano Banana 2大模型。用户只要定位全球任意地点,再输入几句文字指令,就能基于真实的卫星航拍底图,凭空生成全新的场景。

说白了,就是让AI对着地球的“照片”开始“画画”。 谷歌一开始的宣传挺美好,说这功能能用在城市规划设想、历史场景复原,还有地理教学创作这些正经地方。可结果呢?上线才几个小时,画风就开始跑偏了。问题在于,这个工具衍生出了巨大的潜在风险,而且来得特别快。

最先发现问题的人,是一群开源情报研究者和事实核查记者。他们动手做了测试,结果发现这系统压根儿没有严格的关键词拦截机制,限制条件少得可怜。这意味着啥?意味着用户可以随便生成各种高度逼真的虚假灾害影像,或者地缘冲突的画面,想怎么编就怎么编。

研究者们的测试结果相当吓人。他们成功做出来一堆以假乱真的画面:美国国会大厦被洪水淹没,伊朗核电站起火爆炸,城市里冒出巨型爆炸弹坑,边境线上聚集着大规模难民,战区的建筑被空袭炸毁……更绝的是,这些假图甚至能通过现有的AI检测工具,被鉴定成“真图”。

这就麻烦大了,连专业的鉴别手段都失效了。 为什么这事儿这么严重?因为这套工具跟普通的AI绘图不一样。它直接绑定了谷歌地球的真实地理坐标来合成图像。要知道,谷歌地球长期以来一直是全球记者和调查机构做突发事件事实核查的核心工具。

大众心里有个默认的常识:卫星截图是可信的。现在这个信任基础被动摇了,普通人光靠眼睛,根本分不清哪张是原始航拍图,哪张是AI合成的。 一旦这些虚假的灾难卫星图在社交平台上疯传,后果不堪设想。很容易制造出一大范围的网路恐慌,还会严重干扰大家对灾害和国际冲突事件的判断。

你想啊,如果一张假的爆炸图传开了,大家可能会以为某个地区真的出事了,这种误导可不是闹着玩的。 面对铺天盖地的争议,谷歌官方也站出来回应了。他们说,所有AI生成的图片都会嵌入一个叫SynthID的隐形水印,而且这些生成的图像不会自动同步到谷歌地球的公开地图上。

听起来好像有防护措施,对吧?但现实情况没那么乐观。 在网络传播的实际场景中,绝大多数网民只是随手转发截图。这些截图经过裁剪、二次压缩之后,那个所谓的隐形水印很容易就失效了。这样一来,预警的作用打了个大折扣,根本没法从源头上挡住虚假信息的蔓延。

说白了,技术上的小细节,在实际传播链条里成了摆设。 业内人士对此评价很直接:地理空间类的AI工具有着特殊的风险。普通的AI绘画大多是用来搞创意内容的,就算画得离谱,大家也知道那是艺术加工。但绑定真实地理位置的合成卫星影像,天生就带着一股“可信”的光环。

一旦被恶意利用,用来制造虚假灾难传闻或者煽动地缘矛盾,那危害可比一般的图片大得多,影响面也更广。 在舆论的巨大压力下,谷歌最终选择了妥协。7月31日,他们发布了一份官方声明,承认有不少用户传播的生成截图违反了平台的内容政策。

在建立起一套完善且强大的内容风控体系之前,谷歌决定暂时移除这项AI生图功能。至于什么时候能重新上线,谷歌并没有给出任何具体的时间表,留了个悬念。