写点什么

超越 DALL-E 2?谷歌文本转图像 AI 模型 Imagen 首次开放测试

  • 2022-11-04
    北京
  • 本文字数:949 字

    阅读完需:约 3 分钟

超越DALL-E 2?谷歌文本转图像AI模型Imagen首次开放测试

近日,谷歌开始通过 AI Test Kitchen 应用公测其文本转图像 AI 模型 Imagen,以收集用户对 Imagen 的反馈。

 

今年 6 月份,谷歌正式推出文本转图像 AI 模型 Imagen,并表示 Imagen 生成的图像已经全线超越了 DALL-E 2,原因就是 Imagen 拥有一套量身打造的测试新基准 DrawBench。

 

据悉,DrawBench 的测试指标并不是特别复杂:本质上,它就是一份包含约 200 条文本提示的列表,谷歌团队把这些提示输入到 Imagen 及其他文本到图像生成器里,再由人工评分员判断各程序的输出质量。

 

Imagen 还使用 Transformer 语言模型将输入的文本转换成一个嵌入式向量的序列。然后,连续的三个扩散模型(diffusion model)会将这些嵌入式的向量转换成 1024x1024 像素的图片。作为其成果的一部分,该团队开发了名为 U-Net 的改进型扩散模型,以及适用于文本至图像模型的新基准套件 DrawBench。按照 COCO 基准,Imagen 的 zero-shot FID 得到了 7.27 分,超过了之前表现最好的 DALL-E 2 模型。

 

不过彼时,谷歌尚未向公众开放 Imagen,并表示 Imagen“目前尚不适合公众使用”。谷歌方面也强调,这些系统在训练过程中也不可避免接触到了社会偏见,所以输出结果中也会包含种族主义、性别歧视或其他一些有毒内容。他们计划开发一种新方法来衡量“未来工作中的社会与文化偏见”,希望借此测试模型的后续迭代。

 

而随着近日谷歌将 Imagen 添加到AI Test Kitchen 应用中,用户终于可以亲自使用 Imagen。

 

据了解,AI Test Kitchen 是谷歌在今年早些时候推出的一款应用,其目的是对谷歌的各种 AI 系统进行测试。此前,用户在该应用程序中可以与谷歌的文本模型 LaMDA 进行互动,现在,用户也可以在该应用中与 Imagen 进行互动。

 

值得一提的是,谷歌对用户与 Imagen 之间的互动实施了严格的限制,用户不能随心所欲地创造文本图像,只能在选定的主题上添加不同的风格。这也是谷歌有意为之。谷歌产品管理高级总监 Josh Woodward 解释称,AI Test Kitchen 的全部意义在于:获得公众对这些 AI 系统的反馈;测试哪些行为会使得系统崩溃。

 

具体而言,用户有两种方式与 Imagen 互动:城市梦想家和 Wobble。



在“城市梦想家”中,用户可以生成围绕一个主题设计的城市图像,Imagen 能够根据用户的想法,创建样本建筑和地块。


 

在“Wobble”中,用户可以创造一个小怪物,并选择它的材质和服装。

 

2022-11-04 16:125006

评论

发布
暂无评论
发现更多内容

架构师训练营作业

郎哲

极客大学架构师训练营

架构师训练营第九周总结

邓昀垚

极客大学架构师训练营

架构师训练营第九周学习总结

文智

极客大学架构师训练营

第五周总结

Griffenliu

性能优化(三)

wing

极客大学架构师训练营

架构师训练营week09

FG佳

极客大学架构师训练营

java实现一致性 hash 算法

Mars

一致性Hash算法

五周 - 作业

水浴清风

一致性hash

架构师训练营第 1 期 -- 第九周作业

发酵的死神

极客大学架构师训练营

「架构师训练营」第 5 周作业

小黄鱼

极客大学架构师训练营

「架构师训练营第 1 期」第九周作业

张国荣

第 5 周 系统架构总结

心在那片海

架构师训练营第九周作业

Shunyi

极客大学架构师训练营

架构师训练营 - 第 9 周课后作业(1 期)

阿甘

c语言只是总结大全,干货收藏

C语言与CPP编程

面试 编程语言 C语言

架构师训练营 2 期 - 第五周总结

Geek_no_one

极客大学架构师训练营

架构师训练营第九周学习笔记

郎哲

极客大学架构师训练营

架构一期 第九周作业

haha

极客大学架构师训练营

第九周总结

solike

架构师训练营第九周作业

邓昀垚

极客大学架构师训练营

架构师训练营第 5 周学习总结

菜青虫

极客大学架构师训练营

第五周作业

Griffenliu

架构师训练营 - 第九周 - 作业一

行者

顺序查找

ilovealt

算法和数据结构

第五周笔记

willson

极客大学架构师训练营

第九周总结

Geek_ac4080

第 5 周作业

Steven

极客大学架构师训练营

架构师训练营第九周作业

月殇

极客大学架构师训练营

第 5 周 系统架构作业

心在那片海

第九周作业

wanlinwang

极客大学架构师训练营

架构2期第5周作业

supersky6

超越DALL-E 2?谷歌文本转图像AI模型Imagen首次开放测试_文化 & 方法_凌敏_InfoQ精选文章