谷歌上线AI新玩法:随手乱涂鸦,一键变怪兽
本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。
小明随意地涂鸦了一个头部,再简单地画了个翅膀,加上一个大尾巴……再单击「转换」键。
一只面目狰狞、皮肤粗糙、谷歌纹理细致的大怪兽就创造出来了。
这是Google研究人员制作的AI工具奇美拉画家(Chimera Painter)。
这是个线上绘画工具,可以将涂鸦变成一个栩栩如生的怪物。
奇美拉的条件型GAN
研上线究人员建立了一个生物混合体的概念,就像是一个纸牌游戏。
比如你拿到一张「鲸」卡,通过组合,可以变成一个「鲸VS大象」的嵌合体怪兽。
这个组合而成艺术作品,还能保留原始图像的视觉特征。
在此之前AI生成式对抗网络 (GAN, Generative Adversarial Networks )被广泛用于图像创作上。GAN一般包含两个模块:
生成模型(Generative Model) 判别模型(D新玩iscriminative Model)
两个模块互相博弈学习产生相当好的输出。一个优秀的GAN应用需要有良好的训练方法,否则可能由于神经网络模型的自由性而导致输出不理想。
例如,麻省理工学法:院和IBM合作,开发出了“GAN绘画工作室”。
允许用户上传自选图像以从多种角度修改其外观,从更改对象的大小到添加全新的物体,例如如树木、窗户、建筑物、桌子……等等。
再有,英伟达(Nvidia)随手最新的AI软件将粗糙的涂鸦变成真实的风景。
而在奇美拉画家中,与前两者注重照片写实的GAN不一样,他们采用了一种称作条件型GAN的方法。
这种方法与一般的GAN不一样,一般的GAN是在一系列乱涂图片基础上,生成器和判别器相互对抗磨合,形成全新的图。
奇美拉画家则是需要在生成器中输入一张创作图,在此基础上,再通过GAN生成新图。
将怪兽肢解建模,再组合渲染
为了训练GAN,研究人员鸦,创建了10000多个全彩色图像的数据集,包含不同生物的3D模型。
在这个生物模型的数据库中,不仅描绘了每个生物整体的大小和形状,还提供了肢体、器官、躯干的分割图。
艺术家就在这些“肢解”一键模型的基础上,重新组合出新的“生物”。可以选择头、牙齿、躯干、翅膀等不同部分进行绘画。
可以看到左侧有各种肢体部分选项按钮。
然后经过GAN,选出组合得最好的模型,将之合并,输出到Chimer变怪a Painter中。
得先制作生物纹理
在GAN模型中,在渲染对比度低的图像部分时,会有跳格,使图像失去空间连贯性。
例如这张图的腿和眼睛的识别界限不清晰,导致输出来的图像奇奇怪怪。
为了解谷歌决这个问题,奇美拉画家的研究人员开发了一种新的半自动化方法。
奇美拉画家对每种所需的生物类型(例如鬣狗或狮子)都会建立一个模型。
然后,艺术家使用虚幻引擎制作了叠加在3D模型上的彩色纹理。
再将上线「分割图」的单色(例如头,耳,颈等部分)套用到模型上,确保GAN了解到艺术家指定的的结构,形状,纹理和比例。
再次使用虚幻引擎将3D生物模型放置在简单的3D场景中。
为了增加数据库的模型数AI量,一个自动化脚本会主动采用这个3D场景。在10000张生物模型的基础上,继续补充,生成了10000+张图像+分割图。
根据生物的不同姿势,在视点和缩放级别之间进行插值,创建出全色图像和分割新玩图,形成GAN新的训练数据集。
而每次手动创建这些数据,需要20多分钟。
谷歌表示,奇美拉画家为艺术家节省了数百万小时的时间。
- ·深度学习框架简史:TF和PyTorch双头垄断,未来十年迎来黄金时期
- ·标签: 富士胶片 影像 医疗健康 电子材料
- ·标签: Oracle OCI AI算力 云基础设施
- ·Facebook:正在评估反垄断诉讼
- ·智能眼镜的采用终于在2021年到来
- ·标签: YouTube 谷歌 尼尔・莫汉 自愿离职计划
- ·标签: 吉利 雷诺 巴西市场 GEA架构
- ·Salesforce 2023财年第四财季净亏损9800万美元 同比有所扩大
- ·云计算开发:Python内置函数-issubclass() 函数详解
- ·512张GPU炼出10万亿参数巨模型!这个模型今年双十一已经用上了
- ·阿里云拿下LV母公司五年长期合约:涵盖超40个品牌和部门
- ·标签: 软银集团 OpenAI 愿景基金 滴滴出行
- ·使用多云“分散风险”
- ·再见“功能车”!大众发布全域智能体路线图,AI定义汽车时代已来
- ·云计算开发:Python内置函数-list() 函数详解
- ·事实表明糟糕的数据将会扼杀优秀的人工智能
- ·云计算开发:Python练习实例-按大小顺序输出三个数
- ·云计算核心技术Docker教程:清理未使用的Docker对象
- ·NVIDIA 推出 Jet-Nemotron:53 倍提速的混合架构语言模型实现 98% 的推理成本节约
- ·英伟达 CEO 黄仁勋号召全员启用 OpenAI 的 Code
- ·云安全日报220224:IBM混合云数据库发现执行任意代码漏洞,需要尽快升级
- ·谷歌即将推出 “AI 模式” 作为默认搜索体验,允许用户在初次搜索后与 AI 继续对话
- ·云安全日报210603:Ubuntu Linux内核发现执行任意代码和拒绝服务漏洞,需要尽快升级
- ·标签: 吉利 雷诺 巴西市场 GEA架构
- ·平台不得大数据杀熟!《网络交易平台规则监督管理办法》发布
- ·标签: 西山居 金山软件 仙剑情缘网络版 剑侠情缘网络版叁
- ·微软回答和PS5的不同 想让30亿玩家玩游戏
- ·蚂蚁数科发布多语种视觉大模型训练框架,打破语言壁垒!
- ·标签: HappyHorse1.0 Seedance2.0 可灵 Transformer
- ·标签: 豆包 字节跳动 Seed 吴永辉
- ·云安全日报210507:思科SD-WAN管理软件发现执行任意代码漏洞,需要尽快升级
- ·云安全日报210128:IBM企业资产信息安全保护解决方案发现拒绝服务漏洞,需要尽快升级
- ·标签: 刘强东 苹果折叠屏 iPhone2026 雷军
- ·云计算开发:Python练习实例-求对角线元素之和
- ·标签: 蒋方舟 中国人民大学 学术不端 硕士学位
- ·OpenAI秘密启动“Mercury”项目:聘百名前银行家,训练AI系统自动化金融建模
