会画画、会识图的ChatGPT终于要来了…

2023-09-25 09:59:53 来源:网络

大半夜的, OpenAI 又整出了个劲爆消息:

DALL·E 3 来了!不仅来了,还会被整合到 ChatGPT 里。

也就是说,除了老生常谈的对话、写代码、解数学题外,整合了最新 DALL·E 3 的 ChatGPT 这次终于有图片功能了。

ChatGPT+DALL·E ,这波算是强强联合,一个是语言大模型里的无冕之王,另外一个也算是文生图模型里的佼佼者,真正的效果也必然会 1+1>2 。

这次突然官宣算是填了今年年初 GPT-4 刚出来后,被传的纷纷扬扬的多模态 ChatGPT 的大坑。

不过,现在 OpenAI 还只是公布了这个消息,具体的上线时间是 10 月。面向 Plus 和企业版用户,单独的 DALL·E 3 今年秋天也会上线。

这玩意具体有多厉害,虽然现在我们还不能上手,但从 OpenAI 公开的示例来看,还是相当炸裂的。

其中,就有热心网友直接打来了 Midjourney ,把 DALL·E 3 的示例提示词喂给了它,好直接斗图一比高下。

而结果只能说:Midjourney 危了。

首先是很经典的牛油果看病梗图,提示词:一个牛油果坐在治疗师的椅子上,说着 “ 我感到内心如此空虚 ” ,牛油果中间有一个小坑大小的洞。治疗师,勺子,涂鸦笔记。

虽然乍一看是各有千秋,两种不同的风格。但若再仔细对照下提示词,很显然 Midjourney 忽视了治疗师,勺子,涂鸦笔记这几个元素,对话框里的文字也是乱写一通,不按照要求来。

然后让他们生成一张关于半透明心脏的图片,并且要求在心脏下面刻上一行特定的名言。

提示词:这是一幅用半透明的玻璃制成的人类心脏的插图,它矗立在狂风暴雨的海洋中的一个基座上。阳光穿透云层照亮了心灵,揭示了内在的微小宇宙。 “ 发现你内心的宇宙 ” 这句名言被用粗体字刻在基座上。

毫无疑问,这次 DALL·E 3 再次吊打了 Midjourney , Midjourney 除了没按照要求刻字外,像狂风暴雨的海洋、内在的微小宇宙等细节是一点也没展现。

再来一张以荔枝为灵感的球形椅子的照片,细节上,要求有白色凹凸不平的外观,柔软的内饰,与背后的热带壁纸形成对比。

这把它们俩生成的图片里各个元素都齐活了,但 Midjourney 似乎还是误解了热带壁纸和热带雨林的区别。

当然,误解提示词、断章取义这些都相当于是之前文生图模型的顽疾了。

像什么寄居蟹就给生成一个螃蟹。。。

让它生成 2D 的拟人化森林乐队结果生成 3D 的。。。

而这些老毛病,照 OpenAI 自己的说法以及给出的示例来看,新的 DALL·E 3 基本上不存在这种情况。

除了解决掉老毛病之外, DALL·E 3 还在原来二代版本上也进行了质感上的升级。

就比如让它们画篮球运动员扣篮的场景,元素是星空爆炸。

本来 DALL·E 2 生成的图已经很符合要求了,没想到升级后的 DALL·E 3 更加逼真,肌肉线条、宇宙的色彩这些细节都一一展示出来,属实是降维打击。

左:DALL·E 2 ,右:DALL·E 3

总体看下来, DALL·E 3 在 ChatGPT 的加持下,语言理解能力直接拉满,简直是要赢麻了的节奏。

升级版的 ChatGPT 不仅不会丢失关键信息点,就算只是零零星星打了几个关键词,它也能帮你自动补全描述,然后再让 DALL·E 3 生成图片。

OpenAI 这是拿捏住了当代网友 “ 文化沙漠 ” 的本质了( 狗头 )。

当然 DALL·E 3 和 ChatGPT 的整合,不止是更能听懂人话那么简单,它们还会产生一些奇妙的火花。

就比如升级版的 ChatGPT 在画画上也有了上下文理解能力,甚至可以直接当做生产力工具。

具体有多厉害, OpenAI 官网给出了一段演示视频,说实话,世超在看了后,也是为插画师的饭碗狠狠地捏了一把汗。

首先是让 ChatGPT 生成一个超级向日葵刺猬,它会给出四张图,从里面选一张最喜欢的之后,可以进行下一步的对话。

然后把这个刺猬命名成 Larry ,可以再让 ChatGPT 多生成几张它的照片。

接下来上点难度,直接搞个场景,让它展示一下 Larry 的家。

这把可以直接看出 DALL·E 3+ChatGPT 的实力了,不仅 Larry 的样貌还保持原样( 这换其他 AI 可能早变样了 ),而且门口的邮箱还写着 “LARRY” 的名字。

此外,描述 Larry 的特点、用图片展示它的爱心、甚至做做 Larry 的周边,设计出几个贴纸,对于 ChatGPT 来说都是洒洒水的事。

最后让它整理个睡前故事,来个 ending pose , ChatGPT 也是信手拈来, u1s1 我真的有点被这丝滑的对话震撼到。。。

看到这里,世超还突然得了新的灵感,之后我们写好的文章岂不是就可以直接丢给 ChatGPT ,让它提取关键词做封面。

有啥特殊要求也可以直接告诉 ChatGPT ,参考图啥的也可以扔给它,摸鱼技巧 +1+1 。。。

言归正传,上面提到的那些还只是 OpenAI 单方面展示出来的效果,实际用起来怎么样,还是得等到 10 月份上线之后才能知道,估计到时候有会有一波隐藏技巧被网友们开发出来,坐等。

另外,谈到 AI 绘画,就还是躲不过那个老生常谈的话题:版权问题。

OpenAI 这边依旧还是之前的立场,和第二版一样,用 DALL·E 3 生成的图片不需要经过许可就能用,想商业化都行。

不过,有了太多的前车之鉴, OpenAI 这次耍了点小聪明,说是艺术家可以选择拒绝自己的作品被投喂给 DALL·E ,前提是只要填一个表格就 OK 了。

虽然这多少有点 “ 不拒绝就是默许 ” 的意味,但相较于之前,起码艺术家们不再那么被动了。。。

对于之前网络出现的 AI 绘画侵犯公众人物隐私,以及一些其他偏见的问题, DALL·E 也有对策了:在实际使用的过程中, ChatGPT 会直接拒绝提示中带有公众人物名字的请求。

也就是,像这种乐子图我们估计也不会在 ChatGPT 中看到了。。。

并且他们还组建了一个 “ 红色团队 ” ,用来评估和降低模型在各个阶段可能会产生的风险。

最后, OpenAI 还在官网上表示说,它们在研究一个识别 AI 画图的工具,能够判断哪些图片是 DALL·E 3 生成的。

( 只希望不要像之前那个识别 AI 文本的工具,因为鸡肋半路夭折。。。

总的来说,有文生图功能的 ChatGPT 就已经足够在 AI 圈子里掀起一阵热度,而这波又是整合的升级版 DALL·E 3 ,很难不让人振奋,反正世超已经是等不及想上手试试了。

但有人欢喜有人忧, OpenAI 这波是再次甩了同行一大截,等到 10 月更新之后,估计又有不少 AI 初创公司被碾压在 ChatGPT 前进的车轮下。。。

撰文:松鼠 编辑:江江&面线 封面:三狗

,会画画同仁堂股票 、会识图的ChatGPT终于要来了…

相关:

美国政府又要关门了?盖蒂图片社如果立法者不能就融资计划达成一致,美国将再次面临政府可能关闭的情况。目前,当前的支出计划将于2023年9月30日到期。到时候,我们可能会面临政府债务违约、经济陷入混乱的可能性,政府即将停摆,除公职人员外,民间企业也将受到冲击,社安金支票会暂停寄发; 高盛(Goldman Sachs)机构估计,政府每停摆一周,经济成长损失将达0.2%。作为消费者,重要的是要尽我们所能保护自己免受政府潜在违约或关闭造成的严重经济..

“翻拍的唯一作用,是让老版再红一把”  中新网北京9月25日电(记者 上官云)在很多人心目中,《上错花轿嫁对郎》是一部经典老剧。李玉湖娇憨直率,带着点侠气;杜冰雁冰雪聪明,很有大家闺秀的气质。   前段时间,由该剧翻拍而来的《花轿喜事》播出了,关注度还不错,一度是热搜榜上的常客。但该剧口碑褒贬不一,比如被质疑选角不合适、部分演员演技不到位等等。   《花轿喜事》不是第一部引起争论的翻拍剧。这些年,提起“翻拍”二字,观众往往会报以一声叹..

聊一聊:你抢到想看的演唱会门票了吗?

这颗小行星未来可能撞向地球!美国航天局成功取样北京时间9月24日晚间22点52分,美国航天局小行星采样探测器“奥西里斯王”号(OSIRIS-REx)已经携带贝努小行星的宝贵样本成功返回地球。直播画面。(来源:NASA直播画面)落地成功后工作团队照片。(来源:NASA直播画面)早在9月17日,NASA的工程师略微改变了航天器的轨道,调整了样本返回舱的着陆位置,目标是美国国防部犹他州测试训练场当中一个58km × 14km的矩形预定着陆区。为确保顺利回收,NASA的回收团队于9月10日进行..

天外来新土!美国首个小行星采样任务返回地球人从未比在太空行走时显得更为渺小,或更为伟大太空飞行7年后,NASA小行星探测器奥西里斯-REx(OSIRIS-REx)的样本返回舱于北京时间今天(9月24日)晚间在美国西部沙漠着陆。这是美国首个小行星采样返回任务。▲样本返回舱着陆(图源:NASA Live)耗资10亿美元的奥西里斯-REx 任务是2016年9月8日从佛罗里达州卡纳维拉尔角发射的,近两年后抵达小行星贝努(Bennu)周围,然后又花了两年时间对其表面进行扫描和成像。2020年10月2..

这两个冲突国家的领导人,要谈了亚美尼亚和阿塞拜疆两国领导人将于10月5日举行会谈据亚美尼亚安全委员会24日发布的消息,亚美尼亚总理帕希尼扬和阿塞拜疆总统阿利耶夫将于10月5日在西班牙南部格拉纳达举行会谈,德国总理朔尔茨和欧洲理事会主席米歇尔将出席会谈。帕西尼扬(左)和阿利耶夫 资料图

小行星贝努样本舱降落在美国犹他州当地时间9月24日,根据美国国家航空航天局(NASA)官网显示,美国小行星采样探测器“奥西里斯-REx”于当天将一个样本舱发回地球,舱内装有探测器大约3年前采集的小行星贝努表面样本,该样本舱已于美国东部时间上午10时53分降落在犹他州盐湖城附近一片沙漠里,而探测器“奥西里斯-REx”则将继续进行探测任务。目前,军事搜救队成员已出发前往样本舱的着陆地点,并会尽快将样本舱送往临时洁净室,以保护它免受地球环境的污染。(央..

中美竞合进入新的平衡期?直新闻:陈先生,中美刚成立经济和金融两个工作组,来重建两国在经济领域的沟通机制,但美国贸易代表戴琪却施压世贸组织,要求取消中国的发展中国家地位,你怎么看美国这种自相矛盾的做法?特约评论员 陈冰:从2018年中美贸易战爆发以来,美国对华经贸、科技和市场政策,基本上运用一切手段进行封堵打压。用美国人的话说,是全面竞争。用中方的话说,是美国对中国开展零和博弈式的“激烈竞争”,把中美关系向竞争和对抗的方向推..

《曹禺全集》出版 万方:或以此重新了解父亲  中新社北京9月24日电 (记者 高凯)在纪念剧作家曹禺诞辰113周年之际,《曹禺全集》由北京十月文艺出版社正式推出。24日,在《曹禺全集》首发式上,曹禺之女、作家万方直言,《曹禺全集》或将提供一个新的渠道,让自己重新了解父亲。   曹禺自幼酷爱戏剧。1933年在清华大学读书时,23岁的曹禺发表处女作《雷雨》,这部作品不仅奠定了他在中国话剧史上的杰出地位,也被视为中国话剧艺术从年轻走向成熟的标志。曹禺一生写..

留学生在南昌提前庆中秋:听古乐、穿旗袍、做月饼  中新社南昌9月24日电 (朱莹 吴思瑜)巴基斯坦留学生哈西(Haseeb Abdullah)24日在江西南昌告诉中新社记者,听一曲古乐、尝一块月饼、赏一次花灯,是他这四年在中国过中秋节的“老三样”。   当日,“金风送爽·情满双节”迎中秋·庆国庆国际人文交流活动在南昌市举行,来自巴基斯坦、坦桑尼亚、埃及、肯尼亚等国的在南昌高校留学生及中国大学生代表近百人一起观看旗袍知识讲座、欣赏民乐歌舞表演,体验旗袍换装、冰皮月..