OpenAI发布最新 AI 绘画模型DALL·E 3，集成ChatGPT并提升细节效果｜钛快讯

利用DALL·E生成的 AI 图像（图片来源：OpenAI）

OpenAI 又公布了最新重磅消息。

北京时间9月21日凌晨，美国OpenAI公司宣布，文生图 AI 工具迎来了第三个版本DALL·E 3，比上个版本仅过去17个月左右。

OpenAI 表示，DALL·E 3比以往系统更能理解细微差别和细节，让用户更加轻松地将自己的想法转化为非常准确的图像。同时，DALL·E 3还将与ChatGPT集成，原生实现多模态输出，Plus和企业版用户通过文本就能直接在ChatGPT中生成各种类型图片，不仅加强提示词的生成图像体验，而且增强模型理解用户指令的能力，图像效果也有巨大提升。

OpenAI公司CEO奥特曼（Sam Altman）表示，在他看来新的DALL·E 3效果相当惊人，它将在接下来的几周内向所有ChatGPT Plus付费版/企业版用户开放。“如果不尝试的话，很难理解这是多么了不起的事情。”

据悉，OpenAI成立于2015年，致力于开发和应用人工智能（AI）技术造福全人类。目前，OpenAI公司估值高达270亿美元左右，年营收已接近10亿美元。

2021年，OpenAI推出了DALL·E 和CLIP（对比图文预训练），能连接文本与图像的神经网络。其中，DALL·E基于文本直接生成图像，而CLIP是一个单独的模型，其作用是理解输出图像并为其打分。DALL·E生成的图像由CLIP模型进行筛选，以呈现最高质量的图像。

2022年，OpenAI升级了文生图能力，发布DALL·E 2，提供了更高的图像分辨率、更低的延迟以及编辑原始图像的能力。而且公开报道现实，DALL-E模型是GPT-3的多模态实现，共拥有120亿个参数，使用从网络上收集的文本和图像对进行训练。而且使用零样本学习从描述和提示中生成输出，而无需进一步训练。

剑桥大学机器学习教授尼尔·劳伦斯（Neil Lawrence）曾认为，DALL·E这类模型有能力存储世界信息，并以人类认为非常自然的方式进行推广。佐治亚理工学院交互计算学院副教授马克·里德尔（Mark Riedl）则认为，DALL·E的演示结果表明它能够协调地融合概念，这是人类创造力的关键要素，同时他指出DALL-E绘制的插图比过去几年其他的Text 2 Image（由文本生成图像）系统要出色许多。

时隔500多天后，此次发布的DALL·E 3拥有多个新特性，钛媒体App简单梳理如下：

DALL·E 3 具备更强大的图像细节和差异识别能力，使用户更易将想法转化为准确的图像，并解决了之前版本DALL·E不会写字的问题。DALL·E 3 的一个主要特点是与 ChatGPT 的集成。此集成允许用户更简单地创建 prompt（提示词），因为当输入一个想法时，ChatGPT 会自动为DALL·E 3生成详细的 prompt。DALL·E 3 在图像质量和对 prompt 的准确性上都有所增强。相比于上一代，新版本更能理解文本的上下文和更长的 prompt，处理效果更佳。安全性方面，OpenAI 在DALL·E 3上制定了强有力的安全措施，以防止创建有害图像，它也不能生成公众人物的图像。同时，DALL·E 3不会生成在世的艺术家的风格图像，避免了之前版本中的争议，而艺术家可以提交自己的作品并要求从未来的文本到图像 AI 模型中移除，保证其版权不被侵犯。DALL·E 3计划在10月先向特定用户发布，并计划在秋季向研究实验室及其 API 服务发布。OpenAI 还未明确是否会发布免费的公开版本。

简单来说，利用ChatGPT，新的DALL·E 3实现了更准确的图像生成能力，更好的体验效果，以及更安全的文生图规范。

OpenAI研究员Sandhini Agarwal 表示，她对DALL·E 3的安全性“高度有信心”，并表示该模型在不断改进。

值得一提的是，目前，国内外已经有多个对标DALL·E的文生图模型AIGC公司和应用，其中包括独角兽公司Stability AI的开源文生图模型Stable Diffusion，Midjourney，英伟达的Perfusion模型，阿里巴巴的通义万象，智源研究院的开源双语模型AltDiffusion，HiDream智象未来的Pixeling（千象），阿里大文娱旗下妙鸭相机，网易伏羲旗下模型丹青等。

然而，当前 AI 生成的图像仍存在一些问题。华盛顿特区一家法院8月裁定，根据美国法律，未经任何人工输入而由人工智能创作的艺术作品不能获得版权。

当前，OpenAI仍面临多起诉讼。其中，美国作家贸易组织代表约翰·格里沙姆（John Grisham）和《权力的游戏》小说家乔治·马丁（George RR Martin）等作家起诉该公司，指控ChatGPT非法训练学习他们的作品。

（本文首发钛媒体App，作者｜林志佳）