围绕OpenAI推出的第二代DALL-E2系统的讨论一直处于两极分化的状态,甚至在其推出了几个月后依旧如此。
有用户认为这是一项可以重新定义艺术的突破性创新,而批评者则将其视为人工智能图像生成器给创意产业带来厄运的开始。
然而毫无疑问的是,DALL-E2为我们创造和消费艺术开辟了新的可能性和挑战。本文详细介绍了AI图像生成器DALL-E2的用法和缺点。
什么是DALL-E2?
DALL-E2是一款人工智能图像生成器,它可以根据自然语言的文本描述创建图像和艺术形式。换句话说,它是一个根据文本生成图像的人工智能系统。
2021年1月,OpenAI推出了DALL-E模型,DALL-E2是其升级版。“DALL-E”这个名字源于西班牙著名艺术家SalvadorDalí和广受欢迎的皮克斯动画机器人“Wall-E”的组合。
2022年7月,DALL-E2进入测试阶段,可供白名单中的用户使用。同年9月28日,OpenAI取消了白名单的要求,推出了任何人都可以访问并且使用的开放测试版。
方舟投资:区块链等五大科技创新将颠覆全球经济:12月27日消息,被誉为“科技股女股神”的方舟投资(ARK Investment Management)创始人兼首席执行官凯瑟琳伍德(Cathie Wood)日前撰文称,全球经济似乎已经进入了一段剧变期,五大科技创新将会重塑市场。
据英国《金融时报》,方舟投资认为,DNA测序、机器人技术、能源储存、人工智能和区块链这五大科技创新将颠覆全球经济。其中涵盖14种技术,包括基因疗法、3D打印、云计算、大数据分析和加密货币等。(Wind资讯)[2020/12/27 15:48:24]
与最初的DALL-E一样,DALL-E2也是一种语言生成模型,它使用文本提示来创建原始图像。
尽管和之前DALL-E具有的120亿个参数的模型不同,DALL-E仅仅具有大约35亿个参数,但DALL-E2生成的图像分辨率是DALL-E的四倍,这是一次令人印象深刻的升级。同时,DALL-E2在真实感和字幕匹配方面似乎也做得更好。
如何使用DALL-E2?
听起来,DALL-E2很有未来感,可能会让新用户望而生畏,但它使用起来非常简单。我们不进行详细介绍,仅通过迷你教程为大家提供快速概览。
首先,登陆DALL-E2的官网并创建一个帐户,如果您此前已经拥有OpenAI的帐户,登陆即可。需要注意的是,系统会要求您提供电子邮件和电话号码以进行验证。
彭博策略师:Ripple有潜力颠覆跨境支付行业,但XRP敞口风险巨大:彭博高级大宗商品策略师Mike McGlone认为,Ripple可能会成功地颠覆跨境支付领域,但同时担心Ripple在XRP和波动的加密市场的风险敞口可能成为不利因素。McGlone在一份报告中指出:“Ripple Labs与速汇金(MoneyGram)在2019年的合作表明,市场仍认为跨境支付存在颠覆的可能性,但Ripple自身的加密货币风险敞口对其企业软件业务构成了威胁。该项目的投资者,包括万事达(Mastercard)、Visa、Capital One、花旗集团(Citigroup)和美国银行(Bank of America),可能只是在对冲风险。”
总的来说,McGlone认为跨境区块链项目在取代现有系统方面面临着一场艰苦的战斗:“治理、可扩展性、标准化和安全方面的考虑为现有的基础设施(如Swift)提供了一条健康的护城河。”McGlone还认为,未来央行数字资产可能会影响支付,并与Facebook的Libra等项目展开竞争。(The Daily Hodl)[2020/4/27]
一旦帐户准备就绪,我们就可以开始生成图像。用户最多提供400个字符的描述性文本,AI艺术生成器将对其进行处理。根据测试,我们可以从文本提示中得到许多原创且有趣的结果。
比如,我们输入“狼群在满月时嚎叫”就收到了如下的结果。
声音 | 邵伏军:商业数字货币可能对清算机构产生颠覆性变革:据证券时报e公司消息,CF40常务理事、中国银联股份有限公司董事长邵伏军8月10日在第三届“中国金融四十人伊春论坛”上表示,从商业数字货币角度看,以Libra为例,机构或用户注册后,会分配一个全球通用的加密用户账户,利用Libra代码进行不同地方货币转移,实现点对点交易。交易过程采取分布式计账,整个交易对转接清算机构是颠覆性的变革。目前还没有看到商业银行、商业银行账户、转接清算机构在其中的作用。[2019/8/11]
输入“一个3D渲染的罗马士兵正在休息”则获得了以下的图像。
DALL-E2的工作原理是什么?
DALL-E2为AI图像生成器的质量提供了新的基准。它与之前的同类产品相比,能够更好地理解文本描述。
分析 | 报告显示:基于区块链的自治性保险将颠覆传统保险业:根据ResearchAndMarkets.com 发布的最新Peer2Peer Insurance Global 2018中显示区块链技术和点对点(P2P)保险模式正在重塑保险领域。该研究指出,最近出现了一股使用区块链技术和自治模型的p2p保险新浪潮。在自治模式下,社区内的投保人共同管理所有保险职能,如制定政策规则,接受新成员,提出和批准索赔,以及支付赔偿。传统保险公司所做的工作——报价、索赔管理和管理,现在都可以通过软件和智能合约来处理。[2018/9/10]
其卓越的自然语言理解能力可以更严格地控制图像的风格、主题、角度、背景、位置和概念,并获得更高质量的图像和令人印象深刻的艺术形式。
那么让我们来看看DALL-E2的工作原理。
要了解AI图像生成器的工作原理,我们首先需要了解CLIP、先验模型和解码器扩散模型。
什么是CLIP?CLIP指的是对比语言图像预训练,是DALL-E2架构中最关键的模块。
该训练基于用户可以用自然语言教计算机不同图像之间如何相互关联,并由文本和图像编码器这两个神经网络组成。
文本和图像编码器都接受了大量不同的图像文本对集合的训练。该模型分析这些图像-标题对以创建称为文本/图像嵌入的矢量表示。换句话说,CLIP充当文本和图像之间的桥梁。
真格基金创始人徐小平:区块链+AI可能是未来五年最具颠覆性的创造性力量 中国要抓住这世界性、历史性机遇 :在2017钛媒体T-EDGE年度国际盛典上,徐小平发表演说:几年前是互联网+,但是未来五年一定是AI+。任何一家公司,如果你没有人工智能,如果你没有大数据支撑,你可能会被淘汰。虽然ICO叫停了,但是我认为区块链技术、比特币还会继续持续不断的发展,这是中国要抓住的世界性、历史性机遇。区块链的崛起有可能取代移动互联网的既有的各种技术。所以说,区块链技术+AI技术,可能是未来五年最具颠覆性、破坏性的创造性力量。[2017/12/15]
先验模型采用标题/CLIP文本嵌入,并以此为基础生成CLIP图像嵌入。
unCLIP则是使用CLIP图像嵌入生成图的原始CLIP模型的逆模型。DALL-E2通过先验模型和unCLIP模型来创建输出。
下图大致概述了其基本过程。
如图所示,unCLIP模型创建了图像的“心理”表示。基于此,创建了原始图像。
这些“心理再现”保留了语义一致的核心特征和特点,例如“动物、物体、颜色、风格和背景等关键要素”。然而,因为扩散学习是变化的,每一次输出的图像也会有所不同。
请注意,上文只是DALL-E2工作原理的简要表述,实现的技术细节和数学更加复杂,我们就不在这里赘述。如果您对DALL-E2的技术规格感兴趣,可以参看OpenAI在今年早些时候发表的论文《HierarchicalText-ConditionalImageGenerationwithCLIPLatents》。
使用DALL-E2可以做什么?
只要用户给出精确和具有描述性的文本提示,就可以通过AI艺术生成器得到多个高质量的图像,甚至在几秒钟的时间里实现画家或数字艺术家需要数小时甚至数天才能达到的质量水平。
用户可以免费查看所有这些视觉创意,无需支付场地费,也无需向创意人员和模特支付工资。
然而这也对我们的内容创作经济带来了一定的影响。
DALL-E2使用自己对主题、风格、调色板和所需概念意义的“理解”,生成相应的图像。
每个图像最多可以产生四个变体。每一个都与原作的外观、感觉和意义相呼应,但又具有自己独特的风格。
您也可以在DALL-E2中编辑图像,无需任何照片编辑经验。与AdobePhotoshop不同,使用DALL-E进行编辑非常简单。
例如,用户想要在火星上行走的宇航员的肖像中添加一只狗,只需要输入“在宇航员身后放一只狗”。同样,用户还可以要求程序通过放大和缩小来更改图像的视图框架,直到获得所需的结果。而就DALL-E2的功能而言,这些只是冰山一角。
同时,根据设计,该系统无法生成涉及、血腥或元素的内容。也就是说,该程序有其合理的局限性和缺点。
DALL-E2的局限性
DALL-E2的输出质量很大一部分取决于用户提供的文本提示的质量,文本越具体,获得所需输出的机会就越高。然而,该系统有一些内在的局限性。
例如,当前它还不具有很精确组合性,尽管似乎会随着时间的推移而改善。这意味着DALL-E2通常无法有意义地合并多个对象或对象属性,例如形状、方向和颜色。
同时在一些意料之外的情况下,有一些相对简单的文本,程序也可能无法充分执行。
例如,我们输入文本“一百只打扮成罗马士兵的青蛙在沙漠中行进”。即使我们尝试了多种提示变体,结果也不尽如人意。
另一个例子是当我们尝试相当简单的提示时,如“霸王龙骑着独轮车在艾菲尔塔前”。不知道为什么,程序拒绝画独轮车,取而代之的是自行车。而当我们从提示中删除“EifelTower”,产生预期图像则没有任何阻碍。
这些只是DALL-E2局限性的几个例子。更令人担忧的问题本质上很复杂,可能会对公司及其用户造成严重不良影响。
OpenAI限定DALL-E2不创建公众人物和名人的图像。事实上,它完全拒绝生成包含真实面孔或真人的图像,这是朝着防止滥用该程序迈出的重要一步。
随着DALL-E2越来越受欢迎,版权侵权也可能成为一个大问题。OpenAI坚持认为,用户“获得了将他们使用DALL-E创建的图像商业化的全部权利,包括转载、销售和商品化的权利。”
然而,人工智能艺术生成器依赖于分析、学习人类艺术家的作品来创造艺术。因此,不能排除潜在的侵犯知识产权法的可能性,无论是否有意。
总结
DALL-E2完美吗?作为一项正在完善的项目,答案是否定的。
但是,正如机器学习的本质一样,随着时间的推移,该程序正变得越来越聪明,也越来越有能力。从纯技术的角度来看,DALL-E2是AI技术演进的一大进步。
人们普遍认为人工智能系统在创意领域实际上无法超越人类,至少不会很快。但是DALL-E2已经使这个论点受到了冲击。
然而尽管OpenAI已经采取了一系列措施来预测和防止DALL-E2的潜在滥用,但这并非万无一失。在没有任何道德界限的情况下可以使用的AI系统将在多久后出现?需要我们保持警惕。
无论如何,我们都需要密切关注这个新兴行业。因为AI艺术生成器及其背后的技术只会在未来的岁月里变得更加普遍。
来源:twitter整理了40多个具有超强潜力的DeFi协议路线图。经其授权,我做了翻译补充,以方便大家参考.
1900/1/1 0:00:00原文:2022:CryptoVCComesDowntoEarth作者:alexthorn??简介2022年,加密VC向Crypto初创公司投去了总计300亿美元的资金.
1900/1/1 0:00:00DeFi数据1、DeFi代币总市值:432.11亿美元 DeFi总市值及前十代币数据来源:coingecko2、过去24小时去中心化交易所的交易量36.
1900/1/1 0:00:00USDC发行人Circle宣布,未来将由德勤而不是均富进行审计。据该公司称,其最近一次审计涵盖了2019年、2020年和2021年,并已向美国证券交易委员会公开提交.
1900/1/1 0:00:00撰写:RiddlerDeFi编译:深潮TechFlowFTX的失败提醒我们,加密货币需要去中心化。如果世界不给我们一个加密货币ETF,DeFi将为我们提供一个去中心化的ETF.
1900/1/1 0:00:00原文:Reddit,由DeFi之道编译。1月11日,以太坊基金会研究团队成员在Reddit上展开了第九次AMA。这也是2023年的第一场AMA.
1900/1/1 0:00:00