AIArt工具主要在欧美等国家发展较快,国内起步稍晚。
如果说人们对于效率性人工智能的定义是自动驾驶、数据分析、无人工厂等等,那么创造性人工智能的边界在哪里?
在文字创作领域,彩云小梦、Jasper、清华九歌等AI写作服务早已给出过令人震撼的答案。为无数网文作者开拓了思路,也在将文字创作的门槛压得更低的同时,收到了种种非议。而在美术创作领域,一直到今年上半年DiscoDiffusion红极一时,才引发热议。
短短几个月内,AIArt成为了全球VC都在追捧的赛道:符合目前最火的PLG模式、拥有底层壁垒的AI技术、是科技和人文完美的交叉点、大批体验者蜂拥而至。
甚至有人认为,AIArt在全球范围内的热度,有可能追赶NFT。
来源网络
上图为国内最大的平面设计师社区UISDC上首次出现关于DiscoDiffusion的科普文章,设计师是对图像创作工具最敏感的群体之一,彼时大多数C端用户还并不知道这一“黑科技”的存在,即使知道,也会因为它复杂的调试环境失去参与测试的欲望。
不过五个月,DiscoDiffusion的流行引发了一场从GoogleColabNotebook发酵而来的共享式实验革命。据知情人透露,解决了DiscoDiffusion技术痛点的追随者、上线于2022年8月22日的StableDiffusion,目前正在以5-10亿美元的估值接触融资。上线一个月,就有望跻身全球独角兽阵营,足以见得一级市场对于AIArt未来的看好。
网友十月十七用DiscoDiffusion生成了24节气
AIArt即AI生成艺术,是AIGC里面的一个分支。AIGC是“继专业生成内容和用户生成内容之后,利用人工智能技术自动生成内容的新型生产方式”。在国际上对应的术语是“人工智能合成媒体”,其定义是“通过人工智能算法对数据或媒体进行生产、操控和修改的统称”。
事实上,AI生成图像与画作,从技术和商业化角度,也已经分别拥有相当长的历史,并非新兴领域,而是一个不断革新迭代的技术领域。
早在2015年,Google就发布并开源了DeepDream,通过算法生成迷幻和超现实的图像。近十年的时间里,大到数字化合成,小到曾经风靡互联网的“一键生成新海诚风格照片”、“生成童年照片”等图片效果等,都在体现着AI能力和算力基础的不断优化成熟。
奢侈品街头服饰公司Les Benjamins宣布与Kalder合作推出LB代币:金色财经报道,奢侈品街头服饰公司 Les Benjamins 宣布与 Kalder 合作推出了 Flying Carpet Crew。该计划允许被称为 Carpet Weavers 的会员专享 VIP 活动。其中包括快闪店和时装秀。值得注意的是,Carpet Weavers 可以通过完成诸如在社交媒体上发帖、在 Les Benjamins 活动中扫描 QR 码以及在直播期间收集 POAP 等任务来赚取独家 LB 代币。
社区可以通过多种方式使用他们的 LB 代币。其中包括安全访问活动、限量版服装,甚至直接与 Les Benjamins 团队合作。[2023/5/4 14:41:25]
GoogleDeepDream生成效果,生成痕迹非常明显
AIArt今年以来的热度,是因为一种呈现为文字转图像特性的崭新交互方式,正在向大众宣告AIArt正在进入一个“民主化”的时代。使用文字描述,或者基于画面意象和故事,或者基于艺术家风格、构图、色彩、透视方法等专业名词,就能在数十秒内生成完整的绘画作品,这让艺术创作成为了一件像跑步一样的事:人人都会跑步,只不过是专业的人跑得更快。
还原到底层技术方面,则是一场Diffusion对GAN的彻底革新。
传统AIArt的的技术原理是生成对抗网络或VAE等,目前,GAN作为上一代AIArt工具与平台最主流的图像生成模型,在模型训练方面已经有了很大的突破,但在实际应用的过程中仍然拥有严重的结构性问题。
随着热度升温,可能会取而代之的是Diffusion。DenoisingDiffusionModels作为一种基于分数的生成模型,是一种非常强大的新型生成模型。其工作原理就是通过反复地向训练数据添加高斯噪声来破坏训练数据,然后通过反转添加噪声的过程来学习如何取回数据。Diffusion还提供大量样本多样性和学习数据分布的准确模式覆盖,这意味着Diffusion适用于具有大量不同和复杂数据的学习模型,从而解决了GAN的问题。Diffusion缓慢改变输入数据将数据映射到噪声的正向变换,通过学习的、参数化的反向过程来完成数据生成。该过程从随机噪声开始,一次一步地进行清理。
来源网络
Diffusion对图像生成效果的提升十分显著,数字生成的痕迹也得到了有效削弱,用户自己可选执行步数,步数越多图像越精细的特点也激起了更多的“硬核”需求。
第四届Reply Investment Challenge首次聚焦数字资产、加密货币和区块链:金色财经报道,第四届 Reply Investment Challenge 拉开帷幕,首次聚焦数字资产、加密货币和区块链。针对学生和年轻专业人士,2022 年国际在线竞赛有来自全球 95 个国家的 13,750 名参赛者,总操作量达 36,000 次。参与者将能够在受保护的环境中练习到 5 月 5 日,扩展他们对数字金融工具,特别是加密货币以及区块链作为支持技术的知识。每个玩家将拥有的 100 万欧元虚拟资本将在注册时可用,所有交易将按当前市场价值进行。[2023/4/9 13:52:40]
来源网络
这也就是为什么AIArt工具其实从很早之前就有了,但此前的图像效果经常会有“太假”或者不够完整等种种问题,甚至不如直接用Photoshop做一些风格化处理,因此这些作品也就失去了如今Diffusion时代作为艺术品的收藏与分享价值。
通过指数级爆发的帖子和作品展示,以DiscoDiffusion、StableDiffusion、DALL-E2、MidJourney这些算法和工具为代表的生成器,已经成为了AI生成向C端落地、以及更广阔的元宇宙世界的先发力量。
上图记录了足以让人们真正关注到AIArt领域的一起标志性事件:一副AI生成艺术作品在科罗拉多州博览会艺术比赛中获得了第一名
目前,AIArt工具主要也还在欧美等国家发展较快,国内起步稍晚,参与者主要是在AI领域或者图片编辑领域有较多积累的大厂,比如百度、美图等。
本文,36氪梳理了全球范围内正在流行的AIArt工具,分析其差异和共性,给国内有类似想法或者能力的创业公司、想要在AIGC方面做出投资的投资从业者以借鉴。
由于目前市场上的AIArt工具和服务中仍然有相当一部分使用的底层算法是DeepDream或者GAN,而近期热度主要来自Diffusion,因此我们把它们分成了两类。
Diffusion
StableDiffusion
StableDiffusion是时下最先锋、也是最流行的AI绘画机器学习模型,上线于2022年8月22日,由StabilityAI开发,Web演示版本搭载于AI开源社区Huggingface。StabilityAI是一家创立于2019年的人工智能初创公司,总部位于伦敦,致力于构建以AI为技术载体的解决方案。目前,StableDiffusion正在测试其商业版本DreamStudio,后者具有更快的生成速度,同时即将上线API功能。据知情人士透露,StabilityAI正在被Coatue、Lightspeed等知名VC考虑以5-10亿美元的估值进行投资。
开源,免费使用支持文本生成图像、图像生成图像两种模式Web演示版本生成速度非常快,预计生成图像只需要1到15分钟
基于AI的Web3平台OP3N完成2800万美元A轮融资:金色财经报道,基于 AI 的 Web3 平台 OP3N 以 1 亿美元估值完成 2800 万美元 A 轮融资,Animoca Brands 领投,Dragonfly Capital、SuperScrypt、Creative Artists Agency 和 New Enterprise Associates 的 Connect Ventures、Republic Crypto、Avalanche 的暴雪基金、Galaxy Digital 和 Warner Music Interactive、GSR Markets、The Spartan Group、BRV Capital Management 和 NBA 球员 Russell Westbrook 等参投。[2023/3/21 13:17:22]
来源:StableDiffusion
DiscoDiffusion
DiscoDiffusion具有一个强大的开源CLIP-GuidedDiffusion模型,基于谷歌技术架构,可以创建详细、逼真的图像。上线于2021年10月29日,由Accomplice开发,Accomplice是一家创立于2016年的公司,致力于帮助每个团队和个人找到适合他们的AI驱动的图像工作流程。
开源,免费需要通过GoogleColab生成,没有更友好的用户界面,有使用门槛用户可以自己定制步数等高级选项来源:DiscoDiffusion
DALL-E2
DALLE2可以从自然语言的描述中创建逼真的图像和艺术,上线于2022年4月6日,由OpenAI开发。OpenAI由马斯克、美国创业孵化器YCombinator总裁阿尔特曼、全球在线支付平台PayPal联合创始人彼得·蒂尔等硅谷科技大亨在2015年创立。此前,在DALLE2尚未正式发布时,每周仅向1000名用户发布,9月29日,OpenAI已经取消了访问其文本生成图像系统DALL-E2的等待名单,任何人都可以立即注册使用。OpenAI称,大约150万DALL-E用户每天生成超过200万张图像。
文本到图像生成仅仅需要几分钟,生成的图像的多次迭代编辑和修饰功能,可以自定义多层图像渲染人脸方面,为了防止图片造假,DALL-E2会故意生成歪七扭八的眼部,或是扭曲的嘴唇任何注册访问DALL-E的人都将免费获得50个点数,此后每月可再获得15个点数,每个点数可用于生成一张图片,点数可以购买,115个售价15美元
来源:DALLE2
MidJourney
分布式云游戏平台Now.gg获NTT DoCoMo Ventures投资:金色财经报道,分布式云游戏平台Now.gg宣布已获得NTT DoCoMo Ventures投资,具体投资金额暂未公开。Now.gg主要支持PC、Android、Mac和游戏机等多设备玩家通过内置浏览器访问分布式云游戏,NTT DoCoMo通过这次投资将会强化其基于浏览器的多设备元宇宙服务。(investingnews)[2023/2/15 12:07:37]
MidJourney是一个流行但尚未普遍可用的AI艺术生成器。Midjourney是一个独立的研究实验室,探索新的思想媒介并扩大人类的想象力。Midjourney是一个小型自筹资金团队,专注于设计、人类基础设施和人工智能。Midjourney是托管在Discord服务器上的AI文本到图像扩散模型。目前已经有150万用户。
演示版易于使用,仅需要提供一个小文本输入基于Discord,有良好的社区生态文档详尽,对开发者友好
MidJourney
TIAMAT
TIAMAT是由国内团队研发的一款人工智能绘画工具,于2022年7月22日上线,公司总部位于上海。目前还处于内测版本。
支持中文输入主要面向中国用户群体,更理解东亚艺术风格基于飞书社区,申请制内测TIAMAT
PhotosonicAI
Photosonic由AIGC公司Writesonic开发,位于美国旧金山,此前专注于AI文本创作。目前,Photosonic已经生成了超过一百万张图像。Photosonic在StableDiffusion上线后一周上线,据StableDiffusion创始人形容,PhotosonicAI是抄袭了StableDiffusion的开源版本。
PhotosonicAI
非Diffusion
DeepDream
DeepDream作为市场上最受欢迎的AI艺术生成器之一,上线于2015年6月,是由谷歌工程师AlexanderMordvintsev创建的计算机视觉程序,可以探索不同的AI算法。目前,市场上大量艺术效果生成应用都基于这一开源技术NightCafeNightCafe上线于2019年11月,由Reddit开发。Reddit是一個娱乐、社交及新闻网站,创立于2005年2月3日,总部位于旧金山,致力于为世界上每个人带来社区和归属感。通过NightCafe,用户可以获得所生成艺术作品的所有权,也可以购买作品的打印版本。
Artbreeder
Artbreeder上线于2019年5月,由Joel和StudioMorphogen创建。Artbreeder旨在成为一种新型的创意工具,通过让协作和探索变得更容易来赋予用户创造力。Artbreeder使用BigGAN和StyleGAN模型。其中一个使用BigGAN的最小开源版本。
Web3社交基础设施初创公司Intros完成130万美元种子轮融资,Neo领投:金色财经报道,据福布斯消息,Web3社交基础设施初创公司Intros宣布完成130万美元种子轮融资,Neo领投,SeedClub Ventures、Behind Genius Ventures、TSVCap、Brutalist VC、以及包括Sriram Krishnan 和 Nicole Farb 在内的一批天使投资人参投。
该公司计划利用这笔最新融资加速与Telegram、Discord等平台的集成工作,Intros可以帮助DAO拓展社区,在Discord等平台上只需5分钟就可以根据项目目标、兴趣和可用性等要素完成项目介绍设置,目前以支持Morning Brew 的 Accelerator、Seed Club DAO、On Deck 的 Founder Community、Contrary Capital 的 Fellowship 和 Femtech Insider。[2022/7/7 1:56:43]
BigSleep
BigSleep是一个基于Python的AI艺术生成器。由谷歌开发,其使用BigGAN和OpenAI的CLIP通过GoogleColab笔记本从Twitter用户Adverb生成文本到图像。需要通过Python编程语言生成,处理图像需要一段时间和大量内存,有可能无法在计算机上运行脚本。
StarryAI
StarryAI是一个AI艺术生成器App,目前在Googleplay上已经有超过50万的下载量。作为移动应用,有iOS和Android版本,可以在移动端使用,支持创建NFT,同时支持生成步数等进阶选项。
WOMBODream
Wombo是一家总部位于多伦多的合成媒体公司,曾于2021年3月推出了一款由AI驱动的对口型App,允许用户上传任何静止的肖像并对其进行动画处理,以唱出他们选择的歌曲,该产品引发了爆发式裂变。目前,WOMBODream算法应用的是OpenAI开发的CLIP所引导的方法。
DeepAI
于2017年成立于旧金山,曾于2019年获得种子轮融资。DeepAI使用HTML5、GoogleAnalytics和jQuery等12项技术产品和服务。DeepAI的技术包括ViewportMeta、iPhone/Mobile兼容和GoogleFontAPI等。最初其功能是将黑白照片自动上色为彩色。
大厂进展
Imagen2022年5月,GoogleResearch发布了Imagen。此次谷歌的Imagen抛弃了从文本特征映射到图像特征再用GAN或扩散模型生成图像的常规思路,而是使用纯语言模型只负责编码文本特征,把文本到图像转换的工作丢给了图像生成模型。这里的图像生成模型,依然是扩散模型,是一系列的扩散模型。这就意味着其纯文本数据获取方面和全面性方面比获取图文对数据容易,其文本理解能力上比图文对数据的理解能力强。?Parti2022年6月,Google公布了其Parti文本到图像的计算机模型,该模型通过研究数百亿个参数来渲染超现实图像。Parti全称为“PathwaysAutoregressiveText-to-Image”。随着可使用参数数量的增长,其输出的图像也能够更加逼真。该模型在生成最终图像之前研究了200亿个参数。Parti与Imagen不同,Imagen是一种文本到图像生成器,谷歌设计用于扩散学习。该过程通过在图像中添加“噪声”来训练计算机模型,使其变得模糊。然后,该模型学习对静态图像进行解码,以重新创建原始图像。随着模型的改进,它可以将看起来像一系列随机点的东西变成一幅图像。目前,谷歌没有向公众发布Parti或Imagen。
Facebook/MetaMake-A-Scene
Meta于2022年7月官宣Make-A-Scene的存在,目前,该团队正在测试并收集Meta员工的反馈,Make-A-Scene正在Meta内部开放使用权限。Make-A-Scene可以捕捉预先设置的场景布局,使草图也成为输入内容的一部分,然后用户通过文本输入来对框架进行填充。该模型还可以通过输入文本来创建自己的布局,但这意味着用户放弃了部分控制权。
MicrosoftNUWA
2022年3月,微软亚洲研究院最新推出的多模态模型NüWA。NüWA支持八大视觉生成和编辑任务。其中,支持图像的四类任务包括:文本到图像,草图到图像,图像补全,图像编辑;支持视频的四类任务包括:文本到视频,视频草图到视频,视频预测,视频编辑。7月,微软亚洲研究院公开发表了新的研究成果:NUWA的升级版——无限视觉生成模型NUWA-Infinity,可生成任意大小的高分辨率图像或长时间视频。
文心·一格
文心·一格是基于文心大模型的文生图系统实现的产品化创新。上线于2022年8月19日。这是百度依托飞桨、文心大模型的技术创新推出的“AI作画”首款产品。百度的AI-飞桨文心大模型,是产业级知识增强大模型。文生图领域的大模型服务,支持输入一段文本描述,并选择生成风格和分辨率,模型就会根据输入的内容自动创作出符合要求的图像。
涵盖了国潮,国风等风格依靠百度的算力,出图快,完成度高操作简单的同时也可以高级自定义美图AI开放平台
美图AI开放平台是美图公司推出的AI服务平台,专注于人脸技术、人体技术、图像识别、图像处理、图像生成等核心领域,为客户提供经市场验证的专业AI算法服务和解决方案。
美图在人脸技术、图像分割、图像增强、图像生成等多个方向存在优势拥有长期的审美积累,能够把握美的趋势,实现艺术与技术的有机结合前沿技术能快速与产品结合,日调用量逾亿次,兼具稳定性与实用性AI生成在社交媒体上的泛滥讨论一直带有科学伦理方面的色彩和偏见,而关于图像生成技术的讨论则始终由艺术爱好者、设计师、艺术家这类人群在推动,因此,AIArt所带来的关于艺术设计生产效率、知识产权、图像数据复用等方面的延展和保护性服务可能会是下一个市场风向。另外值得一提的事,近期在全球最大的产品社区ProductHunt上,已经出现了针对AIArt的艺术作品交易市场。这可能是自NFT流行以来又一个新兴的垂类版权交易赛道。
AIArt交易市场
如果优质的AIArt可以卖出一个好价钱,那无疑将会出现一个“全民艺术家”的时代。当然,任何新兴的技术,在开始都会经历万众瞩目的阶段,之后不免会被市场“失望”之音淹没。AIArt现在正在早期繁荣期,未来,的确也还有一些难点需要攻克。最重要的问题是,比起AIGC其他赛道,现在的AIArt多了几分性感,却好像少了几分“实用价值”。首先,随着技术从算法模型下沉到用户的手里,如何精准找到客户群体,进行商业化?作为一项黑科技,尽管目前看来比较吸引人眼球,但是目前AIArt具体的使用者可能仍然停留在:艺术家的灵感工具、设计师的素材工具、普罗大众的猎奇工具。对风格各异的艺术图片有消费需求的个人用户和B端企业究竟有多少?目前还尚未可知。不过,根据36氪判断,在可以想象到的范围内,AIArt可落地的商业场景主要有以下几类:1.最直接的是场景用于toC端美图秀秀等消费级修图应用、to设计师端的即时设计等生产工具,为这些产品增加场景丰富度,提高用户黏性,事实上,根据了解,这类厂商也都已经在进行相关的布局;
即时设计已经推出AI设计插件
2.革新专业创作人员的生产方式,比如作为提效工具为插画师、动画师、电影创作者等实现能力补充,解放生产力。未来,大量创造性工作的主要职业能力会体现在生产和粘合数字化素材的能力,而不再是原始的手工工艺;
3.AIArt背靠的是广阔的UGC和用户个性化空间,当下能够很好地贴合全民自媒体、低门槛内容制作的潮流,未来也会在元宇宙市场中有更深层次的发挥空间。基于这一点考虑,国内主要内容生产分发的平台、电商平台、互联网大厂等很可能会先后在自有产品生态中孵化AIArt的功能,帮助用户快速生产符合平台调性的艺术内容,同时服务自己的用户和企业客户;
4.由于AIGC这一大领域本身符合无代码潮流,因此AIArt也非常可能具有高潜力的企服价值,最直接的目标企业是广告公司、影视创作公司、建筑事务所等对于艺术效果图有大量需求的企业客户,单是这几类企业就有不低的市场天花板,另外,品牌商家的广告和创意部门也是有力的受众之一;
用MidJourney生成的品牌广告
不过,不同的用户群体,其具体的需求点又大相径庭,产品后续的迭代也会根据不同的需求进行调整,因此,现在还停留在算法、测试版生成工具、平台社区的AIArt存在形式,也很有可能会因此而分化出不同的价值和服务类型。毕竟,底层技术的革新和赛道的开拓,只是“AI代替人类”万里长征的第一步。商业化之外,另一机遇与威胁并存的点是,目前的产品多以英语自然语言理解为基础,而汉语、西班牙语、法语、德语、日语等其他主要语言毫无疑问也有相当大的市场需求尚未被满足。在满足不同语言的需求过程中,又会出现更多难题,比如中文的AI学习难度是英文的指数级,这或许也是国内暂时落后于欧美的原因之一。但挑战也预示着蓝海和机会。比如国内已经出现了第一家以中文自然语言理解为亮点的AIArt公司TIAMAT。再比如在AICG行业发达的日本,第一家能够做到支持日语输入的企业服务级AIArt厂商,势必会有很大的市场空间能够去开拓。尽管困难重重,但是,欧美VC依然愿意为充满风险的未来机遇买单。首先,AIArt在目前看来,是比较符合现在海内外认可的PLG/CLG模式,产品能够有效提高生产力,足够从个人使用者逐渐扩展至团队乃至企业使用。在国内,PLG/CLG也都出现了头部公司,比如蓝湖、PingCAP等。其次,AI近年来一直被视为未来的方向,只不过落地场景仍需摸索。此刻,AIArt乃至AIGC是AI成熟期里已有明确需求的场景,值得被看好。毕竟,文化和社区正在初步形成。比如MidJourney基于Discord的服务已经使之成为了Discord上的第二大社群,目前处于内测阶段的国产先发者TIAMAT每天也都会收到成百上千份理由翔实的申请表。一个开放共享的社区对于AIArt领域来说至关重要,也是考核一个AIArt公司的重要标准之一。其贡献还体现在,互联网逻辑下的思维方式,能够快速将AIArt变成一门“数字化技能”。
网友发起了DiscoDiffusion词库共享计划
为了更好地进行AIArt创作,网友发起了DiscoDiffusion词库共享计划。2022年,可称为被Diffusion开启的AIArt元年。接下来的三至五年内,AIArt将会往更加自由的方向发展,比如展现出更强的耦合性,可被用户定制的空间更大,也就是说更贴近“主观创作”的过程,艺术作品中也会分化和体现出越来越细致的用户想法。Google近期上线的DreamBoothAI已经展现出了这一特点。
DreamBoothAI
同时,全球范围内元宇宙、Web3概念的盛行,也给AIArt提供了一个结合思路。搭上了AI和Web3的双重热门概念,AIArt有可能斩获一批相信未来的投资者。追风口无错,不过,放眼国内,越加谨慎的投资氛围,有可能对AIArt创业公司的底层能力考核严格。靠新概念融资的时代过去了,未来,能在国内掀起波澜的AIArt创业公司,至少一定能够具备:更深厚的AI算法技术储备、更开放的社区和可观的数据训练壁垒、更贴合东亚使用习惯的产品落地场景、更长期主义理想的创业者。*实习分析师古振兴对本文亦有贡献
不同多项式承诺方案列表 上表中,FRI是Starkware采用的多项式承诺方案,可以实现量子级别的安全.
1900/1/1 0:00:00今年早些时候,Vitalik通过他的“Soulbound”文章开创了NFT的新时代。这引发人们利用NFT的灵魂绑定代币这个”新“用例中做出了许多试验性的项目.
1900/1/1 0:00:00本届Devcon是COVID之后的第一届,也是以太坊转PoS后的第一届。因此会议主要围绕这几年以太坊技术规划展开,同时应用层的内容较少,这也是这次Devcon的一大遗憾.
1900/1/1 0:00:00什么是Web3?简而言之,这是互联网的下一个时代。Web3.0是朝着更加民主化的互联网的范式转变。Web3通过加密货币、虚拟和增强现实、人工智能等新技术展现.
1900/1/1 0:00:00“有人害怕孙哥会不会把我割了,明牌告诉你,放心不会割...,如果一不小心....,观察我的笑容,摔杯为号,你懂的".
1900/1/1 0:00:0010月18日,在7月完成由FTXVentures和JumpCrypto领投的1.5亿美元天价融资,估值高达27.5亿美元的Aptos宣布启动主网AptosAutumn.
1900/1/1 0:00:00