宇宙链 宇宙链
Ctrl+D收藏宇宙链
首页 > 屎币 > 正文

手把手教你用 AIGC 赋能 Web3 项目

作者:

时间:1900/1/1 0:00:00

简述

近期“AI+Web3”的热度上升,相关概念Token也迎来了一波涨幅,由于很多加密圈的朋友并不是非常了解AIGC,这可能会导致投资失误或者错过潜在的机会。我从去年1月份开始关注AIGC,亲身经历了2022年AIGC技术和产业的高速发展,今天我就跟大家简单解读一下现在AIGC的发展格局、AI+Web3项目的现状以及如何使用AIGC工具创作Web3资产。

AIGC

AI模型分类

从模型功能上区分,目前AIGC主要涉及文字、图片、音乐和视频的生成。

文字

文字模型现象级应用当属OpenAI的ChatGPT,续写文字、创作故事、写代码、修BUG、写诗、做表......你所有能想象到的与文字相关的内容它都可以做。它可以极大程度上减少人的工作量,使用得当将会是文字工作者的利器。现在媒体平台上很多文章都是用AI写的,这一领域有很多潜在的机会,解决实际问题,创造新的工作流,打造商业闭环是我们这些使用工具的人需要去考虑的事情。

ChatGPT

ChatGPT可以帮助开发人员完成大量的代码编写工作,还可以查找修改错误,当然它有可能出错,在使用中需要留意,尽信书不如无书。

ChatGPT编写代码

此外,各类建议、策划、编撰等文字工作是它最擅长的,对于文字工作者来说,ChatGPT绝对是超强的辅助工具。

ChatGPT给予加密投资建议

但是ChatGPT不是万能的,你可以将其定义为一个什么都懂一些的“全才”,但它却不是精通一切的“专家”。对于某些比较专业的知识,它的回答可能会出错,这包括但不限于编程细节、密码学、数学、历史等领域,所以在使用ChatGPT的时候最好对内容再复核一遍,以免出现严重错误,在最近的版本更新中,ChatGPT很多错误点已经得到了修正,随着模型的逐步完善,未来的想象力是无限的。

图片

AI生成图片是AIGC领域发展最快的赛道,2021年最火的技术还是生成对抗网络,但是它距离产品化还有很长的距离;到了2022年初,DiscoDiffusion横空出世引发了第一波AIGC爆点,DiscoDiffusion擅长对场景的刻画,出图场面恢弘大气,但是画面不够清晰,作图速度慢,要以10分钟计数;4月份,OpenAI的DALLE2上线,7月份Midjourney开放公测,使用Discord端作画,1分钟之内可以同时出4张图,艺术性超高,在11月份发布V4版本后进一步稳固了自己最强AI作画工具的地位;8月份,StableDiffusion正式发布,作图速度缩短至10秒之内,图片细节、清晰度都有极大的提升,并且奉行开源主义,所有代码都开源,这也诞生了庞大的社区,是之后世界范围内AIGC流行的火种,包括后面基于StableDiffusion训练的专门生成二次元图像的NovalAI。

巴西央行将加密交易所Mercado Bitcoin添加到CBDC试点中:金色财经报道,巴西央行周四授权当地最大的加密货币交易所Mercado Bitcoin参与该南美国家央行数字货币(CBDC)的数字真实试点。Mercado Bitcoin领导的财团将万事达卡、经纪商Genial、注册商Cerc和金融软件金融科技Sinqia视为合作伙伴。此外,央行批准巴西国有银行Caixa与信用卡提供商Elo和微软一起参与其CBDC试点。

央行将于2023年6月中旬开始将参与者纳入Real Digital Pilot平台。据Glovo称,该财团打算参与测试CBDC和国库券的发行,并将寻求测试网络和国库券的技术方面。分布式账本技术的治理模型。[2023/6/24 21:57:20]

如今AI作图领域呈现?Midjourney+StableDiffusion?的双巨头局势,DiscoDiffusion和DALLE2在技术更新上已经离开了第一梯队,其余产品大多都是基于StableDiffusion的开源框架调整的。

从左到右:discodiffusion、midjourney、stablediffusion、novalai

音乐&视频

AI生成音乐和视频是一个发展相对较慢的赛道,至今还没有现象级应用,市场上存在的产品均不太成熟,其在技术难度上比生成图片和文字要大,但是已经有很多公司准备在2023年攻克这个难题,或许我们马上就能看到比较成熟的视频和音乐生成平台。下面我挑选几个相对优秀的产品简单介绍一下。

AI生成音乐最常见的玩法是用户输入一段文字或者一张图片,模型根据内容输出一段音乐,对应的产品可以关注?Riffusion,它除了实现以上功能外还能在不同风格输入之间自然转换。

Riffusion

AI生成视频可以体验产品?QuickVid,它可以在很短的时间内根据文字描述生成一段流畅的视频,你还可以选择不同使用场景下的视频风格,视频质量较高,与人为剪辑的效果差别不大。

QuickVid

AIGC+Web3玩法

AIGC可以助力Web3项目更快更好的完成文字和图片的设计工作,这在NFT和GameFi项目中应用最为广泛,但是这也需要一定的技巧,使用恰当的Prompt使AIGC输出可用的图片,并使用ChatGPT完成项目文案相关工作,描述词的使用有很多讲究,成为一名AI艺术家需要很多的前期学习,为了让大家快速完成需求,下面我简单说几种使用AIGC输出Web3可用图像的方法。

在LUNA崩盘之后,USDT在稳定币市场的份额增长20%:金色财经报道,Glassnode数据显示,在LUNA崩盘之后,USDT在稳定币市场的份额增长了20%,而USDC、BUSD和DAI的主导地位则出现了明显的下降。其中,USDT主导地位:65.9% (+20%),USDC主导地位:24% (-13%),BUSD主导地位: 4.6% (-7.2%),DAI 占据主导地位: 3.9% (-0.6%)

,TUSD主导地位:1.7% (+0.9%)。[2023/5/13 15:01:10]

特殊Prompt

有一些特殊的Prompt可以控制模型输出特定风格的图片,这些图片可以直接拿来作为NFT或者GameFi内素材使用,版权属于创作者自己。下面我使用StableDiffusion做一些示范。直接复制我下面的描述词,自己定义括号中的内容。

塑料雕像

注:只需要改变括号中的内容就可以得到相同类型的图片,示例文字顺序=图片顺序,图片内角色依次为Yoda、Superman、ironMan、MaiShiranui、shark、batman、Bumblebee和wizard。你可以尝试所有其他可能性。Funkypopfigurine,madeofplastic,productstudioshot,onawhitebackground,diffusedlighting,centered

AIGC3D雕像

这类图片直接发一个NFT项目绰绰有余,每个都是1/1,你只需要告诉AI想要什么。

模块建筑

这段描述词中的?temple?可以改也可以不改,都可以做出不错的效果图。Tinycuteisometric?temple,softsmoothlighting,softcolors,softcolors,100mmlens,3dblenderrender,trendingonpolycount,modularconstructivism,blueblackground,physicallybasedrendering,centered

AIGC建筑

这类图片可以构建一个土地NFT项目或者游戏中的建筑。

3D矢量风格动物

通过改变粗体内容,生成不同的矢量动物形象kawaiilowpoly?panda?character,3disometricrender,whitebackground,ambientocclusion,unityengi

派盾:FTX黑客地址超1万枚PAXG转至NULL地址后被销毁:金色财经报道,据派盾预警监测,11184.18枚PAXG(约合20??00万美元)已从FTX黑客地址(链上地址被标记为FTX Accounts Drainer)转移到NULL地址,并在Paxos Treasury中销毁。[2022/12/23 22:02:44]

AIGC矢量动物

3D游戏风格房间

可改变粗体内容,生成不同的房间Tinycuteisometric?living?roominacutawaybox,softsmoothlighting,softcolors,purpleandbluecolorscheme,softcolors,100mmlens,3dblenderrender

AIGC3D房间

通过以上案例我们可以看到,AIGC可以在图片设计上辅助甚至取代画师,你可以创造出独一无二的艺术风格、角色,而不需要掌握绘画的技巧,这是生产力的极大进步。

模型训练

以上工作流使用的是开源的StableDiffusion通用模型,它无法生成模型素材中不存在的东西,比如你无法让它生成一只无聊猿,模型本身也不知道什么是无聊猿,所以它存在局限性和时效性。为了解决以上提到的问题,我们可以训练自己的模型,将需要的素材都放进去,从而使模型输出内容符合我们的预期,这在NFT二创、扩展,GameFi辅助设计等方面都有很大的应用潜力。

展示几张我训练的无聊猿模型二创成图效果,从左到右分别是蝙蝠侠风格,黏土风格,毕加索抽象风格和黄金材质:

无聊猿二创

当然也可以控制生成与原本项目图片相似度极高的图片,下列四张图片有两张原图,两张用无聊猿模型生成的图,几乎很难分辨,你可以猜一下,后面我会揭晓答案。

无聊猿模型复刻

模型训练原理很简单,用自己提供的图片训练出一个专属模型,但是让普通人从零开始训练一个AIGC模型是很困难的,好在StableDiffusion给我们提供了一些比较简单的模型训练方法。

现在常用的技术方案有三种:Fine-Tuning、DreamBooth、Textual-Inversion

Alchemix将在10月1日之后执行将V1头寸迁移至V2的自动迁移:金色财经消息,DeFi借贷协议Alchemix表示将淘汰旧的v1合约,并且开发了一个可轻松将V1头寸迁移到V2的自动迁移工具。目前未进行迁移的V1用户能够在10月1日之前手动迁移或关闭V1头寸,之后Alchemix会进行自动迁移,执行自动迁移后用户需要使用新UI完成迁移。[2022/9/2 13:03:48]

特性解释:

Fine-Tuning--模型训练、原生框架优点:功能最全,效果最好,prompt控制精确,是优质精细模型的统一技术方案缺点:训练复杂,硬件要求高,训练时间长,训练图片需要标记词DreamBooth--模型训练、简易框架、添加特殊标识符优点:训练简单、速度快、硬件要求相对低、不需要精确的图片标记词,能较好地生成不同风格的图片,开放模型最常用方案缺点:受限于的表示方式,训练SD模型中不存在的类效果会差一些,整体出图质量低于Fine-Tune,模型文件:2-4GTextual-Inversion--新定义特征向量,不改变模型本身优点:需要图片数量少:3-5张,训练文件小:几十KB缺点:对于原SD中不存在的创新的物体、画风等出图效果不好,暂无商业用例综合考虑成本与难度,新手推荐使用DreamBooth训练自己的模型,这里我给大家找了一个最简单的Colab版本,它可以使用谷歌免费的服务器训练模型并生成图片,前期需要处理的素材也最少。

训练模型之前,你需要训练使用的准备图片,初次尝试最好在10张左右,尺寸512*512,如果图片尺寸不合适可以使用BIRME等工具调整。

打开上面的链接,也就是:https://colab.research.google.com/github/TheLastBen/fast-stable-diffusion/blob/main/fast-DreamBooth.ipynb

主页显示如下,这是一个即时更新的页面,它不会保存你的更改,你可以直接在这个页面使用,或者点击“文件”选择“在云端硬盘中保存一份副本”,打开副本页,这个页面会保存你的所有更改。

Colab版本DreamBooth

备份

之后我们开始模型训练,首先点击第一行的运行按钮,连接Google云端硬盘,安装到gdrive。

灰度致信美国SEC,再次争取其批准GBTC转换为比特币ETF:4月23日消息,Grayscale(灰度)再次尝试获得美国SEC的批准,以将GBTC转变为在华尔街主要交易所进行交易的基金。

这家资产管理公司在致美国SEC的一封信中表示,其一直专注于一项法律细节,以支持将400亿美元的GBTC转换为ETF的申请。

美国SEC本月早些时候根据比特币现货ETF监管规则批准了Teucrium的比特币期货ETF申请,灰度押注这一事件可能会被用来促进自己的申请获批。

灰度在信中表示:“我们相信,Teucrium的指令证实了一个基本点……在审批(交易所交易产品)时,区别对待比特币现货产品与比特币期货产品是没有依据的。”

灰度首席法律官Craig Salm补充称,在Teucrium获得批准后,SEC“实际上失去了将期货ETF和现货ETF之间区别作为拒绝与实物比特币相关基金理由的能力”。SEC拒绝置评。

此前消息,灰度正等待SEC在7月初就将其GBTC转换为比特币ETF的决定做出回应。如果他们被拒绝,灰度首席执行官Michael Sonnenshein暗示要起诉SEC。(FT)[2022/4/23 14:43:55]

链接云盘

运行完成后在按钮前面会出现绿色的对勾,右上角RAM/磁盘也出现绿色对勾,后面每段程序运行完成的标志都是这个小对勾。上一段程序运行结束后,点击下一段的按钮继续运行。

运行完成标志

接下来安装依赖,下载模型

安装依赖

下载模型

开始正式训练,首先为你的模型起个名字。

设置模型信息

上传图片,点击运行后会出现“选择文件”按钮,选定图片后上传,我这里选择了八张CloneX的图片作为训练素材,并为它们命名为CloneX1-8,这里对图片的命名不要与已有单词相同,它是对你训练素材的特殊标记。图片命名方式可以参考下图。

上传训练图片

训练素材

运行Captions,并跳过Conceptimages

开始训练,训练步数设置为图片数量*100,我是用了八张图片,这里选择800,其他参数暂时不需要调整,等后面熟练掌握了模型训练方法再进行更精准的训练。

设置训练参数

点击运行,出现以下界面表示训练开始,等待训练完成。这里有两个训练过程,一个是训练文字,一个是训练图片。

训练模型

训练完成后直接运行测试模型,这里不需要调整参数。

测试模型

程序运行完后会出现一个链接,点击打开到可以作图的WebUI界面。

测试链接

WebUI的主页如下,1处选择使用的模型,2处输入描述词,也就是你对想要输出图片的内容,3处输入负面描述词,也就是你不想要图片出现什么内容,3可以空着不填。填写完描述词后点击生成图片。

WebUI主界面

因为我们对图片的标记是CloneX,所以我们生成图片时前部分要指定主体,这里推荐固定句式“apictureofclonexwith+......”,with后面加对图片的描述,每个描述词之间用逗号隔开。

简单测试,这里输入提示词“apictureofclonexwithbeautifulgirl,redhair”,结果应该会出现一个红色头发的女生CloneX形象,效果如下图:

CloneX模型测试1

测试2,输入提示词:“apictureofclonexwithbeautifulgirl,Longgreenhair,blackcoat,yelloweyes”也就是绿色长发、黑色外套、黄色眼镜的女CloneX,生成效果如下

CloneX模型测试2

从以上两个简单测试来看,用10张以内的素材图片训练的模型就可以很好的生成想要的图片,而且这些CloneX是原本不存在的,是你创造了它们!以后喂10张图给AI,它可以给你10,000张图,这是生产力质的提升。

我把这个训练的模型上传到了?Huggingface,有兴趣的朋友可以拿去玩,在训练过程中遇到什么问题也可以联系我。链接:https://huggingface.co/wheart/clonexnft

上传模型文件

HuggingFace模型

揭晓答案,无聊猿那四张图片,前两张是AI生成的,后面两张是原图。

现有AI+Web3项目简析

随着AIGC的兴起、ChatGPT的爆火、微软对AI百亿投资等事件的铺垫,Crypto很多AI项目也得到了更多的关注,诸如AGIX之类的AI概念Token都迎来了一波不错的涨幅。但是就目前这些AI+Web3的项目来看,我并没有发现真正有想象力的产品。这段时间受到关注的项目大都是很久之前的老项目,所以只能看作是版块轮动带动了它们,长线来看没有好的标的。如果后面出现基于新AI技术做的产品或许可以关注。

目前很多Crypto大佬,像CZ、Vitalik都对AI技术产生了兴趣,所以对于AI+Web3之后的发展,我个人认为还是值得期待的。

V神对ChatGPT的测评

CZ的AI形象

总结

综合来看,目前AIGC在Web3的应用还处于非常初级的阶段。现阶段利用好AI工具可以对项目的设计、开发、运营工作提供极大的便利,下一阶段肯定会出现更多优秀的产品,我们要做的就是学习、使用、分析、发现,比大部分人多走一步,不错过AIWeb3这趟车。

标签:AIGIGCIONFusionAIGENIUS币TIGC币Shib Original VisionFusion Heroes

屎币热门资讯
Alpha:一周六倍的 $Canto 如何发现?

大年三十,我老板/img/20230515142048310396/0.jpg "/> $Canto是基于Cosmos生态打造的一条Layer1公链,兼容EVM,以DeFi为发展核心,免费defi三大件为特点.

1900/1/1 0:00:00
如何在Crypto市场构建护城河?

WarrenBuffett拒绝投资没有护城河的公司。了解护城河概念可以帮助您确定更好的加密投资。以下是您应该建立的7条护城河:护城河是难以复制的竞争优势。由于分叉项目非常容易,因此很难在加密货币中建立护城河.

1900/1/1 0:00:00
火上浇油还是真菜?清算人接管 Alameda 账户后已造成逾千万美元清算损失

加密数据分析公司Arkham在分析AlamedaResearch清算人钱包数据后发现,该账户已经对AlamedaDeFi头寸造成了共计约1150万美元的的清算损失.

1900/1/1 0:00:00
Messari: Filecoin 2022年四季度表现回顾

Filecoin入门 依赖集中式数据存储有一个很大的缺点:很难系统地验证存储数据的完整性。就目前而言,Filecoin网络是AmazonS3的点对点版本.

1900/1/1 0:00:00
MarsBit日报 | Aave V3或于本周上线以太坊主网;Polygon PoS链达执行硬分叉升级既定区块高度

MarsBitCryptoDaily2023年1月17日 一、?今日要闻 Aave团队成员:AaveV3或于本周上线以太坊主网Aave团队成员0xGraham.lens发推称,AaveV3可能会于本周在以太坊主网上推出.

1900/1/1 0:00:00
比特币橙子:2023年加密行业热点赛道

注:本文来自/img/20230515142158219055/0.jpg "/>RSS3上线Open Web搜索引擎hoot.it:金色财经报道,Open Web信息分发协议RSS3进入下一阶段Stage3.

1900/1/1 0:00:00