🌹各人好!我是安琪!!!
Kolors大模子简
就在上周末,国内大厂快手开源了可图大模子文生图模子,这是由快手可图团队开辟的基于埋伏扩散的大规模文本到图像天生模子。
- • Kolors 是在数10亿图文对下举行训练,
- • 在 视觉质量、复杂语义明白、笔墨天生(中英笔墨符) 等方面,相比于当前业界开源/闭源模子,都展示出了巨大的上风。特别是在中文笔墨天生方面领先于当前全部业界模子。
- • Kolors 支持中英双语,在中文特色内容明白方面更具竞争力。
研发团队构建了一个包罗14种垂类,12个挑衅项,总数量为一千多个 prompt 的文生图评估集 KolorsPrompts。在 KolorsPrompts 上,而且网络了 Kolors 与市面上常见的 SOTA 级别的开源/闭源体系的文生图效果,并举行了人工评测和呆板评测。
人工评测
研发团队约请了50个业界范畴专家对天生图像打分,评估维度包罗:画面质量、图文干系性、团体满足度三个方面。效果表明:Kolors 在团体满足度方面处于最优程度,此中画面质量明显领先其他模子。
呆板评测
研发团队接纳 MPS(Multi-dimensional Human preference Score) 来模子评估。效果表明:Kolors 实现了最高的MPS 指标,这以效果与人工评估的指标同等。
官方演示
高质量人像
中国元素
复杂语义明白
笔墨渲染本领
Kolors大模子ComfyUI安装
当前快手已经提供了在线的Kolors文生图服务可使用,不想当地摆设的同砚可以使用在线服务体验:https://klingai.kuaishou.com/。
(须要Kolors大模子ComfyUI安装包的同砚文末可自行扫描获取)
模子安装
假如须要当地摆设,则使用社区的ComfyUI-KwaiKolorsWrapper插件实现。
- • 起首须要更新ComfyUI到最新版本,然后通过ComfyUI插件管理器安装ComfyUI-KwaiKolorsWrapper。插件地点为:https://github.com/kijai/ComfyUI-KwaiKolorsWrapper。
- • 下载ChatGLM3量化模子,并放置在当地目次ComfyUI/models/LLM/checkpoints。模子地点为:https://hf-mirror.com/Kijai/ChatGLM3-safetensors/tree/main 。这里提供了3种量化权重文件,根据当地显存选择符合模子权重。对于小显存发起直接chatglm3-4bit.safetensors。
- • 下载Kolors模子,本模子会在初次运行时自动下载(牢记科学!!!),并放置在ComfyUI/models/diffusers/Kolors目次下。模子地点为:https://hf-mirror.com/Kwai-Kolors/Kolors/tree/main。
- • 加载文末工作流文件,然后重启ComfyUI,即可开始体验。

当地模子结构为:
- /ComfyUI/models/LLM/checkpoints
- │ chatglm3-4bit.safetensors // 4bit、8bit、fb16中选择一个版本
- /ComfyUI/models/diffusers/Kolors
- │ model_index.json
- │
- ├───scheduler
- │ scheduler_config.json
- │
- ├───text_encoder
- │ config.json
- │ pytorch_model-00001-of-00007.bin
- │ pytorch_model-00002-of-00007.bin
- │ pytorch_model-00003-of-00007.bin
- │ pytorch_model-00004-of-00007.bin
- │ pytorch_model-00005-of-00007.bin
- │ pytorch_model-00006-of-00007.bin
- │ pytorch_model-00007-of-00007.bin
- │ pytorch_model.bin.index.json
- │ tokenizer.model
- │ tokenizer_config.json
- │ vocab.txt
- │
- └───unet
- config.json
- diffusion_pytorch_model.fp16.safetensors
复制代码 差别量化模子对应的显存要求如下所示:
文生图工作流
图生图工作流
Kolors与SD3工作流
Kolors和SD3评比体验
关于SD3的ComfyUI安装指南,请拜见之前文章:SD3Medium震撼来袭:SabilityAI开始辈模子,10亿图训练&3万万图精调,全面评估体验&ComfyUI体验指南。别的,迩来几周StabilityAI将会继续推出优化版本SD3模子,改进之前社区反馈标题。
注:本文为了保持评比图像的真实性,未对脸、手等做后期二次处理处罚。如需修手拜见笔者文章:[SD必备知识18]修图扩图AI神器:ComfyUI+Krita加快修手抽卡,告别低效抽卡还原光滑精致双手,写真无需埋伏手势
01:中文提示语
由于SD3输入提示语明白告急为英文,但Kolors是支持直接中文和英文双语提示的。SD3并没有收据木牌。
1个中国女孩,手举这木牌,木牌上写着笔墨“我爱你中华”。身穿中国古风旗袍,淡黄色旗袍,18岁女孩,年轻仙颜
SD3效果:
Kolors效果:
02:中文渲染
Kolors中文渲染本领胜出。提示这里也能看出SD3手部标题显着大于Kolors。但都未很好的办理。笔者抽卡中感觉Kolors会更轻易一些,由于奥妙的藏起来了,特别在后续多人场景更显着。
A Chinese girl holds up a wooden sign with the chinese words “我爱你中华” written on it. Dressed in ancient Chinese style cheongsam, light yellow cheongsam,
SD3效果:
Kolors效果:
03:中文元素与光影效果
在中文元素方面会Kolors稍强一些,但在光影效果方面SD3各有千秋。
A young model in Chinese dress poses, in front of divine light with silhouette light illuminating the edges of the long curly hair, snowflake, solid color red background, Excellent skin texture, gaze deeply, cheerful atmosphere, in the style of eye-catching resin jewelry, Beauty product advertising, photo
SD3效果:
Kolors效果:
04:人物写实
在人物写实艺术感和光影上SD3会更多变彩色元素融合,Kolors会贴近现实,各有千秋。
masterpiece, best quality, 1girl ((pure gradient background, )), long hair, floating hair, blush, looking at viewers, happy, ((front)),(upper body), (studio light), soft light, dark style, night style,Real photography
SD3效果:
Kolors效果:
05:玉莲花
笔者测试SD3中始终无法克制莲花底盘,笔者以为Kolors会更好些。
Three-dimensional ancient style, dazzling light and shadow, jade carving technology, jade and jade material, jade carving art composed of lotus and lotus seed, translucent jade petals, crystal clear texture, transparent light sense, carved murals, optical fiber effect, simple composition, commercial photography, studio lighting, luminous three-dimensional particles, natural light and shadow, beautiful light sense, light tracing, SSS material, Subsurface Reflection, Bioluminescence, Volume Light, Center Light, Contour Light, Light Penetration, Octane rendering, Soft focus, Scene depth, Soft Color, Advanced lighting, Film Light effect,3d rendering, Master Works, 8K
SD3效果:
Kolors效果:
06:动漫
动漫Kolors更有质感,Kolors对NSFW安全更严格。
Animation style, a female character with long, flowing hair that appears to be made of ethereal, swirling patterns resembling the Northern Lights or Aurora Borealis. The background is dominated by deep blues and purples, creating a mysterious and dramatic atmosphere. The character’s face is serene, with pale skin and striking features. She wears a dark-colored outfit with subtle patterns. The overall style of the artwork is reminiscent of fantasy or supernatural genres
SD3效果:
Kolors效果:
07:复杂提示语明白
复杂文本明白上SD3会稍强一些,Kolors包罗ChatGLM3 LLM大语言加持。但后者可以或许奥妙的把手部标题埋伏起来,更机警。
3 fashionable young female models in dynamic poses, photorealistic, 8k resolution: Model 1 wearing a chic blue blouse and red pants, looking over her shoulder with a confident smile. Model 2 in a tight red mini dress, hair blowing dramatically as she strikes a playful pose. Model 3 with blue skinny jeans and a cropped red top, hands on hips exuding youthful attitude. Vibrant colors, sharp focus, dramatic lighting and depth of field. Capture a sense of youth, energy and movement in an urban setting like a city street or rooftop. Pay attention to details like makeup, accessories and fabric textures. Photographic style, no visible artifacts or unnatural elements. Aim for a fashionable, trendy and aspirational vibe that could appear in magazines or advertisements.
SD3效果:
Kolors效果:
总结,综合评估效果笔者感觉如Kolors的评估效果,对于中文语境的创作会明显优于SD3,特别对中文提示语支持,中文语言相识,以及ChatGLM3大语言模子的加持下。特别是在与可灵图生视频团结,极大的推进了国产AIGC迈进的里程碑。固然这只是感性评估,仁者见仁。
资料软件免费放送
越日同一发放请耐心等候
学好 AI绘画 岂论是就业还是做副业赢利都不错,但要学会 AI绘画 还是要有一个学习规划。末了各人分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小同伴们一点资助!
须要的可以扫描下方CSDN官方认证二维码免费领取【包管100%免费】
**一、AIGC全部方向的学习蹊径**
AIGC全部方向的技能点做的整理,形成各个范畴的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,包管本身学得较为全面。
二、AIGC必备工具
工具都帮各人整理好了,安装就可直接上手!
三、最新AIGC学习条记
当我学到肯定根本,有本身的明白本领的时间,会去阅读一些先辈整理的册本大概手写的条记资料,这些条记具体记载了他们对一些技能点的明白,这些明白是比力独到,可以学到不一样的思绪。
四、AIGC视频教程合集
观看全面零根本学习视频,看视频学习是最快捷也是最有用果的方式,跟着视频中老师的思绪,从根本到深入,还是很轻易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才华将本身的所学运用到现实当中去,这时间可以搞点实战案例来学习。
这份完备版的学习资料已经上传CSDN,朋侪们假如须要可以微信扫描下方CSDN官方认证二维码免费领取【包管100%免费】
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!qidao123.com:ToB企服之家,中国第一个企服评测及软件市场,开放入驻,技术点评得现金 |