一、介绍
FaceChain,一款备受欢迎的AI写真开源项目,目前已与最强大的开源生图模型SDXL完美融合!这将为用户带来前所未有的高质量AI写真体验。
FaceChain是一个可以用来打造个人数字形象的深度学习模型工具。用户仅需要提供最低一张照片即可获得属于自己的个人形象数字替身。结合不同的风格模型和写真模版,可以生成超乎想象空间的个人写真作品。更有意思的是,FaceChain还集成了说话人与虚拟试衣的功能,让你的数字替身更加生动真实,更具有商业价值与落地场景。
二、原理&效果
最近,FaceChain集成了最强大的开源文生图模型SDXL 1.0。SDXL 1.0是Statbility AI发布的新一代文生图模型,是目前最棒的开源的生图模型。通过各种严格的实验验证,SDXL已经超越了各种版本的Stable Diffusion模型,并且与当前商业级文生图模型Midjournal生成效果不相上下。相比之前版本的SD模型,SDXL:1)使用了更大的Unet backbone,参数量约是之前版本的3倍, 2)使用了简单且有效的训练技巧,包括图像尺寸条件化策略、图像裁剪参数条件化以及多尺度训练等,3)增加refinement模块提升生成图片的质量。
在SDXL的加持下,FaceChain的人像生成的质感有了质的飞跃,下图是FaceChain基于SDXL的生成结果:
可以看到,
1)在生成细节上,生成的图像在细节上更加细腻有质感。例如,发丝更加立体与细腻,丝丝分明,结合光影的映射,自然灵动的闪烁着发丝的光泽;
2)在背景虚化上,生成图像的虚化更加的动态、有层次。近处的景物十分清晰细致,远处的景物温和如奶油般化开,给人一种出自顶级摄影师之手的感觉;
3)在人物神态上,生成的模特表情更加自然传神,微笑更加温柔亲和,眼神更加深邃灵动,远远的眺望着远方,很难想象这是由AI生成的人像。
总之,FaceChain与SDXL的结合将为用户开启前所未有的高质量AI写真体验。除了人像生成质量的提升,FaceChain还提供了丰富的API接口,让开发者可以根据自己的需求进行定制化开发。无论你是想创建自己的AI写真应用,还是想在现有项目中使用FaceChain的功能,都可以轻松实现。同样,我们也提供了创空间在线体验。未来,我们也将加入新的风格模版与更有趣的功能,欢迎感兴趣的开源小伙伴加入我们,引领AIGC文生图走进新时代!
当然目前离专业级的摄影光效等,还有进一步的优化空间,这部分建议做更多独有的lora训练,由于lora的高性价比特效属性,往后应该会有越来越多的专业级摄影垂直领域的lora出现。
三、参考
Github 项目:
GitHub - modelscope/facechain: FaceChain is a deep-learning toolchain for generating your Digital-Twin.
论文地址:
https://arxiv.org/abs/2308.14256
API地址:
facechain, 人像写真_灵积模型服务-阿里云帮助中心
在线体验:
FaceChain人物写真
开发者招募:
FaceChain开源项目报名
钉钉用户群:
钉钉开发群: