FaceChain-FACT:人类AIGC人脸适配器

 

FaceChain-FACT支持零镜头肖像生成。
FaceChain-FACT用数百万张精美的人物肖像来训练模型。
FaceChain-FACT的架子上有 100 多个高级时装模板。
FaceChain-FACT的模型支持CPU和秒级推理时间。

项目主页:FaceChain-fact:Face Adapter for Human AIGC

1.介绍
作为AI人像写真开源项目的佼佼者,FaceChain凭借其丰富多样的风格模版和卓越的人像保真度受到了社区的广泛关注。最近FaceChain团队提出了一个名为 FaceChain-FACT 的零样本版本,不需要Face LoRA 模型训练。此外,新版本只需要用户的单张照片即可生成定制肖像。相比SOTA商业应用,新版本的生成速度加快了100倍,具有秒级的图像生成速度。新版本集成了一个基于Transformer的人脸特征提取器,其结构类似于Stable Diffusion,这使得Stable Diffusion能够更好地利用人脸信息;新版本使用密集的细粒度特征作为人脸条件,具有更好的人物再现性;FaceChain-FACT 与 ControlNet 和 LoRA 插件无缝兼容,即插即用。

2.原理
FaceChain使用一系列的图像预处理,包括人脸分割、人脸裁剪和对齐、手部检测、人脸质量筛选等,来筛选并获得训练数据集。FaceChain利用基于变压器的人脸特征提取器来提取特征,并利用倒数第二层的密集细粒度特征作为人脸条件。Stable Diffusion 通过 FACT-Adapter 接收面部条件,并将其与文本嵌入相结合以生成肖像图像。通过融合FaceChain的各种LoRA模型,可以生成多种风格的肖像。

3.效果
在FACT的加持下,FaceChain-FACT的人像生成体验又有了质的飞跃。

在生成速度方面,FaceChain-FACT成功摆脱了冗长繁琐的训练阶段,将定制人像的生成时间大幅缩短了百倍,为用户带来了无比流畅的使用体验。

在生成效果方面,FaceChain-FACT成功提升了人脸的细腻程度,使其更加逼近真实的人像效果。通过高度保留的人脸细节信息,确保了生成写真效果既惊艳又自然。FaceChain海量的精美风格模版,又为生成的人像注入了艺术生命力。

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注