1 核心功能进展
在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub(GitHub - modelscope/facechain: FaceChain is a deep-learning toolchain for generating your Digital-Twin.)获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。以下是我们已经实现的一些核心功能:
-
最少1张照片就可以训练生成特定的人物LoRA,生成的人物写真照片形象鲜明又颇具美感。相关原理详见论文:https://arxiv.org/abs/2308.14256
-
可以精准指定人物的动作和姿态
-
已经打通LoRA风格的无限扩展,例如仙女风、拍立得港风、花园婚纱、冬季汉服、校园风等。
更多风格DIY教程:
【手把手教程】无限场景风格LoRA与固定人物LoRA的融合-酷蛙FaceChain0826周记(GitHub已4K Star!)
2 应用场景设想
距离FaceChain应用生态的爆发式增长还有多远呢?我们已经设想了以下一些可能的应用场景:
-
生成各种场景LoRA风格的人物写真(这已经实现,但还可以无限拓展)
-
创作人物连环画故事。
-
制作人物表情包
-
结合sadtalker生成人物视频
-
影视、动画角色设计及生成
-
无限可能……
3 to do list
为了实现这些应用,FaceChain仍需攻克一些技术难题:
-
指定某一固定背景的人物写真(需要掌握inpainting技术)。
-
高清分辨率图片生成。
-
图片风格的拓展(包括3D、卡通、特定动画风格如吉普力)。
-
结合LLM+SD生成连续的图片系列形成完整故事。
-
连续性视频的生成
-
……
4 开发者邀请
作为一个开源项目,我们热忱欢迎更多具有创新思维和热情的开发者加入,各个子项目虚位以待:
我们也会对有以下相关贡献的开发者进行表彰:
-
贡献项目相关的教程文章。
-
贡献项目在Github上的PR、issue。
-
在魔搭平台上同步贡献项目相关模型(如风格LoRA)、训练数据集、衍生的创空间应用。
贡献者将有机会获得项目贡献证书以及modelscope平台免费计算时长奖励,更重要的还是可以结识一群有趣的开发者共同建设一个有趣的项目
如你也认可我们的项目公约:有趣、有用、向善、向美,请跳转原文报名加入!
我们期待FaceChain开源项目能够持续发展,引领人工智能技术的新潮流。
有更多技术细节还可以关注本周五《AI模型社》的直播,有原理讲解+实操演示,可扫码预约直播: