不藏了,近期全网爆火的AI 写真项目 InstantID,正是来自小红书社区技能创造发布团队。
为了迎接龙年新年的到来,咱们的InstantID**全新推出「Spring Festival」新春风格!**并与著名开源模型社区 Hugging Face 联手,在小红书 APP 上,特别策划 「你的新春照我包了」 有奖互动。只需上传一张相片,30 秒内轻松定制你的专属新春照。
活动时刻: 2 月 7 日 至 2 月 25 日
参加方法:
-
在小红书 APP 内共享你用 InstantID 生成的新春照。(体会入口指路hf.link/iid)
-
带 #你的新春照我包了 话题发笔记,并关注和 @Hugging Face 小红书账号,让更多人看到你的构思。
-
晒出你的 Prompt,共享你的新年愿望和等待,约请朋友和家人一同参加,拼出新春照一条龙。
让咱们来看看InstantID的构思新春照作用:
跨过千年的问候,“兵马俑”给你拜年了!
蒙娜丽莎在长城练瑜伽,气氛感满满。
爱因斯坦也在故宫前吃起了饺子,恭贺新春。
那如何用 InstantID 制造新春照呢?操作很简略:
-
访问 Hugging Face Spaces 中的 InstantID 地址:hf.link/iid
-
上传一张相片,InstantID 默许风格为「Spring Festival」,点击 Submit 为你生成一个充溢新春气息的相片。
当然,如果你想敞开更多的构思玩法,还可以自定义增加 Prompt,风格自在搭配。
比如,这是费雯丽的相片,选择「Spring Festival」风格,未增加 Prompt 的作用。
为相片增加一些“魔法”——龙年新年天然少不了龙年元素,感受一下吃饺子、发红包、雪中赏梅的节日气氛。同一张相片,输入不同的 Prompt,30 秒相片焕新。
InstantID 很好地保存费雯丽的面部特征,仔细一看,甚至能还原手部动作、模拟飘雪时风吹动头发的动态作用。
不仅如此,咱们还可以上传姿势图为参考,InstantID 生成的绝美侧仰照,很有神韵。
除新春主题外,InstantID 还有十分多的风趣玩法。比如让深度学习大牛、图灵奖取得者 Yann LeCun 变身为经典动漫角色,马里奥、海贼王…
按一年四季,随机生成你的动漫品格,脸部可幼态可老练。
InstantID 尽情开释你的想象力,来套中国功夫对抗赛,也不是不可以~
InstantID 最独特的地方在于它只需要一张相片,不依赖模型,用时 30 秒就可以生成十分不错的风格作用。从作用和使用体会上来看,InstantID 作为一个高效的、轻量级、可插拔的适配器,赋予预练习的文本到图像分散模型以 ID 保存的才能。
前不久,小红书技能团队的 5 位工程师发表论文,详细揭秘了 InstantID 背面的技能。
那为什么只需上传一张图 + 简略的提示,InstantID 就能完成高面部保真度,画面与人物一致得很和谐呢?
核心关键是 InstantID 不练习文生图模型的 UNet 部分,仅练习可插拔模块,在推理过程中无需 test-time tuning,在几乎不影响文本操控才能的情况下,完成高保真 ID 坚持。
如图所示,咱们经过一系列创新技能:弱对齐的 CLIP 特征替换为强语义的人脸特征、人脸图像的特征在 Cross-Attention 中作为 Image Prompt 嵌入、 以及 IdentityNet 来对人脸施加强语义和弱空间的条件操控,InstantID 在不献身文本操控才能的情况下,完成了高保真 ID 坚持。
Instant 在多个方面展现出其独特优势,咱们提出的首要奉献如下:
-
供给了一种全新的 ID 保存方法,有用弥补了练习效率与 ID 保真度之间的距离。
-
InstantID 是可插拔的,与目前社区内文生图根底模型、LoRAs、ControlNets 等完全兼容,可以零成本地在推理过程中坚持人物 ID 属性。此外,InstantID 坚持了良好的文本编辑才能,使 ID 可以丝滑地嵌入到各种风格当中。
-
实验结果表明,InstantID 不仅逾越目前依据单张图片特征进行嵌入的方法(IP-Adapter-FaceID),还与 ROOP、LoRAs 等方法在特定场景下不分伯仲。它卓越的性能和效率激起了其在一系列实际使用中的巨大潜力,例如新颖的视图组成、ID 插值、多 ID 和多风格组成等。
还不赶忙上手体会一下,自定义你的新年写真。
Prompt 不知道怎么写?一些好用的“咒语”,拿走不谢~ 也欢迎在评论区晒出你的 Prompt。
-
Flat illustration, a Chinese girl, ancient style, wearing a red cloth, smile face, white skin, clean background, fireworks blooming, red lanterns.
-
A man riding a colossal fire-breathing dragon, engaging in a space battle against extraterrestrial beings.
-
A person dressed as a superhero, backed by a bizarre alliance of politicians, celebrities, and animals, defending Earth together.
-
A girl wearing cheongsam, Milky Way, wind, spring festival, cartoon, red backgroud, Red Lantern, fireworks, smile, dressed, Chinese dragon.
活动奖励:
-
咱们将依据参加笔记的互动和构思,送出由 小红书技能REDtech 和 Hugging Face 供给的新年礼物!
-
优质笔记将取得专属活动流量扶持,惊喜多多。
咱们相信,经过开源,InstantID 可以激起更多开发者的创造力,推动 AI 技能的进一步发展,同时也让更多人享受到科技带来的便利和乐趣。
预备好了吗?一同来玩 InstantID,这个新年,因你而不同!
- 论文标题:InstantID: Zero-shot Identity-Preserving Generation in Seconds
- 论文地址:arxiv.org/abs/2401.07…
- 代码地址:github.com/InstantID/I…
- 项目地址:instantid.github.io
- Demo 新春体会:huggingface.co/spaces/Inst…
原文链接:mp.weixin.qq.com/s/-r4Yah3NB… 本文由 Hugging Face 中文社区内容共建项目供给,稿件由社区成员投稿,经授权发布。文章内容不代表官方立场,文中介绍的产品和服务等均不构成投资建议。
如果你有与开源 AI、Hugging Face 相关的技能和实践共享内容,以及最新的开源 AI 项目发布,希望经过咱们共享给更多 AI 从业者和开发者们,请经过下面的链接投稿与咱们取得联系: hf.link/tougao