ChatGPT 人工智能 GPT4 伦理 生成式 医疗 监管 安全 机器学习 深度学习 神经网络 计算机视觉 强化学习 模型 算法 应用 开发 研究 工具 平台 框架 数据集 训练 部署 安全 合规 培训 投资 LLM,llm AI,ai,Ai 大模型 大语言模型 制图 生图 绘图 文生图 文生视频 生成式AI AGI 世界模型 sora chatGPT,chatgpt,ChatGpt claude openai Llama deepseek midjourney 红熊猫模型 Red panda,panda Stable Diffusion,StableDiffusion,stable DALL- E 3 DALL E DALL Flux,flux 扩散模型 混元大模型 文心一言 通义千问 可灵 Pika PixelDance 豆包 月之暗面 零一万物 阶跃星辰 搜索增强 MiniMax Talkie Agent prompt fastai LangChain TTS 微调 提示词 知识库 智能体
# 热门搜索 #
搜索
ControlNet作者新作:AI打光玩得更溜了!细节保留能力远高于SD1.5
3278点击    2024-11-05 15:22

ControlNet作者“敏神”(张吕敏),刚刚上新了一个新项目——


名叫IC-Light V2,可以说是把AI打光这事儿玩得溜溜的。



IC-Light是此前张吕敏开发的图像处理工具,可以通过AI技术精确控制图像中的光照效果。


而此次的V2版本则是一系列基于FLUX的IC-Light型号,具有16通道VAE和原生高分辨率。


话不多说,直接来看效果。


例如随意输入一张照片,附上一句Prompt:


flicker 2008 photo of a woman, neon light, city, cars and people in the background.


闪烁2008年的照片,一个女人,霓虹灯,城市,汽车和人的背景。



最终生成的效果可以称得上毫无违和感。


我们再来放大来看下前后的对比,人物细节保留程度就更明显了:



再来看一个例子:



据敏神自己介绍:


IC-Light V2得益于更好的训练方法,细节保留能力远高于SD1.5。


而网友们在看完新工具的效果之后也直呼“世界上最好的重光照(relighting)工具”。



风格化图片也能处理


在之前基于SD1.5的IC-Light,有个问题就是处理带风格的图片的效果并不是非常理想。


例如这样:



可以明显看出,原图是一张美漫风格的图片,而输出的结果却是真人风了。


而且即使在Prompt中给到了关键词“surrealist painting of(超现实主义绘画)”,得到的风格依旧还是带点漫画风。


嗯,AI直接把这个关键词给忽略掉了。



而现在,基于FLUX的IC-Light V2,已经弥补了此前的缺陷。





除了人物之外,敏神也展示了其它主体的效果。




在线可玩


目前,IC-Light V2已经上线HuggingFace,可以在线体验。


下面是我们实测马斯克照片的例子:



除此之外,敏神此次推出的IC-Light V2其实是一个系列的模型。


目前可以体验的版本是一个foreground conditioned model(前景条件模型),强调的是保留输入图像细节。


还有三个模型在陆续发布:


  • 还是一个前景条件模型,但强调支持较大的修改,例如处理低光图像和更改硬阴影。
  • 一个前景和背景条件模型
  • 与环境HDRI集成的模型


最后,敏神对于这次的模型还补充道:


目前的模型只能在HuggingFace上体验,稍后会发布更多的推理代码和权重。


然而,与V1不同的是,该许可证将仅用于非商业用途。


体验链接放下面了,感兴趣的小伙伴可以尝鲜一波哦~


体验地址:

https://huggingface.co/spaces/lllyasviel/iclight-v2


参考链接:

[1]https://github.com/lllyasviel/IC-Light/discussions/98

[2]https://x.com/multimodalart/status/1850521222213218380?s=46&t=6eepxw1G6XRQ7VO0ANjJWg


文章来自于微信公众号 “量子位”,作者“金磊”


AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
AI漫画

【开源免费】ai-comic-factory是一个利用AI生成漫画的创作工具。该项目通过大语言模型和扩散模型的组合使用,可以让没有任何绘画基础的用户完成属于自己的漫画创作。

项目地址:https://github.com/jbilcke-hf/ai-comic-factory?tab=readme-ov-file

在线使用:https://aicomicfactory.app/

2
prompt

【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。

项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md

在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0