自学内容网 自学内容网

AIGC 技术大变革![ComfyUI] InstantIR:小红书团队128小时吐血整理的模糊图像高清修复技术

今天,我们将向您介绍一项革命性的 AIGC 技术——[ComfyUI] InstantIR。这是由小红书团队经过 128 小时的努力,精心整理出的一项模糊图像高清修复技术。无论您是图像处理的新手还是专业人士,这项技术都能为您提供极大的便利。

在这个教程中,我们将详细介绍 [ComfyUI] InstantIR 的功能和操作方法。通过这个工具,您可以轻松地修复模糊的图像,使其变得清晰和高清。这项技术可以帮助您更好地理解和应用 ComfyUI,提升您的图像处理技能。
在这里插入图片描述

InstantIR简介

今天介绍一款由InstantX团队与北京大学、香港中文大学联合推出的最新图像修复模型:InstantIR,这是一种基于扩散的新颖的老旧图像修复方法,能够在推理过程中动态调整生成条件,实现极端退化图像的细节恢复和创造性修复。 InstantIR首先使用预训练的视觉编码器提取输入的紧凑表示(compact representation),然后在每个生成步骤中使用该表示来解码当前的扩散潜在空间并实例化一个生成先验。退化的输入随后使用这个参考进行编码,提供强大的生成条件。InstantIR能够观察到生成参考的方差随退化强度波动,并利用这一点作为开发适应输入质量的采样算法的指标。最后,研发团队通过广泛的实验表明,InstantIR实现了优秀的图像修复能力,并提供了出色的视觉质量。

在这里插入图片描述

  • Github:https://github.com/JY-Joy/InstantIR

  • 项目主页:https://jy-joy.github.io/InstantIR/

  • 在线体验:https://huggingface.co/spaces/JOY-Huang/InstantIR

演示案例

在这里插入图片描述
在这里插入图片描述

InstantIR ComfyUI体验

通过ComfyUI插件管理器搜索ComfyUI_InstantIR_Wrapper插件并安装该插件,仍然还需要下载对应模型,具体如下所示:

  • 在线web体验地址:https://huggingface.co/spaces/JOY-Huang/InstantIR

  • 插件地址:https://github.com/smthemex/ComfyUI_InstantIR_Wrapper

  • SDXL模型:这里可以选择任意一款本地的SDXL模型,推荐:juggernaut模型

  • InstantIR模型:下载InstantIR模型,并放置到目录ComfyUI/models/InstantIR下,下载地址:https://huggingface.co/InstantX/InstantIR/tree/main/models

  • dino模型:另外还需要下载facebook/dinov2-large模型,可以放置任意位置,在插件中输入对应路径,下载地址:https://huggingface.co/facebook/dinov2-large/tree/main

  • SDXL模型:还需下载latent-consistency/lcm-lora-sdxl放置目录 /ComfyUI/loras/ 下。下载地址:https://huggingface.co/latent-consistency/lcm-lora-sdxl/tree/main

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在线Web体验

在线web体验地址:https://huggingface.co/spaces/JOY-Huang/InstantIR

在这里插入图片描述

Flux文生图工作流

在这里插入图片描述

InstantIR修复工作流

在这里插入图片描述

在这里插入图片描述

无需修改默认提示词就可以开始体验了,该插件只是退化图片回复技术,对于老照片类修复还需增加放大高清等局部细节内容修复和处理。下面是笔者的一些展示图像:

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述在这里插入图片描述

资料软件免费放送

次日同一发放请耐心等待

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述


原文地址:https://blog.csdn.net/2401_85725028/article/details/143660477

免责声明:本站文章内容转载自网络资源,如本站内容侵犯了原著者的合法权益,可联系本站删除。更多内容请关注自学内容网(zxcms.com)!