Inpaint Anything：掌握这个，你也可以是魔法师

SAM（Segment Anything Model）作为强大的分割模型，当其与图像修复任务相碰撞会产生出什么样的火花呢？

今天介绍的Inpaint Anything算法，可以实现移除、填补、替换一切内容，实现单击图像上的任何物体可以一键擦除替换任何内容、更改任意背景，掌握这个你也可以成为优秀的“后期老师”。

Inpaint Anything工作原理

Inpaint Anything结合了 SAM、图像修补模型（例如 LaMa）和 AIGC 模型（例如 Stable Diffusion）等视觉基础模型。将三个模型结合到一起，实现了在图片/视频中移除一切物体、在图片中填充一切物体和在图片中替换一切背景这三种功能。整体框架如图所示：

Inpaint Anything三大功能

1.Remove Anything：删除一切

只需点击一下想要移除的物体，Inpaint Anything将无痕地移除该物体，实现高效“魔法消除”。

01.单击想要擦除的对象

02.SAM 将对象分割出来

03.修复模型（例如，LaMa）填补“孔洞”

2.Fill Anything：填充一切

进一步通过文本提示（Text Prompt）告诉Inpaint Anything想要在物体内填充什么，Inpaint Anything随即通过驱动已嵌入的 AIGC（AI-Generated Content）模型（如 Stable Diffusion）生成相应的内容填充物体，实现随心“内容创作”。

01.单击想要移除的对象

02.SAM 将对象分割出来

03.输入文本提示

04.基于文本提示的图像修补模型（Stable Diffusion）根据用户提供的文本对物体进行填充。

3.Replace Anything：替换一切

可以通过点击选择需要保留的物体对象，并用文本提示告诉Inpaint Anything想要把物体的背景替换成什么，即可将物体背景替换为指定内容，实现生动“环境转换”。

01.单击想要移除的对象

02.SAM 将对象分割出来

03.通过文本示意想要替换的背景

04.基于文本提示的图像修补模型（Stable Diffusion）根据用户提供的文本对物体进行替换。

研究者建立这样一个有趣的项目，来展示充分利用现有大型人工智能模型所能获得的强大能力，并揭示“可组合人工智能”（Composable AI）的无限潜力。项目所提出的 Inpaint Anything是一种多功能的图像修补系统，融合了物体移除、内容填补、场景替换等功能（更多的功能正在路上敬请期待）。

Inpaint Anything结合了 SAM、图像修补模型（例如 LaMa）和 AIGC 模型（例如 Stable Diffusion）等视觉基础模型，实现了对用户操作友好的无掩码化图像修复，同时支持“点击删除，提示填充”的等“傻瓜式”人性化操作。此外，Inpaint Anything还可以处理具有任意长宽比和 2K 高清分辨率的图像，且不受图像原始内容限制。

国家重点专精特新“小巨人”企业——菲特（天津）检测技术有限公司成立于2013年，坐落于天津港保税区空港园区内，是一家推进人工智能在工业领域智能化应用的研发企业。企业专注于光学、人机交互、人工智能、数字化智能分析软件等前沿技术研发与创新，将多种技术融合并以工业知识库为基础，迄今已获得知识产权二百余项，独创百余个“在线级”落地应用案例

以汽车行业为起点，致力于为化纺、医药、钢铁等工业制造行业赋能，可提供包含质量控制、工艺监测，人工智能安全预警，智能分析以及工业垂类大模型等前沿技术，可为工业领域提供全套智能化解决方案，也是中国AI在工业领域应用系统出口至欧洲、北美、印度的研发型企业。

国家重点专精特新“小巨人”企业——菲特（天津）检测技术有限公司成立于2013年，是一家推进人工智能技术在工业领域智能化应用的企业。

企业专注于光学、人机交互、人工智能等前沿技术研发与创新，迄今已获得知识产权二百余项，独创百余个“在线级”落地应用案例，以汽车行业为起点，致力于为化纺、医药、钢铁等制造行业赋能，可提供包含质量控制，工艺监测，人工智能安全预警，智能分析以及工业垂类大模型等前沿技术，是为工业领域提供智能化解决方案的领军型研发企业。

从汽车零部件到整车厂，凡是涉及质量检测的场景都有菲特的身影，经过十年的实践先后为奔驰、奥迪、比亚迪、大众、广汽本田、红旗等知名车企提供一体化智能制造解决方案并保持长期合作，为制造企业实现真正的降本增效。2

天津市滨海新区副区长张桂华带队赴菲特调研