ICEdit

ICEdit

图像编辑开源

开源指令式图像编辑框架,4GB显存即可运行

访问官网
收录: 2026-07-25·更新: 2026-08-27·图像工具

详细介绍

产品定位
ICEdit(In‑Context Edit)是一款由浙江大学与哈佛大学联合研发的指令式图像编辑框架,旨在让用户通过自然语言指令即可对图像进行精准、灵活的编辑,而无需掌握复杂的图形处理技术或手动调节参数。

核心技术
该框架基于大规模扩散变换器(Diffusion Transformer)构建,充分利用其强大的生成能力和上下文感知特性。用户输入的文本指令会被解析为细粒度的编辑任务,并在扩散模型内部通过上下文生成的方式实现对应修改,从而在保持图像整体结构的同时完成细节调整。

主要优势
ICEdit 只需要极少的训练数据和可调参数,就能达到与传统方法相当甚至更好的编辑效果。具体而言,它采用了大约千分之一的训练样本和百分之一左右的可训练权重,大幅降低了资源消耗。同时,模型在单张图像的处理上表现出色,约在数秒内即可完成编辑;并且仅需约 4 GB 显存即可运行,大大提升了部署的可行性。

应用场景
得益于高效、低资源的特点,ICEdit 可广泛用于创意设计、产品原型快速迭代、影视后期以及个人图像修复等场景。它支持多轮连续编辑和多任务编辑,用户可以在一次交互中逐步细化图像效果,也可以在同一图像上并行处理多种编辑需求,实现“一站式”创作体验。

开源与生态
作为开源项目,ICEdit 已发布在 GitHub,并提供了基于 ComfyUI 的工作流、Gradio 演示以及适配 Ascend NPU 的版本,方便开发者和研究者快速上手。社区还推出了量化模型,将显存需求进一步降低至约 10 GB,为资源受限的环境提供了更多选择。

未来展望
随着更多预训练权重和插件的持续发布,ICEdit 有望在跨模态生成、交互式设计以及实时图像编辑等领域取得更大突破。其轻量化、可扩展的特性为未来在移动端和嵌入式设备上的部署奠定了坚实基础,也将推动指令式图像编辑技术在更广泛的应用场景中落地。