近日,阿里巴巴集团旗下阿里妈妈创意团队宣布,成功开源一款名为FLUX-Controlnet-Inpainting的AI图像修复模型。据了解,该模型结合了FLUX.1-dev模型和ControlNet的优势。FLUX.1-dev模型以其高质量的图像生成能力著称,而ControlNet则擅长控制图像修复过程。
FLUX-Controlnet-Inpainting模型在1200万张laion2B图像和阿里内部数据集上进行了训练,分辨率高达768x768,能够实现对损坏或缺失图像部分的高质量修复,其中最大的亮点是能够理解用户的语言描述,根据描述进行图像修复,包括添加、移除物体或改变图像风格。
阿里妈妈创意团队表示,FLUX-Controlnet-Inpainting模型目前处于Alpha测试阶段,未来将持续优化性能,并计划发布更新版本。目前,该模型已在Hugging Face平台开源,用户可通过pip安装diffusers库,并从GitHub克隆项目代码进行体验。