【ITBEAR】阿里巴巴旗下阿里媽媽創(chuàng)意團(tuán)隊(duì)近日宣布,他們已成功開源一款全新的AI圖像修復(fù)模型——FLUX-Controlnet-Inpainting。該模型融合了FLUX.1-dev與ControlNet兩大技術(shù)的精華,前者以出色的圖像生成質(zhì)量聞名,后者則擅長精準(zhǔn)操控圖像修復(fù)流程。
這款新型模型在龐大的1200萬張laion2B圖像數(shù)據(jù)集及阿里內(nèi)部數(shù)據(jù)集上進(jìn)行了深度訓(xùn)練,支持高達(dá)768x768的分辨率,展現(xiàn)出對損壞或缺失圖像區(qū)域的高質(zhì)量修復(fù)能力。其獨(dú)特之處在于,能夠解析用戶的自然語言描述,并根據(jù)這些描述進(jìn)行精細(xì)的圖像修復(fù)操作,如添加新物體、移除不需要的元素或改變整體風(fēng)格。
目前,F(xiàn)LUX-Controlnet-Inpainting正處于Alpha測試階段,阿里媽媽創(chuàng)意團(tuán)隊(duì)透露,他們將不斷優(yōu)化模型性能,并計(jì)劃在未來推出更多更新版本。對于想要體驗(yàn)這一技術(shù)的用戶來說,好消息是該模型已在Hugging Face平臺上開源,只需通過pip安裝diffusers庫,并從GitHub上克隆相關(guān)項(xiàng)目代碼,即可輕松上手。