banner
hughie

hughie

热爱技术的小菜鸟, 记录一下所学所感

FreeDrag-比DragGAN更穩定有效的互動式圖像編輯模型

前言#

本文簡單記錄介紹一下 FreeDrag。

FreeDrag 是一種新的互動式基於點的圖像編輯框架,與 DragGAN 相比摆脫了繁瑣和不穩定的點跟踪過程。

24-freedrag-logo


正文#

一、什麼是 FreeDrag#

一種新的互動式基於點的圖像編輯框架,基於 StyleGAN2,採用基於特徵的方法,能夠在具有相似結構、精細細節或多點目標的非常具有挑戰性場景下實現穩定的基於點的編輯。

24-freedrag-arch

二、FreeDrag 特點#

相比 DragGAN 在點跟踪時有丟失和處理混亂等問題,使用新的方法使得模型在更有挑戰性的場景下仍然取得更佳的效果。

24-freedrag-method

三、FreeDrag 使用#

下載項目源碼:git clone --depth=1 https://github.com/LPengYang/FreeDrag

安裝 StyleGAN2 預訓練模型:bash download_models.sh

本地運行:CUDA_LAUNCH_BLOCKING=1 python FreeDrag_gradio.py

四、總結#

項目的路線圖中還規劃了基於 Diffusion 的 FreeDrag 和能夠處理 3D 圖形的框架,值得期待。


最後#

參考文章:

官方項目

DragGAN

StyleGAN2


声明#

本文僅作為個人學習記錄。
本文與HBlog保持同步。

載入中......
此文章數據所有權由區塊鏈加密技術和智能合約保障僅歸創作者所有。