【太平洋科技快訊】近日,字節跳動旗下的Seed團隊正式推出了其圖像編輯模型的最新版本——SeedEdit 3.0。目前已在即夢網頁端開啟測試,其移動端應用豆包App也即將同步上線。
在圖像編輯領域,利用AI根據指令進行編輯的需求廣泛存在,但以往的技術在保持主體與背景的協調性、精準遵循用戶指令等方面能力有限,導致編輯后圖像的可用率不高。針對這些挑戰,SeedEdit 3.0基于文生圖模型Seedream 3.0進行開發,并疊加了多樣化的數據融合方法與特定的獎勵模型。這些技術升級顯著改善了模型在保持圖像主體、背景及細節方面的能力,尤其是在人像編輯、更換背景、調整視角與光線等復雜場景下表現突出。
據悉,研發團隊在SeedEdit 3.0中提出了一種高效的數據融合策略,并構建了多種專用獎勵模型。通過將這些獎勵模型與擴散模型聯合訓練,團隊針對性地優化了人臉對齊、文本渲染等關鍵編輯任務的質量。此外,團隊還對模型的推理速度進行了同步優化,使得整個編輯過程更加快速流暢。
SeedEdit 3.0的一大亮點是其能夠處理并生成4K分辨率的圖像。在精細調整編輯區域的同時,模型能夠高保真地保留圖像其他部分的原始信息。特別值得一提的是,該模型在判斷“哪里需要修改、哪里需要保留”方面展現了更強的理解力和權衡能力,從而大幅提升了編輯圖像的可用性。例如,當用戶下達“移除中間人物以外的所有行人”指令時,模型不僅能精確識別并移除無關人物,甚至能一并去除他們留下的影子,確保編輯結果的自然與完整。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.