即插即用扩散模型

BrushNet是腾讯PCG和香港中文大学联合共同提出一个基于扩散模型的文本引导图像修复模型。它采用了独特的双分支结构来处理被遮挡的图像特征和噪声潜变量，极大地减轻了模型的学习负担。此外，BrushNet能够在任何预训练的扩散模型上即插即用，提供了密集的像素级控制，使其非常适合图像修复任务。