Pesquisadores apresentaram o PEEK, um complemento que dispensa treinamento para geradores de imagens por difusão. Ele faz uma avaliação adicional do denoiser em etapas selecionadas da amostragem e usa essa previsão antecipada para ajustar a etapa seguinte e reduzir o viés de exposição — a diferença entre as entradas usadas no treinamento e as entradas imperfeitas que o modelo encontra durante a geração.
Os autores relatam melhorias em relação a modelos de referência com o mesmo número de avaliações do denoiser, em oito modelos de espaço de pixels e de espaço latente, incluindo configurações guiadas por texto. Eles relatam melhorias de até 49,3% no FID; nos experimentos, calibrar o complemento para um modelo levou no máximo 2,2 minutos.
Por que importa
Para equipes que pesquisam geradores de imagens por difusão, o PEEK oferece um método do lado do amostrador que pode ser testado sem retreinamento, embora o artigo não determine como ele se comporta em produtos disponíveis ao público.