Novo plug-in de difusão de bloco cria imagens geradas por IA a partir de prompts de texto – WP Tavern

A geração de imagens de IA tornou-se rapidamente mais acessível nos últimos meses e está chegando a diferentes setores que exigem a criação de ativos. Embora ainda seja um pouco limitado, os geradores de imagens de IA podem criar imagens fotorrealistas de tirar o fôlego a partir de prompts complexos. Artistas assistidos por IA começaram a vender seus trabalhos em sites de fotografia.

DALL-E 2 foi o primeiro a fazer um grande sucesso nas redes sociais. Sua plataforma fechada e beta apenas para convidados mantiveram muitos criadores em potencial à margem, mas alternativas de código aberto como Stable Diffusion estão decolando. O modelo de aprendizado de máquina, de texto para imagem, está melhorando graças ao seu crescente ecossistema de contribuidores e extensores.

Kevin Batdorfum desenvolvedor de aplicativos da Extendify, criou um plugin gratuito chamado Block Diffusion que usa Stable Diffusion para gerar imagens dentro do editor de blocos com base em prompts de texto.

Block Diffusion usa a API pública Replicate para gerar imagens na nuvem. Isso exige que os usuários tenham uma conta em replica.com. Ele irá gerar algumas imagens de graça, mas depois disso será $ 0,01 USD por imagem usando o modelo de difusão estável da Replicate. As imagens são geradas em seis segundos.

O modelo foi treinado no LAION-5B, um conjunto de dados de treinamento de IA aberto contendo mais de cinco bilhões de pares de imagem-texto. Ele tem algumas limitações, pois não consegue obter o fotorrealismo perfeito ou tornar o texto legível. Também pode ter dificuldade em renderizar rostos e pessoas.

Para muitos casos de uso de conteúdo do WordPress, o modelo Stable Diffusion deve ser adequado para ilustrar postagens e criar imagens exclusivas em destaque. A Batdorf planeja adicionar os seguintes recursos em versões futuras:

  • Use uma imagem existente como ponto de partida
  • Adicione uma máscara de imagem para gerar apenas áreas específicas
  • Ajuda com ideias imediatas e inspiração
  • Execute várias previsões de imagem de uma só vez
  • Tenha mais controle sobre as etapas de geração de imagens
  • Ver seu histórico de previsões
  • Seleção de modelos de coleções

O plugin Block Diffusion é um projeto paralelo pessoal para Batdorf e ele não planeja transformá-lo em um plugin comercial.

“Não há planos para bloquear nenhum recurso por trás de um plug-in profissional ou premium”, disse ele. “Todos os recursos serão adicionados a esta versão no wordpress.org. Com o tempo, pretendo adicionar todos os recursos suportados pelo Replicate, bem como recursos adicionais especificamente para a comunidade WordPress.”

Enquanto isso, Batdorf disse que os usuários que acharem o plugin útil podem apoiar seu desenvolvimento contínuo patrocinando o projeto no GitHub por meio de contribuições mensais ou únicas.



Deixe uma resposta