Scribble Diffusion, desenvolvido por Zeke, um engenheiro replicante, é um aplicativo da web que utiliza IA para converter arte desenhada à mão, acompanhada por um prompt de texto, em pinturas visualmente atraentes.
Conheça o Scribble Diffusion, um novo gerador de arte. Os avanços em inteligência artificial tornaram mais fácil do que nunca transformar rabiscos em obras de arte cativantes. Isso é possível graças ao Scribble Diffusion, um aplicativo de web de código aberto alimentado por IA.
Ao aproveitar estruturas sofisticadas de redes neurais, os usuários podem converter seus esboços desenhados à mão em pinturas impressionantes.
Neste artigo, vamos explorar a tecnologia subjacente deste aplicativo impulsionado por IA e explorar seu funcionamento que dá vida aos seus rabiscos.
O que é o Scribble Diffusion?
O Scribble Diffusion, desenvolvido por Zeke, um engenheiro replicante, é um aplicativo da web que utiliza IA para converter arte desenhada à mão, acompanhada por um prompt de texto, em pinturas visualmente atraentes. Esta inovadora aplicação é construída sobre o ControlNet, uma estrutura de rede neural criada por Lvmin Zhang e Maneesh Agrawala.
O ControlNet serve como base para o Scribble Diffusion e permite a integração de várias condições de entrada, como rabiscos humanos, em modelos de difusão de grande escala.
Lançado em fevereiro, o ControlNet é uma estrutura de rede neural inovadora que facilita a condicionamento da Stable Diffusion com diferentes entradas, como detecção de bordas, mapas de profundidade e estimativa de pose.
Os desenvolvedores já começaram a aproveitar as capacidades do ControlNet para construir uma ampla variedade de aplicativos, fornecendo aos entusiastas de IA ferramentas para experimentar vários tipos de modelos.
Um aplicativo notável desenvolvido usando o ControlNet é o DreamBooth, que gera imagens correspondendo à pose de uma figura de palito de entrada.
Outro aplicativo, conhecido como Riffusion, converte quadros de áudio em música em tempo real gerada por IA.
Refinando a Stable Diffusion, o Riffusion cria espectrogramas, que são representações visuais do áudio. Além disso, o Amazing AI, baseado na Stable Diffusion 1.5, é um aplicativo nativo do macOS que opera localmente sem a necessidade de conexão com a internet, pois todos os cálculos são realizados no dispositivo do usuário.
Como o Scribble Diffusion funciona?
O Scribble Diffusion utiliza uma combinação de ferramentas e técnicas avançadas para transformar seus esboços em obras de arte cativantes. Veja como funciona:
Detecção de contornos
O primeiro passo crucial no fluxo de trabalho do Scribble Diffusion é a detecção de contornos. Os algoritmos de IA analisam a entrada de esboço aproximado fornecida pelo usuário, identificando as linhas principais e contornos que definem a estrutura da obra de arte.
Detecção de pontos-chave
Após a criação do contorno, o Scribble Diffusion procede à detecção de pontos-chave. Esse processo envolve a identificação de pontos específicos de interesse dentro do esboço, como cantos, bordas ou características significativas. Ao reconhecer esses pontos-chave, o sistema adquire uma compreensão mais profunda da composição e dos elementos presentes na obra de arte.
A mágica da Stable Diffusion
Uma vez que os contornos e pontos-chave tenham sido extraídos, o Scribble Diffusion utiliza a técnica Stable Diffusion. Esse método avançado utiliza o ControlNet, a estrutura de rede neural que é o cerne do aplicativo, para condicionar o processo de difusão com condições de entrada adicionais. Essas condições podem incluir detecção de bordas, mapas de profundidade, estimativa de pose ou qualquer outra informação relevante para aprimorar a saída final.
Resultado final
Com as etapas iniciais concluídas, o Scribble Diffusion gera a saída final, transformando o esboço em uma pintura visualmente deslumbrante. Os algoritmos de IA aproveitam a estrutura do contorno, os pontos-chave identificados e a integração de várias condições de entrada para criar uma obra de arte que realmente cativa o espectador.
Como usar o Scribble Diffusion?
Para criar uma obra-prima alimentada por IA usando o Scribble Diffusion, siga estes simples passos:
Acesse o aplicativo da web Scribble Diffusion: Acesse o aplicativo da web dedicado projetado especificamente para o Scribble Diffusion. Esta plataforma online oferece uma interface amigável onde você pode liberar sua criatividade. Um gato te dá as boas-vindas!
Faça um esboço: Utilize as ferramentas de desenho do aplicativo para criar um esboço aproximado que servirá de base para sua obra de arte. Expresse suas ideias e conceitos por meio de traços e linhas, permitindo que sua imaginação tome forma.
Aguarde o término do processo: Assim que você finalizar seu esboço e o texto de orientação, inicie o processo de transformação alimentado por IA. Relaxe e permita que os algoritmos do Scribble Diffusion analisem e interpretem suas entradas, gerando uma versão cativante do seu esboço inicial.
Pronto para seguir em frente: Assim que a transformação estiver completa, você poderá baixar a obra de arte final em um formato de alta qualidade. Compartilhe sua obra-prima com amigos, exiba-a nas redes sociais ou até mesmo imprima para mostrar.
As possibilidades são ilimitadas. No entanto, desta vez, o Bob Esponja parece meio triste…
Abaixo, você pode ver alguns exemplos que geramos com o Scribble Diffusion:
Agradecemos à inteligência artificial por ferramentas como o Scribble Diffusion
A emergência de aplicativos como o Scribble Diffusion está causando uma mudança de paradigma no mundo da criação e apreciação artística. Essas ferramentas inovadoras servem como uma ponte entre os esboços desenhados à mão e obras de arte de nível profissional, revolucionando a maneira como artistas de todos os níveis de habilidade podem se envolver com sua criatividade.
Você gosta de arte gerada por IA? Confira os melhores geradores de arte gratuitos
Esses aplicativos alimentados por IA não apenas capacitam as pessoas a liberarem seu potencial artístico, mas também fornecem meios para aprimorar suas habilidades e experimentar diferentes estilos artísticos. Com essas ferramentas à disposição, os artistas não precisam mais de treinamento extensivo ou equipamentos caros para criar obras-primas notáveis e distintas.
À medida que a tecnologia de inteligência artificial continua a progredir, podemos esperar o surgimento de aplicativos ainda mais inovadores que mesclam a criatividade dos artistas humanos com o poder computacional da IA. Essa sinergia emocionante promete ultrapassar os limites das formas de arte tradicionais, resultando em obras de arte cativantes e provocativas, que encantam e desafiam nossa percepção da expressão artística.
Fonte: Andre Lug
