- ¿Cuál es el propósito de la pintura de difusión estable?
- ¿Cómo funciona la pintura de difusión estable?
- ¿Cómo utilizar la pintura de difusión estable?
¿Cuál es el propósito de la pintura de difusión estable?
El objetivo de la difusión estable en la pintura es generar contenido visualmente plausible y coherente en las regiones que faltan de una imagen mientras se preserva la estructura general y la apariencia de la imagen original. Lo logra aprovechando el concepto de difusión de imágenes, que es el proceso de difundir información o color de áreas conocidas a áreas desconocidas.
¿Cómo funciona la pintura de difusión estable?
El proceso de repintado normalmente implica dos pasos principales: propagación y difusión. Las regiones conocidas que rodean el área que falta se analizan en el paso de propagación para estimar la información que falta. Esta estimación se puede basar en varios métodos, como la síntesis de texturas, la coincidencia de parches o la propagación de bordes.
Una vez que se estima la información que falta, se lleva a cabo el paso de difusión. La difusión implica la difusión gradual de la información de color y textura de las regiones conocidas a las regiones desconocidas. El proceso de difusión tiene como objetivo crear una transición suave entre las regiones pintadas y el contenido original, asegurando que la imagen generada permanezca visualmente consistente.
¿Cómo utilizar la pintura de difusión estable?
Repintar es una función que le permite editar imágenes existentes con indicaciones de texto usando una máscara. Una máscara es una imagen en blanco y negro que indica qué partes de la imagen desea regenerar con el modelo de IA. Puede usar inpainting para corregir defectos, agregar o eliminar objetos, cambiar colores o estilos, etc. Los usuarios pueden instalarlo localmente siguiendo el enlace oficial o pueden utilizar sus funcionalidades a través de la interfaz de usuario web.
Exploremos la implementación práctica siguiendo los pasos dados:
Paso 1: seleccione la pestaña 'txt2img'
Selecciona el ' txt2img ” e ingrese el mensaje de texto en el cuadro de texto. Los usuarios pueden usar las palabras o frases que deseen, pero asegúrese de que sean lo suficientemente descriptivas y específicas para que el modelo de IA las entienda. Los usuarios también pueden usar modificadores como ':', '+', '-', '(', ')', etc. para ajustar el aviso. Por ejemplo, genere una imagen de “ un gato con gafas y un sombrero ' como a continuación:
Paso 2: seleccione el punto de control del modelo
Los usuarios pueden elegir el punto de control del modelo en el menú desplegable de la esquina superior izquierda. El punto de control del modelo determina el estilo y la calidad de la generación de imágenes. Hay varios puntos de control disponibles, como “ modelo.ckpt ”, “ sd-v1-5-en-pintura ”, “ sd-v1-5-256 ”, “ sd-v1-5-512 ', etc.:
Paso 3: ajusta el tamaño de la imagen
Ajuste el tamaño de la imagen y otras configuraciones según sus preferencias. El tamaño de la imagen calcula la resolución de la imagen de salida. Las otras configuraciones incluyen la fuerza de eliminación de ruido, la escala CFG, el tamaño del lote, etc., que afectan la velocidad y la calidad de la generación de imágenes:
Paso 4: Haga clic en el botón 'Generar'
Presiona el “ Generar botón para iniciar el proceso de generación de la imagen. Dependiendo de la solicitud del usuario, el punto de control del modelo y la configuración, puede llevar unos minutos o más generar la imagen:
Paso 5: presione el botón 'Enviar a inpaint'
Una vez que se genera la imagen, los usuarios pueden guardarla o modificarla usando inpainting:
Paso 6: crea una máscara
Para usar la pintura, seleccione el botón “ img2img pestaña ' y seleccione ' pintar subpestaña ”. Utilice el instrumento pincel para crear una máscara en la imagen. Las áreas negras son donde desea que el modelo de IA regenere la imagen en función de su mensaje de texto, como se muestra a continuación:
Nota : Los usuarios también pueden cargar la imagen en el lienzo de pintura haciendo clic en el botón ' Carga de pintura ” o usando la imagen existente.
Paso 7: Haga clic en el botón 'Generar'
Seleccione y aplique el mismo punto de control y configuración del modelo que usó para generar la imagen original y haga clic en el botón ' Generar ' botón:
El resultado muestra que se ha aplicado la función de difusión estable en la pintura.
Ventajas y uso de la difusión estable
La pintura de difusión estable tiene varias ventajas sobre otros métodos de pintura, como:
- Puede administrar grandes regiones de píxeles faltantes y texturas complejas.
- Puede conservar bordes afilados y detalles finos en la imagen.
- Puede evitar artefactos como desenfoque, timbre o suavizado excesivo.
- Se puede implementar y paralelizar fácilmente utilizando métodos numéricos estándar.
La pintura de difusión estable se puede utilizar para diferentes aplicaciones, tales como:
- Restauración de imagen : reparación de imágenes dañadas o degradadas, como fotos, pinturas o documentos antiguos.
- Edición de imagen : eliminar objetos o regiones no deseados de las imágenes, como logotipos, marcas de agua o imperfecciones.
- Finalización de imagen : rellenar las regiones que faltan en las imágenes, como oclusiones, agujeros o espacios.
Conclusión
Stable Diffusion inpainting ofrece una solución poderosa y fácil de usar para restaurar regiones faltantes o dañadas en imágenes. Al usar el concepto de difusión de imágenes, los usuarios integran el contenido pintado con la imagen original, asegurando la coherencia visual y minimizando los artefactos. Con su interfaz gráfica de usuario intuitiva y parámetros ajustables, los usuarios pueden marcar fácilmente las regiones de pintura interna y controlar el proceso de pintura interna. En este artículo se han explicado los principales pasos y ventajas de utilizar la difusión estable en la pintura y algunas de sus aplicaciones.