Face Swap With Stable Diffusion: una guía móvil basada en evidencia que separa las características actuales del PhoneDiffusion del modelo Android, de escritorio, en la nube y no compatible. flujos de trabajo.
La respuesta corta
El intercambio de caras con Stable Diffusion se vuelve mucho más fácil cuando comienzas con la herramienta menos destructiva: generar para una nueva escena, imagen a imagen para una transformación y pintura interna para una reparación local. El teléfono no es una estación de trabajo de escritorio en miniatura, pero es una herramienta creativa capaz cuando el flujo de trabajo respeta su memoria, batería y límites térmicos.
PhoneDiffusion actualmente incluye conversión de texto a imagen, imagen a imagen, pintura integrada, ampliación de 4× y eliminación de fondo. Un flujo de trabajo móvil sólido utiliza solo las etapas que admite el modelo instalado y el dispositivo actual.
Lo que admite la aplicación actual
La aplicación PhoneDiffusion auditada incluye conversión de texto a imagen, imagen a imagen, pintura integrada, ampliación de 4× y eliminación de fondo. La conversión de imagen a imagen e inpainting requieren un paquete de generación instalado compatible; la ampliación y la eliminación en segundo plano utilizan sus propios paquetes descargables.
Este artículo puede combinar las herramientas actuales de la aplicación con la edición manual o una aplicación separada. PhoneDiffusion no reclama una función dedicada de intercambio de caras, pintura exterior, restauración de fotos, generación por lotes, incrustación de metadatos o referencia de caracteres.
La generación en el dispositivo no envía mensajes ni imágenes generadas a un servidor de renderizado o análisis. Aún se necesita una conexión para descargas de modelos y servicios respaldados por la red, como compras, diagnósticos y notificaciones opcionales. Las imágenes, indicaciones o capturas de pantalla salen del dispositivo solo cuando elige compartirlas, exportarlas o enviarlas con comentarios o soporte.
Lo que importa para el intercambio de caras con stable diffusion
Empiece con el resultado previsto. Una idea rápida, un recurso reutilizable y una imagen terminada de alta resolución necesitan diferentes cantidades de tiempo y control. En un teléfono, suele ser más rápido explorar con un tamaño moderado y un recorrido corto, guardar una semilla prometedora y gastar el costoso pase sólo en la composición que vale la pena conservar.
Cada etapa adicional cuesta tiempo y memoria. Ampliar o volver a codificar repetidamente la misma imagen también puede amplificar los artefactos.
Una forma de trabajar centrada en los dispositivos móviles
Mantenga el primer intento lo suficientemente simple como para que pueda comprender por qué funcionó o falló. Si el tema es incorrecto, reescribe el tema. Si el encuadre está mal, cambia la composición. Si la imagen ya está cerca, conserve el mensaje y la semilla antes de tocar la configuración de calidad.
Con un paquete instalado compatible, PhoneDiffusion puede crear en el dispositivo, permitirle inspeccionar el resultado y exponer controles para el flujo de trabajo seleccionado. La generación puede funcionar sin un servidor de renderizado después de las descargas requeridas, pero las descargas, compras, diagnósticos y servicios de red opcionales aún usan una conexión a Internet.
Elija la edición útil más pequeña
Para el intercambio de caras con stable diffusion, defina qué debe permanecer sin cambios antes de tocar la imagen. Si toda la composición puede moverse, la imagen a imagen es apropiada. Si solo se mueve un objeto o defecto, enmascare esa área y use pintura.
Mantenga la fuerza de transformación conservadora en la primera pasada. Un intento de baja intensidad revela si la fuente contiene suficiente estructura; auméntelo solo cuando el resultado sea demasiado fiel.
Termine en el tamaño de visualización normal antes de aumentar la escala. Ampliar una composición rechazada simplemente agranda la imagen incorrecta y consume la mayor cantidad de recursos en el momento menos útil.
Errores comunes
El error más común es cambiar la configuración de solicitud, semilla, modelo, resolución y calidad al mismo tiempo. Es posible que obtenga una imagen diferente, pero no sabrá qué cambio ayudó. Un segundo error es tratar una receta de escritorio como una ley; Los modelos móviles eficientes a menudo necesitan menos pasos y diferentes opciones de memoria.
Mantén también las expectativas honestas. Los modelos de difusión pueden crear conceptos sorprendentes, pero el texto exacto, la anatomía, los caracteres repetidos, la identidad del producto y los pequeños detalles pueden necesitar otro intento o un paso de edición específico. Guarde la mejor imagen base en lugar de intentar solucionar todos los defectos en una generación.
Campo notas
- Elija la herramienta según el tamaño del cambio que desee.
- Las máscaras de pantalla táctil funcionan mejor cuando se acerca el zoom y se mantienen ligeramente dentro del área de reparación.
- Guarde los guardianes intermedios para que un experimento posterior no pueda borrar el progreso.
Pruébelo en su teléfono
- Decide si necesitas una nueva imagen, una transformación o una reparación específica.
- Mantén una copia intacta de la fuente o de la mejor generación.
- Utiliza la máscara más pequeña o la fuerza de transformación útil más baja.
- Mejora una vez cerca del final y luego inspecciona antes de exportar.