Photoshop está recibiendo una infusión de IA generativa hoy con la adición de una serie de características basadas en Firefly que permitirán a los usuarios extender imágenes más allá de sus fronteras con fondos generados por Firefly, usar IA generativa para agregar objetos a las imágenes y usar una nueva generación función de relleno para eliminar objetos con mucha más precisión que el relleno basado en el contenido disponible anteriormente.
Por ahora, estas funciones solo estarán disponibles en la versión beta de Photoshop. Adobe también está poniendo algunas de estas funciones a disposición de los usuarios beta de Firefly en la web (los usuarios de Firefly, por cierto, ahora han creado más de 100 millones de imágenes en el servicio).
Créditos de la imagen: Adobe
Lo interesante aquí es que esta integración permite a los usuarios de Photoshop usar indicaciones de texto en lenguaje natural para describir el tipo de imagen u objeto que quieren que Firefly cree. Al igual que con todas las herramientas de IA generativa, los resultados a veces pueden ser algo impredecibles. De forma predeterminada, Adobe proporcionará a los usuarios tres variaciones para cada solicitud, aunque, a diferencia de la aplicación web Firefly, actualmente no existe la opción de iterar sobre ninguna de ellas para ver variaciones similares en un resultado determinado.
Para hacer todo esto, Photoshop envía partes de una imagen determinada a Firefly (no la imagen completa, aunque la empresa también está experimentando con eso) y crea una nueva capa para los resultados.
Maria Yap, vicepresidenta de imágenes digitales de Adobe, me dio una demostración de estas nuevas funciones antes del anuncio de hoy. Como ocurre con todo lo relacionado con la IA generativa, a menudo es difícil predecir qué devolverá el modelo, pero algunos de los resultados han sido sorprendentemente buenos. Por ejemplo, cuando se le pidió que generara un charco debajo de un corgi corriendo, Firefly pareció tener en cuenta la iluminación general de la imagen, generando incluso un reflejo realista. No todos los resultados funcionaron tan bien, un charco de color púrpura brillante también era una opción, pero la plantilla parece hacer un buen trabajo al agregar objetos y, especialmente, extender las imágenes existentes más allá de su marco.
Dado que Firefly se entrenó con fotos disponibles en Adobe Stock (así como con otras imágenes comercialmente seguras), tal vez no sea sorprendente que funcione particularmente bien con paisajes. Similar a la mayoría de los generadores de imágenes generativas, Firefly tiene problemas con el texto.
Adobe también se ha asegurado de que el modelo devuelva resultados seguros. Esto se debe en parte al paquete de capacitación utilizado, pero Adobe también cuenta con medidas de seguridad adicionales. «Lo casamos con una serie de cosas de ingeniería rápida que conocemos», explicó Yap. “Excluimos ciertos términos, ciertas palabras que consideramos peligrosas. Y luego incluso observamos otra jerarquía de «si María selecciona un área que tiene mucha piel, tal vez ahora mismo, y a veces verá mensajes de advertencia, no desarrollaremos un aviso sobre ese, solo porque es impredecible Simplemente no queremos ir a algún lugar donde no nos sintamos cómodos.
Al igual que con todas las imágenes de Firefly, Adobe aplicará automáticamente sus credenciales de contenido a todas las imágenes utilizando estas funciones impulsadas por IA.
Muchas de estas características también serían muy útiles en Lightroom. Yap estuvo de acuerdo y aunque no se comprometió con un cronograma, sí confirmó que la compañía también planea integrar Firefly en su herramienta de administración de fotos.
.jpg "Innovation Smart District")