P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / I N T R O D U C C I Ó N

El Mundo AV
con IA.
La Inteligencia Artificial (IA) ha evolucionado hasta convertirse en
una pieza clave de la revolución digital, remodelando diversos
aspectos de nuestra vida cotidiana y laboral. En este documento,
abordaremos algunas de las herramientas de IA más significativas y
revolucionarias en la actualidad, como ChatGPT, Midjourney, Stable
Diffusion, Eleven Labs y Adobe Firefly.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / C H AT G P T

ChatGPT para
AfterFX.
Dominando las Expresiones en
After Effects para una Animación
Versátil y Eficiente con ChatGPT.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / C H AT G P T

Expresiones con
ChatGPT.
En After Effects, una expresión es un pequeño código que puedes
agregar a las propiedades animadas en tus proyectos, que te ayudan
a evaluar un solo valor para una única propiedad de capa en un
momento específico. Con ellas, puedes automatizar tareas
repetitivas, crear estructuras flexibles y superar tus capacidades
mucho más allá de lo que sería posible solo con keyframes.

Pueden reducir la cantidad de keyframes y capas en la línea de

tiempo, y afortunadamente, no necesitas ser un programador para
usarlas. Algunas de las expresiones comunes en After Effects
incluyen 'Wiggle', 'Time', 'Loop' y 'Text Values'. Añadir expresiones es
bastante sencillo y puede hacerse en unos pocos pasos. Con el
poder de las expresiones, puedes trabajar en algunas animaciones
asombrosas con controles y efectividad que serían difíciles de lograr
con las técnicas tradicionales de keyframin .
g​
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / C H AT G P T
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / C H AT G P T

Más poder para After

con KlutzGPT.
Klutz GPT es una herramienta gratuita para Adobe After Effects que
utiliza el poder de la inteligencia artificial de OpenAI,
específicamente GPT 3.5, que es la misma tecnología utilizada en
ChatGPT.

Generación de Scripts: Con Klutz GPT, puedes decirle al AI lo que

quieres que haga tu script y ver si lo hace correctamente.

Construcción de Expresiones: Si deseas generar una expresión,

puedes pedírselo al AI, y es posible que pueda ayudarte.

Retroalimentación de Errores: Cuando experimentes errores con

los scripts o fragmentos de código de expresión generados, Klutz
GPT te proporcionará la retroalimentación de los errores
directamente en la entrada. De esta manera, puedes decirle
fácilmente al AI por qué su código no funciona, con la esperanza de
que haga un mejor trabajo la próxima ve .
z​
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / M I D J O U R N E Y

MidJourney para
Imagen y vídeo.
El Generador de Imágenes
artísticas más potente.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / M I D J O U R N E Y

Text to Img con

MidJourney.
MidJourney es un generador de arte AI influenciado por la Difusión
Estable que permite a los usuarios obtener imágenes generadas a
partir de textos o "prompts". La guía de optimización de prompts de
MidJourney y este prompt generator brinda varios consejos para
sacar el máximo partido a cada prompt que se utilice.

Uno de los consejos principales es utilizar descripciones detalladas

y largas en los prompts, ya que suelen proporcionar los mejores
resultados. Se anima a los usuarios a ser lo más específicos posible
con su prompt e incluir muchos adjetivos. Cuanto más descriptivo
sea el prompt, mejor será el resultado. Además, integrar el nombre
de un artista en el prompt puede hacer que se utilice el estilo de ese
artista como influencia para la imagen generada.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / M I D J O U R N E Y

MidJourney +
VoluMax7.
VoluMax 7 es una herramienta para Adobe After Effects que te
permite convertir tus imágenes en impresionantes animaciones 3D.
Entre sus nuevas características, incluye VoluMax AI con
AutoDepth, un script para Photoshop 2022 y 2021 que utiliza filtros
neuronales para generar mapas de profundidad en un clic. También
se ha optimizado para ser más rápido en la visualización y
exportación con After Effects.

Un posible flujo de trabajo sería generar imágenes con MidJourney

basadas en descripciones de texto, y luego usar estas imágenes
como base en VoluMax 7 para crear animaciones 3D. Este flujo de
trabajo combinaría las fortalezas de ambas herramientas,
permitiéndote explorar nuevas formas de expresión artística.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / S TA B L E D I F F U S I O N

Stable
Diffusion
El text to image y text to video
que compite con MidJourney y es
Open Source
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / S TA B L E D I F F U S I O N

Los Modelos de
Stable Diffusion.
La herramienta Stable Diffusion es un generador de imágenes
impulsado por inteligencia artificial, notable por su flexibilidad. Es de
código abierto y permite entrenar tus propios modelos basados en
tus propios conjuntos de datos para generar exactamente el tipo de
imágenes que desees.

La herramienta Stable Diffusion ofrece una amplia gama de estilos

para la generación de imágenes. Estos estilos incluyen Anime,
Fotográfico, Arte Digital, Cómic, Arte Fantástico, Película Analógica,
Punk Neón, Isométrico, Low Poly, Origami, Pixar, Cinemático, 3D y
Arte Pixelado.

En términos generales, un "modelo" en este contexto se refiere a un

sistema de aprendizaje automático que ha sido entrenado para
realizar una tarea específica. En este caso, los modelos de Stable
Diffusion han sido entrenados para generar imágenes basándose en
descripciones de texto.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / S TA B L E D I F F U S I O N

Animator/Deforum
Stable Diffusion.
Usa Deforum para animaciones más complejas: Si deseas crear
animaciones más complejas y generar archivos de video en lugar de
fotogramas, puedes utilizar Deforum. Es un proyecto de síntesis de
imágenes con una extensión para la interfaz de usuario web Stable
Diffusion que te permite dirigir y generar archivos de video MP4,
incluso con audio. Para usar Deforum, deberás instalar la extensión
de Deforum. Abre una ventana de comandos, cambia al directorio de
tu carpeta "stable-diffusion-web-ui" y utiliza el comando "git clone"
para instalar Deforum en tu carpeta de extensiones.

En este ejemplo, Deforum comenzará a generar fotogramas

basados en el primer indicador en el fotograma 0, cambiará al
segundo indicador en el fotograma 40 y luego cambiará al tercer
indicador en el fotograma 80. Puedes agregar tantos cambios de
indicador como desees y ajustar el límite máximo de fotogramas
según sea necesario.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / S TA B L E D I F F U S I O N

Más poder de control

con Control Net.
ControlNet es un modelo de red neuronal diseñado para controlar
los modelos de Difusión Estable. Permite copiar composiciones o
poses humanas a partir de una imagen de referencia, aportando una
gran precisión en la ubicación y apariencia de los sujetos en las
imágenes generada . Esto resuelve un desafío importante en la
generación de imágenes con Stable Diffusion, que puede resultar en
composiciones bastante aleatorias.

ControlNet añade una condición adicional a la del texto, la cual

puede tomar muchas formas. Un ejemplo de esto es la detección de
bordes: ControlNet toma una imagen de entrada adicional, detecta
sus contornos y los utiliza como una condición adicional para
generar imágenes que coincidan con el texto de entrad . Otro
ejemplo es la detección de poses humanas con OpenPose, que
extrae puntos clave humanos como las posiciones de las manos, las
piernas y la cabeza, y los utiliza como una condición adiciona .
s​
a​
l​
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / E L E V E N L A B S

Eleven
Labs
La mejor síntesis de voz
generada con Inteligencia
Artificial
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / E L E V E N L A B S

Voces realistas con

Eleven Labs.
Eleven Labs es una herramienta de inteligencia artificial que ofrece
características destacadas como la clonación de voz y modelos de
voz. Su modelo de IA ha sido entrenado en una gran cantidad de
audiolibros y, en menor medida, podcasts, lo que permite a la IA
interpretar y generar audio en el estilo de un libro. Con cada
actualización del modelo, la IA mejora en la comprensión de
diferentes contextos, ayudando a entender más matices entre
humanos, idiomas y acento .

El modelo monolingüe, que fue el primero en ser lanzado, se entrenó

en un conjunto de datos en inglés. Por otro lado, el modelo
multilingüe ha sido entrenado en un conjunto de datos que incluye
una amplia gama de otros idiomas, incluyendo francés, alemán, hindi,
italiano, polaco, portugués y español. Este modelo multilingüe
todavía está en su etapa experimental, aunque ya funciona bastante
bien para muchas tareas.
s​
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / A D O B E F I R E F LY

Adobe Firefly
para AV.
Crea Imágenes, Vectores, Textos
con la Inteligencia Artificial de
Adobe.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / A D O B E F I R E F LY

Text to
Image.
A diferencia de los modelos de IA tradicionales que dependen de
grandes cantidades de datos y poder de cómputo centralizado,
Adobe Firefly adopta un enfoque descentralizado utilizando la
biblioteca de imágenes de Adobe como fuente para las imágenes.

Firefly tiene un sistema de indicaciones fácil en el que simplemente

escribes las palabras o descripciones y el sistema generará
imágenes basadas en tu entrada. Además de la fácil selección de
modos. Una contra sería la dificultad que MidJourney no encuentra
por ejemplo para utilizar imágenes que usen Copyright.

Otra característica clave de Firefly es el "relleno generativo". Esta

función te permite eliminar áreas del fondo de una imagen usando un
pincel estándar y luego pintar o renderizar un nuevo fondo usando
indicaciones de texto.
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / A D O B E F I R E F LY

”MidJourney” en
Photoshop.
La nueva funcionalidad beta de generación de imágenes con IA en
Photoshop, conocida como Generative Fill, permite agregar,
extender o eliminar contenido de tus imágenes de forma no
destructiva, utilizando simples indicaciones de texto para lograr
resultados asombrosos. Esta funcionalidad utiliza la tecnología
Adobe Firefly y está disponible en la aplicación Photoshop (Beta .

Si quieres generar un nuevo objeto, seleccionas el área de la imagen

donde deseas que aparezca el objeto, haces clic en el botón
Generative Fill y escribes una breve descripción del objeto que
deseas que Photoshop genere. Para eliminar un objeto, seleccionas
el objeto que deseas eliminar con cualquier herramienta de
selección, y haces clic en el botón Generative Fill sin escribir text .
)​
o​
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / A D O B E F I R E F LY
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / E N L A C E S D E I N T E R É S

YouTube Videos:
Using ChatGPT AI to Create Animations (After Effects GAMECHANGER!):
Crea expresiones y scripts con ChatGPT como un experto - After Effects

Enlaces de
ChatGPT changed how I work in After Effects FOREVER
After Effects + ChatGPT AI 🤯😲 ( Mind Blown )

Interés
Automatiza tus COMPS con ChatGPT y archivos CSV - After Effects
Instalar Stable Diffusion
Instalar Control Net
Stable Diffusion Models
Clonar Voces en Eleven Labs

Foros y Cursos:
Consejos para Prompts
Chat GPT-4, AI and After Effects - Reddit
Expression Session - Master Expressions in After Effects
Expressions trip
P R O T O C O L O I A PA R A P R O C E S O S A U D I O V I S U A L E S / C O N C L U S I O N E S

Independientemente de tener la capacidad de pedir y crear

con mayor facilidad siempre vamos a necesitar tener un criterio y una idea
para que estas herramientas, creen con sentido.
Gracias.

San Mateo 15 +34 91 360 59 90

28004 Madrid. Spain [email protected]