7: Pruebas finales y definición de una línea de producción

Con toda la experimentación y los conocimientos previos recopilados, realicé algunas pruebas más para perfeccionar aún más el proceso. En este artículo, comparto los resultados de estas pruebas finales y describo el proceso de producción que utilizaré para mi cortometraje.

Experimenté con material adicional y modifiqué ligeramente el mensaje para ver si podía lograr mejores resultados. Me concentré en primeros planos extremos y expresiones variadas para probar la capacidad de la IA de capturar detalles intrincados.

Observaciones:

• Detalles mejorados: la IA capturó expresiones faciales y movimientos sutiles de manera más efectiva en tomas de primeros planos.
• Separación de fondo: Dejar el fondo separado reafirmó los beneficios observados en pruebas anteriores.
• Consistencia: Los resultados fueron más consistentes en estilo y calidad, lo que es crucial para la estética general de la película.

También experimenté generando fondos por separado para ver cómo podían integrarse con los personajes rotoscopiados.

Retocando el personaje

Usando la función de retoque de RunwayML, intenté eliminar el personaje del metraje original para crear placas de fondo limpias.

Desafíos:

• Imperfecciones detectadas por la IA: la pintura no era perfecta, lo que dejaba artefactos que la IA intentaba interpretar, lo que daba como resultado elementos no deseados en el fondo.
• Adiciones no deseadas: La IA generó contenido adicional que no estaba presente en la escena original, como fuentes de agua adicionales, que no tenían sentido en el contexto.

Ejemplos de anomalías de fondo generadas por IA

Conclusión sobre los antecedentes:

• Necesidad de métodos más limpios: se podría intentar un enfoque más preciso para la preparación del fondo. El uso de herramientas de retoque avanzadas como Sapphire (que aún no he explorado) podría dar mejores resultados.
• Soluciones alternativas: considerar métodos que no sean de IA, como generar fondos utilizando herramientas 3D como Blender, podría ofrecer más control y consistencia.

En base a todas las pruebas y conocimientos, aquí está el proceso propuesto adaptado a las necesidades creativas y presupuestarias de mi proyecto.

1. Producción de acción en vivo

• a. Filmación con pantalla verde: filme la mayor parte posible del cortometraje en una pantalla verde, especialmente primeros planos, para facilitar la separación del fondo.
• b. Filmación en locación: capture tomas más amplias en la locación y grabe imágenes adicionales de los entornos sin actores para generar el fondo.

2. Preproducción de metraje

Una vez editado el metraje y bloqueado el corte, proceda con los siguientes pasos:

• a. Balance y corrección de color: aplique balance y corrección de color a todo el metraje para garantizar la consistencia.
• b. Rotoscopia: Rotoscopia cualquier material que no haya sido filmado en una pantalla verde para separar los sujetos del fondo.
• c. Uniformidad de la iluminación: asegúrese de que la iluminación coincida con la del material filmado en el lugar y con las tomas con pantalla verde. Lo ideal es que esto se solucione durante la fase de filmación.

3. Procesamiento de elementos del primer plano mediante IA

• a. Experimentación iterativa: utilice los modelos de IA para procesar el material rotoscopiado e itere para encontrar las indicaciones, las semillas y las configuraciones óptimas.
• b. Priorizar la estructura sobre el color: centrarse en mantener la integridad estructural de los resultados, con la consistencia del color como objetivo secundario.

4. Generación de antecedentes

Opciones a considerar:

• Modelado 3D: utilice herramientas como Blender para crear fondos que coincidan con el estilo y la perspectiva de los elementos del primer plano.
• Retoque avanzado: explora técnicas de retoque más sofisticadas para reconstruir fondos a partir de imágenes.
• Fondos dibujados o pintados a mano: colabora con artistas o utiliza técnicas de pintura digital para crear fondos que complementen a los personajes generados por IA. (Esto está inspirado en "Undone", el programa de Amazon).

5. Reensamblaje del corte

• a. Elementos compuestos: combina los primeros planos procesados ​​por IA con los fondos generados.
• b. Ajustar el tiempo: asegúrese de que el ritmo y el tiempo permanezcan consistentes con la edición original.

6. Posprocesamiento y mejoras artísticas

• a. Limpiar líneas: refine la calidad visual limpiando las líneas y corrigiendo cualquier artefacto de IA.
• b. Agregue detalles dibujados a mano: incorpore elementos dibujados a mano para mejorar las expresiones o agregar toques estilísticos.
• c. Efectos visuales: Aplique cualquier efecto visual adicional necesario y cualquier otro elemento producido utilizando otros métodos.

7. Corrección y gradación final del color

• a. Corrección de color: realice los ajustes finales para garantizar la consistencia del color en todas las escenas.
• b. Calificación de color: aplicar calificación para establecer el estado de ánimo y el tono de la película, mejorando la narración visual.

Me siento alentado por el potencial de este proceso. Las herramientas de inteligencia artificial han demostrado ser poderosas y, con una planificación y una ejecución cuidadosas, creo que pueden ayudarme a crear un cortometraje visualmente atractivo.

La siguiente fase implica pasar a la producción completa y aplicar este proceso a todo el proyecto. Si bien se esperan desafíos, especialmente en lo que respecta a mantener la coherencia e integrar todos los elementos sin problemas, confío en que el trabajo preliminar realizado mediante esta experimentación será muy útil.

En general, este proceso no solo ha simplificado la producción, sino que también me ha abierto las puertas a oportunidades creativas que no había considerado. Estoy entusiasmado por comenzar el proceso de producción y ver cómo estas técnicas hacen realidad mi visión.

Gracias por seguir esta serie. En futuras actualizaciones, compartiré el progreso de la producción, analizaré los obstáculos encontrados y reflexionaré sobre la eficacia del pipeline en la práctica.