Vemos en todas partes cómo la IA nos va a reemplazar y los peligros de la IA. IA de pista Me hizo sentir muy esperanzado en este sentido. Pude ver de primera mano que la IA te permite ser creativo libremente.
Fue, con diferencia, el programa de IA más divertido que he usado. La mejor manera de describirlo sería "La IA como tu patio de recreo".
Entonces, ¡conozcamos mejor esta herramienta!
Runway ofrece una variedad de herramientas creativas impulsadas por IA, siendo Gen-1 y Gen-2 las herramientas más sofisticadas.
Gen-1
Con la herramienta Gen-1 AI de Runway, puedes crear versiones nuevas y estilizadas de tus videos. Después de elegir un video de entrada, puede obtener una vista previa y modificar parámetros como el peso del mensaje y la consistencia estructural.
También puede seleccionar una referencia de estilo (a través de una imagen, un mensaje de texto o un ajuste preestablecido). Con la capacidad de crear vídeos de hasta 15 segundos de duración, la herramienta ofrece un enfoque versátil e imaginativo para repensar el material de vídeo.
¿Como funciona?
El panel tiene un área de arrastrar y soltar denominada "Arrástrame y suéltame aquí", donde puedes subir tu vídeo.
En la versión gratuita, experimenté con un vídeo de montaña y utilicé la sección de indicaciones para agregarle arcoíris. ¡El resultado fue bastante bueno!
Con opciones de suscripción más altas, obtendrá acceso a las configuraciones sofisticadas de Runway Gen-1. Tienes más control sobre el estilo, la coherencia y las áreas afectadas del vídeo resultante gracias a estas opciones. Estos son algunos de los parámetros para planes avanzados:
Consistencia estructural: Este parámetro determina cuánto se desvía la estructura del vídeo de salida del original. Los valores más bajos mantendrán el resultado más similar al video de origen, mientras que los valores más altos (0 a 5) proporcionarán una salida que es visualmente más única.
Peso: Esta opción indica la importancia de mantener consistente el estilo de su imagen de referencia. Valores mayores (7.5 a 12.5) harán que el vídeo creado dé más peso al estilo del vídeo original que a su contenido.
Semilla: Esta configuración sirve como identificación especial para un determinado método de generación aleatoria. Al bloquear el valor inicial, puede experimentar con diferentes parámetros sin sacrificar la coherencia general del estilo en el producto final, o puede replicar el mismo estilo en muchos clips.
Gen-2
Puede crear videos usando Gen-2 by Runway mediante mensajes de texto o imágenes. Es posible producir películas de hasta 16 segundos con opciones personalizadas como ampliación de escala e interpolación de fotogramas cargando una imagen o escribiendo un mensaje de texto detallado.
Para mejorar la producción de video, Gen-2 también proporciona controles sofisticados como pinceles de movimiento y ajustes de cámara.
Aquí están mis resultados:
¿Cómo Funcionan?
El panel es increíblemente intuitivo y está lleno de tutoriales sobre cómo utilizar cada herramienta. Puede crear fácilmente películas a partir de texto o imágenes.
Con controles de calidad (720p, 2K), peso de los mensajes y mensajes negativos para fotografías de muestra, puede enviar una imagen o escribir un mensaje para una escena. Hay opciones para la interpolación de fotogramas y una semilla preestablecida para mayor coherencia, entre otros parámetros.
La herramienta de pincel de movimiento le permite ajustar ciertas secciones de video para obtener aún más flexibilidad, mientras que los controles de movimiento de la cámara permiten modificaciones en las direcciones horizontal, vertical, panorámica, giratoria, inclinada y de zoom.
Audio generativo
Usando Text to Speech, Lip Sync y Custom Voices, puedes agregar diálogos y voces en off a videos con la herramienta Generative Audio de Runway. Puede producir muestras de audio, elegir una voz y escribir un guión.
Con Custom Voices, puede crear opciones de voz personalizadas para conversión de texto a voz. Y, con Lip Sync, puedes animar personajes fijos añadiendo voz.
Aquí están mis resultados al usar Generative Audio. Le pedí a uno de los personajes, Armondo, en este caso, que rehiciera el monólogo de El Señor de los Anillos.
Panel de Control
Resultado del vídeo
El panel de Generative Audio de Runway ofrece muchas opciones para producir y editar locuciones para videos. Puede grabar o cargar audio, crear sus propias voces personalizadas y elegir entre una gran biblioteca de voces pregrabadas que se dividen en categorías según atributos como género, edad, tono y acento.
También puedes contribuir con recursos faciales (imágenes o videos) a la animación con capacidades de sincronización de labios, lo que permite que la conversación generada dé vida a los personajes. Con proyectos de video, esta herramienta facilita tener un control preciso sobre la sincronización de audio y visual.
Texto a imagen
Con la función Texto a imagen de Runway, puedes convertir mensajes de texto en imágenes. Puede cambiar parámetros como la resolución, el peso del mensaje y el estilo después de crear un mensaje. La estimulación negativa es una de las alternativas avanzadas para un manejo más preciso.
Puede crear una o más fotos según sus descripciones después de configurar sus preferencias. Esta herramienta es un componente del conjunto de herramientas de inteligencia artificial creativa de Runway, que facilita la creación eficiente de contenido visual por parte de los usuarios.
Aquí están mis resultados. Quería que la IA generara imágenes de personajes de uno de mis libros favoritos, "Los desposeídos". El libro nunca se ha adaptado a una película, así que pensé que este podría ser un caso para que la IA muestre su calidad.
Resultados de la generación de texto a imagen
Después de haber utilizado muchas otras herramientas para la generación de texto a imagen, podría decir que la calidad es realmente impresionante en Runway AI.
Puede proporcionar indicaciones con texto descriptivo para generar imágenes. En el panel, puede personalizar el peso, el estilo y la resolución del mensaje o elegir entre ejemplos prediseñados.
Hay opciones para seleccionar la cantidad de resultados y pueden entrenar sus modelos para obtener resultados personalizados. El panel ofrece opciones adicionales para un control preciso de los gráficos generados y ofrece sugerencias de indicaciones que funcionan bien.
Consejos para incitar
Para la conversión de texto a imagen, mantenga las indicaciones simples, use modificadores de estilo como "al estilo de" con adjetivos y cambie el peso de las indicaciones en la configuración avanzada para un mayor control.
Para cambiar la estructura de una imagen existente, descríbala de manera diferente o elimine los descriptores por completo. Por último, recuerda que el orden de las palabras es importante. Las palabras al principio del mensaje tienen más peso que las palabras cerca del final.
Interpolación de cuadros
La función de interpolación de fotogramas de Runway le permite generar películas fluidas a partir de una serie de fotografías. Puede seleccionar una serie de fotos, definir variables como la duración del clip y el tiempo de transición y luego crear el video.
Este enfoque se puede ajustar para proporcionar resultados realistas o experimentales basados en el parecido o el dinamismo de las imágenes. Intenté utilizar tantas imágenes similares como fuera posible, sin embargo, sigo pensando que la calidad no fue la mejor.
Pensé que las imágenes podrían animarse mejor porque ya había visto las capacidades de las herramientas para animar imágenes en transiciones de imagen a video. Sin embargo, esta característica también puede resultar interesante en algunos casos.
Resultados de la interpolación de cuadros
Imagen de lujo
Esta característica es para aumentar la resolución de las imágenes. Mejora la calidad de la imagen sin sacrificar la claridad, lo que la hace apropiada para impresiones detalladas y visualizaciones de alta definición.
Sin embargo, creo que he visto mejores herramientas para mejorar las imágenes. Consulte el último artículo como referencia: Las 15 mejores herramientas de mejora de imágenes con IA. Mis resultados están a continuación; Como puedes ver, no hay una gran diferencia entre la imagen mejorada y la original.
Imagen original
Imagen mejorada
Además de todas estas características principales de Runway AI, también quiero hablar sobre algunas de las otras funcionalidades independientes.
Quitar el fondo
Con el uso de este programa, puedes aislar automáticamente el tema de una imagen eliminando el fondo. Es muy útil para producir imágenes de tipo empresarial para listados de productos, presentaciones y otros esfuerzos creativos en los que el sujeto debe estar aislado de su entorno.
Imagen infinita
Puede extender imágenes suavemente en todas direcciones con Infinite Image. Con la ayuda de esta herramienta, puedes ampliar fondos, crear escenas panorámicas y combinar fotografías más pequeñas para crear lienzos más grandes que no tengan bordes obvios.
Borrar y reemplazar
Al eliminar algunas partes de una imagen y agregar otras nuevas, puede modificar regiones particulares de la imagen. Esta herramienta se puede utilizar para agregar nuevos objetos a una escena existente sin problemas, eliminar elementos no deseados de las fotos o corregir los existentes.
Remezcla de fondo
Con Background Remix, puedes alterar el fondo de una imagen sin afectar el contenido de la imagen. Esto es muy útil para materiales de marketing o cualquier situación en la que se requiera un entorno nuevo sin cambiar el tema central.
Variación de imagen
Utilizando una variedad de estilos y ediciones, esta función crea muchas variaciones de una imagen. Encontrar la representación visual ideal para un proyecto y experimentar con alternativas innovadoras es fácil.
Textura y captura 3D
Con la ayuda de estas herramientas, puede convertir fotografías 2D en modelos 3D y agregarles texturas. Resultan útiles para proyectos que requieren representaciones 3D realistas a partir de fotografías planas, como diseño de juegos y animación.
En pintura
Las partes de una imagen que están dañadas o faltantes se pueden reparar con pintura. Esta herramienta es ideal para la restauración de fotografías o la mejora de imágenes porque puede combinar perfectamente el área circundante para rellenar huecos o eliminar objetos no deseados.
Grado de color (LUT)
Este programa utiliza tablas de búsqueda (LUT) para aplicar gradación de color a las fotografías. Es necesario conseguir el efecto cinematográfico requerido, mejorar las fotografías con ciertos tonos de color y mejorar la estética visual.
Súper cámara lenta
Los vídeos en cámara lenta de alta calidad son producidos por Super-Slow Motion. Equilibra el movimiento produciendo más fotogramas, lo que permite efectos de cámara lenta dramáticos y detallados en los vídeos.
Caras azules
Al ocultar los rostros de las personas en imágenes y vídeos, Blur Faces ayuda a las personas a volverse anónimas. Esto es esencial para mantener la privacidad al compartir cualquier tipo de medio en línea o en público, incluidas imágenes y videos.
Profundidad de campo
Con la ayuda de esta herramienta, puedes imitar el efecto de profundidad de campo en las fotografías, dando al sujeto principal un gran enfoque y el área circundante borrosa. Ayuda a que los retratos se vean mejor y produce imágenes que parecen profesionales.
Con todas estas características en mente, por último, verifiquemos el precio de Runway Ml.
Precios
Plan Básico
Para aquellos que quieran probar las capacidades de inteligencia artificial y las funciones de producción de contenido de Runway sin tener que pagar nada, el plan Básico es excelente. Se incluyen un total de 125 créditos, que se pueden aplicar a 25 generaciones de imágenes, 8 segundos de video Gen-1 o 25 segundos de video Gen-2.
Por otro lado, prohíbe la eliminación de marcas de agua de las salidas Gen-1 y Gen-2, aumentar la resolución y comprar más créditos. El plan incluye soporte para tres proyectos de video, cinco gigabytes de activos, exportaciones de editores de video de 720p, videos Gen-1 de hasta cuatro segundos y películas Gen-2 de hasta dieciséis segundos a través de Extend Video.
Standard plan
El plan Estándar, que cuesta $12 por usuario por mes cuando se factura anualmente, es apropiado para individuos y equipos pequeños que requieren acceso adicional y capacidades de exportación. Permite la eliminación de marcas de agua y la resolución de escala, y ofrece 625 créditos cada mes.
Este paquete incluye proyectos de video ilimitados, 100 GB de activos, exportaciones de video 4K, exportaciones de imágenes 2K, opciones completas de texturas 3D y soporte para videos Gen-1 y Gen-2 de hasta 15 segundos y 16 segundos, respectivamente, a través de Extend Video.
Pro plan
Los equipos que requieren una amplia funcionalidad pueden optar por el paquete Pro, que cuesta $28 por usuario cada mes y se paga anualmente. Junto con todas las capacidades estándar, 500 GB de activos, exportaciones de video PNG y ProRes y la capacidad de generar voces para Texto a voz y Lip Sync, ofrece 2250 créditos cada mes.
Plan Ilimitado
El plan Ilimitado ofrece todos los beneficios del plan Pro junto con la flexibilidad de acceso ilimitado. generación de video por $76 por usuario por mes, pagadero anualmente. Además de restablecer 2250 créditos cada mes para tareas de alta prioridad, ofrece una cantidad infinita de generaciones Gen-1 y Gen-2 en el modo Explorar. Este plan está diseñado para aquellos que necesitan acceso completo a todas las funciones de Runway sin limitaciones.
Conclusión
Creo que Runway es una de las mejores herramientas de IA generativa disponibles en este momento y deberías empezar a experimentar con ella. Por supuesto, hay características que podrían necesitar mejoras, pero en general, especialmente con la generación de videos e imágenes, tiene una gran calidad y un excelente algoritmo.
Podría decir dos cosas geniales al respecto: en primer lugar, todas estas capacidades creativas de IA están reunidas en una sola plataforma, lo que hace que sea muy eficiente trabajar en proyectos. En segundo lugar, la plataforma es muy intuitiva, por lo que aprender a utilizarla es increíblemente rápido y sencillo.
Entonces, ¡pruébalo! ¡Genera un increíble arte de IA!
Deje un comentario