Mientras que los potentes chatbots de IA, como ChatGPT y Google Bard, funcionan con grandes modelos de lenguaje, la síntesis de imágenes y videos con IA se basa en modelos de difusión y GAN. Todos estos son parte de la popular experiencia de IA generativa. Y en este artículo, echamos un vistazo más de cerca a los mejores generadores de video de IA. Hasta ahora, solo se han lanzado en línea unos pocos modelos de IA de texto a video, pero ¿cuáles son buenos y utilizables? Para averiguarlo, avancemos y veamos la lista de los mejores generadores de video de IA en 2023.
Tabla de contenido
1. Runway Gen-2
El mejor generador de video con IA que puedes usar ahora mismo es Runway Gen-2. Anteriormente, Runway había introducido la generación de video a video con Gen-1, y ahora con el modelo Gen-2, puede generar video usando indicaciones de texto desde cero. De forma similar a las indicaciones de Midjourney, puede describir la escena, los ángulos de la cámara, etc., y produce resultados increíbles. Probé algunas indicaciones en Runway e hizo un trabajo decente.
La mejor parte es que puede agregar una imagen a su aviso y Runway puede usar la imagen en el video. Eso es genial, ¿verdad? En cuanto a la disponibilidad, bueno, es casi gratis de usar. Puede generar hasta 4 segundos de videos en una resolución de 720p y puede crear casi 10 videos gratuitos.
Si elige obtener el plan pago ($12 por mes), puede exportar los videos en 4K, sin embargo, la duración de 4 segundos seguirá siendo la misma. Entonces, si desea probar la mejor herramienta de inteligencia artificial de texto a video, consulte Runway Gen-2.
Echa un vistazo a Runway Gen-2 (El plan gratuito y de pago comienza en $12 al mes)
2. ModelScope
ModelScope es un modelo de texto a video financiado por DAMO Vision Intelligence Lab de Alibaba, y se ha vuelto bastante bueno con el tiempo. Se basa en el modelo Diffusion y entrenado en 1700 millones de parámetros. Actualmente, solo admite la entrada en inglés y puede generar videos que coincidan con la entrada de texto.
Afortunadamente, el proyecto está disponible en Hugging Face, por lo que puede usarlo para generar videos de IA. Pero tenga en cuenta que solo puede generar un video de 2 segundos y hay una marca de agua de”Shutterstock”en el video. Probé el modelo y parecía un trabajo en progreso.
Echa un vistazo a ModelScope (Gratis)
3. Zeroscope
Zeroscope es otro modelo de texto a video derivado de ModelScope. Es capaz de crear videos de IA de alta calidad con una resolución de 1024 x 576. El modelo se ha entrenado con el peso original de ModeScope además de 9923 clips y 29 769 fotogramas etiquetados en 24 fotogramas (resolución de 1024 x 576). Como resultado, crea una salida ligeramente mejor que ModelScope.
Hay dos modelos de Zeroscope: zeroscope_v2_576w y zeroscope_v2_XL. El modelo zeroscope_v2_576w se utiliza para generar el video y zeroscope_v2_XL se utiliza para ampliar el contenido generado a una resolución más alta. Puede ver la demostración de este genial generador de video de IA en Hugging Face.
Echa un vistazo a Zeroscope (Gratis)
4. VideoCrafter
VideoCrafter es un conjunto de herramientas de inteligencia artificial para crear videos a partir de indicaciones de texto y ha sido desarrollado por Tencent. A diferencia de otros modelos de generación de video con IA, puede crear videos de hasta 8 segundos y también admite diferentes resoluciones.
Hay tres formas diferentes de usar VideoCrafter. Puede usar la generación de texto a video, la generación de video AI personalizado usando LoRA y la generación de video controlable. Los tres modos te permiten crear videos de IA desde cero. Puede ejecutar VideoCrafter localmente en su máquina si tiene una GPU potente con al menos 7 GB de VRAM. Sin embargo, hay una demostración de Hugging Face disponible en línea, que puede probar a continuación.
Echa un vistazo a VideoCrafter (Gratis)
5. Synthesia
Synthesia es una herramienta de IA que puede usar para crear videos profesionales de IA en unos pocos minutos. Puede usarlo para crear tutoriales, documentación en video, presentaciones, argumentos de venta y mucho más. En ese sentido, no es un generador de video de IA que pueda usar su mensaje de texto para crear algo desde cero. En Synthesia, puede elegir entre más de 140 avatares de IA diversos y convertir cualquier texto en voz en más de 120 idiomas.
Básicamente, no es necesario construir un estudio y comprar hardware costoso para crear videos profesionales. Con el carácter de IA de Synthesia y la herramienta integrada de texto a voz, puede comenzar a crear contenido rápidamente. Todo lo que tienes que hacer es ingresar el guión del video.
Entonces, ¿a qué estás esperando? Continúe y pruebe Synthesia para crear increíbles videos de IA. Si está buscando una alternativa a Synthesia, puede consultar HeyGen (visitar) y Pictory (visitar).
Vea Synthesia (Un video gratis, plan pago comienza en $22.50 por mes)
6. Kaiber
Kaiber no es un generador de video de IA per se, pero puede generar animaciones de sujetos en diferentes formas de arte. Puede ingresar un mensaje de texto, cargar su propia imagen o cargar una canción, y puede tomar todo y usar su motor de generación de inteligencia artificial avanzada para crear animaciones cautivadoras. También puedes subir tus videos y transformarlos en varios estilos y estéticas.
Sin embargo, la aplicación no es totalmente gratuita. Obtiene una prueba gratuita de 7 días, pero para eso, deberá agregar los detalles de su tarjeta y suscribirse a su plan de suscripción de $5. En pocas palabras, Kaiber es una herramienta de IA que deberías probar para generar elementos visuales de tus imágenes y videos.
Echa un vistazo a Kaiber (Prueba gratuita de 7 días, el plan de pago comienza en $5 al mes)
7. Wonder Studio
Wonder Studio no es una herramienta de generación de video de IA para consumidores en general, pero está dirigida a cineastas y creadores de contenido. Te permite animar automáticamente un personaje generado por computadora en una escena de acción en vivo sin tener que aplicar VFX manualmente. Básicamente, puede automatizar entre el 80 y el 90 % del trabajo de VFX y 3D, y funciona bien. No es necesario utilizar software 3D complejo ni hardware costoso.
Wonder Studio puede detectar automáticamente al actor en las escenas y aplicar el personaje CG cuadro por cuadro sin mucho trabajo de VFX. Entonces, si usted es un cineasta en ciernes que necesita hacer un trabajo de VFX muy exigente rápidamente, debería echar un vistazo a Wonder Studio.
Echa un vistazo a Wonder Studio (Solicitar acceso)
8. Google Imagen Video y Phenaki
Google no ha lanzado al público su modelo de texto a imagen, pero ha anunciado los modelos en los que la empresa está trabajando. El gigante de las búsquedas está trabajando en Imagen Video basado en modelos de difusión en cascada. Puede generar videos de alta definición en una resolución de 1280 x 768 a 24 fps.
Google también está trabajando en Phenaki, un modelo de texto a video que puede sintetizar videos realistas a partir de mensajes de texto. Ambos modelos están en desarrollo, y nosotros no cuando tenemos un generador de video de IA en funcionamiento. Sin embargo, puede leer los trabajos de investigación en los enlaces a continuación.
Echa un vistazo a Google Imagen Video y Phenaki
Además, Meta ha anunciado su Make-A-Video Herramienta de IA que puede generar videos a partir de textos. Puede crear videos realistas, surrealistas y personalizados usando texto, imágenes o entrada de video. El modelo de Meta es capaz de crear videos en movimiento a partir de una sola imagen. También puede agregar varias imágenes como entrada y puede rellenar en movimiento para crear videos de ensueño.
Según el trabajo de investigación de Meta, su modelo de generación de video tiene una representación 3 veces mejor de la entrada de texto y una mayor eficiencia que otros modelos. Nuevamente, el proyecto no está abierto al público, pero puede registrarse y solicitar acceso desde Meta.
10. Modelo de difusión latente de Nvidia
Finalmente, Nvidia ha anunciado su modelo de difusión latente de video de alta fidelidad que puede generar videos eficientes de alta resolución usando indicaciones de texto. Puede generar videos con una resolución de 1280 x 2048 a 24 fps, lo cual es perfecto. La mayoría de sus videos tienen una duración de 5 segundos, pero también puede generar videos más largos de 5 minutos con una resolución de 512 x 1024. También puede agregar entradas de imagen y crear videos de IA personalizados.
En el espacio de síntesis de video, creo que Nvidia emergerá como uno de los jugadores clave en el futuro. Mientras tanto, Nvidia ha mostrado múltiples demostraciones de video en su sitio web que puede consultar a continuación.
Vea el modelo de difusión latente de Nvidia
Deja un comentario
Al concluir el ciclo de lanzamiento de juegos de junio, es hora de hablar sobre AEW Fight Forever, el regreso de Yuke a los videojuegos de lucha libre. Después de todo, hace poco que terminé de ver un grandilocuente PvP llamado Forbidden Door, y Kenny Omega vs Will Osprey […]
Diablo 4 fue posiblemente uno de mis títulos de juegos anticipados este año. Dos sesiones beta exitosas nos dieron una idea de qué esperar de la cuarta entrega de la serie de larga duración. Sin embargo, también tenía cuidado, ya que […]
La RTX 4060 Ti finalmente está aquí, llega con la RTX 4060 base a un precio lo suficientemente atractivo como para que los jugadores consideren actualizar su tarjeta gráfica. ¿Pero deberías? Profundizaremos y compararemos el RTX 4060 […]
