Esto acaba de destruir la edición de video con IA gracias a GPT 6 Astra

AAI LABS
컴퓨터/소프트웨어마케팅/광고AI/미래기술

스크립트

00:00:00Mucha gente ha estado dejando que los modelos hagan sus videos de principio a fin, desde la planificación
00:00:04de las tomas hasta su edición y la adición de la música, y saber cómo construir estos videos
00:00:09importa aún más si estás creando un producto, porque estos videos son la forma más rápida de
00:00:13llamar la atención de la gente hacia lo que has construido sin necesidad de que lo usen realmente;
00:00:18pero si te sumerges de lleno en la creación del video, no obtendrás la calidad que deseas y también
00:00:22desperdiciarás mucho tiempo y tokens. Para evitarlo, debes seguir todo un flujo de trabajo que asegure
00:00:27que el video salga exactamente como lo quieres. Para nuestro flujo de trabajo, usamos gpt6 astra dentro de cloud code,
00:00:33ya que astra es uno de los mejores modelos en edición de video, y esta configuración nos permite usar
00:00:37las fortalezas de ambos. Así que, si es tu primera vez por aquí, somos una empresa de software
00:00:42y esto es ai labs, y en este video vamos a recorrer ese flujo de trabajo paso a paso, incluyendo
00:00:47qué problemas podrías encontrar en el camino y cómo solucionarlos. Ahora, tal vez te preguntes por qué
00:00:52estamos ejecutando astra dentro de cloud code cuando astra ya viene con sus propias herramientas en codex.
00:00:58La razón es que preferimos las herramientas que nos da cloud code y por eso lo usamos para
00:01:02prácticamente todo lo que construimos, y la razón por la que no usamos los propios modelos de cloud dentro
00:01:08es que astra generalmente tiene una mejor dirección de diseño y también salió adelante en diseño
00:01:14cuando lo comparamos con fable en nuestro video anterior. Así que, con esta configuración, astra aporta
00:01:18la dirección creativa para el video y cloud code ejecuta las herramientas para crearlo, pero si no quieres
00:01:24usar cloud code, también puedes usar codex directamente o cualquier otro agente de programación que te guste.
00:01:29Si estás usando codex, puedes saltarte la parte en la que configuramos astra en cloud code e ir directamente
00:01:35a instalar las herramientas de video. Así que, si quieres usar astra en cloud code como nosotros, primero
00:01:42debes configurarlo para que cloud code pueda reconocerlo como modelo. Una forma de hacerlo es pagando la api
00:01:47de openai y conectándola a cloud code, pero no lo recomendamos porque el modelo es costoso y
00:01:53crear videos usa muchos tokens, lo cual te saldrá muy caro. La otra forma es usar astra
00:01:58a través de la suscripción de codex que ya tienes, pero para que esté disponible en cloud code necesitas
00:02:04usar una herramienta llamada cli proxy api. Ejecuta un pequeño servidor en tu computadora que conecta cloud code
00:02:09con los agentes de programación que ya tienes instalados. Ese servidor te permite usar tu suscripción existente
00:02:14sin pagar por separado la api; funciona con muchos agentes y usamos esta herramienta en nuestro video
00:02:20de diseño kimmy también. Para usarla, primero debes instalar la herramienta ejecutando el comando brew install
00:02:25en tu terminal. Una vez instalada, hay cierta configuración que hacer, lo que incluye cambiar algunos de sus ajustes
00:02:30y crear una clave api para ella, pero en lugar de hacer todo eso tú mismo, es mucho más fácil simplemente pedirle
00:02:35al agente que estés usando que lo configure por ti y mencionar en tu instrucción qué modelo quieres
00:02:40usar a través de la herramienta. Una vez que el agente termine esos ajustes, te dará la clave api que cloud code
00:02:45usará para conectarse a esta herramienta; debes guardar esa clave para el paso de conexión. Una vez que esta herramienta
00:02:50está instalada, se iniciará automáticamente, no necesitas ejecutar ningún comando para iniciarla. Ahora, la
00:02:55clave que te dio el agente no es el tipo normal de clave api que te cobra por cada token; esta clave
00:03:00solo te permite usar los agentes de programación instalados a través de un servidor en tu computadora; solo
00:03:06funciona en tu sistema y en el de nadie más. A continuación, debes conectar cli proxy api a tu cuenta de codex
00:03:11usando su comando de inicio de sesión. Cuando lo ejecutas en tu terminal, se abre el navegador donde inicias
00:03:16sesión con tu cuenta. Una vez que inicias sesión, la herramienta guarda tus datos para usar tu plan.
00:03:21Así que, una vez dentro, debes iniciar claude code con astra. Ahora, normalmente claude code envía
00:03:26todo lo que le pides a anthropic, que es como obtienes acceso a los modelos de claude, pero no quieres
00:03:32los modelos de claude en este momento, así que debes cambiar un parámetro llamado base url que hace que claude code
00:03:36envíe todo al servidor en tu computadora. Luego agregas la clave api que copiaste antes y escribes gpt6 extra como modelo,
00:03:43y una vez que inicies claude code, gpt6 extra estará disponible y podrás empezar a usarlo.
00:03:48Una vez hecho esto, hay un paso más para la configuración, que es instalar las herramientas que ayudan con el proceso
00:03:53de creación de videos. Puedes pausar aquí, tomar una captura de pantalla de esta lista y dársela a tu agente,
00:03:58y este instalará todas por ti. Esas herramientas vienen con habilidades que le indican al agente cómo usarlas
00:04:03al hacer el video, y una vez instaladas, estarás listo para empezar a crear los videos. Pero antes de continuar
00:04:08con el flujo de trabajo, sería genial si te suscribes al canal y haces clic en el botón de me gusta; este pequeño
00:04:13gesto de apoyo nos ayuda muchísimo. Para nuestro video de producto, usamos una tienda de ropa artística donde
00:04:18puedes armar un conjunto y comprarlo. Construimos la tienda usando la plantilla de aplicación que ya hemos compartido
00:04:23en nuestra comunidad, la cual te da un punto de partida para construir tu propia aplicación. Antes de crear el video,
00:04:28necesitábamos planificar qué partes de la tienda mostrar y cómo mostrarlas. La planificación es muy importante,
00:04:33ya que crear el video puede tomar horas; si no revisas el plan primero, podrías pasar horas creando un video que no
00:04:38es lo que querías. Para la planificación, le dimos a claude code una instrucción con la dirección donde nuestra tienda
00:04:43estaba funcionando para que pudiera abrirla y planificar el video en torno a ella; también incluimos la duración
00:04:48y el formato que queríamos: queríamos un video de 30 segundos en formato de 16:9, que es el formato horizontal
00:04:55que ves en los videos de demostración de productos. Puedes elegir el de 9:16 si quieres un video vertical
00:05:00para contenido de formato corto. Queríamos música en nuestro video sin voz en off, así que también lo incluimos
00:05:05en la instrucción. Ahora, si el plan solo describe las tomas en texto, es difícil imaginar cómo se verá el video,
00:05:10así que le pedimos que mostrara el plan en nuestro navegador para que pudiéramos ver cómo luciría el video y pedir
00:05:15cambios. También pedimos un lugar para dejar comentarios sobre el plan para poder indicarle al agente qué partes
00:05:20queríamos cambiar. Además, le pedimos que usara los videos de lanzamiento de productos de anthropic y linear como
00:05:26referencias de cómo debía verse y moverse nuestro video. Es importante dar referencias porque así el agente sabe qué
00:05:31idea tienes en mente; las referencias también le ayudan a planificar cómo se mueve la vista por la página y se acerca
00:05:36a un botón. Una vez que le dimos la instrucción, cargó las habilidades instaladas con hyperframes. Hyperframes es
00:05:41una de las herramientas que instalamos para ayudar al agente a crear el video. El agente usó sus habilidades de video
00:05:46para planificar las tomas, luego usó las otras habilidades para diseñar todo el video, y una vez terminado, abrió
00:05:52todo el plan en el navegador. El plan mostraba qué aparecería en cada segundo del video, cómo se movería
00:05:56la cámara y qué pasaría en el sitio y, tal como pedimos, hay una sección de comentarios donde puedes decirle
00:06:01al agente qué quieres que cambie; puedes añadir tantos comentarios como quieras para asegurarte de que el plan
00:06:06sea de tu agrado. Una vez hecha tu revisión, puedes pedirle que verifique los comentarios, actualice el plan y
00:06:11haga los cambios. Cuando estés satisfecho con el plan, le pides al agente que lo bloquee para que sepa
00:06:16que esa dirección es la definitiva. Después de eso, puedes pasar al siguiente paso, pero primero escuchemos unas
00:06:21palabras de nuestro patrocinador luma ai. Cada herramienta de video de ai te hace elegir dos de tres opciones:
00:06:27rápido, barato, bueno. Ray 3.2 no sigue esa regla; ejecutamos tomas cinemáticas y anime a través de él y todo
00:06:34regresó en 1080p nativo, hdr completo, cuatro veces más rápido y a un tercio del costo de ray 3. La velocidad
00:06:41comparada lado a lado era casi molesta: dábamos a generar esperando esperar y ya había terminado. Lo que más
00:06:46nos sorprendió fue la precisión: las instrucciones se acercaban más a lo pedido, los fallos disminuyeron y mantuvo
00:06:52un estilo consistente fotograma a fotograma. Si alguna vez renderizaste algo y pensaste está bastante bien, lo
00:06:57arreglaré en postproducción, ya no necesitas hacerlo; ray 3.2 admite fotogramas clave y una herramienta de modificación
00:07:04para que puedas volver a un clip terminado y corregirlo. Luma ahora también alberga c dance 2.5, un gran avance
00:07:13desde c dance 2.0, además de gen 4.5 y cling 3.0, para que puedas elegir el mejor modelo. Prueba ray 3.2, los
00:07:20enlaces están en el comentario fijado o escanea el código qr en pantalla. El siguiente paso consiste básicamente
00:07:25en crear las tomas por separado. En esta etapa estamos creando una versión básica de cada toma para poder comprobar
00:07:30los movimientos de cámara antes de gastar tiempo en pulirla. La razón por la que creamos cada toma por separado
00:07:35es que si una toma no es de tu agrado, solo necesitas hacer cambios en esa toma en lugar de tener que rehacer
00:07:40todo el video de nuevo. Este es también el momento en el que verificas los acercamientos y las otras direcciones
00:07:45de cámara para ver si son como deseas. Para ello le dimos una instrucción indicándole que abriera el navegador,
00:07:51grabara cada toma a resolución de pantalla completa y convirtiera cada una en un video para que pudiéramos comprobar
00:07:56si los movimientos de cámara se hicieron correctamente. Tras nuestra instrucción, comenzó a trabajar en las tomas;
00:08:01creó la primera y nos pidió que la revisáramos antes de continuar, para que si algo fallaba lo detectáramos
00:08:06temprano en lugar de encontrar el mismo problema repetido en todo el video. Luego nos mostró las imágenes y el clip
00:08:12grabado en nuestro navegador; si quieres cambios en el primero puedes pedirlos, y una vez que estés feliz
00:08:17con él, puedes decirle que genere el resto. Cuando termine, puedes revisar todo junto en tu navegador;
00:08:22en nuestro caso, algunos clips temblaban mucho por alguna razón y algunos de los acercamientos no eran como
00:08:26los habíamos descrito en el plan, así que le pedimos que los arreglara, y puedes seguir solicitando cambios en
00:08:31cualquier parte que no te guste hasta que estés contento con el resultado final. La razón por la que revisamos
00:08:36estas tomas básicas primero es que, si hay que rehacer una toma, no hemos gastado tiempo puliéndola. Una vez
00:08:41que aprobamos lo que muestra cada toma, podemos mejorar el movimiento y combinar las tomas en un solo video.
00:08:47En este punto teníamos clips separados con movimientos básicos y acercamientos; necesitábamos combinarlos en un
00:08:53solo video que fluyera sin problemas. Para pulirlos, le pedimos a claude code que mejorara esos movimientos
00:08:58y combinara los clips para que cada toma transcurriera suavemente hacia la siguiente. En esa instrucción explicamos
00:09:02cómo debía moverse la cámara, dónde debía hacer zoom y cuándo debía ocurrir el tipeo. Crear el video combinado
00:09:07tomó mucho tiempo y, una vez terminado, teníamos las tomas unidas en un solo video sin música. El agente
00:09:13guarda el video en la carpeta en la que está trabajando para que puedas abrirlo desde allí y revisarlo;
00:09:17si algo no se ve bien, debes indicarle al agente dónde ocurre en el video. En nuestro caso, colocó una de las
00:09:22tomas demasiado a la derecha, así que le pedimos que devolviera esa toma a su lugar. Luego, una vez hechos todos
00:09:27los cambios, debes pedirle que revise el video de nuevo y compruebe si hay algún problema que siga presente.
00:09:32Las herramientas que instalamos ya vienen con revisiones que buscan pequeños problemas en el video, por lo que,
00:09:38cuando se ejecutan, el video final no contiene ninguno de esos problemas. El paso final para el video es añadir
00:09:43música; es un paso muy importante porque la música es lo que mantiene al espectador enganchado en cada toma
00:09:48y hace que el video sea mucho más atractivo de ver. Si solo le pides al agente que agregue música, elegirá una
00:09:54pista por su cuenta, pero esa pista tal vez no encaje con el video. Debes darle algo de guía sobre el tipo
00:09:59de música que quieres; para guiar eso, creamos una habilidad que básicamente le indica al agente exactamente
00:10:04cómo elegir la música. La habilidad lee el estilo del producto del plan y verifica con qué frecuencia el video
00:10:10cambia de una toma a otra; usa esa sincronización para buscar música con un ritmo que se ajuste al video.
00:10:16Busca en un sitio llamado mix kit música gratis en categorías como calma y piano. Para crear la habilidad,
00:10:21le dimos a claude code una instrucción detallando el flujo exacto que debía seguir y creó la habilidad con
00:10:26todo lo necesario para encontrar la música y añadirla al video. Si también quieres esta habilidad, puedes
00:10:31copiar la instrucción y dársela a tu agente para que siga el mismo flujo y cree la habilidad por ti también.
00:10:36Para usarla, solo necesitas escribir barra diagonal y el nombre de la habilidad; encuentra la música y la añade
00:10:42a tu video. Luego crea una nueva versión del video con la música añadida. Ahora hemos refinado todo el flujo de trabajo
00:10:52que acabas de ver en forma de una habilidad que puedes usar directamente en tu flujo. Dicha habilidad se ha creado
00:10:57con múltiples rondas de pruebas y refinamiento, y está disponible en ai labs pro, que es nuestra comunidad.
00:11:03Así que, si encontraste valor en lo que hacemos y quieres apoyar al canal, esta es la mejor forma de hacerlo;
00:11:08el enlace está en la descripción. Esto nos lleva al final de este video; si te gustaría apoyar al canal y
00:11:13ayudarnos a seguir haciendo videos como este, puedes hacerlo usando el botón de super thanks abajo. Como siempre,

핵심 요약

La combinación de GPT-6 Astra como motor creativo y Claude Code como ejecutor de herramientas permite automatizar la edición de videos de producto mediante un proceso estructurado por fases que optimiza el uso de tokens y garantiza precisión visual.

하이라이트

  • Ejecutar GPT-6 Astra dentro de Claude Code mediante CLI Proxy API evita pagar la API individual de OpenAI y optimiza el consumo de tokens.

  • El flujo de trabajo requiere planificar un video de demostración de producto de 30 segundos en formato 16:9 con referencias visuales de Anthropic y Linear.

  • Herramientas como Hyperframes y librerías especializadas permiten generar un guion gráfico interactivo en el navegador con campo de comentarios directo.

  • Crear y validar las tomas por separado a resolución completa previene el desperdicio de tiempo y recursos antes de realizar el ensamblaje definitivo.

  • Una habilidad personalizada automatiza la selección de música gratuita en Mixkit evaluando el estilo del producto y el ritmo de corte entre tomas.

타임라인

Configuración del entorno de trabajo con GPT-6 Astra y Claude Code

  • La creación directa e improvisada de videos con IA genera pérdida de calidad y gasto innecesario de tokens.
  • GPT-6 Astra ofrece superioridad en dirección visual frente a modelos como Fable.
  • La herramienta CLI Proxy API habilita un servidor local para reutilizar suscripciones de Codex dentro de Claude Code.

El proceso directo de generación de video consume recursos excesivos sin garantizar un resultado aceptable. La integración de GPT-6 Astra dentro del entorno de Claude Code combina la capacidad de diseño del modelo de OpenAI con la ejecución de herramientas de Claude Code. Para evitar los costos elevados de las llamadas API individuales de OpenAI, se utiliza CLI Proxy API mediante el comando 'brew install'. Este proxy local redirige las peticiones de Claude Code cambiando el parámetro 'base url', permitiendo operar con la suscripción existente de Codex.

Planificación interactiva del video y definición de referencias

  • Un video de producto de 30 segundos en formato horizontal 16:9 requiere un plan detallado antes de la producción.
  • Las referencias visuales de marcas como Anthropic y Linear fijan el estándar de movimiento de cámara.
  • Hyperframes genera una vista previa del plan en el navegador con interfaz para ingresar comentarios.

La fase de planificación evita horas de renderizado fallido al definir la estructura del video antes de la generación de clips. Se proporciona a Claude Code la URL local de la aplicación (una tienda de ropa artística), fijando una duración de 30 segundos en formato 16:9 sin voz en off. Mediante la extensión Hyperframes, el agente procesa las referencias visuales de Anthropic y Linear para establecer los encuadres y movimientos de cámara. El resultado se despliega en el navegador como una cronología segundo a segundo, donde es posible dejar comentarios directos para fijar la versión final.

Generación independiente de tomas y corrección de movimientos

  • Producir las tomas de forma individual previene rehacer el proyecto completo ante fallos puntuales.
  • La revisión temprana de la primera toma detecta errores de renderizado en etapas iniciales.
  • La evaluación en pantalla completa permite corregir temblores de cámara y zooms imprecisos.

Cada toma se genera como un archivo de video independiente a resolución completa para verificar encuadres, zooms y movimientos de cámara. El agente presenta la primera toma para aprobación inmediata antes de procesar el resto de los clips. Tras la generación individual, la revisión en el navegador identifica problemas frecuentes como temblores no deseados o desacuerdos con la planificación original. Este aislamiento de archivos permite reintentar o ajustar tomas específicas sin afectar el resto del trabajo.

Ensamblaje final del video y sincronización musical automatizada

  • El agente aplica revisiones automáticas integradas para corregir desalineaciones de encuadre en el montaje.
  • La adición de música sigue una habilidad personalizada que analiza el ritmo de corte entre escenas.
  • Las pistas se obtienen automáticamente desde Mixkit filtrando por categorías y estilo de producto.

Una vez validadas las tomas individuales, Claude Code une los clips en una secuencia continua, ajustando la fluidez de las transiciones y los tiempos de escritura en pantalla. Las herramientas de revisión ejecutan comprobaciones internas para eliminar imperfecciones visuales restantes. Para el apartado sonoro, se implementa una habilidad personalizada que analiza la frecuencia de cambio entre tomas y el concepto del producto, buscando y descargando pistas gratuitas en Mixkit para sincronizar el ritmo musical con los cortes del video.

커뮤니티 글

아직 글이 없습니다. 이 영상에 대한 첫 번째 글을 작성해 보세요!

이 영상에 대해 글쓰기