El AI

Un proyecto de código abierto que lleva a los cortometrajes de IA a la era de la producción industrial: Jellyfish Deep Analysis

如果说过去的 AI 视频工具解决的是”生成一个视频”,那么 Jellyfish 想解决 […]

一个开源项目,让 AI 短剧真正进入工业化生产时代:Jellyfish 深度解析
Catálogo de artículos

如果说过去的 AI 视频工具解决的是”生成一个视频”,那么 Jellyfish 想解决的是”生产一部短剧”。

最近逛 GitHub 时,发现了一个非常有意思的开源项目——Jellyfish。

GitHub 地址:
Forget-C/Jellyfish

短短几个月时间,项目便收获了数千 Star,成为 AI 视频创作领域最受关注的开源项目之一。它最大的特点不是模型能力,而是重新定义了 AI 短剧的生产流程。(T.co)

今天,我们就来聊聊这个项目到底解决了什么问题,以及为什么它值得所有 AI 创作者关注。


AI 视频工具很多,但为什么大家还是做不好短剧?

现在市面上的 AI 工具已经非常丰富。

  • ChatGPT 写剧本
  • Midjourney、Flux 生图片
  • Kling、Runway、Veo 生成视频
  • ElevenLabs 配音
  • 剪映完成剪辑

看起来工具已经齐全。

但真正做过 AI 短剧的人都会发现一个现实:

工具越来越强,流程越来越乱。

Por ejemplo:

  • 今天生成的人物,明天就变脸了;
  • 同一个角色换了三种服装;
  • 一个场景重复生成几十次;
  • Prompt 到处复制粘贴;
  • 图片、视频、角色素材散落在几十个文件夹里。

真正限制 AI 短剧发展的,从来不是模型。

而是生产流程。

Jellyfish 正是围绕这个问题设计的一套完整工作流。


Jellyfish 并不是一个 AI 生视频工具

La definición oficial de esto es muy clara:

Un espacio de trabajo de producción de extremo a extremo para dramas cortos generados por IA

La traducción es:

Un banco de trabajo de producción integral para la creación de dramas cortos de IA.

Muchas personas ven el proyecto por primera vez y piensan erróneamente que es otro:

Introducir un prompt → Video de salida

En realidad, no lo es en absoluto.

Es más como:

Una combinación de Notion + Jira + Midjourney + Runway.

Se centra en todo el enlace de producción, no en una sola generación.


Desmontó la producción de dramas cortos en una línea de montaje completa.

Jellyfish estandariza todo el proceso de creación.

Todo el proceso es aproximadamente el siguiente:

剧本
↓

AI 理解剧本

↓

自动拆分分镜

↓

识别人物
识别场景
识别道具
识别服装

↓

建立统一资产

↓

确认每个镜头

↓

AI 图片生成

↓

AI 视频生成

↓

统一管理任务

↓

导出成片

El proceso se resume oficialmente como:

Script → Storyboard → Asset → Generation → Export.

Ya no es una "herramienta ", sino una línea de producción.


Lo más destacado: Gestión de consistencia de roles

Si has hecho un video de IA, debes saber el mayor punto de dolor:

Consistencia de roles.

Por ejemplo:

El primer episodio de la directora así.

En el segundo episodio, cambió de cara.

El tercer episodio cambia de edad.

En el cuarto episodio, el pelo cambió.

El quinto episodio también cambió de ropa.

Al final, el público no lo reconoce.

Jellyfish ha diseñado específicamente un sistema de gestión de activos.

Gestionará todos los elementos de manera unificada:

  • personajes
  • Escena
  • Propósito
  • Vestido
  • actores

Cada disparo hace referencia a estos activos en lugar de regenerarlos.

De esta manera se evita:

Cada toma "recrea el mundo ".

sino que:

Continuar creando en el mismo mundo. (T.co)


La IA entiende automáticamente el guión

Esto también es muy interesante.

Flujo de trabajo tradicional:

El guionista escribe el guión.

El director dividió las tomas por sí mismo.

Ahora se convierte:

Introduzca el guión.

Análisis automático de AI:

  • personajes
  • Escena
  • Diálogo
  • Propósito
  • Emoción
  • Lens

Incluso puede hacer:

  • Optimización del guión
  • Contenido simplificado
  • Inspección de consistencia

y finalmente se genera un espejo estructurado.

Es decir,

La IA no solo genera contenido.

Comenzó a trabajar como director.


Cada disparo tiene su propio ciclo de vida.

Muchas herramientas de video de IA solo:

Haga clic en Generar.

El fin.

Jellyfish ha diseñado la lente como una unidad de trabajo real.

Cada tiro experimentará:

待分析

↓

待确认

↓

素材准备

↓

Ready

↓

开始生成

↓

完成

Cada paso se puede modificar.

Cada paso se puede regenerar.

Cada paso se puede rastrear.

Esto en realidad es mover la idea del flujo de trabajo en los productos de Internet a la creación de IA. (T.co)


Programación unificada de todas las tareas de IA

Otro diseño que merece elogios:

No ha escrito las llamadas de AI.

En cambio, se diseñó un centro de misión unificado.

Independientemente de:

  • El LLM
  • Imagen generación
  • Generación de vídeo

Todos en el sistema de tareas asíncronas.

Usted puede:

  • Ver progreso
  • Ver tiempo consumido
  • Cancelar tareas
  • Tarea de reintento
  • Volver al elemento correspondiente

Esto significa que el acceso futuro a cualquier modelo:

  • Flujo
  • SDXL
  • Kling
  • Veo
  • Runway
  • ComfyUI

No afectará al proceso general.

Los modelos son sólo plugins.

El proceso es el núcleo


Más como un sistema operativo de creación de AI

Después de ver todo el proyecto, mi mayor sentimiento fue:

Jellyfish no está haciendo AI.

Se está haciendo:

AI crea un sistema operativo.

En los últimos años, la mayoría de los proyectos se han centrado en:

El modelo se hace más fuerte.

Prompt es cada vez más complejo.

Pero después de entrar realmente en la producción comercial, encontramos:

No es el modelo lo que determina la eficiencia.

sino el proceso.

Lo que realmente importa en el futuro es:

  • Flujo de trabajo
  • Gestión de datos
  • Gestión de materiales
  • Consistencia
  • Colaborar automáticamente

El modelo es solo una capacidad subyacente.


¿Quiénes son adecuados para usar Jellyfish?

Los escenarios de uso típicos dados oficialmente incluyen:

  • Creador de mini-drama
  • Estudios de vídeo AI
  • Creador de contenido independiente
  • Equipo de producción de vídeo de educación y capacitación
  • Equipo de Marketing de Marca y Contenido de E-commerce

Si su objetivo es producir contenido en masa, en lugar de generar uno o dos videos de vez en cuando, este tipo de herramientas de flujo de trabajo pueden ser más valiosas que un modelo de producción simple.


Escrita al final

Durante el último año hemos sido testigos de un rápido progreso en el modelo de video de IA.

En la próxima etapa, la competencia puede no ser sobre quién puede generar más rápido, sino sobre quién puede construir.Sistemas de producción más estables, eficientes y reutilizables。

Jellyfish es un representante de este pensamiento:

En lugar de ser el "modelo más fuerte ", se convierte en una plataforma unificada que conecta guiones, espectros, activos, generación, tareas y exportaciones, elevando la creación de video de IA de" generación a generación " a "producción sostenible ". (T.co)

Si está prestando atención a dramas cortos de IA, videos de IA o la industrialización de contenido, este proyecto merece un estudio más profundo.

Dirección del proyecto:

👉 GitHub: Olvídate de C / Jellyfish