AI

Серия Кодекса боевые действия| Автоматическая генерация видео с нулевым клипом

Ранее делали видео, сценарий, озвучивание, клипы, субтитровы, каждый шаг должен был учиться отдельно, просто начать было достаточно, чтобы заставить людей сдаться.Теперь эти работы можно передать непосредственно [...]

Статьи

Ранее делали видео, сценарий, озвучивание, клипы, субтитровы, каждый шаг должен был учиться отдельно, просто начать было достаточно, чтобы заставить людей сдаться.Теперь эта работа может быть передана непосредственно Кодекса.

Вам просто нужно дать ему статью или конкретную тему, а затем передать ему соответствующие видео навыки, и Codex может продолжать работать с устными трансляциями, звуками, временной шкалой, фрагментами, субтитрами, движениями и фильмами.Вам не нужно учиться редактировать или понимать код, просто вы можете четко объяснить, какое видео вы хотите, чтобы начать.

В этой статье весь процесс запускается с нуля: сначала сделайте видео статьи, которое не выходит в камеру, а затем представьте методы редактирования реального трансляции.Первый контакт с видео, также можно выбежать из собственной первой версии.

Весь процесс можно просто понимать как:

Статьи или темы → Устная трансляция → Дублирование → Временная шкала → Разделы → HyperFrames → Проверка на пленки

Сначала передать видео Skills в Codex.

Skill можно понимать как рабочее описание для Кодекса.Он сообщает Кодекс, какие инструменты следует вызывать, в какой последовательности выполнять задачи устного вещания, озвучивания, разделения или редактирования и какие вопросы следует проверять в заключение.

Не нужно самостоятельно изучать кучу команд при установке.Доставьте ссылку на репозиторий GitHub непосредственно Codex, чтобы он прочитал описание проекта, прежде чем завершить установку и проверку среды.

В этом процессе HyperFrames предлагает несколько разделений труда:/faceless-explainer Ответственность за то, чтобы статья или тема не выходила из виду,/hyperframes-creative отвечает за ритм и фрагменты устной передачи,/media-use управлять изображениями, звуками и субтитрами,/hyperframes-animation Ответственность за изменения картины.Обычно вам просто нужно сказать кодекса «сделайте это видео с / hyperframes», и он может продолжать выбирать нужную часть.

Если требуется дополнительный визуальный стиль, можно добавить другие навыки.Например, если вы хотите сделать видео-информационный коляж, то можете обратиться к нему. Навыки сообщества HyperFrames В vox-explainerЕсли вы хотите сделать рукопись или рисовать возникающие эффекты, можно использовать p5-paint-animation; Хотите сделать презентацию продукта, демонстрацию интерфейса и рекламные фильмы, можете обратиться к video-shotcraft。

Это расширения, и первое видео не требует установки всех.

Создайте новую папку, например codex-videoОткройте его в Кодекса.Статьи, изображения и создаваемый аудиозапись помещаются в него, а хранилище HyperFrames передается Codex, который завершит подготовку.Далее вам нужно только шаг за шагом подтвердить результаты.

Шаг 1: Превратить статью или тему в устный репортаж

Устная трансляция - это скелет всего видео.Какой бы красивой картинка ни была, если бы в начале не поймали людей, то содержание позади было бы трудно прочитать.

Если у вас есть только одна тема, вы можете напрямую попросить Кодекс написать.Например:

我要做一条 60 秒竖版视频,主题是“第一次用 Codex 做视频”。

观众只会使用 Codex,没有写过口播稿,也没有剪过视频。
开头先告诉他最终能做出什么,再讲清楚:生成口播、选择声音、用 HyperFrames 做画面、检查成片。
每句话尽量能直接念出来,不写书面化小标题,不堆概念。
结尾让他先用一个主题跑通第一条视频。

现在只交付口播稿,暂时不要做分镜和视频。

Чем более конкретная тема, тем легче написать устные сообщения.Вместо того, чтобы «сделать видео с ИИ», можно было бы просто «сделать обзор инструмента в виде 60-секундного вертикального объяснения», так что Кодекс знает, что следует оставить.

Если уже есть статья, то сохраните ее. article.mdЗатем кодекс должен быть переведен в версию, пригодной для экспорта:

请读取 article.md,把它改成一条 90 秒口播稿。

保留文章的核心判断和最有用的案例,不要逐段缩写全文。
开头先说读者能得到什么,中间只保留三步方法,每一步都用能听懂的句子讲。
文章里的链接、脚注和排版符号不要读出来。
请把最后需要我核对的事实单独列出来。

先只生成 narration.md。

Если в статье имеются явные переводчики, механические соотношения или чрезмерно письменные предложения, можно humanizer-zh Передача Кодекса, чтобы он мог быть дополнительно скорректирован без изменения фактов и личного суждения.

Но лучше всего прочитать самостоятельно после того, как закончить.Многие слова кажутся нормальными, но когда они действительно произносятся, рот говорит вам, что не естественно.

Если вы только материалы, еще не думали о устной трансляции и картинки, Вы также можете напрямую из HyperFrames /faceless-explainer Начнем с того, чтобы организовать ориентацию, рассказ и разделение по теме, статье или заметке.

Какой бы вариант ни был выбран, устное вещание лучше всего следовать простой структуре:

Круки → Вопросы → Методы → Следующий шаг

Например, в начале учебного курса можно сказать:

«Что делать с кодексами?Сначала вы можете использовать это видео.Дайте ему статью, и он будет продолжать обрабатывать устные трансляции, звук, субтитры и изображения.Сегодня мы пробегаем самый короткий процесс».

Шаг 2: Определение окончательного звука.

После завершения устного выступления будет принято решение о том, кто будет читать.

Впервые, когда делаешь видео, обычного ТТС достаточно.Вы можете использовать уже существующую функцию перевода текста в голосу, или вы можете взять открытый исходный код edge-tts Передайте Codex, чтобы он завершил установку, выбрал китайский звук и создал аудио и субтитры.

Рекомендуется создать десятки секунд тестового аудио, подтвердить звук, скорость речи и паузу, воспроизвести полный текст.Преимущество обычного TTS заключается в его скорости, что особенно подходит для первой проверки контента и процесса изображения.

Если вы хотите использовать свой голос в течение длительного периода времени, CosyVoice。Он позволяет создавать новые устные трансляции с аналогичными характеристиками говорящего на основе ссылочной записи.

Здесь нужно подготовить три документа:

  • reference.wav- собственные или уже полученные разрешения на ссылку;
  • reference.txt- ссылка на полный текст, фактически произнесенный в записьх;
  • narration.mdНовая трансляция этого видео.

Текст ссылки должен полностью соответствовать звуковой записи.Запись также должна быть максимально тихой, четкой и естественной, фоновая музыка, эхо и сильное снижение шума могут повлиять на эффекты.

При установке CosyVoice передавайте официальный репозиторий непосредственно в Codex:

请帮我安装 CosyVoice:
https://github.com/QwenAudio/CosyVoice

请先阅读官方 README,再检查当前电脑环境并完成安装。
安装好后只生成一条短测试音频,不要直接生成整篇口播。

После завершения установки прослушивайте аудиозаписи.Вместо того, чтобы загрузить всю статью в один раз, разделить ее на несколько пунктов по смыслу, прослушивать каждый пункт, подтвердить собственные существительные, английский и цифры, а затем синтезировать окончательный аудио.

Если нет необходимости воспроизводить звук на данный момент, вы можете просто пропустить CosyVoice.Задние HyperFrames требуют только конечного аудио, независимо от того, от какого типа TTS исходит звук.

Шаг 3: Позвольте картине следовать за окончательным звуком.

На данный момент должны быть подготовлены два основных документа:narration.md и final.wav。

С этого момента,final.wav - это настоящий временной мериль видео.。

Сначала создайте временную шкалу на основе окончательного аудиозаписи и восстановите субтитры.Устная трансляция определяет, что будет написано в субтитрах, а транскрипция аудио определяет, когда будут появляться субтитра.

Не распределяйте время поровну по количеству словОдно и то же десять слов, некоторые из которых могут быть произнесены за полсекунда, а некоторые могут остановиться дважды в середине, поэтому субтитры, ключевые слова и кадры должны следовать за реальным голосом.

Вы можете сказать Кодекса:

请以 final.wav 为准建立时间轴。
用 narration.md 核对字幕文字,用音频转写结果取得每句话的真实开始和结束时间。
输出 captions.srt 和 timing.json。
如果口播稿与实际声音不一致,请列出差异,不要自行猜测。

Преимущество этого заключается в том, что, даже если впоследствии картинка будет изменена, повторная обработка из-за переоценки времени не будет выполнена.

Шаг 4: Создание отдельных зеркалов на основе устного вещания

На самом деле, не нужно изучать слишком много специальных терминов.Разделите выступление на 4 - 8 пунктов, отвечая на один вопрос:

Когда зрители услышали это, что больше всего должно увидеть на картинке?

Скриншоты, фотографии, диаграммы или карты персонажей, которые уже существуют в статье, используются в первую очередь.Сначала позвольте аудитории увидеть целое, а затем увеличить разъясненную часть.В тех случаях, когда материал отсутствует, его можно дополнить ключевыми словами, картами шагов, сравнениями, временными рамками и простыми инфографами.

Позвольте Codex генерировать фрагменты на основе устной трансляции и временной шкалы:

请根据 narration.md、timing.json 和 assets 文件夹制作分镜表。

每个镜头写清楚:
对应口播、开始时间、结束时间、主要画面、需要的素材、字幕位置。

原文已有图片必须安排实际展示;
缺少素材的地方先标记,不要用无关图片填满。

Если вы не знаете, что делать, то можете обратиться к Запуск HyperFrames в полном проекте или использовать video-shotcraft Рецепты фотоаппаратов внутри.

Первое видео не преследует сложной анимации каждую секунду.Сначала разъясните информацию, а затем добавьте ритм одним или двумя простыми движениями.

Шаг пятый: создание первой версии HyperFrames

Устная трансляция, окончательный звук, время субтитров и фрагменты уже доступны для передачи HyperFrames:

使用 /hyperframes,把当前项目做成一条 9:16 竖版讲解视频。

请读取 narration.md、final.wav、captions.srt、timing.json、storyboard.md 和 assets 文件夹。

画面跟随真实音频时间,字幕不要挡住主要内容。
优先使用 assets 里的原图和角色卡,缺少素材的镜头用简洁的信息图。

先完成前 15 秒样片并打开预览,我确认方向后再继续全片。

Особенно рекомендуется сделать это сначала. 15-секундный образНе ринируйте видео целиком.

Посмотрите на эти 15 секунд и сосредоточитесь на трех вопросах: достаточно ли быстро начало, четко ли субтитры и действительно ли изображение объясняет устную трансляцию.

Если направление правильно, продолжайте создавать полный плен.

В дальнейшем, когда изменяете, не говорите только «более продвинутый» или «более красивый».Лучше всего сообщить Кодекса о конкретном месте, например:

«Заголовок на шестой секунде слишком мал».

«Этот скриншот остается не менее трех секунд».

«Субтитры блокируют персонажа».

«Первый вывод идет слишком медленно».

Такая обратная связь будет проще реализовать, чем абстрактные эстетические требования.

После окончательного подтверждения, позвольте кодекса визуализировать:

把当前确认的版本渲染成 final.mp4。
完成后检查文件能否正常播放,并检查声音、字幕和画面是否完整。

Открывается страница предварительного просмотра, которая указывает только на то, что проект может быть запущенКритерии действительно завершенного - final.mp4 Вы сгенерированы, и вы просмотрели его с начала до конца, убедившись, что звук не обрезан, субтитры не смещены, изображения не обрезаны неправильно.

Как выбирать между Hyperframe и Remote?

В обоих вариантах можно преобразовать текст, звук, изображения и временную шкалу в видеоролики, но они подходят для работы по-разному.

HyperFrames Скорее, реорганизовать картинку в соответствии с содержанием этого выпуска, что подходит для быстрого создания видео статей, видео знаний и пояснительного контента.

Удаленность Лучше сначала сделать набор фиксированных шаблонов колонки, а затем заполнить содержание в фиксированном месте в каждом выпуске.

Если вы хотите пройти дистанционный маршрут, вы можете Удаленные навыки агента Отдать Кодекс, чтобы он завершил установку, а затем использовать /remotion-create создание видео,/remotion-studio Предварительный просмотр,/remotion-render визуализация.

создаваемые в верхнем течении narration.md、final.wav, субтитров, временной шкалы и изображения можно продолжать использовать, без необходимости делать все заново.

Мое предложение:Первый из них использует HyperFrames.После нескольких последовательных выпусков, если вы обнаружите, что структура объектива стабилизировалась, позвольте Кодекса собрать ее в постоянную колонку Remotion.

Если вы снимаете в реальном времени трансляцию, то добавьте video-use.

Предыдущий процесс может быть совершенно незаметным.Когда вы начнете снимать в реальном эфире, вы можете narration.md Положите рядом с камерой и снимите по сегментам.Если вы говорите неправильно, остановитесь и повторяйте это слово, не нужно начинать каждый раз с начала.

video-use Лучше обрабатывать уже снятые материалы.Он может сначала переписывать видео, выяснять, что говорится в каждом сегменте, затем сортировать повторяющиеся, паузы, ошибки и перезагрузки, а затем перейти к клипу.

Позвольте Codex читать репозиторий непосредственно во время установки:

请帮我安装 https://github.com/browser-use/video-use。

先阅读 install.md,完成依赖、FFmpeg 和 Codex Skill 注册。
安装后先不要转写任何视频,等我把素材放进文件夹。

После завершения съемки, поместите оригинальное видео в отдельную папку материалов:

请使用 video-use 处理这个文件夹里的真人口播。

先盘点素材并转写,找出重复、停顿、说错和重新开始的位置。
先给我一份剪辑方案,列出准备保留和删除的片段;我确认后再剪。

定稿后添加中文字幕,并在讲到步骤时使用 assets 里的对应图片补充画面。
最后输出预览版,检查无误后再输出 final.mp4。

Таким образом, процесс реального вещания состоит в следующих:

Устная трансляция → Live-Shoot → Video-use Регулирование эффективных фрагментов → Подписи и дополнительные изображения → Фильм

HyperFrames и video-use также можно комбинировать: video-use выполняет резюмирование реального трансляции, а HyperFrames выполняет заголовки, карты шагов, скриншоты, презентации, заголовки и другие информационные экраны.

Наконец, превратить видео в систему контента.

По-настоящему ценным является не создание видео с использованием Кодекса, а создание того же процесса для непрерывного производства.

Например, вы можете зафиксировать одну тему: разобрать инструмент ИИ в неделю, решить одну офисную проблему каждый раз или объяснить отраслевой случай в каждом выпуске.Чем яснее объект содержания, тем легче формировать фиксированную структуру.

Весь цикл на самом деле очень просто:

Вопросы целевого пользователя → Выберите конкретную тему → Пишите устный трансляция → Сделайте видео → Просмотреть комментарии и отзывы после трансляции → Решите следующий

Привлечение гостей должно также быть связано с конкретными результатами.

«Я сделал видео с помощью ИИ» - это только доказательство того, что вы можете использовать инструменты.

«Я превратил 3000 слов обзора инструмента в 60-секундный учебный курс для начинающих», чтобы остановить тех, кто действительно нуждается в этом.

Поэтому на первом этапе не спешите встроить сложную систему автоматизации.Выберите тему, которую вы можете рассказать десять раз подряд, и используйте Кодекс для прохождения первого пункта:

Окончательный вариант устной трансляции → Производство звука → Выравнивание временной шкалы → Разделение зеркалов → Выпуск фильма HyperFrames → Проверка фильма

Второе начало использовать структуру файла, а третье начало сохранять фиксированные заголовки, стили субтитров и структуру кадров.

Таким образом, Codex действительно переходит от «сделать видео для вас» к рабочему процессу, который постоянно помогает вам создавать контент.