Видеомонтаж

Правда сначала это нужно установить). Все инструкции по установке находятся в гит репозитории. Установка не сложна если вы уже умеете устанавливать тот же automatic1111 для Stable Diffusion или умеете минимально работать с командной строкой.

Сам же интерфейс программы очень простой.

Выбираем лицо и видео на котором хотим его увидеть

__

Мой канал с гайдами по SD. Где бесплатно обучаю с нуля и до самостоятельного обучения моделей.

Канал Нейроновости - источник новостей о нейронках, подпишись чтобы не пропускать

Обрезать область

crop.bat
:: width:height:x:y
ffmpeg -i in.mp4 -filter:v "crop=400:300:350:250" -c:a copy out.mp4

Вырезать кусок из видео

cut.bat
:: -ss - start
:: -t - time
ffmpeg -i in.mp4 -ss 10 -t 10 out.mp4
::ffmpeg -i in.mp4 -ss 6.5 out.mp4

Достать аудио из клипа

extract_mp3.bat
ffmpeg -i in.mp4 -q:a 0 -map a audio.mp3

Вшить субтитры

hardsub.bat
::If the subtitle is a separate file called subtitle.srt, you can use this command:
ffmpeg -i in.mp4 -vf subtitles=subs.srt out.mp4
::If the subtitle is embedded in the container video.mkv, you can do this:
::ffmpeg -i video.mkv -vf subtitles=video.mkv out.avi

Сделать видео из картинки с музыкой

join_image_audio.bat
ffmpeg -i image.jpg -i audio.wav out.mp4

Заменить аудиодорожку в видео

join_video_audio.bat
ffmpeg -i in.mp4 -i audio.mp3 -c:v copy -map 0:v:0 -map 1:a:0 out.mp4

Понизить качество видео

quality.bat
:: https://unix.stackexchange.com/questions/28803/how-can-i-red...
:: range for H.265 may be 24 to 30
:: Note that lower CRF values correspond to higher bitrates, and hence produce higher quality videos.
ffmpeg -i in.mp4 -vcodec libx264 -crf 32 out.mp4

Изменить разрешение

resize.bat
ffmpeg -i in.mp4 -vf scale=1376:732 out.mp4

Повернуть

rotate.bat
::0 = 90CounterCLockwise and Vertical Flip (default)
::1 = 90Clockwise
::2 = 90CounterClockwise
::3 = 90Clockwise and Vertical Flip
ffmpeg -i in.mp4 -vf "transpose=2" out.mp4

Кажется тоже изменить разрешение

scale.bat
ffmpeg -i in.mp4 -s 640x360 -c:a copy out.mp4

Тоже порезать, просто несколько раз

split.bat
ffmpeg -i in.mp4 -ss 0 -t 128 out1.mp4
ffmpeg -i in.mp4 -ss 128 -t 256 out2.mp4
ffmpeg -i in.mp4 -ss 256 -t 384 out3.mp4
ffmpeg -i in.mp4 -ss 384 out4.mp4

Сам ffmpeg.exe можно найти здесь:
https://github.com/BtbN/FFmpeg-Builds/releases

Нейросеть, способная выделять объекты на видео и изображениях, может значительно сократить время, затрачиваемое людьми на обработку и анализ таких данных. Ручное выделение объектов может быть очень трудоемким и затратным процессом. Нейросеть сможет автоматически обрабатывать большое количество данных. И это не какое-то будущее, а то что доступно уже сейчас. И вы можете попробовать ее в работе.

Демо: https://huggingface.co/spaces/xdecoder/SEEM

Установка и использование локально: https://github.com/UX-Decoder/Segment-Everything-Everywhere-...

Затем выбранный объект может быть качественно удален с помощью другой нейронки о которой я писал ранее.

Кадр из сериала Черное зеркало:

Уже сейчас это может облегчить труд тем кто работает с видео, рисование маски на объектах в этой области пожалуй одна из самых трудозатратных задач в таких видео редакторах как After Effects например.

Теперь же нейросеть можно просто попросить выделить самого большого медведя, всех людей или человека в синей футболке. Или показать картинку с объектом и всё что на него похоже так же будет автоматически выделено и трекаться.

__

Нейроновости - новости обо всем что касается нейронок. Midjourney, Stable Diffusion, ChatGPT и о тех о которых вы могли не слышать.

Мой канал с гайдами по нейросетям. Где бесплатно обучаю с нуля и до самостоятельного обучения моделей.

Плагин для афтер эффектс который работает в связке с нейросетью Stable Diffusion.

Основные функции

- txt2img с использованием controlnet (покадрово и анимация)

- interrogate

- Препроцессинг изображений (получаем canny и depth прям из Афтера!)

- скрипты для копирования промптов из файлов

Скачать и ознакомиться подробнее можно на канале автора плагина.

--

Научиться пользоваться самим Stable Diffusion можно на моём.