Google выпустила бесплатный инструмент для автокадрирования видео

Google выпустила инструмент Autoflip с открытым исходным кодом, который позволяет кадрировать видео под разные соотношения сторон. Система сама обрезает ролики, оставляя важное в кадре, передает BaigeNews.kz со ссылкой на блог команды Google AI.

Как отметили в компании, обычно видео в "телевизионных" форматах 16:9 и 4:3 проходят долгий путь, прежде чем добраться до соцсетей. Чаще всего специалистам, чтобы оставить нужные элементы в кадре, приходится вручную обрезать ролик. Теперь всю эту работу можно делать с помощью Autoflip.

Инструмент использует технологии машинного обучения и видеостабилизации. Компьютер сам находит объект в кадре и может отслеживать его даже при смене ракурсов. Для реализации Autoflip в компании использовали фреймворк MediaPipe: за счет этого кадрирование происходит "на лету".

Как отметили в Google, инструмент автоматически настраивается на каждую новую сцену. Если он находит значительные изменения в композиции, то изолирует кадры, чтобы принять решение, нужно ли применять трекинг или кадр статичный.