导读 在移动设备上观看视频时，有多少次看到视频被严重裁剪？这是非常令人沮丧和讨厌的，在大多数情况下，你对此无能为力。为了解决这个问题，谷
在移动设备上观看视频时，有多少次看到视频被严重裁剪？这是非常令人沮丧和讨厌的，在大多数情况下，你对此无能为力。
为了解决这个问题，谷歌的AI团队开发了一个开源解决方案，Autoflip，它可以重新组合适合目标设备或大小(风景、广场、人像等)的视频。).
自动翻转分为三个阶段：镜头(场景)检测、视频内容分析和重新合成。第一部分是场景检测，其中机器学习模型需要在从一个场景剪切或跳转到另一个场景之前检测点。因此，它将一帧与前一帧进行比较，以检测颜色和元素的变化。
一旦模型确定了镜头，它将继续分析视频内容，以确定场景中的重要对象。利用深度学习神经网络，不仅可以确定人或动物，还可以确定运动中的运动和移动球以及广告中的标志。
对于最后阶段，AI模型决定是对单个空间中的场景使用固定模式，还是在关注对象不断移动时使用跟踪模式。基于此，以及要显示的视频的目标大小，“自动翻转”将裁剪帧，同时减少抖动并保留感兴趣的内容。
谷歌研究人员表示，Autoflip可以用来轻松地将视频转换成各种格式和屏幕。对于下一阶段，该团队希望改进采访和动画电影中的物体跟踪。它希望使用文本检测和图像修复技术来更好地将前景对象和背景对象放置在一个框架中。
标签：