惊呆了！监控也会骗人了，视频对象一秒删除

开源前线 · 公众号 · · 2021-04-20 10:27

正文

开源最前线（ID：OpenSourceTop）猿妹整编

链接： https://github.com/zllrunning/video-object-removal

你是否经常拍一段视频，然后被不认识的行人、卡车或者其他可移动的东西抢了镜头？如果是拍照大多数人都知道如何P图把这些无关紧要的东西去掉，但是如果这些障碍物出现在视频里就是另外一回事了，很多人都无从下手。

常规的视频对象去除需要一定专业的视频编辑技能，而且很耗时，但是，这个Github项目可以让这项操作变得简单快速，从下面这张图，你就可以清楚看出来它是如何操作的，首先，要在清除的对象（在本例中为行人）周围绘制一个典型的边界框：

该系统会自动跟踪标记框线内的视觉信息，然后执行“修复”，以此来填补移除掉的对象留下的痕迹。

这里还有更多示例：

岁说这个项目确实很厉害，但是去除技术还不能称之为完美，从上面的动图不难看出，背景越简单，修复效果越好，但是有的视频难免会出现不够对齐或者重影之类的问题尤其的图片纹理复杂的情况下。

这个GitHub项目的灵感来自两篇CVPR论文：《Fast Online Object Tracking》和《Segmentation: A Unifying Approach (SiamMask) and Deep Video Inpainting》

SiamMask是一种简单的多任务学习方法，SiamMask可以仅基于初始化的边界框来生成对象分割蒙版，并以每秒55帧的速度旋转边界框。该系统在VOT-2018（Visual Object Tracking）挑战赛中建立了实时对象跟踪的最新技术成果。

而Deep Video Inpainting则是为视频中的图像填充内容，该框架旨在使用基于图像的编码器/解码器模型合成视频中的未知区域，让图像更为真实。

推荐文章

上海社区发布 · 减肥变厌食症！上海一成年女子体重只剩40余斤！还有人催吐误吞牙刷......

17 小时前

上海社区发布 · 减肥变厌食症！上海一成年女子体重只剩40余斤！还有人催吐误吞牙刷......

17 小时前

环球网 · 俄乌冲突三周年，联合国秘书长发表声明

22 小时前

北京大学百周年纪念讲堂 · 多款专属周边陪你一起踏上《猫猫的奇幻漂流》！

昨天

北京大学百周年纪念讲堂 · 多款专属周边陪你一起踏上《猫猫的奇幻漂流》！

昨天

参考消息 · 商务部最新回应：敦促美方停止！

昨天

谈理说法 · 杨幂，申请强制执行！

3 天前

谈理说法 · 杨幂，申请强制执行！

3 天前

科学解码 · 【晚间一乐】在印度，当蛇也不容易啊！

8 年前

聊聊架构 · 一个经过优化的微服务架构案例

8 年前

大爱狗狗控 · 小短腿的汪生哲学：在哪儿摔倒，就在哪儿躺一会吧！

7 年前

中债资信 · 诚邀|中债资信风险管理与投资精英速成特训营正在报名！

7 年前

青松医药集团 · 2017年5月24日三分钟医药新闻早餐

7 年前