不想横屏看视频?谷歌开源框架AutoFlip一键截出最精彩竖版视频

摘要:北京时间20200214关于【不想横屏看视频?谷歌开源框架AutoFlip一键截出最精彩竖版视频】的具体情况和说明,让www.hzkjdxky.com新闻频道以图文形式为您慢慢道来。

向您推荐
继续播放

视频裁剪三步走,检测镜头级的视频边界、分析视频内容然后再根据需求进行剪裁。

镜头检测

视频可被视为是一段没有中断的镜头或场景序列。为了检测是否发生了镜头的变化,AutoFlip 计算每一帧的色彩值,并和前一帧进行对比。如果色值的分布发生了明显变化,则标记镜头的改变。在得出剪辑策略前,AutoFlip 会缓存整个视频,用于对整个场景进行优化。

视频内容分析

剪辑

在每一帧找到了兴趣目标后,AutoFlip 自动选择优化策略——静态的、追拍或追踪的,这些取决于目标在视频中的行为。如下图所示,第一行是 AutoFlip 根据帧级的边界框追踪到的相机路径,第二行是平滑后的相机路径。经过平滑处理后,追踪效果还是比较理想的。

左图目标在画面中移动需要追踪相机路径;右图几乎固定在画面相同的位置,静态相机路径就足够了。

AutoFlip 有一个属性图,可以提供最佳效果或自定义需求的剪辑。如果覆盖所有需要的区域不能实现(如目标在一帧视频中显得太大),AutoFlip 则会自动切换到相对不那么激进的策略上。它会应用「信箱效应:letterbox effect」,在保持原始视频尺寸的同时添加屏幕黑边,让画面更自然。

对于右图要求视频囊括所有人脸,AutoFlip 会自动填充半透明黑边以满足设定的视频长宽比。

因为 AutoFlip 是 MediaPipe 的一部分,所以对于具体怎么使用,读者可查阅介绍文档

文档地址:https://github.com/google/mediapipe/blob/master/mediapipe/docs/autoflip.md

最后,和其它机器学习算法一样,AutoFlip 的性能会随着目标检测等能力的提升而大大加强,尤其是衍生出来的能力,例如采访镜头中的说话人检测或动漫中的动物脸检测等等。

当然,目前 AutoFlip 还有挺多提升的地方,尤其是当视频边缘有比较重要的文本信息等。谷歌后续也希望 AutoFlip 能进一步融合自然语言处理等技术实现更合理的视频智能剪裁。

原文地址:https://ai.googleblog.com/2020/02/autoflip-open-source-framework-for.html

本 文为机器之心编译, 转载请联系本公众号获得授权 。


查看更多

实时推荐

今天起,温州鹿城区8个公园恢复开放
推荐 在线高清中文字幕电影 2020-02-21 16:48 576 6727
南京江宁作厂社区:爱心捐赠助防疫 同心协力渡难关
推荐 在线高清中文字幕电影 2020-02-21 16:48 916 902
南宁机务确保战“疫”机车健康驰援
推荐 在线高清中文字幕电影 2020-02-21 16:48 311 6393
国羽或长期在海外训练 疫情结束或奥运后回国
推荐 在线高清中文字幕电影 2020-02-21 16:48 871 2646
注定不平凡,巴萨新援能否打破19号魔咒,像梅西一样成为传奇
推荐 在线高清中文字幕电影 2020-02-21 16:48 307 4933
济南一对11个月双胞胎宝宝患者康复出院 累积治愈22人
推荐 在线高清中文字幕电影 2020-02-21 16:48 314 7790
武汉回宁居民居家隔离日记:他们是可爱的人
推荐 在线高清中文字幕电影 2020-02-21 16:48 627 2215
意大利制鞋行业业绩喜忧参半
推荐 在线高清中文字幕电影 2020-02-21 16:48 436 9678
睢阳区坞墙镇:疫情防控卡点也是返岗务工服务站
推荐 在线高清中文字幕电影 2020-02-21 16:48 203 6731
武汉:全市7148个小区封闭管理全覆盖
推荐 在线高清中文字幕电影 2020-02-21 16:48 512 1963
杨昆仑防控线上有担当
推荐 在线高清中文字幕电影 2020-02-21 16:48 127 5296
关于酒的故事和传说特别多,也就是北方黄酒的故事
推荐 在线高清中文字幕电影 2020-02-21 16:48 632 5948
龙岗战疫中,社区“女书记”们坚守一线的巾帼担当!
推荐 在线高清中文字幕电影 2020-02-21 16:48 678 9864
Nike正式发布刺客“Dream Speed 2”
推荐 在线高清中文字幕电影 2020-02-21 16:48 285 1769
德甲5队全胜!老大拜仁还没出手,法兰克福再扛欧战旗帜
推荐 在线高清中文字幕电影 2020-02-21 16:48 405 9528
土拍重启还要再等等,原定下周出让萧山、下沙地块又遇中止
推荐 在线高清中文字幕电影 2020-02-21 16:48 785 601
礼泉县新时社区:“四入三不漏”扎实筑牢疫情防控网
推荐 在线高清中文字幕电影 2020-02-21 16:48 557 3594
华为P40又要立标杆,李小龙:现有WIFI6手机太弱,没一个能打的
推荐 在线高清中文字幕电影 2020-02-21 16:48 954 6999
【合检战“疫”】合阳检察院“五强化”压茬推进疫情防控工作
推荐 在线高清中文字幕电影 2020-02-21 16:48 502 1812
梦幻西游:109第一方寸,凑齐8只神马宠,175服战号都自叹不如
推荐 在线高清中文字幕电影 2020-02-21 16:48 96 5849
搞笑GIF:一斤白酒下肚,哥就敢上山打老虎
推荐 在线高清中文字幕电影 2020-02-21 16:48 105 4823
新化上渡街道:关口前移 守好群众健康之门
推荐 在线高清中文字幕电影 2020-02-21 16:48 836 7633
南城县疾控中心疫情防控工作侧记
推荐 在线高清中文字幕电影 2020-02-21 16:48 475 3439
动物版GTA来袭:化身大鲨鱼扛把子毁灭人类
推荐 在线高清中文字幕电影 2020-02-21 16:48 650 5705
合阳县城关街道:脱贫攻坚“帮扶人”到 疫情防控的“守门人”
推荐 在线高清中文字幕电影 2020-02-21 16:48 676 4190
淄博高新区:税收服务让爱心企业更“暖心”
推荐 在线高清中文字幕电影 2020-02-21 16:48 160 1678
刘国梁提前布局!国乒备战计划再变,年初二出征或7月奥运后回国
推荐 在线高清中文字幕电影 2020-02-21 16:48 641 4027
淄博高新区:复工紧锣密鼓 税务精准服务
推荐 在线高清中文字幕电影 2020-02-21 16:48 923 4368
陈兆宽主持召开城乡居民评价工作调度会议
推荐 在线高清中文字幕电影 2020-02-21 16:48 585 1118
高陵区农村公路管理站战“疫”在行动,他们是爱人,他们是战友
推荐 在线高清中文字幕电影 2020-02-21 16:48 188 6581
首批电助力单车到货“哈啰出行”驰援武汉防疫通勤
推荐 在线高清中文字幕电影 2020-02-21 16:48 524 6021
战疫情丨湖北武汉中国光谷日海方舱医院C区通过验收
推荐 在线高清中文字幕电影 2020-02-21 16:48 148 1601
空战游戏《战锤40k Dakka飞行中队》正式预告公布
推荐 在线高清中文字幕电影 2020-02-21 16:48 683 7373
连创多个全乡“第一”的抗“疫”先锋——安保生
推荐 在线高清中文字幕电影 2020-02-21 16:48 803 1026
赛区大数据看打法 LCK仍喜欢拖后期?
推荐 在线高清中文字幕电影 2020-02-21 16:48 942 6396
原创 宇宙最软牛奶小面包,不吃后悔一整年!
推荐 在线高清中文字幕电影 2020-02-21 16:48 157 935
DNF:3.19版本新活动再送3张永久天空兑换券,积分商城的不需要换
推荐 在线高清中文字幕电影 2020-02-21 16:48 315 9819
开发商称赞新Xbox的GDDR6内存:它能让游戏栩栩如生
推荐 在线高清中文字幕电影 2020-02-21 16:48 202 4782
知名作家:宁桓宇,不要太长女人威风!
推荐 在线高清中文字幕电影 2020-02-21 16:48 650 1174
我们在武汉,请你们不要害怕
推荐 在线高清中文字幕电影 2020-02-21 16:48 547 8159
《新世界》中两个女性角色演绎着时代的变迁
推荐 在线高清中文字幕电影 2020-02-21 16:48 143 8160
浙江十里丰监狱一民警刻意隐瞒行程致多人被感染 被立案调查
推荐 在线高清中文字幕电影 2020-02-21 16:48 932 9725
原创 “遇强更强,遇弱更弱?”战胜切尔西3天后,曼联被布鲁日压着打
推荐 在线高清中文字幕电影 2020-02-21 16:47 939 8004
爱心企业积极捐赠防疫物资,与洋浦同舟共济共克时艰
推荐 在线高清中文字幕电影 2020-02-21 16:47 716 6976
不到400只!摄影师公开罕见“幽灵熊”捕鱼
推荐 在线高清中文字幕电影 2020-02-21 16:47 823 1294
马鞍山农商银行畅通金融服务“绿色通道”
推荐 在线高清中文字幕电影 2020-02-21 16:47 260 8435
河南产的不伤脸新型防护面罩正式上市
推荐 在线高清中文字幕电影 2020-02-21 16:47 263 9918
【战时政治建警】王成良同志出席涉疫执法视频调度会
推荐 在线高清中文字幕电影 2020-02-21 16:47 866 3685
科技赋能,浦口“智取”疫情防控“天王山”
推荐 在线高清中文字幕电影 2020-02-21 16:47 723 808
江西省鹰潭市:四举措助力防疫物资生产企业复工复产
推荐 在线高清中文字幕电影 2020-02-21 16:47 976 2903
江西省赣州市:“帮、促、管”三措并举助力食品生产企业复工复产
推荐 在线高清中文字幕电影 2020-02-21 16:47 747 2808
战“疫”检影丨“我也到一线去!”
推荐 在线高清中文字幕电影 2020-02-21 16:47 526 7523
景德镇市文旅局召开文旅产业项目推进会
推荐 在线高清中文字幕电影 2020-02-21 16:47 273 827
娄底市二人民医院接受社会医疗物资捐赠
推荐 在线高清中文字幕电影 2020-02-21 16:47 765 3229
辽宁云天建筑工程10600元+3500平教育设施建设夺富工一街3号地块
推荐 在线高清中文字幕电影 2020-02-21 16:47 998 2018
新邵陈家坊镇洪庙村全力做好疫情防控期间卫生和消毒工作
推荐 在线高清中文字幕电影 2020-02-21 16:47 998 6688
江西省:疫情期间个人价格违法所得超1万将移送公安机关查处
推荐 在线高清中文字幕电影 2020-02-21 16:47 905 6372
不让战“疫”勇士政治吃亏生活受亏!焦作出台“暖心六条”
推荐 在线高清中文字幕电影 2020-02-21 16:47 279 2617
末节20分!全场50分!特雷杨显现科比特质 3大刺激让他爆发
推荐 在线高清中文字幕电影 2020-02-21 16:47 133 7652
现在坐动车安全吗?是否通风消毒,你担心的这里有答案!
推荐 在线高清中文字幕电影 2020-02-21 16:47 386 6986
阿里河林业局防火办全力以赴做好疫情防控各项工作
推荐 在线高清中文字幕电影 2020-02-21 16:47 425 9490
金川:卡撒不难“卡”
推荐 在线高清中文字幕电影 2020-02-21 16:47 849 1455
严把五关通州一物业公司强化楼宇疫情防控
推荐 在线高清中文字幕电影 2020-02-21 16:47 642 4106
涟源推行一张电子通行证全市通用
推荐 在线高清中文字幕电影 2020-02-21 16:47 736 8282
当我做了婆婆以后,终于明白,为什么我的婆婆不愿月子里对我好
推荐 在线高清中文字幕电影 2020-02-21 16:47 687 6810
大理祥云多举措确保企业安全有序复工复产
推荐 在线高清中文字幕电影 2020-02-21 16:47 410 2606
南京"云签约"67个项目招商引资迎千亿开门红
推荐 在线高清中文字幕电影 2020-02-21 16:47 615 2416
中国历史上灭亡最冤的王朝,本是史上强大王朝,却因这点而灭亡了
推荐 在线高清中文字幕电影 2020-02-21 16:47 163 1089
最新!杭州江干区于今日起开放室外公共体育健身场所
推荐 在线高清中文字幕电影 2020-02-21 16:47 465 6960
193人!广西第七批支援湖北医疗队出征
推荐 在线高清中文字幕电影 2020-02-21 16:47 348 8506
索尼Xperia L4采用后置三摄设计 将于今年春季上市
推荐 在线高清中文字幕电影 2020-02-21 16:47 921 1665
孩子哭闹超过几岁不能哄?哭闹到底哄不哄,表现比年龄更重要
推荐 在线高清中文字幕电影 2020-02-21 16:47 473 9839
常挨打和不挨打的两种人生,父母教育想偷懒,长大后悔已来不及
推荐 在线高清中文字幕电影 2020-02-21 16:47 195 3632
“因为我家没有网”泰国好爸爸的修炼之路
推荐 在线高清中文字幕电影 2020-02-21 16:47 396 4318
牙齿发黄、松动?3个习惯是“元凶”,第一个很多人“明知故犯”
推荐 在线高清中文字幕电影 2020-02-21 16:47 426 9772
南沙打掉制假窝点1个 查扣伪劣防疫消毒品一批
推荐 在线高清中文字幕电影 2020-02-21 16:47 820 9246
复工了!做好这些细节,你就是全公司最安全的人
推荐 在线高清中文字幕电影 2020-02-21 16:47 647 8417
英26岁教师服用止痛药引不适,接线员拒派救护车,致其家中身亡
推荐 在线高清中文字幕电影 2020-02-21 16:47 467 3799
时王三阶SHF王者降临,造型酷炫价格实在,手型配件暗藏“套路”
推荐 在线高清中文字幕电影 2020-02-21 16:47 531 3937
低调潮人首选!舒适与百搭兼备的 ASICS Gel Lyte V 刚刚发售
推荐 在线高清中文字幕电影 2020-02-21 16:47 474 2629
武汉常务副市长:全市7148个小区实现全面封闭管理
推荐 在线高清中文字幕电影 2020-02-21 16:47 468 2052
颈椎病患者饮食要注意哪些事项?
推荐 在线高清中文字幕电影 2020-02-21 16:47 455 1245
王山:这个时候不冲上去,我会后悔一辈子
推荐 在线高清中文字幕电影 2020-02-21 16:47 688 4856
常德市重点水利工程项目复工率87.5%
推荐 在线高清中文字幕电影 2020-02-21 16:46 94 9942
红河州开展“大清扫、大消毒红河民兵在行动”活动
推荐 在线高清中文字幕电影 2020-02-21 16:46 301 1271
永州经开区:开展爱国卫生运动 群防群控抗击疫情
推荐 在线高清中文字幕电影 2020-02-21 16:46 671 2183
阿迪达斯发2019/20欧洲冠军联赛淘汰赛的正式比赛用球
推荐 在线高清中文字幕电影 2020-02-21 16:46 145 4534
1085187元!兰陵县代村再次捐款支援湖北战“疫”
推荐 在线高清中文字幕电影 2020-02-21 16:46 915 9468
巴贝尔嘲讽对手惹争议,滕哈赫警告其专注比赛
推荐 在线高清中文字幕电影 2020-02-21 16:46 986 9517
NBA最强外籍球员,能组成死亡五大
推荐 在线高清中文字幕电影 2020-02-21 16:46 583 1345
开启“云模式” 宁津法院开展“无触式”网上审判
推荐 在线高清中文字幕电影 2020-02-21 16:46 797 2356
阿克苏地区:筑起战“疫”的坚强堡垒
推荐 在线高清中文字幕电影 2020-02-21 16:46 987 7535
玛纳斯县各乡镇严防死守阻击疫情
推荐 在线高清中文字幕电影 2020-02-21 16:46 478 4162
新源县确保疫情防控期间市场供应充足
推荐 在线高清中文字幕电影 2020-02-21 16:46 606 8621
欧联:马夏尔破门曼联1:1 狼队4球暴击
推荐 在线高清中文字幕电影 2020-02-21 16:46 995 922
党徽在战“疫”一线闪光
推荐 在线高清中文字幕电影 2020-02-21 16:46 722 2112
特克斯县抓好畜牧生产助力增收
推荐 在线高清中文字幕电影 2020-02-21 16:46 679 6432
若羌:俩医务人员推迟婚期战疫情
推荐 在线高清中文字幕电影 2020-02-21 16:46 927 4931
巴州:踊跃捐款献爱心 众志成城战疫
推荐 在线高清中文字幕电影 2020-02-21 16:46 454 8066
赤峰市林西县官地镇抗击疫情 青年志愿者亮出青春底色
推荐 在线高清中文字幕电影 2020-02-21 16:46 937 2570