YouTube如何做到即时影像置换背景Google不藏私开源给你用
Google研究团队开源在Tensorflow中实作的语意影像切割(Semantic Image Segmentation)模型DeepLab-v3+,包括Google Pixel 2和Pixel 2XL手机上的肖像模式(Portrait Mode),以及YouTube为影片即时去背换背景功能,都是这项技术的应用。
Google研究软体工程师Liang-Chieh Chen以及Yukun Zhu表示,语意影像切割的主要目的,就是为每个画素指定语意标籤,诸如路、天空、人或是狗等物体,不少的程式需要这样的功能,像是合成景深(Synthetic Shallow Depth-of-field)效果,应用在手机Pixel 2和Pixel 2XL上提供的肖像模式(Portrait Mode),能自动模糊人物的背景,作出类似单眼相机的景深效果。
另外,在多数摄影App都会提供的即时影像切割(Video Segmentation),例如最近在YouTube发表的新功能,为影片即时去背换背景的功能,也是语意影像切割的应用。
DeepLab-v3+在Tensorflow上实作,使用部署于伺服器端的卷积神经网路(CNN)骨干架构,以获取最佳的结果。除了程式码之外,研究团队也同时公开了Tensorflow模型训练以及评估程式,以及使用Pascal VOC 2012与Cityscapes资料集训练的模型。
DeepLab-v3+技术是基于三年前的DeepLab模型,期间改进了卷积神经网路特徵萃取器、物体比例塑模以及同化前后内容的技术,再加上进步的模型训练过程,还有软硬体的升级,从DeepLab-v2到DeepLab-v3,直到现在发表的DeepLab-v3+,让效果一代比一代好。
DeepLab-v3+是由DeepLab-v3扩充而来,研究团队增加了解码器模组,能够细化分割结果,能够更精準的处理物体的边缘,并进一步将深度卷积神经网路应用在空间金字塔池化(Spatial Pyramid Pooling,SPP)和解码器上,大幅提升处理物体大小以及不同长宽比例的能力,最后得到强而有力的语意分割编码解码器网路。
Liang-Chieh Chen以及Yukun Zhu特别提到,随着软硬体的升级,建构在卷积神经网路上的现代语意图像分割功能,可以达到的水準已经远远超过5年前的想像。
免责声明:本文由用户上传,如有侵权请联系删除!
猜你喜欢
- 郦志隆降压表怎么样(郦志隆降压表)
- 可以逗大家开心的节目(逗笑与逗乐是个怎样的节目)
- 世界杯比分最悬殊的比赛(世界杯上最大的逆转是哪一场比赛)
- 电视剧里有李佳萱(李佳萱是什么电视剧中的人物简介介绍)
- 中国人可以在泰国租车吗(去泰国可以在当地租车自驾吗)
- 广州珠江新城花城大道附近酒店(广州天河中学珠江新城校区附近有什么酒店)
- 辽宁足球俱乐部重建(辽宁足球俱乐部官网)
- 关于焦油的(松焦油的作用简介介绍)
- 东北财经大学和东北师范大学哪个好(二本东北财经营口校区和辽宁师范大学哪个好)
- new(balance1400中底是什么材质)
- 笔记本要怎么连接打印机(笔记本怎么连接打印机设备简介介绍)
- 他喜欢的明星是(有哪些明星艺人是你自始至终一直非常喜欢的)
最新文章
- 中国好声音如果没有你李昊瀚(山野中国好声音李昊瀚唱的那么好为什么淘汰)
- 被套的尺寸是多少(被套尺寸一般是多少简介介绍)
- 怪物x联盟复刻版攻略(怪物x联盟复刻祥云马)
- 阳历是快的还是慢得(快的和慢的哪个是阳历简介介绍)
- 英雄联盟赵信特战先锋(特战先锋德邦总管赵信)
- 凤凰传奇有一首歌叫什么(凤凰传奇有一首歌歌词有)
- 为什么腾讯视频看不了直播(腾讯lpl视频看不了怎么办)
- Blue(Da(Ba Dee) 歌词)
- 联想z475开机黑屏(联想Z475开机超慢怎么回事)
- 吴建豪舞林大会跳的舞(2011舞林大会吴建豪怎么没有看见进复赛)
- 海清结婚了吗现在怎么样了(海清结婚了吗)
- 开十字绣店到哪里进货(开十字绣店在哪里进货怎么进货呢)
- 卫庄大战六剑奴是哪一集(卫庄哪集说的六剑奴是值得一战的对手)
- 微信六年来第一次开始“变脸”为什么
- iphone怎么看已连接wifi密码(iPhone怎么越狱啊)
- 求K233次列车(15车厢的座位号)
- 能链综合能源港里的充电站为何成为香饽饽
- 鸡蛋怎么做比较有营养(鸡蛋怎么做比较好吃)
- lol手游霞怎么出装(LOL新英雄霞与洛逆羽霞如何出装霞怎么出装)
- 穿越火线什么时候上架(穿越火线什么时候能玩)
- 北比臼舅怎么读(北比臼日怎么读)
- 创世之柱任务有什么用(创世之柱任务怎么做)
- 徐磊的歌曲(写给你的歌 徐磊乐演唱作品)
- 广州市经济适用住房准购证明怎么办理(如何取得广州市经济适用住房准购证明)