1. 视频人像分割
视频人像分割可以看成是一个特殊的Semantic Segmentation任务,他需要把视频中每帧图像的每一个像素点都打上一个类别标签。和典型的Semantic Segmentation任务有两个较大的差异:1.类别只有两个(人像和背景) 2.视频中人物的移动是连续的,通常几个连续帧之间人像的Mask信息都很类似,我们在分割第i帧的图像时,可以参考第i-1帧已经算好的Mask信息。
2. 常用网络
目前做segmentation常用的一些神经网络网络有如下几个可以选择:
- MaskRCNN
- FCN
- UNET
- SegNet
- Tiramisu
但是用unet网络应该很难做到实时
3. HUAWEI HIAI
IT之家11月1日消息 视频拍摄技术的升级催生了大量优质视频,然而现有的技术依然难以支撑许多拍摄创意。因为道具和场地的限制,许多特效需耗费不少时间和精力进行绿幕拍摄和后期制作,导致拍摄成本极高。近期,HUAWEI HiAI已在华为开发者联盟上线视频人像分割能力,助力开发者一键接入实现视频背景处理和人物渲染等强大功能。