joyycom / VNN

VNN是由欢聚集团(Joyy Inc.)推出的高性能、轻量级神经网络部署框架。目前已为Hago、VOO、VFly、马克相机等App提供20余种AI能力的支持,覆盖直播、短视频、视频编辑等泛娱乐场景和工程场景
Other
1k stars 206 forks source link

人物脸上有黑色框 #33

Open CreaterOS opened 2 years ago

CreaterOS commented 2 years ago

使用3D Game效果人物脸上有黑色框...这个怎么能去掉

AragonMe commented 2 years ago

我是十年,来信已收到

PYNing commented 2 years ago

你好,如方便,请上传原图和效果图各一张,方便我们了解黑色框问题。如果是预期情况我们会介绍解决方案,如果是Bug我们会尽快修复。

PYNing commented 2 years ago

@CreaterOS 回复如上

CreaterOS commented 2 years ago

MBtNIz2gjQ

CreaterOS commented 2 years ago

人物脸部有黑色区域

PYNing commented 2 years ago

@CreaterOS 可参考下述文档的5.6节,尝试优化图像融合效果

https://github.com/joyycom/VNN/blob/master/doc/cartoonstylizing.md

CreaterOS commented 2 years ago

3D Game效果也有类似的问题...该怎么解决?!

CreaterOS commented 2 years ago

IMG_E0680CFF13F2-1

CreaterOS commented 2 years ago

@PYNing

PYNing commented 2 years ago

如果3D Game效果图的背景色差较大,可使用Disney人脸风格化的融合策略:使用人脸分割API识别图像中哪些像素属于人脸,实现只用效果图的人脸部分替换原图的人脸部分,人脸外的像素不变。

处理流程参考:

123

iOS Demo参考以下链接的 imageCaptureCallback 函数: https://github.com/joyycom/VNN/blob/master/demos/iOS/vnn_ios_demo/ios/PictureViewctrls/ViewCtrl_Picture_DisneyFaceStylizing.mm

PYNing commented 2 years ago

@CreaterOS 回复如上

AragonMe commented 1 year ago

我是十年,来信已收到