最近做前端有个需求，小弟很迷茫，需求是页面获取摄像头，实时显示人像画面，然后分割出人像区，并且需要使用 AR.JS 能力，识别特定图片显示三维模型..

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 442 天前的主题，其中的信息可能已经有所发展或是发生改变。

最近做前端有个需求，小弟很迷茫，需求是页面获取摄像头，实时显示人像画面，然后分割出人像区，并且需要使用 AR.JS 能力，识别特定图片显示三维模型，，两者结合就是人像区能够遮挡住三维模型，我使用 TensorFlowJs 、AR.js 、aframe-ar-nft.js 实现了，但是在手机上的效果不好，例如点击按钮开始分割，在 PC 端能实现需求，但是在移动端就直接寄了，分割的人像图出不来，怎么办啊，另外有没有懂的大哥，虎牙的直播弹幕不挡脸是前端生成的人像分割图吗？还有哔哩哔哩的蒙版弹幕

人像

分割

模型

小弟

4 条回复 • 2023-08-29 14:15:51 +08:00

webszy

2023-08-24 22:00:57 +08:00

牛逼啊。。。一般这种需求不都是放在后端吗。pc 上肯定性能好，兼容性也好点，手机上兼容性问题很突出，有些性能也差。

webszy

2023-08-24 22:04:41 +08:00

我印象里 b 站那个好像就是后端生成到

AdminZ

2023-08-25 15:40:46 +08:00

@webszy 产品说是用户量大的话都由服务端生成蒙版，服务器会崩溃，他说哔哩哔哩是前端生成，我看了相关文章，哔哩哔哩的是上传视频，由服务端解析好每一帧的蒙版，这样用户在收看该视频时，会把这些蒙版下下来，再套上去，我这跟哔哩哔哩还不一样，算是实时分割人像，pc 端我已经实现，但是移动端，而且还是在小程序的 webview 里！偶尔连摄像头都打不开....

webszy

2023-08-29 14:15:51 +08:00

@AdminZ 这就是我说的兼容性问题，这在移动端是无解的，只能让后端解决