- 已经使用 OpenGL 渲染出 13*13 个视角的图片
- 现在想法是取四个角落的图片然后插值预测中间视角的图片和渲染出来的图片量化对比，越相似越好
- 考虑使用光流法计算角落视角图片的像素位移，然后根据像素位移计算中间视角图片，考虑对比稠密和稀疏两种方式
- 另外还有深度图，能否结合深度图来解决融合权重，来更好的处理像素
基本流程如下
OpenGL 渲染出来的视角图片
有没有大佬懂图片处理能够实现的，或者使用其他技术实现，绿泡泡：RHlsYW5fc3RyaXZl
3 条回复 • 2024-11-09 00:32:17 +08:00
 |
1
yankebupt 4 小时 0 分钟前
四角的视角方向已知的话，深度图精度足够高的话，不考虑投射到空间点云然后投影插值么？
算了看到 C++，肯定是要性能，要么就是四角的摄影机角度不知道要自己算（空间卷积拟合运算量爆炸），要么就是深度图精度不够，估计不行…… 话说为什么有人会用 C++在干这种 Nvidia DLSS 插帧在干的事情…… 课设么？ |
|
2
yankebupt 3 小时 46 分钟前
我不是专家，但是如果不知道视角插帧的话，我知道的至少有两种。
一种是 AI 模型插帧，性能巨差但是显卡加速，本质是卷积或者偷懒或优化过的卷积，被遮挡的像素估计出来像一点 可能半开源 还有一种就纯 2D 位移缩放旋转，被遮挡的像素基本就糊成一片（随便填的），比较快，CPU 能实时 60 插 120 帧 1080P 之类 后一种你可以下个 SVP Project 看看选项，有各种优化，性能的，估计（搜索）方法的，遮挡像素怎么填充的，满足各种喜好和性能需求…… |
 |
3
dylanstrive OP @yankebupt 对的，就是课设。其他高级一点的方法都不懂，唯一能着手的就是 opencv 图像层面的处理，对性能其实也没啥要求，就是纯粹为了达到效果，都是些老的不能再老的一些东西了，像什么 DIBR 、根据 EPI 插值计算这些
|
Select Language