360°视频论文调研
IEEE VR
2019
Motion parallax for 360◦ RGBD video(源码暂未公布)
![1.png 1.png](https://i.loli.net/2019/03/19/5c9049bb12fb8.png)
MegaParallax: Casual 360° Panoramas with Motion Parallax
![2.png 2.png](https://i.loli.net/2019/03/19/5c9054295040f.png)
Deep Learning-Based Approach For Automatic VR Image Upright Adjustment
背景:
相机朝向不是直的,获得的VR图像没有垂直对齐(在VR头显中图像倾斜)
解决方案:
基于深度学习的自动校正VR图像的方法
贡献:
返回校正后的视图
Dense 3D Scene Reconstruction from Multiple Spherical Images for 3-DoF+ VR Applications
背景:
解决方案:
基于多个球状图像的室内场景3维几何重建
探索大的光流替代算法获得相应的点
使用交叉验证和几何限制检测和移除关于形变和遮挡的不好的匹配点
贡献:
根据参考画面生成稠密的深度图
提供3个自由度+的沉浸式体验
Real-time panoramic depth maps from omni-directional stereo images for 6 DoF videos in virtual reality
一种使用CNN从全方位立体图(ODS images)获得6自由度全景视频的方法
解决方案:
用cnn实时地从ODS图生成一些深度图,这些深度图允许全景图像重投影因此能给VR中的观察者提供6自由度的体验
贡献:
提出了新的边缘权重误差函数以及新的关于全景图像拼接的误差度量
Exploration of Large Omnidirectional Images in Immersive Environments
背景:
导航对在沉浸式环境中探索数据是一个主要挑战,特别是在大型全向球形图中。
贡献:
提出了一个自动缩放的方法允许使用者在不同焦点的物理空间的安全范围内用远程传输进行导航
该方法结合了物理导航和虚拟传输
使用缩放镜头评估了我们的系统和其它不同的传输转换
目标视图会从缩放透镜中完全扩张直到将使用者包围
The Effect of Camera Height, Actor Behavior, and Viewer Position on the User Experience of 360° Videos
背景:
360°视频能够用头显来获得沉浸式的体验,然而观看体验是如何被360°视频的基本属性影响还没被弄明白,例如视频到底记录了多高,是否有人靠近相机
解决方案:
进行了一个24人参与的研究
研究内容:
观看体验是否被下列属性影响:
1.相机高度
2.出现在视频中的人的接近和行为
3.观看者站或坐的位置
结论:
观看者自己的高度对首选相机的高度和体验几乎没有影响
对于站和坐而言最优的相机高度大概位于150厘米
某些情况下,相机太矮或者人离相机很近会对体验有负面影响
贡献:
能够更好地理解和设计沉浸式360°体验
Live Stereoscopic 3D Image With Constant Capture Direction of 360 Cameras for High-Quality Visual Telepresence
背景:
为了捕捉遥远的3d画面,系统要使用传统的附在机器人脑袋上的3d相机
然而相机旋转时生成的低质量图的延迟和运动模糊容易造成VR病
解决方案:
一种叫作TwinCam的方法
使用两个360°相机,保持它们的距离为标准瞳孔间距,并保持它们在世界坐标系下的镜头方向不变即使它们绕头部的轴线旋转并沿着眼睛的位置移动
这种方法能抑制图像缓冲因为每个相机在固定捕捉方向时都能捕捉全方向图
贡献:
介绍了我们相机系统的设计和它在视觉远程呈现中的潜力
我们的相机机制能减少运动模糊和VR病
Efficient Hybrid Projection For Encoding 360 VR Videos
背景:
过去5年,市场上卖了成吨的360VR相机
360VR视频无所不在,然而数字工业的360VR视频的标准化依然引起热议
尽管ERP被广泛用于虚拟现实视频的投影和打包布局,但它在极轴处有严重的投影失真
解决方案:
新的使用混合圆柱投影的编码和存储360VR视频的格式
贡献:
能够生成平衡的像素扭曲,最小化结果投影的拉伸比例
2018
Parallax360: Stereoscopic 360 Scene Representation for Head-Motion Parallax
![1.png 1.png](https://i.loli.net/2019/03/19/5c90f22cc34b5.png)
![2.png 2.png](https://i.loli.net/2019/03/19/5c90f5888cdfc.png)
The Effect of Transition Type in Multi-View 360° Media
![3.png 3.png](https://i.loli.net/2019/03/19/5c90fc600a91d.png)
![4.png 4.png](https://i.loli.net/2019/03/19/5c90fc5e647b8.png)
![5.png 5.png](https://i.loli.net/2019/03/19/5c90fc61149a4.png)
Generating VR Live Videos with Tripod Panoramic Rig
![6.png 6.png](https://i.loli.net/2019/03/19/5c91085051f6a.png)
![7.png 7.png](https://i.loli.net/2019/03/19/5c9108504e811.png)
Detection Thresholds for Rotation and Translation Gains in 360° Video-based Telepresence System
![8.png 8.png](https://i.loli.net/2019/03/19/5c910a94b3397.png)
Gaze-aware streaming solutions for the next generation of mobile VR experiences
![9.png 9.png](https://i.loli.net/2019/03/20/5c9191bdec992.png)
![10.png 10.png](https://i.loli.net/2019/03/20/5c9191be1965d.png)
[2017](http://ieeevr.org/2017/program/papers.html#360° Video Cinematic Experience)
MR360: Mixed Reality Rendering for a 360° Panoramic Videos
![3.png 3.png](https://i.loli.net/2019/03/20/5c919bcb0be32.png)
![4.png 4.png](https://i.loli.net/2019/03/20/5c91a2733250d.png)
![5.png 5.png](https://i.loli.net/2019/03/20/5c91a2732f02d.png)
![6.png 6.png](https://i.loli.net/2019/03/20/5c91a57b62e62.png)
![7.png 7.png](https://i.loli.net/2019/03/20/5c91a917e9fc6.png)
![8.png 8.png](https://i.loli.net/2019/03/20/5c91a917f0d95.png)
2016
Adaptive 360 VR Video Streaming Based on MPEG-DASH SRD
![9.png 9.png](https://i.loli.net/2019/03/20/5c91d485cc54d.png)
![10.png 10.png](https://i.loli.net/2019/03/20/5c91de6c8929a.png)
![11.png 11.png](https://i.loli.net/2019/03/20/5c91de6d016c0.png)
2014
Stereoscopic rendering of virtual environments with wide Field-of-Views up to 360°
![12.png 12.png](https://i.loli.net/2019/03/20/5c91e89d8a411.png)
![13.png 13.png](https://i.loli.net/2019/03/20/5c91e89c8e042.png)
![14.png 14.png](https://i.loli.net/2019/03/20/5c91e89d330e0.png)
ISMAR
2018
A User Study on MR Remote Collaboration Using Live 360 Video
![16.png 16.png](https://i.loli.net/2019/03/20/5c91f93eb9d20.png)
![17.png 17.png](https://i.loli.net/2019/03/20/5c91f93ebc5e2.png)
![18.png 18.png](https://i.loli.net/2019/03/20/5c91f93eb7cb8.png)
SIGGRAPH
2018
Scene-Aware Audio for 360° Videos
![19.png 19.png](https://i.loli.net/2019/03/21/5c92e91b9ca6b.png)
2017
Low-cost 360 stereo photography and video capture
![20.png 20.png](https://i.loli.net/2019/03/21/5c92f9295ecd2.png)
![21.png 21.png](https://i.loli.net/2019/03/21/5c92f9291274d.png)
2016
Rich360: Optimized Spherical Representation from Structured Panoramic Camera Arrays
![22.png 22.png](https://i.loli.net/2019/03/21/5c92fe25210c5.png)
![23.png 23.png](https://i.loli.net/2019/03/21/5c92fe24b70ef.png)
Asia
2016
360◦ Video Stabilization
![24.png 24.png](https://i.loli.net/2019/03/21/5c930178b2069.png)
IEEE Confereces
2018
Content-Adaptive 360-Degree Video Coding Using Hybrid Cubemap Projection
![4.png 4.png](https://i.loli.net/2019/03/22/5c943bac5893a.png)
BAS-360°: Exploring Spatial and Temporal Adaptability in 360-degree Videos over HTTP/2
![5.png 5.png](https://i.loli.net/2019/03/22/5c943f30cc00a.png)
![6.png 6.png](https://i.loli.net/2019/03/22/5c943f30edb8e.png)
2017
Aerial virtual reality 360 research-creation
![1.png 1.png](https://i.loli.net/2019/03/22/5c943a22bb6a6.png)
![2.png 2.png](https://i.loli.net/2019/03/22/5c943a22d3db2.png)
![3.png 3.png](https://i.loli.net/2019/03/22/5c943a22d3662.png)
Dual-fisheye lens stitching for 360-degree imaging
![7.png 7.png](https://i.loli.net/2019/03/22/5c9442ba2b036.png)
Deep 360 Pilot: Learning a Deep Agent for Piloting through 360° Sports Videos
![8.png 8.png](https://i.loli.net/2019/03/22/5c9449d94be2f.png)
![9.png 9.png](https://i.loli.net/2019/03/22/5c9449d959383.png)