VR头盔远程全景直播方案

整理文档很辛苦,赏杯茶钱您下走!

免费阅读已结束,点击下载阅读编辑剩下 ...

阅读已结束,您可以下载文档离线阅读编辑

资源描述

无线数据传输360度环绕立体声效在线实时播放无线数据传输•整个方案分为3个部分••远程矩阵摄像头采集•视屏拼接缝合全景处理后台•VR头盔视频直播Orah4i:能进行360度4KVR直播的神器主要技术规格最大输出分别率:4K@30fps输出视频选项:可视频实时直播任何CDN;记录源和/或输出视频到SD卡;输出音频格式:录制高保真度立体声响@B-Format重量:480克体积:80x70x65(毫米)机身结构:阳极氧化硬铝机身电源:48VPoE供电(网口供电)摄像头技术参数视频处理器:2个Ambarella视频处理器图像传感器:4个索尼EXMOR图像传感器镜头/分辨率:4枚鱼眼镜头/8层水晶镜头/2048*1536摄像头帧率:30fps麦克风:4个环绕麦克风售价:3595$远程矩阵摄像头全景采集解决方案I——VideoStitchOrah4i远程矩阵摄像头全景采集解决方案II——GoProOmniOmni的规格是120×120×120mm,6个摄像头之间配备了像素级同步技术,这样方便后期制作时的拼接工作。同时还配备Kolor色彩还原软件,自动将各个摄像机里的视频结合起来。Omni支持以30帧率和8K球形分辨率(7,940x3,970)拍摄360度全景VR影像,1440P(5,638x2,819)分辨率则能够以60帧率拍摄。5000美元的Omni套装包括Omni支架、6台相机(有电池)、6根miniUSB线缆、6个32GB的microSD存储卡和读卡器、GoProKolor软件授权许可、防水保护套、一个智能遥控器、7端口USB集线器和电池充电器。Omni支架可单独出售,售价为1500美元。售价:5000$远程矩阵摄像头全景采集解决方案III——ALLieALLie(念作“ALL-E”)配备了前后各800万像素的摄像头,且每个镜头的视角都宽至188°。根据用户放置方式的不同,你可以看到左右、上下的360°环形视角。主要技术规格最大输出分别率:4096*2048输出视频格式::H.264输出音频格式:16-64kbps重量:283.5克体积:3’’x3’’x3.5’’连接:WIFI+蓝牙电源:9VDC/7.5Wmax摄像头技术参数视频处理器:QualcommSnapdragon800视频处理器图像传感器:2个OV10823,1/2.6’图像传感器镜头/分辨率:2枚鱼眼镜头/8层水晶镜头/2048*2048/2448*2448摄像头帧率:20fps麦克风:内置售价:599$ALLieGo运动相机是一款全高清的360运动相机,并且运用公司的最新360x360技术实时的通过WIFI把视频串流到VR头盔上面.相机尺寸大约类似一个棒球大小,可以非常容易的固定在人体或者体育设备上面。相机上面配备了2个麦克风和内置喇叭,内部存储空间和充电电池该相机能够录制2048x2048@20fps的视频,你可以选择流传、录制或分享它们。该公司甚至还提供了单独出售的虚拟现实头戴式装置,与ALLie搭配使用效果最佳远程矩阵摄像头全景采集解决方案IV——Sphericam2Sphericam2内置了多达6个镜头和图像感光元件,可拍摄使用者周围的一切内容。它可将每个摄像头所拍摄到的画面自动拼接在一起,供用户使用虚拟现实设备或是普通的手机/平板进行观看作为上代机型的升级版,Sphericam2的图像分辨率提高到了4100x2150,视频帧率为最高60fps。制作公司还为它提供了可拆卸的支架,以防设备在坠地时产生损伤售价:2499$远程矩阵摄像头全景采集解决方案VNokiaOZO无线全景相机一直有一个难题,就是拍摄内容的容量往往相当巨大,所以常常需要有线缆连接进行输出。而OZO采用了500G的SSD固态硬盘来存储影像内容,同时硬盘还与电池合体成一个部件,插在OZO摄像头的手柄部位,这块500G的硬盘理论上能够纪录45分钟的内容,以USB3.0的形式通过一个充电和读取数据的一体Dock来传输内容。通过802.11的Wifi,用户可以通过电脑来控制OZO的相机,这也让OZO能够以无线的状态来进行拍摄,解放了广大摄影师的双手。回放这大概是OZO最牛的功能里,即提供实时的360度3D视频的全景回放。大部分全景相机要将容量巨大的影像资料导出到电脑或者处理器中进行观看和检查,而OZO的实时回放功能,能够让创作者随时监控影像作品的进展,实现全方位的把控。摄像师完全可以一边戴着Oculus的头显一边进行拍摄工作,如果他们想的话。软件除了6万美元的外星飞船,诺基亚当然还提供一揽子的后期软件。从官网的介绍来看,OZO的后期软件有远程遥控(OZORemoteApplication)和创作程序(OZOCreatorApplication)两个应用,目前似乎都只支持苹果系统(OSX®10.10Yosemite)。售价:60000$•360fly相机呈一个球体,独自就可以录制360度视频,不需要多个摄像头拍摄然后拼接而成。更重要的是,360fly相机拍摄完成的视频可以使用智能手机和VR眼镜观看。•360fly相机视频分辨率为1504x1504,可在零下20℃到121℃的极限温度下工作,内置电池容量为1600mAh,续航并不是很久,大约为2个小时,连接性能方面,360fly相机支持蓝牙4.0,支持WiFi,并且提供了配套的视频编辑软件。•360fly拥有横向360度以及纵向240度超广角镜头,而它也是目前市面上视角最广的摄像机。在兼容性方面,360fly支持iOS8以及Android4.3以上版本的设备,通过安装于手机上的客户端,用户用滑动的方式就能随意调整视角。•不仅如此,360fly还支持水深5米防水,非常适合极限运动爱好者们,而f/2.5的大光圈和分辨率为1504×1504的1/2.3英寸传感器让你无需担心360fly的视频质量。令人有些遗憾的是,虽然内置的32GB存储空间对于大部分用户来说已经足够,但是360fly却并不支持SD卡容量扩展.•360Fly的新拍摄模式包括2560×1440分辨率的慢动作、加速等特效,同时还加入了GPS传感器、气压计/测高计和加速度计等配件。如果搭配micro-HDMI配件底座的话,甚至还可以实时进行360度视频直播。在CES展会上,360Fly公司只用了一台摄像机就在智能手机和GearVR装置上呈现出了无缝的虚拟现实视频。同时360Fly还与Bell公司合作创建了一款智能头盔,可以拍摄上方和下方的画面,在为骑手提供防风保护功能的同时,还能够提供全方位的视角。售价:399.99$远程矩阵摄像头全景采集解决方案VI360fly全景图像拼接缝合主机处理器:IntelCPUNvidiaGeForceGPU;存储:120GSSD存储;接口:1个麦克风,1个头显,4个USB3.0,2个USB2.0;数据交互:LAN,Wi-Fi802.11ac/b/g/n外置天线,蓝牙4.0;传输:5-25Mbps;输出协议:RTMP直播到服务器,HLS提供给智能手机,3D眼镜,VR头盔;最大输出分辨率(pixels):4800x2400;直播分辨率(pixels):4K@30fps;输出投影:圆柱形投影;输出视场:360度球面;延迟:30秒(在使用Orah4i进行全景视频直播时,画面会有30秒的延迟)•Orah4i和stitchingbox之间通过一根网线相连,出了用于实时传输数据,这根网线还用于为Orah4i供电。使用时,用户既可以选择把stitchingbox放到Orah4i的三脚架下面,也可以扯上一根足够长的网线,把stitchingbox远远地「藏」起来Orah4iLiveprocessingunitStitchingbox「用户体验:我在一台Orah4i的旁边,使用三星的GearVR观看了这台Orah4i的全景视频直播,尽管当时Orah4i摆放的位置光线环境较差,而且我在GearVR上使用的是已经有些年头的GalaxyNote4,但Orah4i捕捉的全景视频直播画面依旧相当出色。此外,我还使用GearVR观看了来自VideoStitch在旧金山的办公室的直播画面,相比直接把Orah4i摆放在我旁边时,画质有所下降,但依然比我之前尝试过的几乎所有全景视频直播画面要更加出色。在这两次的全景视频直播体验中,我都无法看到任何视频拼接的痕迹,考虑到VideoStitch之前一直在做这方面的软件,这一结果也没有什么好意外的。VR头盔解决方案名称使用方式特点代表产品头盔配合PC/游戏机/视频处理单元速度快,适合比较复杂的使用场景OculusRiftSonyPSVRHTCVive眼睛插入手机使用使用场景灵活,受到手机性能制约,3D效果一般三星GearVR谷歌Cardboard暴风魔镜一体机可独立使用使用场景灵活,成本较高,技术不成熟SimLens灵镜小黑暴风魔镜魔王VR头戴硬件设备三大常产品形态微控制器:意法半导体32F072R8基于ARMCortex-M0处理器,最高支持48MHz主频东芝TC358870XBG4KHDMI转MIPI双DSI转换器SMSCUSB5537B七口USB中心控制器AIT8328片上系统(带图像信号处理器)CM108B音频解码器USB接口串行闪存(4Mb)N25Q032A13ESE40E串行闪存(32Mb)WM5102音频解码器PI3EQX7841USB3.0中继器信号调节器超低功率现场可编程门阵列(FPGA)TS3DV642双向多路转换器/分用器(12通道)nRF24LU1P2.4GHz无线收发模块nRF24LU1P2.4GHz无线收发模块11U35FARMCortex-M0微控制器ICE40HX8K-CB132超低功率现场可编程门阵列(FPGA)MPU-6500六轴陀螺仪及加速计N25Q032A13ESE40E串行闪存(32Mb)61AE81UL00075B传感器VR头盔硬件架构框图VR头盔视频系统框架图VR头盔要获得良好的视觉沉浸效果,首先需要解决分辨率和刷新率问题,采用双路HDMI光传输,可以实现总分辨率4K@60fps,为了解决显示屏分辨率问题,可以采用双OLED屏显示,利用Mstar最新推出的6A938芯片,采用视频分割技术,配置成两路1080p的视频信号,每路1080p的视频信号帧率可以到到120fps,通过双路光纤传输到头盔,驱动两个1080pOLED显示屏,在视频传输分辨率和刷新率上,达到目前最高的性能指标本方案通过双路光纤即可实现20Gbps码率的HDMI视频实时传输,可以实现1080p120fps和4K60fps的实时视频传输,传输距离可以延伸到数百米到数公里,采用塑料光纤解决玻璃光纤的弯绕性问题双路HDMI视频信号光传输框图眼动技术在VR头盔上应用全视场角追踪在VR设备上的眼球追踪需要追踪的范围非常大,几乎达到人眼的转动极限:垂直30°,水平50°,完全可以覆盖FOV大于110°的主流VR设备。按照人类眼动的极限来设计追踪方案,这样追踪范围广,可无死角覆盖整个VR显示屏幕。高精度低延迟除了追踪范围,另一个非常重要的元素便是追踪精度,尤其是在试用VR进行互动当中,对操作的实时性和精准度要求非常高。要让用户感觉不到延迟的存在,需要在眼动数据获取速度下功夫,而眼球追踪技术可以弥补这方面的缺憾。防抖追踪算法由于VR设备的使用时需要佩戴在头上,而且大部分VR应用都必须头部动作的配合,此时头动过程中便会造成VR设备与头部的位移变化,在这种运动状态下获取准确的眼球数据,无疑是对硬件和算法最大的挑战。所以可针对VR设备的眼控方案特别加入了防抖算法,这样玩家在使用过程中即使头动也不会影响眼球追踪的精度。眼控VR将会为VR带来全新的体验,在特定需要中可以由眼睛控制光标锁定,当用户闭上一只眼时自动调出特写框等,还可以根据用户在不用的使用场景中注视点不同触发不同的应用,当用户注视路口时,会自动出现地图导航,当注视画面不同位置触发不同的场景模式等。除此之外眼控的交互方式还可以应用于菜单,不需要使用的菜单会自动隐藏,使用时通过眼控触发,使VR界面更加干净。眼

1 / 16
下载文档,编辑使用

©2015-2020 m.777doc.com 三七文档.

备案号:鲁ICP备2024069028号-1 客服联系 QQ:2149211541

×
保存成功