互联网娱乐行业VR视频解决方案

互联网娱乐行业VR视频解决方案VR视频技术打造视觉盛宴，助力互娱产业体验升级VR技术背景与优酷VRVR视频技术阿里云VR视频解决方案VR技术背景与优酷VRVR产业现状WHYVR？WhyNOTVR?360°全景视频模式，单目裸眼沉浸式VR模式，双目模式WHYNOTVR？VR游戏是这样：晕操作难画面差VR视频问题更大……VR视频天然地体验不佳•对头显而言，屏幕太近了：栅格效应，透镜畸变……•对双目而言，显示面积太小了：有效像素不够多，模糊•小FOV：管中窥豹•典型设备FOV：•HTVVive•OculusRift•SonyPSVR110°110°110°•三星GearVR96°•暴风魔盒496°•PicoVR96°•人眼220°而且对带宽还有浪费分辨率压缩前（理论值）H.264编码后H.265编码后2K(2560x1440)~3Gbps6Mbps~20Mbp3Mbps~10Mbpss4K(3840x2160)~6Gbps12Mbps~40Mb6Mbps~20Mbppss8K(7680x4320)~24Gbps48Mbps~160M12Mbps~80MbbpspsVR视频还只挖其中小小一块来显示：2K视频传过来，当480p看。同时满足带宽与质量的解决方式问题优酷VR演进9201620162016首次发布天猫魔盒支持VR优酷VR直播20174K、全景声2017提案被采纳为国家标准2018阿里云VR服务8K典型内容覆盖阿⾥里里巴巴年年会•⼤大场馆全⽅方位5机位直播•图⽂文包装系统，做2D直播的加法邹市明拳击赛•⾸首场杜⽐比全景声体验•源端推流优化，同等上⾏行行带宽画质提升杭州云栖·虾⽶米⾳音乐节•累计观看量量超30万⼈人•3天连续室外直播，⾼高稳定保障VR视频技术从投影到切流从3维到2维：投影对称投影25%12.5%12.5%6.25%6.25%12.5%25%25%12.5%12.5%12.5%12.5%25%12.5%12.5%12.5%12.5%12.5%12.5%75%比如Cubemap对称投影如何省带宽？•优化投影模型：依内容类型的中部/四周面积占比调整•缩小传输面积：360°到180°，投影面优化，削天削地•编解码：H.265，动态量化，非关键区域降清晰度•基于Tile的流切换基于Tile的带宽优化BASELAYEREQUIFRAMETILELAYERTILELAYER观看范围观看范围•不同的方向用不同tile•平均50%左右码率节省•解码器、播放器需定制•转方向会模糊一下+基于Tile的流切换原理基础层，2Mbps增强层，10Mbps非对称投影：FacebookFront(HighQuality)Back(LowQuality)10%22.5%102.5%2.5%%2.52.5%%Facebook的金字塔方案非对称投影：阿里阿里的改进四棱锥方案（forAVSVR&IEEE1857.9）•不同方向用不同流•70%+码率节省•支持通用解码器•转方向会模糊一下改进四棱锥的各方向视频流EQUIFRAMEFRONTBACKLEFTRIGHT非对称投影的流切换GOP1GOP2GOP3GOP2GOP3GOP1视角1视角2视角切换问题1：它慢GOP2GOP3GOP2GOP3GOP1视角1视角2视角切换GOP1开始下载模糊时长GOP1GOP2GOP3GOP2GOP3GOP1视角1视角2视角切换开始下载模糊时长GOP1GOP2GOP3GOP2GOP3GOP1视角1视角2视角切换开始下载模糊时长视角2短GOP问题2：它卡GOP1GOP2GOP3GOP2GOP3GOP1视角1视角2预测视角切换开始下载模糊时长视角2短GOP开始转头确认视角切换GOP2GOP3GOP2GOP3GOP1视角1视角2GOP1开始下载提前下载时间视角2短GOP预测视角切换开始转头确认视角切换问题3：它糊视频源直接拉伸+渲染超分辨率+渲染端到端VR直播链路现场实时多维度的图像处理理增强能⼒力力：包含锐化、降噪、HDR等画质增强技术全⾯面⽀支持传统2D直播信号、图⽚片、三维模型嵌⼊入VR视频，做VR体验的加法⽀支持端到端全景声解决⽅方案，通过360度⾳音频体验进⼀一步加强沉浸感采集端多机位图像增强3D图⽂文包装全景声多台摄像机的实时画⾯面采集系统，完美⽀支持现场导播和多机位切换VR图文包装最⾼高⽀支持8KVR⽚片源直播，将原始8K⽚片源实时映射到多路路4K的视⻆角信号进⾏行行编码结合标准的⾮非对称映射编码技术，最⾼高可节省70%以上码率，3M码率可看⾼高清4K⼀一键创建直播场次，基于OSS可靠存储的有序VR内容管理理，快速的直播转点播能⼒力力云端异构计算8K直播3Mbps⾼高清4K直播/点播管理理基于异构计算的映射编码系统，⽀支持⼀一路路进多路路出的⾼高并发映射编码结合⾮非对称映射编码技术，根据⽤用户视⻆角进⾏行行多⽅方向动态流瞬切，⽐比秒级切换更更快⽀支持2D/3D、180/360度VR格式，丰富的映射模型终端渲染⽀支持⽀支持基于⼿手机姿态和⼿手势的视⻆角控制，可⼿手势缩放视⻆角客户端全终端覆盖动态流瞬切技术丰富的VR格式交互操作便便捷全⾯面覆盖Android、IOS平台，针对主流VR头显适配优化，H5播放⽀支持提升结果：指标20Mbps4KH.264优质VR内容源20Mbps6Mbps4Mbps约720p960p960p3Mbps960p带宽可看分辨率约540p百兆光纤入户20M你就给看这个？好像能看了家里得有个好网差不多1080p了普通人家都能看提升结果：主观阿里云VR视频解决方案=pcVR视频开放服务能力1领先技术VR国标提案采纳|多模型场景适配|动态切流|3Mbps@4K快速部署专业/消费级设备⼀一键直播|全终端SDK集成适配|3亿次验证23极致体验180°/360°|2D/3D|4K/8K|H.264/H.265全⾯面保障全球CDN节点|可视化监控|运营/存储安全|防盗链/加密4Live直播•逼近、逼真•演唱会/生日会/LiveHouse•全景声•多机位•图文包装外景直播•热烈刺激的现场氛围•体育赛事/新闻现场•3D直播•图文包装秀场直播•给主播全新的表现能力•现在VR最火的内容是…•快速接入•沉浸式互动游戏直播•先拍后播，精心制作•更像自己玩•轻松接入•高质内容