交互式三维视频技术
交互式三维视频技术
沈燕飞 代 锋 张勇东
摘 要 交互式三维视频是近年来兴起的一种新型媒体。它在传统的二维视频的基础上,增加了视觉的现实感和逼真感。用户在欣赏节目的同时,能够自由的选择视点与视角。交互性是这种媒体的重要特征。为了提高不同实现之间的互操作性,ISO/MPEG1制订了相关的规范标准。本文从交互式三维视频的分类、表示、编码和相关的应用等方面对该技术进行了详细的介绍。
关键词 三维视频 视频编码 视频表示 全景视频
1 引言
随着多媒体技术的不断发展,交互性将成为未来多媒体技术的一个主要特征[1][2],具有交互性的多媒体技术将使我们能够在某些方面由被动观赏转化为主动欣赏。例如我们可以在一个场景中改变我们的视角和视点,选择我们感兴趣的区域进行观赏。为此视频技术也需要由二维向三维转变。和普通的二维视频相比,三维视频增加了场景的深度信息,增强了视觉的现实感和逼真感,可以给用户提供全方位沉浸式的感受。三维视频技术可以广泛应用于数字电视、远程教育、远程工业控制、三维视频会议系统、虚拟现实系统等诸多方面。 为了表示这些三维视频数据并对之进行编码, ISO/IEC2 制定了一套虚拟实景描述模型语言 VRML3。用它可以描述三维物体及其行为,构建虚拟世界,建立互联网上的交互式三维多媒体。虽然VRML有许多优点,但是由于VRML是面向图形的,绝大部分场景是使用计算机产生的图形或者是静态的图片,场景的真实感非常有限。
作为VRML的补充,ISO/MPEG 正在联合企业制定新的标准来增强三维视频的真实感和交互性。例如在早期的MPEG-4标准中,使用者可在图像或比特流中选择一个具体的对象(Object),随后改变它的某些特性,提供将自然视频图像同合成数据(文本、图形)有效结合的方式,同时支持交互性操作。MPEG-4中的场景描述语言BIFS4规定了压缩的二进制格式,特别适合三维视频的在线传输和流化(组成流媒体数据)。最近的MPEG-4标准又对它进行了扩展,其中动画框架扩展AFX5对自然场景规定了新的格式,同时AFX也提供了新的工具来对自然图像中的场景对象使用表面光场和深度图像绘制技术进行建模等[4]。
本文从计算机图形学、计算机视觉和经典媒体的角度,结合ISO/MPEG的相关研究,对三维真实场景视频的建模、编码、绘制技术及相关的应用进行详细的分析和介绍。在本文的第二部分,根据应用场景的不同,首先对交互式三维视频进行分类,并介绍它们各自的特点;第三部分介绍交互式三维视频的表示技术,第四部分则对其编码方法进行了详细的介绍,最后给出交互式三维视频技术的一个典型应用 — 交互式全方位视频系统。 1
2 International Standard Organization's Moving Picture Expert Group(国际标准化组织的活动图片专家组) International Standard Organization,国际标准化组织/ International Electrotechnical Commission,国际电子技术委员会
3 Virtual Reality Modeling Language 4 Binary Format for Scenes 5 Animation Framework eXtension
而对于非平行相机阵列与非平行的终端人机交互模式,则具有许多不利的因素. 从单视点视频编码技术拓展而来,在结合了早期MPEG一2 MultiviewProfile三维视频编码技术的基 ...
面向创意设计的交互式协作三维建模技术_计算机软件及应用_IT/计算机_专业资料。...计算机辅助三维模型设计制作从原型创作到视频输出的过程大致可分成两大阶段:前期...
新闻网页贴吧知道音乐图片视频地图百科文库 搜 试试 帮助 全部 DOC PPT TXT PDF...技术实现交互式三维人脸动画濮摘 青要 徐 云合肥 230052) ( 中国科学技术大学...
三维动态显示真三维显示人机交互差分GPS三维视频压缩多路视频帧同步硕士论文_专业...三维动态显示技术研究 计算机科学与技术, 2010, 硕士 【摘要】 随着多媒体技术...
免费 三维图形程序设计基本算法 暂无评价 55页 8财富值 三维图形程序设计-第1章-绪... 34页 免费喜欢此文档的还喜欢 交互式三维视频技术 19页 免费 第六章...
新闻网页贴吧知道音乐图片视频地图百科文库 搜 试试 7 帮助 全部 DOC PPT TXT ...本文即研究三维交互技术及其在系统中的实现,特别是就本技术在桌面系统中的应 ...
纸质的文档、技术手册内容详细但 不能直观的展示相关信息,也容易引起歧义;一些视频介绍、三维动 画展示是个不错的选择, 但不能实现人机交互操作、 任务训练与考核...
新闻网页贴吧知道音乐图片视频地图百科文库 搜 试试 7 帮助 全部 DOC PPT TXT ... 道路工程网络三维交互式可视化关键技术及应用_建筑/土木_工程科技_专业资料。...
新闻网页贴吧知道音乐图片视频地图百科文库 搜 试试 7 帮助 全部 DOC PPT TXT ... 基于智能手机的三维交互技术研究_信息与通信_工程科技_专业资料。第2 5卷第 ...
新闻网页贴吧知道音乐图片视频地图百科文库 搜 试试 7 帮助 全部 DOC PPT TXT ... 实时交互行为三维动画的设计技术_IT/计算机_专业资料。实时交互行为三维动画是...
热门文档