
前面十三篇文章介绍了Kinect SDK开发中的各个方面的最基础的知识。正如本系列博闻标题那样,这些知识只是Kinect for windows SDK开发的入门知识。本文将会介绍Kinect进阶开发需要了解一些知识(beyond the basic)。
读者可能会注意到,在学习了前面十三篇文章中关于Kinect开发的方方面面,如影像数据流、景深摄像机、骨骼追踪、麦克风阵列、语音识别等这些知识后,离开发出一些我们在网上看到的那些具有良好用户体验的Kinect应用程序还是显得捉襟见肘。Kinect SDK在某种意义上只是提供了一些其它Kinect类库的相同或者更好的功能。为了进一步提高Kinect for Windows应用程序的应用体验,我们需要了解一些其他的和Kinect有关的开发技术和类库。Kinect的真正应用潜力是和其他技术进行整合。
本文将会介绍一些第三方类库如何来帮助处理Kinect传感器提供的数据。使用不同的技术进行Kinect开发,可以发掘出Kinect应用的强大功能。另一方面如果不使用这些为了特定处理目的而开发的一些类库,而是自己实现这些逻辑的话,代码可能会比较混乱和不稳定。本文只是简单的介绍这些第三方类库并给以适当的引导。Kinect开发最大的困难不是什么技术,而是知道什么样技术能够被用到Kinect开发中。一旦了解了什么技术能够使用,Kinect可能开发的应用就会出现巨大的潜力。
本文中介绍的一些技术可能覆盖面不够广,有可能有些类库很重要但是本文没有涉及到,Kinect开发方面的技术变化的非常快,这一点也难以避免,欢迎大家能够补充。但是通过介绍一些基本的帮助类库,图像处理类库等,希望大家了解到这些技术的重要性以及对Kinect开发的作用。可能随着技术的发展,这些类库可能有些变化,但是相关的技术领域相信还是一样的,本文只是起到一个抛砖引玉的作用。
本文及下篇文章将会介绍几个有用的工具及类库,包括Coding4Fun Kinect Toolkit,Emgu(OpenCV计算机视觉库的C#版本)和Blender。只是非常简单的介绍了Unity 3D游戏框架,FAAST手势识别中间件以及Microsoft Robotics Developer Studio。这些知识如果大家感兴趣的话可能要花一定的精力去了解和掌握,这里只是简单介绍。
1. 影像处理帮助类
有很多影像处理相关的类库可以使用。单单在.NET Framework中,就有PresentationCore.dll中的
System.Windows.Media.Drawing抽象类以及System.Drawing.dll中System.Drawing命名空间下的类可以使用。更复杂的是,在System.Windows和System.Drawing命名空间下有一些相互独立的处理形状(shape)和颜色(color)的类。有时候一个类库中的方法能够进行一些图像处理而其它类库中却没有类似的方法。为了方便,各种图形对象之间的转换显得很有必要。
当引入Kinect后,情况变得更加复杂。Kinect有自己的影像数据流,如ImageFrame。为了能够使Kinect这些专有的影像对象能够和WPF一同使用,ImageFrame对象必须转换为ImageSource类型,该对象在System.Windows.Media.Imaging命名空间中。第三方影像处理库并不知道System.Windows.Media命名空间中的对象,但是知道System.Drawing命名空间,为了能够使用Emgu处理Kinect中产生的数据,需要将Microsoft.Kinect中的某些数据类型转化为System.Drawing类型,然后将System.Drawing类型转换到Emgu中的类型,在Emgu中处理完之后,再转换回System.Drawing类型,最后再转换为System.Windows.Media类型来共WPF使用。
1.1 Coding4Fun Kinect工具类
Coding4Fun Kinect Toolkit为将一些类型从一种类库转换到其他类库中的对应类型的提供了一些便利。这个工具集可以从该开源工具集官网 doc.guandang.net 上下载。它包括3个独立的dll。其中Coding4Fun.Kinect.Wpf.dll提供了一系列扩展方法来在Microsoft.Kinect和System.Windows.Media之间进行转换。而Coding4Fun.Kinect.WinForm.dll提供了一系列扩展方法来在Microsoft.Kinect和System.Drawing之间进行转换。System.Drawing是.NET图形库中的dll。他包含了WinForm中用来进行绘图和展现所需的元素,而WPF中所需要的展现元素包含在System.Windows.Media中。
遗憾的是Coding4Fun Kinect Toolkit并没有提供在System.Drawing命名空间和System.Windows.Media命名空间之间对应对象的转换方法。这是因为Toolkit的最初目的是方便简单的编写Kinect Demo程序而不是提供一个通用的在不同的图像类型之间进行
Kinect for Windows SDK开发入门(十五):进阶指引 下_计算机软件及应用_IT/计算机_专业资料。[译]Kinect for Windows SDK 开发入门(十五):进阶指引 下 上一篇...
Kinect for Windows SDK 开发入门十四进阶指引 上 影像处理帮助类 Coding4Fun Kinect 工具类 创建自己的扩展方法库 创建一个 WPF 项目 创建类及扩展方法 创建其它的...
[译]Kinect for Windows SDK 开发入门(八):骨骼追踪进阶 上前 7 篇文件我们介绍了 Kinect SDK 中各种传感器的各种基本知识,我们用实验的方式演示了这些基本对象...
Kinect for Windows SDK开发入门(九):骨骼追踪进阶 下_计算机软件及应用_IT/计算机_专业资料。[译]Kinect for Windows SDK 开发入门(九):骨骼追踪进阶 下 1....
[译]Kinect for Windows SDK 开发入门(十八):Kinect Interaction 交互控件 http://www.cnblogs.com/yangecnu/p/KinectSDK_KinectInteraction_Controls.html 本文译...
[译]Kinect for Windows SDK 开发入门(十三):语音识别 下 上一篇文章介绍了 Kinect 中语音识别的基本概念,以及一些语音处理方面的术语。在此基础上使用 Kinect ...
[译]Kinect for Windows SDK 开发入门(二):基础知识 上 上篇文章介绍了 Kinect 开发的环境配置,这篇文章和下一篇文章将介绍 Kinect 开发的基本知识,为深入研究 ...
[译]Kinect for Windows SDK 开发入门(一):开发环境配置前几天无意中看到微软发布了 Kinect for windows sensor,进去看了一下 Kinect 应用的例子,发现 Kinect ...
Kinect for Windows SDK开发入门(四):景深数据处理 上_计算机软件及应用_IT/计算机_专业资料。[译]Kinect for Windows SDK 开发入门(四):景深数据处理 上 ...
Kinect for Windows SDK开发入门(三):基础知识 下_计算机软件及应用_IT/计算机_专业资料。[译]Kinect for Windows SDK 开发入门(三):基础知识 下 1. 性能...
热门文档