ios – 从ARKit获取RGB“CVPixelBuffer”

概述我正试图从Apple的ARKit获得RGB色彩空间的CVPixelBuffer.在ARSessionDelegate的func session(_ session：ARSession,didUpdate frame：ARFrame)方法中,我得到了ARFrame的一个实例.在页 Displaying an AR Experience with Metal我发现此像素缓冲区在YCbCr(YUV)颜色 我正试图从Apple的ARKit获得RGB色彩空间的CVPixelBuffer.在ARSessionDelegate的func session(_ session：ARSession,dIDUpdate frame：ARFrame)方法中,我得到了ARFrame的一个实例.在页 Displaying an AR Experience with Metal我发现此像素缓冲区在ycbcr(YUV)颜色空间.

我需要将其转换为RGB颜色空间(我实际上需要CVPixelBuffer而不是UIImage).我在iOS上找到了关于颜色转换的something但我无法在Swift 3中使用它.

解决方法 有几种方法可以做到这一点,取决于你所追求的.实时执行此 *** 作的最佳方法(比如,将缓冲区渲染到视图)是使用自定义着色器将ycbcr CVPixelBuffer转换为RGB.

使用金属：
如果您创建一个新项目,选择“增强现实应用程序”,并为内容技术选择“金属”,生成的项目将包含进行此转换所需的代码和着色器.

使用OpenGL：
Apple的GLCameraRipple example使用AVCaptureSession捕获相机,并显示如何将生成的CVPixelBuffer映射到GL纹理,然后在着色器中将其转换为RGB(同样,在示例中提供).

非实时：
this stackoverflow question的答案解决了将缓冲区转换为UIImage的问题,并提供了一种非常简单的方法.

总结

以上是内存溢出为你收集整理的ios – 从ARKit获取RGB“CVPixelBuffer”全部内容，希望文章能够帮你解决ios – 从ARKit获取RGB“CVPixelBuffer”所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错，欢迎将内存溢出网站推荐给程序员好友。