Android 高速视频录制中实现帧级实时分析的正确方法

冬雪酱_6443

冬雪酱_6443

2026-10-20

463人浏览

原创

Android 高速视频录制中实现帧级实时分析的正确方法

在使用 camera2 constrainedhighspeedcapturesession 进行 120fps 视频录制时,无法通过 imagereader 获取预览帧——因其仅支持预览(surfaceview/surfacetexture)或录制(mediarecorder/mediacodec)两类 surface,而 imagereader 不在此列。

在使用 camera2 constrainedhighspeedcapturesession 进行 120fps 视频录制时,无法通过 imagereader 获取预览帧——因其仅支持预览(surfaceview/surfacetexture)或录制(mediarecorder/mediacodec)两类 surface,而 imagereader 不在此列。

Android 的 CameraConstrainedHighSpeedCaptureSession 是专为高帧率(如 120FPS)视频录制设计的受限会话模式。正如其名,“constrained” 意味着它对输出 Surface 类型有严格限制:仅允许最多两个 Surface,且必须是以下之一:

  • 预览用 Surface:来自 SurfaceView 或 SurfaceTexture
  • 录制用 Surface:来自 MediaRecorder.getSurface() 或 MediaCodec.createInputSurface()

因此,你当前尝试通过 ImageReader.newInstance(...) 创建 YUV 帧接收器并将其作为 Target Surface 添加到高速会话中,将必然失败,并抛出类似 Surface is not supported 的异常——因为 ImageReader.getSurface() 明确不在白名单内。

✅ 正确可行的替代方案是:利用 SurfaceTexture 实现 GPU 端帧级分析

SurfaceTexture 允许你将相机输出渲染至 OpenGL ES 纹理,从而在不阻塞高速流水线的前提下,以低延迟方式访问每一帧(通过 onFrameAvailable() 回调触发)。典型流程如下:

Android Remote Control
Android Remote Control

远程控制 Android 设备,支持截图、自动化操作手机 App 等功能。本应用使用 uiautomator2 作为底层框架,通过 ADB 连接设备,用户无需 Root(1)查看手机屏幕;(2)自动化操作手机 App;(3)远程安装/卸载应用……

下载
private lateinit var surfaceTexture: SurfaceTexture
private val textureId = IntArray(1)

// 1. 创建 OpenGL 纹理
GLES20.glGenTextures(1, textureId, 0)
surfaceTexture = SurfaceTexture(textureId[0]).apply {
    setDefaultBufferSize(previewSize.width, previewSize.height)
    setOnFrameAvailableListener { 
        // ✅ 每帧到达时回调(注意:需在 GL 线程中 updateTexImage())
        handler.obtainMessage(MSG_UPDATE_TEXTURE).sendToTarget()
    }
}

// 2. 将 SurfaceTexture 传入高速会话(合法!)
val previewSurface = surfaceTexture.surface
val recordingSurface = mediaRecorder.surface // 或 MediaCodec 输入 Surface

cameraDevice.createConstrainedHighSpeedCaptureSession(
    listOf(previewSurface, recordingSurface),
    object : CameraCaptureSession.StateCallback() { /* ... */ },
    backgroundHandler
)

⚠️ 注意事项:

  • SurfaceTexture.updateTexImage() 必须在绑定该纹理的 OpenGL 上下文线程中调用(不可在主线程或任意 Handler 线程直接执行),建议使用 HandlerThread + EGLContext 构建专用 GL 线程;
  • 若需 CPU 端图像数据(如 OpenCV 处理),可在 GL 线程中调用 glReadPixels() 同步读取,但会显著增加 GPU-CPU 同步开销,可能影响 120FPS 稳定性;
  • 避免在 onFrameAvailable 中执行耗时操作(如 JNI 计算、内存拷贝),应仅作信号通知,将分析逻辑异步分发至工作线程;
  • CameraX 当前(截至 AndroidX Camera 1.3)确实不支持 Constrained High Speed 模式,故 Camera2 是唯一可选路径。

? 总结:不要尝试绕过约束强行注入 ImageReader;拥抱 SurfaceTexture + GPU 流水线,是兼顾性能与灵活性的工程最优解。如需进一步降低延迟,可结合 AHardwareBuffer 和 Vulkan(Android 10+)实现零拷贝纹理共享。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

android

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
android开发三大框架
android开发三大框架

android开发三大框架是XUtil框架、volley框架、ImageLoader框架。本专题为大家提供android开发三大框架相关的各种文章、以及下载和课程。

2023.08.14

902

4

android是什么系统
android是什么系统

Android是一种功能强大、灵活可定制、应用丰富、多任务处理能力强、兼容性好、网络连接能力强的操作系统。本专题为大家提供android相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.22

2667

5

android权限限制怎么解开
android权限限制怎么解开

android权限限制可以使用Root权限、第三方权限管理应用程序、ADB命令和Xposed框架解开。详细介绍:1、Root权限,通过获取Root权限,用户可以解锁所有权限,并对系统进行自定义和修改;2、第三方权限管理应用程序,用户可以轻松地控制和管理应用程序的权限;3、ADB命令,用户可以在设备上执行各种操作,包括解锁权限;4、Xposed框架,用户可以在不修改系统文件的情况下修改应用程序的行为和权限。

2023.09.19

5137

7

android重启应用的方法有哪些
android重启应用的方法有哪些

android重启应用有通过Intent、PendingIntent、系统服务、Runtime等方法。本专题为大家提供Android相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

665

5

Android语音播放功能实现方法
Android语音播放功能实现方法

实现方法有使用MediaPlayer实现、使用SoundPool实现两种。可以根据具体的需求选择适合的方法进行实现。想了解更多语音播放的相关内容,可以阅读本专题下面的文章。

2024.03.01

964

5

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

2026.10.16

60

10

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

2026.10.16

40

10

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

2026.10.16

40

10

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

2026.10.16

20

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Excel 教程
Excel 教程

共162课时 | 44.4万人学习

Java 教程
Java 教程

共578课时 | 192.4万人学习

Uniapp从零开始实现新闻资讯应用
Uniapp从零开始实现新闻资讯应用

共64课时 | 9.6万人学习