Android 音视频开发(六) -- 从MediaProjection到VirtualDisplay：截屏与录屏的核心实现与性能优化

1. MediaProjection与VirtualDisplay的核心机制剖析第一次接触Android截屏录屏功能时我被MediaProjection这个看似神秘的API弄得一头雾水。直到在真实项目中踩过几次坑后才明白它本质上就是个屏幕内容抓取器。想象你举着手机对着电脑屏幕录像MediaProjection就是那个帮你把屏幕画面转换成数据流的系统级工具。申请录屏权限的流程比想象中简单。通过MediaProjectionManager发起请求后系统会弹出那个熟悉的红色边框授权弹窗。这里有个细节容易被忽略必须在onActivityResult里用resultCode和data两个参数才能正确获取MediaProjection实例。我见过有开发者只检查resultCode导致后续功能全部失效的案例。VirtualDisplay的创建才是真正的技术核心。这个虚拟显示器就像个中间商负责把系统渲染的内容重定向到我们指定的Surface。参数配置中有几个关键点分辨率建议使用displayMetrics获取物理尺寸densityDpi要保持与应用一致标志位VIRTUAL_DISPLAY_FLAG_AUTO_MIRROR能自动处理方向问题实测发现VirtualDisplay与Surface的绑定关系直接影响性能。如果Surface是来自ImageReader就是截屏场景如果是MediaRecorder的Surface就变成录屏功能。这种设计体现了Android架构的巧妙之处。2. 高质量截屏的实战技巧用ImageReader实现截屏时我最初以为和Camera2的用法完全一致结果被RGBA数据格式坑得不轻。与Camera的YUV不同MediaProjection输出的像素格式必须是PixelFormat.RGBA_8888。这个细节在官方文档里藏得很深没注意到的话会出现全绿屏的诡异现象。内存对齐问题更是个隐藏的性能杀手。在华为Mate系列设备上测试时发现生成的图片总是出现右侧花屏。通过分析Image.Plane的rowStride和pixelStride才发现某些厂商的设备会对显存做特殊对齐处理。解决方案是动态计算实际位图宽度int rowPadding rowStride - pixelStride * width; Bitmap bitmap Bitmap.createBitmap( width rowPadding / pixelStride, height, Bitmap.Config.ARGB_8888);实际项目中我建议添加自动重试机制。当acquireLatestImage()返回null时可以尝试适当增大ImageReader的maxImages参数延迟50ms后重新获取检查VirtualDisplay是否仍在运行图片保存还有个小技巧使用Bitmap.copyPixelsFromBuffer()后建议调用buffer.rewind()重置位置避免下次读取时出现偏移错误。3. 流畅录屏的性能优化之道MediaRecorder的配置参数直接影响录屏质量。经过反复测试我总结出这些黄金参数组合帧率25-30fps超过30会显著增加功耗比特率3-5Mbps1080P场景关键帧间隔2秒平衡文件大小和seek性能recorder.apply { setVideoEncoder(MediaRecorder.VideoEncoder.H264) setVideoEncodingBitRate(3 * 1024 * 1024) setVideoFrameRate(30) setVideoSize(width, height) }音频同步是个进阶难题。如果需要录制系统声音非麦克风在Android 10上需要额外申请CAPTURE_AUDIO_OUTPUT权限。更复杂的是音画同步问题我通常采用的时间戳补偿方案是记录第一帧的presentationTimeUs后续帧用System.nanoTime()做差值补偿设置MediaRecorder的maxDuration参数控制分段在OPPO设备上遇到过奇怪的卡顿问题后来发现是VirtualDisplay的帧率与MediaRecorder不匹配导致的。解决方法是通过反射设置VIRTUAL_DISPLAY_FLAG_PRESENTATION标志位并保持两者帧率严格一致。4. 高级应用与异常处理将录屏数据实时传输到网络是更复杂的场景。我的方案是用MediaCodec替代MediaRecorder核心流程包括配置MediaCodec为编码模式从Surface获取数据后立即编码用MediaMuxer封装成MP4或FLV通过WebSocket实时传输花屏问题有几种常见诱因颜色格式不匹配确保使用RGBA_8888内存对齐异常检查rowStride编码器初始化失败验证支持的参数组合有个容易忽略的内存泄漏点Image对象必须手动close。我习惯用try-with-resources语法确保资源释放try (Image image reader.acquireLatestImage()) { // 处理图像数据 }当应用切换到后台时系统会自动停止MediaProjection。正确处理方式是在onStop里主动停止录制保存当前状态重新回到前台时检查权限有效性必要时重新发起授权请求在小米设备上发现过虚拟显示器自动关闭的问题最终定位到是MIUI的省电策略导致的。解决方案是在创建VirtualDisplay时添加VIRTUAL_DISPLAY_FLAG_ALWAYS_UNLOCKED标志位并在设置中关闭针对应用的电池优化。