MediaPipe在Android WebView中视频模式失效的解决方案

问题背景

在使用MediaPipe进行人脸关键点检测和手势识别时，开发者发现了一个有趣的现象：在Android WebView环境中，当使用静态图片模式(IMAGE)时功能完全正常，但切换到视频流模式(VIDEO)后却无法正常工作。具体表现为摄像头可以正常开启，但无法检测到任何人脸或手势。

环境配置

该问题出现在以下环境中：

• 设备：iQOO Neo 3手机
• 操作系统：Android 12
• WebView版本：91.0.4472.144
• MediaPipe版本：0.10.15
• 使用技术：JavaScript实现的人脸关键点检测(FaceLandmarker)和手势识别(GestureRecognizer)

问题现象

开发者构建了一个Android WebView应用来运行MediaPipe的JavaScript示例。当使用图片模式时，点击图片可以正确识别并绘制关键点；但在视频模式下，虽然摄像头能够正常开启，却无法绘制任何连接线或关键点。日志显示recognizeForVideo方法返回的结果中不包含任何人脸数据。

技术分析

在Android WebView中运行WebAssembly(WASM)应用时，需要注意特殊的加载方式。传统的file://协议存在安全限制，正确的做法是使用WebViewAssetLoader并通过https://appassets.androidplatform.net/assets/这样的URL来加载本地资源。

解决方案

经过排查，发现问题的根源在于WebView版本过低。当将"Android System WebView"从91.0.4472.144升级到最新的128.0.6613.127版本后，视频模式开始正常工作。

经验总结

1. 在Android WebView中运行MediaPipe等依赖WASM的技术时，务必注意WebView的版本兼容性
2. 对于涉及摄像头访问和实时处理的Web应用，较新的WebView版本通常能提供更好的支持
3. 资源加载方式对WASM应用的运行至关重要，应优先使用WebViewAssetLoader而非直接文件访问

最佳实践建议

1. 在开发类似应用时，建议将最低支持的WebView版本设置为较新的稳定版
2. 对于关键功能，应实现版本检测和友好的降级处理
3. 在应用启动时检查WebView版本，必要时提示用户升级
4. 考虑在应用中集成WebView更新功能，确保运行环境符合要求

这个问题展示了移动端Web技术栈中版本兼容性的重要性，特别是在使用前沿技术如MediaPipe时，保持运行环境的最新状态往往是解决问题的关键。