将 AndroidX 相机与 MLKit 一起使用时，inputImage.getByteBuffer() 为 null

问题描述

这是来自我的 Activity 类的代码：

    @Override protected void onCreate(Bundle savedInstanceState)
    {
        requestwindowFeature(Window.FEATURE_NO_TITLE);
        super.onCreate(savedInstanceState);

        _cpf = ProcessCameraProvider.getInstance(this);
        _cpf.addListener(new Runnable() {
            @Override
            public void run() {
                try {
                    ProcessCameraProvider cameraProvider = _cpf.get();
                    bindImageAnalysis(cameraProvider);
                } catch (ExecutionException | InterruptedException e) {
                    e.printstacktrace();
                }
            }
        },ContextCompat.getMainExecutor(this));
    }

    private void bindImageAnalysis(@NonNull ProcessCameraProvider cameraProvider) {
        ImageAnalysis imageAnalysis =
                new ImageAnalysis.Builder().setTargetResolution(new Size(640,360))
                        .setBackpressureStrategy(ImageAnalysis.STRATEGY_KEEP_ONLY_LATEST).build();
        imageAnalysis.setAnalyzer(ContextCompat.getMainExecutor(this),new ImageAnalysis.Analyzer() {
            @Override
            public void analyze(@NonNull ImageProxy ip) {
                processImage(ip.getimage(),ip.getimageInfo().getRotationdegrees());
                ip.close();
            }
        });
        CameraSelector cameraSelector = new CameraSelector.Builder().requireLensFacing(CameraSelector.LENS_FACING_BACK).build();
        cameraProvider.bindToLifecycle((LifecycleOwner)this,cameraSelector,imageAnalysis);
    }

在每个 analyze 回调中，MLKit 指示 Inputimage.fromMediaimage(ip.getimage(),ip.getimageInfo().getRotationdegrees()).getByteBuffer() 为空。我应该如何解释这个？这是否总是意味着图像为空？

解决方法

inputImage.getByteBuffer() 是一个内部方法，不是为公共使用而设计的。只有当您使用字节缓冲区或字节数组来构造图像时，此方法才会返回。如果您需要使用 android 媒体图像中的字节缓冲区，则需要自己进行转换。

此外，我们对 Firebase ML Kit 进行了一些更改，以更好地区分设备上的 API 和基于云的 API。 “ML Kit”（不带 firebase 品牌）包含所有设备上的 API。 Here's 从 firebase mlkit 到 mlkit 的迁移指南。所有进一步的改进和新的 API 将仅与新的 ML Kit 一起发布。

,

问题在于我过早地.close()ng。 PoseDetector 处理是异步的，因此在 processImage 之后立即调用 ip.close()。当调用 ip.close() 时，processImage 仍在工作，所以这就是 Attempt to invoke virtual method 'java.nio.ByteBuffer android.media.Image$Plane.getBuffer() 背后的原因。不应在 .close() 方法中使用 analyze，而应在 OnSuccessListener 或 OnSuccessListener 的末尾调用它。

这是完整的example。