音视频开发：为什么推荐使用Jetpack CameraX？

最新推荐文章于 2024-08-28 09:49:01 发布
最新推荐文章于 2024-08-28 09:49:01 发布
阅读量764 收藏 23
点赞数 17
分类专栏： 程序员 文章标签： 音视频
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83641443/article/details/138729813
版权
图像预览

可以说十几行就可以完成。和Camera2一样需要展示预览的控件PreviewView到布局上，并确保获得了camera权限。差异的地方主要体现在相机的配置步骤上。

private void setupCamera(PreviewView previewView) {

ListenableFuture cameraProviderFuture =

ProcessCameraProvider.getInstance(this);

cameraProviderFuture.addListener(() -> {

try {

mCameraProvider = cameraProviderFuture.get();

bindPreview(mCameraProvider, previewView);

} catch (ExecutionException | InterruptedException e) {

e.printStackTrace();

}

}, ContextCompat.getMainExecutor(this));

}

private void bindPreview(@NonNull ProcessCameraProvider cameraProvider,

PreviewView previewView) {

mPreview = new Preview.Builder().build();

mCamera = cameraProvider.bindToLifecycle(this,

CameraSelector.DEFAULT_BACK_CAMERA, mPreview);

mPreview.setSurfaceProvider(previewView.getSurfaceProvider());

}

图像预览

镜头切换

如果想要切换镜头，只要将目标镜头的CameraSelector示例绑定到CameraProvider即可。我们在画面上添加按钮以切换镜头。

public void onChangeGo(View view) {

if (mCameraProvider != null) {

isBack = !isBack;

bindPreview(mCameraProvider, binding.previewView);

}

}

private void bindPreview(@NonNull ProcessCameraProvider cameraProvider,

PreviewView previewView) {

…

CameraSelector cameraSelector = isBack ? CameraSelector.DEFAULT_BACK_CAMERA
CameraSelector.DEFAULT_FRONT_CAMERA;

// 绑定前确保解除了所有绑定，防止CameraProvider重复绑定到Lifecycle发生异常

cameraProvider.unbindAll();

mCamera = cameraProvider.bindToLifecycle(this, cameraSelector, mPreview);

…

}

镜头切换

镜头聚焦

无法聚焦的拍摄是不完整的，我们监听Preview的触摸事件将触摸坐标告知CameraX开始聚焦。

protected void onCreate(@Nullable Bundle savedInstanceState) {

…

binding.previewView.setOnTouchListener((v, event) -> {

FocusMeteringAction action = new FocusMeteringAction.Builder(

binding.previewView.getMeteringPointFactory()

.createPoint(event.getX(), event.getY())).build();

try {

showTapView((int) event.getX(), (int) event.getY());

mCamera.getCameraControl().startFocusAndMetering(action);

}…

});

}

private void showTapView(int x, int y) {

PopupWindow popupWindow = new PopupWindow(ViewGroup.LayoutParams.WRAP_CONTENT,

ViewGroup.LayoutParams.WRAP_CONTENT);

ImageView imageView = new ImageView(this);

imageView.setImageResource(R.drawable.ic_focus_view);

popupWindow.setContentView(imageView);

popupWindow.showAsDropDown(binding.previewView, x, y);

binding.previewView.postDelayed(popupWindow::dismiss, 600);

binding.previewView.playSoundEffect(SoundEffectConstants.CLICK);

}

镜头聚焦

除了图像预览以外还有很多其他使用场景，比如图像拍摄，图像分析和视频录制。CameraX将这些使用场景统一抽象为UseCase，它有四个子类，分别为Preview，ImageCapture，ImageAnalysis和VideoCapture。接下来介绍下它们如何使用。

图像拍摄

借助ImageCapture提供的takePicture()可以将图像拍摄下来。支持保存到外部存储空间，当然需要获得external storage的读写权限。

private void takenPictureInternal(boolean isExternal) {

final ContentValues contentValues = new ContentValues();

contentValues.put(MediaStore.MediaColumns.DISPLAY_NAME, CAPTURED_FILE_NAME

  • “_” + picCount++);

contentValues.put(MediaStore.MediaColumns.MIME_TYPE, “image/jpeg”);

ImageCapture.OutputFileOptions outputFileOptions =

new ImageCapture.OutputFileOptions.Builder(

getContentResolver(),

MediaStore.Images.Media.EXTERNAL_CONTENT_URI, contentValues)

.build();

if (mImageCapture != null) {

mImageCapture.takePicture(outputFileOptions, CameraXExecutors.mainThreadExecutor(),

new ImageCapture.OnImageSavedCallback() {

@Override

public void onImageSaved(@NonNull ImageCapture.OutputFileResults outputFileResults) {

Toast.makeText(DemoActivityLite.this, “Picture got”

  • (outputFileResults.getSavedUri() != null
? " @ " + outputFileResults.getSavedUri().getPath()
“”) + “.”, Toast.LENGTH_SHORT)

.show();

}

…

});

}

}

private void bindPreview(@NonNull ProcessCameraProvider cameraProvider,

PreviewView previewView) {

…

mImageCapture = new ImageCapture.Builder()

.setTargetRotation(previewView.getDisplay().getRotation())

.build();

…

// 需要将ImageCapture场景一并绑定

mCamera = cameraProvider.bindToLifecycle(this, cameraSelector, mPreview, mImageCapture);

…

}

图像拍摄

图像分析

图像分析指的是对预览的图像实时分析，将色彩，内容等信息识别出来，应用在机器学习，二维码识别等业务场景。继续对demo做些改造，添加扫描二维码的按钮。点击按钮后进入扫码模式，并在二维码解析成功后弹出解析结果。

public void onAnalyzeGo(View view) {

if (!isAnalyzing) {

mImageAnalysis.setAnalyzer(CameraXExecutors.mainThreadExecutor(), image -> {

analyzeQRCode(image);

});

}

…

}

// 从ImageProxy取出图像数据，交由二维码框架zxing解析

private void analyzeQRCode(@NonNull ImageProxy imageProxy) {

ByteBuffer byteBuffer = imageProxy.getPlanes()[0].getBuffer();

byte[] data = new byte[byteBuffer.remaining()];

byteBuffer.get(data);

…

BinaryBitmap bitmap = new BinaryBitmap(new HybridBinarizer(source));

Result result;

try {

result = multiFormatReader.decode(bitmap);

}

…

showQRCodeResult(result);

imageProxy.close();

}

private void showQRCodeResult(@Nullable Result result) {

if (binding != null && binding.qrCodeResult != null) {

binding.qrCodeResult.post(() ->

binding.qrCodeResult.setText(result != null ? “Link:\n” + result.getText() : “”));

binding.qrCodeResult.playSoundEffect(SoundEffectConstants.CLICK);

}

}

图像分析

视频录制

依托VideoCapture的startRecording()可以进行视频录制。在demo上添加一个图像拍摄和视频录制模式的切换按钮，切换到视频录制模式的时候将视频拍摄的UseCase綁定到CameraProvider。

public void onVideoGo(View view) {

bindPreview(mCameraProvider, binding.previewView, isVideoMode);

}

private void bindPreview(@NonNull ProcessCameraProvider cameraProvider,

PreviewView previewView, boolean isVideo) {

…

mVideoCapture = new VideoCapture.Builder()

.setTargetRotation(previewView.getDisplay().getRotation())

.setVideoFrameRate(25)

.setBitRate(3 * 1024 * 1024)

.build();

cameraProvider.unbindAll();

if (isVideo) {

mCamera = cameraProvider.bindToLifecycle(this, cameraSelector,

mPreview, mVideoCapture);

} else {

mCamera = cameraProvider.bindToLifecycle(this, cameraSelector,

mPreview, mImageCapture, mImageAnalysis);

}

mPreview.setSurfaceProvider(previewView.getSurfaceProvider());

}

点击录制按钮后首先确保获得外部存储和audio权限，之后再开始视频的录制。

public void onCaptureGo(View view) {

if (isVideoMode) {

if (!isRecording) {

// Check permission first.

ensureAudioStoragePermission(REQUEST_STORAGE_VIDEO);

}

}

…

}

private void ensureAudioStoragePermission(int requestId) {

…

if (requestId == REQUEST_STORAGE_VIDEO) {

if (ActivityCompat.checkSelfPermission(this, Manifest.permission.WRITE_EXTERNAL_STORAGE)

!= PackageManager.PERMISSION_GRANTED

|| ActivityCompat.checkSelfPermission(this, Manifest.permission.RECORD_AUDIO)

!= PackageManager.PERMISSION_GRANTED) {

ActivityCompat.requestPermissions(…);

return;

}

recordVideo();

}

}

private void recordVideo() {

try {

mVideoCapture.startRecording(

new VideoCapture.OutputFileOptions.Builder(getContentResolver(),

MediaStore.Video.Media.EXTERNAL_CONTENT_URI, contentValues)

.build(),

CameraXExecutors.mainThreadExecutor(),

new VideoCapture.OnVideoSavedCallback() {

@Override

public void onVideoSaved(@NonNull VideoCapture.OutputFileResults outputFileResults) {

// Notify user…

}

}

);

}

…

toggleRecordingStatus();

}

private void toggleRecordingStatus() {

// Stop recording when toggle to false.

if (!isRecording && mVideoCapture != null) {

mVideoCapture.stopRecording();

}

}

小插曲

实现视频录制功能的时候发现一个问题。

点击视频录制按钮的时候，如果此刻尚未获得audio权限，那么将申请该权限。即便此后获得了权限调用拍摄接口仍将发生异常。日志显示AudioRecorder实例为null引发了NPE。

仔细查看相关逻辑发现，demo现在的处理是在切换为视频录制模式的时候，就将VideoCapture绑定到了CameraProvider。这个时间点如果还未获得audio权限的话，那么将无法初始化AudioRecorder。其实日志里也会给出相应提示：VideoCapture: AudioRecord object cannot initialized correctly。

可是后面获得了权限再去调用VideoCapture的拍摄接口为何还是会发生NPE?

因为拍摄接口startRecording()的内部处理是AudioRecorder实例为null的话将直接终止请求。后面无论调用多少遍也无济于事。事实上该函数的后段存在再次获取AudioRecorder实例的逻辑，但因为前面发生了NPE而没有机会执行。

// VideoCapture.java

public void startRecording(

@NonNull OutputFileOptions outputFileOptions, @NonNull Executor executor,

@NonNull OnVideoSavedCallback callback) {

…

try {

// mAudioRecorder为null将引发NPE终止录制的请求

mAudioRecorder.startRecording();

} catch (IllegalStateException e) {

postListener.onError(ERROR_ENCODER, “AudioRecorder start fail”, e);

return;

}

…

mRecordingFuture.addListener(() -> {

…

if (getCamera() != null) {

// 前面发生了NPE,那么将失去此处再次获得AudioRecorder实例的机会

setupEncoder(getCameraId(), getAttachedSurfaceResolution());

notifyReset();

}

}, CameraXExecutors.mainThreadExecutor());

…

}

不知道这是VideoCapture实现上的漏洞还是开发者有意为之。但是在明明已经获得了audio权限的情况下调用录製接口却仍然发生NPE貌似并不合理。

当下只能采取一些回避方案，或者说开发者本该就这么做？

现在是在获得了audio权限前执行了VideoCapture的绑定，这存在发生上述反复NPE的可能。所以改成获得audio权限后再绑定VideoCapture即可回避。

话说回来，在VideoCaptue的文档里加上需要获得audio的权限的说明是不是更好一些呢？

相机效果扩展

光有上述几个场景的使用并不能满足日益丰富的拍摄需求，人像，夜拍，美颜等相机效果是必不可少的。幸好CameraX是支持效果扩展的。但不是所有设备都能兼容这种扩展，具体可在官网的设备兼容列表里查询到。

可供扩展的效果主要分为两大类，一个是用于图像预览时效果扩展的PreviewExtender，另一个是用于图像拍摄时效果扩展的ImageCaptureExtender。

每个大类都包含几个典型的效果。

  • NightPreviewExtender 夜拍预览

  • BokehPreviewExtender　人像预览

  • BeautyPreviewExtender 美顔预览

  • HdrPreviewExtender HDR预览

  • AutoPreviewExtender 自动预览

开启这些效果的实现也非常简单。

private void bindPreview(@NonNull ProcessCameraProvider cameraProvider,

PreviewView previewView, boolean isVideo) {

Preview.Builder previewBuilder = new Preview.Builder();

ImageCapture.Builder captureBuilder = new ImageCapture.Builder()

.setTargetRotation(previewView.getDisplay().getRotation());

…

setPreviewExtender(previewBuilder, cameraSelector);

mPreview = previewBuilder.build();

setCaptureExtender(captureBuilder, cameraSelector);

mImageCapture = captureBuilder.build();

…

}

private void setPreviewExtender(Preview.Builder builder, CameraSelector cameraSelector) {

BeautyPreviewExtender beautyPreviewExtender = BeautyPreviewExtender.create(builder);

if (beautyPreviewExtender.isExtensionAvailable(cameraSelector)) {

// Enable the extension if available.

beautyPreviewExtender.enableExtension(cameraSelector);

}

}

private void setCaptureExtender(ImageCapture.Builder builder, CameraSelector cameraSelector) {

学习分享，共勉

Android高级架构师进阶之路

题外话，我在阿里工作多年，深知技术改革和创新的方向，Android开发以其美观、快速、高效、开放等优势迅速俘获人心，但很多Android兴趣爱好者所需的进阶学习资料确实不太系统，完整。今天我把我搜集和整理的这份学习资料分享给有需要的人

  • Android进阶知识体系学习脑图

  • Android进阶高级工程师学习全套手册

  • 对标Android阿里P7，年薪50w+学习视频

  • 大厂内部Android高频面试题，以及面试经历


《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》，点击传送门，即可获取！
xtender.enableExtension(cameraSelector);

}

}

private void setCaptureExtender(ImageCapture.Builder builder, CameraSelector cameraSelector) {

学习分享，共勉

Android高级架构师进阶之路

题外话，我在阿里工作多年，深知技术改革和创新的方向，Android开发以其美观、快速、高效、开放等优势迅速俘获人心，但很多Android兴趣爱好者所需的进阶学习资料确实不太系统，完整。今天我把我搜集和整理的这份学习资料分享给有需要的人

  • Android进阶知识体系学习脑图

[外链图片转存中…(img-ly5JG6t7-1715432340558)]

  • Android进阶高级工程师学习全套手册

[外链图片转存中…(img-PNn7d2D3-1715432340559)]

  • 对标Android阿里P7，年薪50w+学习视频

[外链图片转存中…(img-xYHhuELH-1715432340560)]

  • 大厂内部Android高频面试题，以及面试经历

[外链图片转存中…(img-8xOzZvn5-1715432340560)]
《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》，点击传送门，即可获取！

2401_83641443
关注
专栏目录
最新版CameraX入门(拍照、存储展示、切换前后摄像头、手电筒、闪光灯、手势伸缩、双击放大缩小)
重学Android，保持学习
04-22 1万+
基于官网demo，增加了对焦、手势缩放、手电、闪光灯等操作 Camera的预备知识 熟悉的大佬可以跳过 Surface、SurfaceView、SurfaceHolder这三个是啥 Surface是什么？一句话来说Surface 是一块用于填充图像数据的内存空间。 可以再深入一点，了解下它包含的东西: SurfaceView是什么？一句话来描述的话那就是:它一个可以显示surface的view！在App端它仍在View hierachy中，但在WMS中(可以理解为Server端），它与宿主窗口是分.
为什么推荐使用Jetpack CameraX？，移动端开发基础
m0_66264881的博客
01-22 935
getContentResolver(), MediaStore.Images.Media.EXTERNAL_CONTENT_URI, contentValues) .build(); if (mImageCapture != null) { mImageCapture.takePicture(outputFileOptions, CameraXExecutors.mainThreadExecutor(), new ImageCapture.OnImageSavedCallback() { @Overrid
Jetpack学习系列（一）为什么要用jetpack
snack23的博客
05-09 579
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。 二、使用步骤 1.引入库 代.
Android jetpack介绍和为什么要使用
qq_15596445的博客
05-21 385
Jetpack 是 Google 为解决 Android 开发碎片化，打造成熟健康生态圈提出的战略规划，是 Google 对 Android 未来提出的发展方向，同时它也是众多优秀 Android 组件的集合。Jetpack 是一个由多个库组成的套件，可帮助开发者遵循最佳做法，减少样板代码并编写可在各种 Android 版本和设备中一致运行的代码，让开发者精力集中编写重要的代码。Data Binding(数据绑定)：数据绑定库是一种支持库，借助该库，可以使用声明式将布局中的界面组件绑定到应用中的数据源。
什么是 Android Jetpack，我们为什么要使用它？
Misdirection_XG的博客
07-27 222
AndroidJetpack是一组Android软件组件，可帮助我们构建出色的Android应用程序。遵循最佳实践并编写样板代码。让复杂的事情变得非常简单。管理活动生命周期。幸存的配置更改。防止内存泄漏。AndroidJetpack的软件组件解决了所有这些主要问题。因此，所有问题的解决方案都是AndriodJetpack。关于Jetpack的另一个最重要的事情是它比Android平台更新更频繁，因此我们总是能获得最新版本。...
Jetpack Compose 中使用 CameraX 拍照和录制视频
川峰的博客
06-14 3702
在 Android 开发的历史中，Camera 的 API 是一直受人诟病的，直观的感觉就是配置复杂、臃肿、难用、不易理解，官方也在尝试着不断改进开发者关于Camera的使用体验，Camera 的 API 截止目前经历了 Camera（已废弃）、Camera2、CameraX 三个版本。 初代 Camera API从 5.0 开始已经宣布废弃，而 Camera2 的 API 特别难用，所以就有了 CameraX ，本文主要探索如何在 Jetpack Compose 中使用 CameraX。
android camera拍照简书,【Android】使用CameraX实现拍照和录制视频
weixin_42372510的博客
05-27 1106
AndroidX是Jetpack包下的组件，谷歌帮你考虑好了很多细节，用就完事了。这些细节想自己设置的话也可以，不设置使用默认值照样很舒服。导包implementation "androidx.camera:camera-camera2:1.0.0-beta07"implementation "androidx.camera:camera-view:1.0.0-alpha14"implementa...
CameraX 概览
白云天的博客
11-22 1541
CameraX 是一个 Jetpack 支持库，旨在帮助您简化相机应用的开发工作。它提供一致且易于使用的 API 界面，适用于大多数 Android 设备，并可向后兼容至 Android 5.0（API 级别 21）。 虽然它利用的是 camera2 的功能，但使用的是更为简单且基于用例的方法，该方法具有生命周期感知能力。它还解决了设备兼容性问题，因此您无需在代码库中包含设备专属代码。这些功能减...
android摄像头图像增强,Android Camera-CameraView和CameraX使用
weixin_29182481的博客
05-30 1446
前面两篇介绍了Camera1和Camera2的使用，发现Camera API从1到2的变化非常大，Camera2的复杂度提升了不少，官方为了让我们更容易使用Camera，出了个一个官方的库cameraview。不过这个库已经Deprecated，官方建议使用Jetpack CameraX 替代。本篇文章就介绍下CameraView和CameraX的使用CameraViewCameraView的目的...
Android声控快门实现：Kotlin与Jetpack Compose结合
通过本资源摘要信息的学习，开发者能够掌握如何使用Kotlin结合Jetpack Compose、MVI架构以及Android官方提供的CameraX库来实现一个具备声控快门功能的Android应用。这对于希望提升自身Android应用开发技能的开发者来...
安卓利用CameraX 拍照获这张照片的exif信息
03-22
安卓利用CameraX 拍照获这张照片的exif信息
Android CameraX 自学之路
01-03
Android 开发自学之路（1）–CameraControl 作为一个之前没有接触过Android和Kotlin开发的小白，最近在自学Android开发。我将把自己学习的过程以笔记的形式分享在这里，如果有不正确的理解，希望大家能慷慨相告！ 由于最近接触的项目与相机紧密相关，所以我的介绍从新发布的CameraX开始。 CameraX 概览 CameraX 是一个Jetpack的支持库，旨在帮助您简化相机应用的开发工作。它提供一致且易于使用的 API 界面，适用于大多数 Android 设备，并可向后兼容至 Android 5.0（API 级别 21）。 虽然它利用的是 camera2 的功能，
Android CameraX Demo : 实现预览/拍照/录制视频/图片分析/对焦/切换摄像头等操作
07-04
我自己写的Android CameraX Demo，实现了预览/拍照/录制视频/图片分析/对焦/切换摄像头等操作。 具体详见我的博客 : https://blog.csdn.net/EthanCo/article/details/125603671
Android开发笔记（一百八十二）使用CameraX录像
aqi00的博客
02-16 2888
通过CameraX实现录像功能的话，初始化相机的步骤与拍照时大同小异，区别在于增加了对视频捕捉器VideoCapture的处理。需要修改的代码主要有三个地方，分别说明如下。 第一个地方是在AndroidManifest.xml里补充声明录音权限，完整的权限声明配置如下所示： <!-- 相机 --> <uses-permission android:name="android.permission.CAMERA" /> <!-- 录音 --> <uses-perm
Android CameraX：简化相机应用开发的新星
最新发布
gitblog_00360的博客
08-28 359
Android CameraX：简化相机应用开发的新星 android-cameraxCameraX aims to demonstrate how to use CameraX APIs written in Kotlin项目地址:https://gitcode.com/gh_mirrors/an/android-camerax 在数字时代，相机功能已成为手机应用程序不可或缺的一部分。对于开发...
Android CameraX 使用教程
Leo_Liang_jie的博客
07-18 2970
Android CameraX使用教程
安卓开发之camerax介绍（1）——取景器、拍摄照片、录制视频入门实战
baorant24的博客
03-08 2980
问题背景 本文将初步介绍jetpeck库之camerax的初步基本使用，包括实现取景器、拍摄照片、录制视频三个功能用例。 问题分析 话不多说，直接上代码。 (1)项目中添加camerax相关依赖； def camerax_version = "1.1.0-beta01" implementation "androi...
Android App开发——使用CameraX打开前后摄像头拍照并保存（Java实现）
知来者逆的博客
12-23 9236
前言 开发环境是Android studio 北极狐，CameraX1.0.0-alpha02，实现语言是Java。 创建工程 1.引入CameraX 在build.gradle添加要引入CameraX的版本。 //CameraX def camerax_version = "1.0.0-alpha02" implementation "androidx.camera:camera-core:${camerax_version}" implementation "androidx
Android CameraX 使用入门
热门推荐
luo_boke的博客
06-09 2万+
在 Android 应用中要实现 Camera 功能还是比较困难的，为了保证在各品牌手机设备上的兼容性、响应速度等体验细节，Camera 应用的开发者往往需要花很大的时间和精力进行测试，甚至需要手动在数百种不同设备上进行测试。CameraX 正是为解决这个痛点而诞生的。
Java开发记账APP：MVP模式与JetPack组件实践
该应用采用了MVP（Model-View-Presenter）设计模式与插件化的设计思想，并结合了JetPack组件，旨在为开发者提供易于复用和插拔的组件，以简化开发流程。 主要功能点包括： 1. 软件进入验证和指纹加密：应用程序...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值