1# 分段式拍照(C/C++) 2 3分段式拍照是相机的最重要功能之一,相机输出低质量图用作快速显示,提升用户感知拍照速度,同时使用高质量图保证最后的成图质量达到系统相机的水平,既满足了后处理算法的需求,又不阻塞前台的拍照速度,构筑相机性能竞争力,提升了用户的体验。 4 5- 在第一阶段,系统快速上报轻量处理的图片,轻量处理的图片比全质量图低,出图速度快。应用通过回调会收到一个PhotoAsset对象,通过该对象可调用媒体库接口,读取图片或落盘图片。 6- 在第二阶段,相机框架会根据应用的请求图片诉求或者在系统闲时,进行图像增强处理得到全质量图,将处理好的图片传回给媒体库,替换轻量处理的图片。 7 8## 开发步骤 9 10详细的API说明请参考[Camera API参考](../../reference/apis-camera-kit/_o_h___camera.md)。 11 121. 导入NDK接口,接口中提供了相机相关的属性和方法,导入方法如下。 13 14 ```c++ 15 // 导入NDK接口头文件 16 #include <cstdint> 17 #include <cstdlib> 18 #include <cstring> 19 #include <string.h> 20 #include <memory> 21 #include "hilog/log.h" 22 #include "napi/native_api.h" 23 #include "camera_manager.h" 24 #include <multimedia/media_library/media_asset_manager_capi.h> 25 #include <multimedia/media_library/media_asset_change_request_capi.h> 26 #include <multimedia/media_library/media_access_helper_capi.h> 27 #include <multimedia/image_framework/image/image_packer_native.h> 28 ``` 29 302. 在CMake脚本中链接相关动态库。 31 32 ```txt 33 target_link_libraries(entry PUBLIC 34 libace_napi.z.so 35 libhilog_ndk.z.so 36 libohcamera.so 37 libimage_source.so 38 libmedia_asset_manager.so 39 libimage_packer.so 40 ) 41 ``` 42 433. 相机初始化及拍照触发参考[拍照(C/C++)](./native-camera-shooting.md)。 44 454. 注册**分段式(PhotoAssetAvailable)**拍照回调,对比单端式拍照,仅注册的拍照回调接口不同。 46 47 > **注意:** 48 > 49 > 如果已经注册了PhotoAssetAvailable回调,并且在Session开始之后又注册了PhotoAvailable回调,PhotoAssetAvailable和PhotoAvailable同时注册,会导致流被重启,仅PhotoAssetAvailable生效。 50 > 51 > 不建议开发者同时注册PhotoAssetAvailable和PhotoAvailable。 52 53 注册PhotoAssetAvailableCallback回调,接收分段式拍照回图示例: 54 55 **分段式拍照开发流程(PhotoAssetAvailableCallback)**: 56 57 - 在会话commitConfig前注册分段式拍照回调。 58 - 通过分段式拍照回调,获取媒体库资源mediaAsset。 59 - 通过mediaAsset直接落盘图片或者通过mediaAsset配置策略模式请求图像资源,业务处理后通过buffer保存图片,或显示图片(参考[拍照(C/C++)](./native-camera-shooting.md)步骤5)。 60 - 使用完后解注册分段式拍照回调函数。 61 62 ```c++ 63 // 方式一:调用媒体库落盘图片 64 void mediaLibSavePhoto(OH_MediaAsset *mediaAsset) { 65 if (mediaAsset == nullptr) { 66 OH_LOG_ERROR(LOG_APP, "mediaAsset is nullptr!"); 67 } 68 // 创建媒体资产更改请求对象 69 OH_MediaAssetChangeRequest *changeRequest = OH_MediaAssetChangeRequest_Create(mediaAsset); 70 if (changeRequest == nullptr) { 71 OH_LOG_ERROR(LOG_APP, "changeRequest is nullptr!"); 72 } 73 // 请求保存图片 74 MediaLibrary_ErrorCode errCode = 75 OH_MediaAssetChangeRequest_SaveCameraPhoto(changeRequest, MEDIA_LIBRARY_IMAGE_JPEG); 76 OH_LOG_INFO(LOG_APP, "SaveCameraPhoto get errCode:%{public}d", errCode); 77 // 发起请求 78 errCode = OH_MediaAccessHelper_ApplyChanges(changeRequest); 79 OH_LOG_INFO(LOG_APP, "ApplyChanges get errCode:%{public}d", errCode); 80 } 81 82 // 方式二:调用媒体库接口请求图像资源 83 // 图像源准备就绪时调用 84 OH_MediaAsset *g_mediaAsset_; 85 void OnImageDataPrepared(MediaLibrary_ErrorCode result, MediaLibrary_RequestId requestId, 86 MediaLibrary_MediaQuality mediaQuality, MediaLibrary_MediaContentType type, 87 OH_ImageSourceNative *imageSourceNative) { 88 if (imageSourceNative == nullptr) { 89 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: imageSourceNative is nullptr!"); 90 return; 91 } 92 if (mediaQuality == MediaLibrary_MediaQuality::MEDIA_LIBRARY_QUALITY_FAST) { 93 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: Using fast media quality."); 94 } else if (mediaQuality == MediaLibrary_MediaQuality::MEDIA_LIBRARY_QUALITY_FULL) { 95 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: Using full media quality."); 96 } 97 // 通过OH_ImageSourceNative创建OH_PixelmapNative 98 OH_PixelmapNative *pixelmapNative = nullptr; 99 OH_DecodingOptions *decodingOptions = nullptr; 100 Image_ErrorCode imageErr = IMAGE_SUCCESS; 101 imageErr = OH_ImageSourceNative_CreatePixelmap(imageSourceNative, decodingOptions, &pixelmapNative); 102 if (imageErr != IMAGE_SUCCESS) { 103 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: CreatePixelmap failed."); 104 return; 105 } 106 // 创建Image Packer并设置打包选项 107 OH_ImagePackerNative *imagePacker; 108 OH_ImagePackerNative_Create(&imagePacker); 109 OH_PackingOptions *options; 110 OH_PackingOptions_Create(&options); 111 char format[] = "image/jpeg"; 112 Image_MimeType image_MimeType = {format, strlen(format)}; 113 OH_PackingOptions_SetMimeType(options, &image_MimeType); 114 OH_PackingOptions_SetQuality(options, 100); // 最高质量100 115 size_t bufferSize = 3072 * 4096; // 传大于编码后的size大小,编码后会重新赋值 116 // 解析出图片buffer 117 auto buffer = std::make_unique<uint8_t[]>(bufferSize); 118 imageErr = OH_ImagePackerNative_PackToDataFromPixelmap(imagePacker, options, pixelmapNative, buffer.get(), &bufferSize); 119 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: packToData ret code:%{public}u outsize:%{public}zu", imageErr, bufferSize); 120 if (g_mediaAsset_ == nullptr) { 121 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: get current mediaAsset failed!"); 122 } 123 // 调用媒体库接口通过buffer存图 124 OH_MediaAssetChangeRequest *changeRequest = OH_MediaAssetChangeRequest_Create(g_mediaAsset_); 125 MediaLibrary_ErrorCode mediaErr = OH_MediaAssetChangeRequest_AddResourceWithBuffer(changeRequest, 126 MEDIA_LIBRARY_IMAGE_RESOURCE, buffer.get(), bufferSize); 127 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: AddResourceWithBuffer get errCode:%{public}d", mediaErr); 128 mediaErr = OH_MediaAssetChangeRequest_SaveCameraPhoto(changeRequest, MEDIA_LIBRARY_IMAGE_JPEG); 129 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: SaveCameraPhoto get errCode:%{public}d", mediaErr); 130 mediaErr = OH_MediaAccessHelper_ApplyChanges(changeRequest); 131 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: ApplyChanges get errCode:%{public}d", mediaErr); 132 } 133 134 void mediaLibRequestBuffer(Camera_PhotoOutput *photoOutput, OH_MediaAsset *mediaAsset) { 135 if (photoOutput == nullptr) { 136 OH_LOG_ERROR(LOG_APP, "photoOutput is nullptr!"); 137 } 138 if (mediaAsset == nullptr) { 139 OH_LOG_ERROR(LOG_APP, "mediaAsset is nullptr!"); 140 } 141 // 创建媒体资产管理器 142 OH_MediaAssetManager *mediaAssetManager = OH_MediaAssetManager_Create(); 143 if (mediaAssetManager == nullptr) { 144 OH_LOG_ERROR(LOG_APP, "mediaAssetManager is nullptr!"); 145 } 146 // 配置请求媒体图片参数 147 MediaLibrary_RequestOptions requestOptions; 148 // 按照业务需求配置策略模式请求图像资源 149 // MEDIA_LIBRARY_FAST_MODE:仅接收一阶段低质量图回调 150 // MEDIA_LIBRARY_HIGH_QUALITY_MODE:仅接收二阶段全质量图回调 151 // MEDIA_LIBRARY_BALANCED_MODE:接收一阶段及二阶段图片回调 152 requestOptions.deliveryMode = MEDIA_LIBRARY_FAST_MODE; 153 MediaLibrary_RequestId requestId; 154 // 请求图像资源,图像源准备就绪时调用onImageDataPrepared 155 MediaLibrary_ErrorCode result = OH_MediaAssetManager_RequestImage(mediaAssetManager, mediaAsset, requestOptions, &requestId, OnImageDataPrepared); 156 if (result != MEDIA_LIBRARY_OK) { 157 OH_LOG_ERROR(LOG_APP, "OH_MediaAssetManager_RequestImage failed."); 158 } 159 } 160 161 // 分段式拍照回调函数 162 void OnPhotoAssetAvailable(Camera_PhotoOutput *photoOutput, OH_MediaAsset *mediaAsset) { 163 OH_LOG_INFO(LOG_APP, "OnPhotoAssetAvailable start!"); 164 if (mediaAsset == nullptr) { 165 OH_LOG_ERROR(LOG_APP, "OnPhotoAssetAvailable mediaAsset nullptr!"); 166 } 167 // 处理方式一:调用媒体库接口落盘图片,先保存一阶段图,二阶段图就绪后媒体库会主动帮应用替换落盘图片 168 // mediaLibSavePhoto(mediaAsset); 169 // 处理方式二:调用媒体库接口请求图像资源,获取一阶段图或二阶段图buffer,业务处理后通过buffer存图 170 g_mediaAsset_ = mediaAsset; 171 mediaLibRequestBuffer(photoOutput, mediaAsset); 172 } 173 174 // 注册分段式拍照回调 175 Camera_ErrorCode PhotoOutputRegisterPhotoAssetAvailableCallback(Camera_PhotoOutput *photoOutput) { 176 Camera_ErrorCode ret = OH_PhotoOutput_RegisterPhotoAssetAvailableCallback(photoOutput, OnPhotoAssetAvailable); 177 if (ret != CAMERA_OK) { 178 OH_LOG_ERROR("OH_PhotoOutput_RegisterPhotoAssetAvailableCallback failed."); 179 } 180 return ret; 181 } 182 ``` 183 184 185