1# 分段式拍照(C/C++) 2 3分段式拍照是相机的最重要功能之一,相机输出低质量图用作快速显示,提升用户感知拍照速度,同时使用高质量图保证最后的成图质量达到系统相机的水平,既满足了后处理算法的需求,又不阻塞前台的拍照速度,构筑相机性能竞争力,提升了用户的体验。 4 5- 在第一阶段,系统快速上报轻量处理的图片,轻量处理的图片比全质量图低,出图速度快。应用通过回调会收到一个PhotoAsset对象,通过该对象可调用媒体库接口,读取图片或落盘图片。 6- 在第二阶段,相机框架会根据应用的请求图片诉求或者在系统闲时,进行图像增强处理得到全质量图,将处理好的图片传回给媒体库,替换轻量处理的图片。 7 8## 开发步骤 9 10详细的API说明请参考[Camera API参考](../../reference/apis-camera-kit/_o_h___camera.md)。 11 121. 导入NDK接口,接口中提供了相机相关的属性和方法,导入方法如下。 13 14 ```c++ 15 // 导入NDK接口头文件。 16 #include <cstdint> 17 #include <cstdlib> 18 #include <cstring> 19 #include <string.h> 20 #include <memory> 21 #include "hilog/log.h" 22 #include "napi/native_api.h" 23 #include <ohcamera/camera.h> 24 #include <ohcamera/photo_output.h> 25 #include <ohcamera/camera_manager.h> 26 #include <multimedia/media_library/media_asset_manager_capi.h> 27 #include <multimedia/media_library/media_asset_change_request_capi.h> 28 #include <multimedia/media_library/media_access_helper_capi.h> 29 #include <multimedia/image_framework/image/image_packer_native.h> 30 ``` 31 322. 在CMake脚本中链接相关动态库。 33 34 ```txt 35 target_link_libraries(entry PUBLIC 36 libace_napi.z.so 37 libhilog_ndk.z.so 38 libohcamera.so 39 libimage_source.so 40 libmedia_asset_manager.so 41 libimage_packer.so 42 ) 43 ``` 44 453. 相机初始化及拍照触发参考[拍照(C/C++)](./native-camera-shooting.md)。 46 474. 注册**分段式(PhotoAssetAvailable)**拍照回调,对比单端式拍照,仅注册的拍照回调接口不同。 48 49 > **注意:** 50 > 51 > 如果已经注册了PhotoAssetAvailable回调,并且在Session开始之后又注册了PhotoAvailable回调,PhotoAssetAvailable和PhotoAvailable同时注册,会导致流被重启,仅PhotoAssetAvailable生效。 52 > 53 > 不建议开发者同时注册PhotoAssetAvailable和PhotoAvailable。 54 55 注册PhotoAssetAvailableCallback回调,接收分段式拍照回图示例: 56 57 **分段式拍照开发流程(PhotoAssetAvailableCallback)**: 58 59 - 在会话commitConfig前注册分段式拍照回调。 60 - 通过分段式拍照回调,获取媒体库资源mediaAsset。 61 - 通过mediaAsset直接落盘图片或者通过mediaAsset配置策略模式请求图像资源,业务处理后通过buffer保存图片,或显示图片(参考[拍照(C/C++)](./native-camera-shooting.md)步骤5)。 62 - 使用完后解注册分段式拍照回调函数。 63 64 ```c++ 65 // 方式一:调用媒体库落盘图片。 66 void mediaLibSavePhoto(OH_MediaAsset* mediaAsset) { 67 if (mediaAsset == nullptr) { 68 OH_LOG_ERROR(LOG_APP, "mediaAsset is nullptr!"); 69 return; 70 } 71 // 创建媒体资产更改请求对象。 72 OH_MediaAssetChangeRequest* changeRequest = OH_MediaAssetChangeRequest_Create(mediaAsset); 73 if (changeRequest == nullptr) { 74 OH_LOG_ERROR(LOG_APP, "changeRequest is nullptr!"); 75 return; 76 } 77 // 请求保存图片。 78 MediaLibrary_ErrorCode errCode = 79 OH_MediaAssetChangeRequest_SaveCameraPhoto(changeRequest, MEDIA_LIBRARY_IMAGE_JPEG); 80 OH_LOG_INFO(LOG_APP, "SaveCameraPhoto get errCode:%{public}d", errCode); 81 // 发起请求。 82 errCode = OH_MediaAccessHelper_ApplyChanges(changeRequest); 83 OH_LOG_INFO(LOG_APP, "ApplyChanges get errCode:%{public}d", errCode); 84 } 85 86 // 方式二:调用媒体库接口请求图像资源。 87 // 图像源准备就绪时调用。 88 OH_MediaAsset* g_mediaAsset_; 89 void OnImageDataPrepared(MediaLibrary_ErrorCode result, MediaLibrary_RequestId requestId, 90 MediaLibrary_MediaQuality mediaQuality, MediaLibrary_MediaContentType type, 91 OH_ImageSourceNative* imageSourceNative) { 92 if (imageSourceNative == nullptr) { 93 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: imageSourceNative is nullptr!"); 94 return; 95 } 96 if (mediaQuality == MediaLibrary_MediaQuality::MEDIA_LIBRARY_QUALITY_FAST) { 97 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: Using fast media quality."); 98 } else if (mediaQuality == MediaLibrary_MediaQuality::MEDIA_LIBRARY_QUALITY_FULL) { 99 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: Using full media quality."); 100 } 101 // 通过OH_ImageSourceNative创建OH_PixelmapNative。 102 OH_PixelmapNative* pixelmapNative = nullptr; 103 OH_DecodingOptions* decodingOptions = nullptr; 104 Image_ErrorCode imageErr = IMAGE_SUCCESS; 105 imageErr = OH_ImageSourceNative_CreatePixelmap(imageSourceNative, decodingOptions, &pixelmapNative); 106 if (imageErr != IMAGE_SUCCESS) { 107 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: CreatePixelmap failed."); 108 return; 109 } 110 // 创建Image Packer并设置打包选项。 111 OH_ImagePackerNative* imagePacker; 112 OH_ImagePackerNative_Create(&imagePacker); 113 OH_PackingOptions* options; 114 OH_PackingOptions_Create(&options); 115 char format[] = "image/jpeg"; 116 Image_MimeType image_MimeType = {format, strlen(format)}; 117 OH_PackingOptions_SetMimeType(options, &image_MimeType); 118 OH_PackingOptions_SetQuality(options, 100); // 最高质量100。 119 size_t bufferSize = 3072 * 4096; // 传大于编码后的size大小,编码后会重新赋值。 120 // 解析出图片buffer。 121 auto buffer = std::make_unique<uint8_t[]>(bufferSize); 122 imageErr = OH_ImagePackerNative_PackToDataFromPixelmap(imagePacker, options, pixelmapNative, buffer.get(), &bufferSize); 123 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: packToData ret code:%{public}u outsize:%{public}zu", imageErr, bufferSize); 124 if (g_mediaAsset_ == nullptr) { 125 OH_LOG_ERROR(LOG_APP, "OnImageDataPrepared: get current mediaAsset failed!"); 126 return; 127 } 128 // 调用媒体库接口通过buffer存图。 129 OH_MediaAssetChangeRequest* changeRequest = OH_MediaAssetChangeRequest_Create(g_mediaAsset_); 130 MediaLibrary_ErrorCode mediaErr = OH_MediaAssetChangeRequest_AddResourceWithBuffer(changeRequest, 131 MEDIA_LIBRARY_IMAGE_RESOURCE, buffer.get(), bufferSize); 132 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: AddResourceWithBuffer get errCode:%{public}d", mediaErr); 133 mediaErr = OH_MediaAssetChangeRequest_SaveCameraPhoto(changeRequest, MEDIA_LIBRARY_IMAGE_JPEG); 134 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: SaveCameraPhoto get errCode:%{public}d", mediaErr); 135 mediaErr = OH_MediaAccessHelper_ApplyChanges(changeRequest); 136 OH_LOG_INFO(LOG_APP, "OnImageDataPrepared: ApplyChanges get errCode:%{public}d", mediaErr); 137 } 138 139 void mediaLibRequestBuffer(OH_MediaAsset* mediaAsset) { 140 if (mediaAsset == nullptr) { 141 OH_LOG_ERROR(LOG_APP, "mediaAsset is nullptr!"); 142 return; 143 } 144 // 创建媒体资产管理器。 145 OH_MediaAssetManager* mediaAssetManager = OH_MediaAssetManager_Create(); 146 if (mediaAssetManager == nullptr) { 147 OH_LOG_ERROR(LOG_APP, "mediaAssetManager is nullptr!"); 148 return; 149 } 150 // 配置请求媒体图片参数。 151 MediaLibrary_RequestOptions requestOptions; 152 // 按照业务需求配置策略模式请求图像资源。 153 // MEDIA_LIBRARY_FAST_MODE:仅接收一阶段低质量图回调。 154 // MEDIA_LIBRARY_HIGH_QUALITY_MODE:仅接收二阶段全质量图回调。 155 // MEDIA_LIBRARY_BALANCED_MODE:接收一阶段及二阶段图片回调。 156 requestOptions.deliveryMode = MEDIA_LIBRARY_FAST_MODE; 157 MediaLibrary_RequestId requestId; 158 // 请求图像资源,图像源准备就绪时调用onImageDataPrepared。 159 MediaLibrary_ErrorCode result = OH_MediaAssetManager_RequestImage(mediaAssetManager, mediaAsset, requestOptions, &requestId, OnImageDataPrepared); 160 if (result != MEDIA_LIBRARY_OK) { 161 OH_LOG_ERROR(LOG_APP, "OH_MediaAssetManager_RequestImage failed."); 162 } 163 } 164 165 // 分段式拍照回调函数。 166 void OnPhotoAssetAvailable(Camera_PhotoOutput* photoOutput, OH_MediaAsset* mediaAsset) { 167 OH_LOG_INFO(LOG_APP, "OnPhotoAssetAvailable start!"); 168 if (mediaAsset == nullptr) { 169 OH_LOG_ERROR(LOG_APP, "OnPhotoAssetAvailable mediaAsset nullptr!"); 170 return; 171 } 172 // 处理方式一:调用媒体库接口落盘图片,先保存一阶段图,二阶段图就绪后媒体库会主动帮应用替换落盘图片。 173 // mediaLibSavePhoto(mediaAsset); 174 // 处理方式二:调用媒体库接口请求图像资源,获取一阶段图或二阶段图buffer,业务处理后通过buffer存图。 175 g_mediaAsset_ = mediaAsset; 176 mediaLibRequestBuffer(mediaAsset); 177 } 178 179 // 注册分段式拍照回调。 180 Camera_ErrorCode PhotoOutputRegisterPhotoAssetAvailableCallback(Camera_PhotoOutput* photoOutput) { 181 Camera_ErrorCode ret = OH_PhotoOutput_RegisterPhotoAssetAvailableCallback(photoOutput, OnPhotoAssetAvailable); 182 if (ret != CAMERA_OK) { 183 OH_LOG_ERROR(LOG_APP, "OH_PhotoOutput_RegisterPhotoAssetAvailableCallback failed."); 184 } 185 return ret; 186 } 187 ``` 188 189 190