CANN VPC图片处理功能文档

VPC图片处理典型功能【免费下载链接】docs该仓库用于维护cann公共文档项目地址: https://gitcode.com/cann/docs本节以抠图、缩放为例说明VPC图像处理时的接口调用流程同时配合以下典型功能的示例代码辅助理解该接口调用流程。VPCVision Preprocessing Core负责图像处理功能支持对图片做抠图、缩放、格式转换等操作。关于VPC功能的详细介绍以及使用约束请参见《DVPP媒体加速库》。典型功能接口调用流程以缩放为例图 1缩放功能调用流程当前系统支持对输入图片做抠图、缩放等处理关键接口的说明如下调用aclInit接口初始化系统。调用aclrtSetDevice接口指定计算设备。调用hi_mpi_sys_init接口进行媒体数据处理系统初始化。调用 hi_mpi_vpc_sys_create_chn接口创建通道。调用hi_mpi_dvpp_malloc接口申请Device上的内存存放输入或输出数据。**执行图像处理任务**此步骤以缩放为例说明。调用hi_mpi_vpc_resize接口对图片进行缩放。hi_mpi_vpc_resize接口是异步接口调用该接口成功仅表示任务下发成功还需要调用hi_mpi_vpc_get_process_result接口等待任务完成。可以跟hi_mpi_vpc_resize接口在同一个线程中调用hi_mpi_vpc_get_process_result接口也可以新起一个线程调用hi_mpi_vpc_get_process_result接口后者多线程并行提高效率但用户需自行实现线程间同步。调用缩放接口时通过将输入图片和输出图片的格式设置成不同的达到转换图片格式的目的。如果在Host上调用DVPP接口图像处理的结果数据都在Device的内存中如果想访问结果数据需要将结果数据传输回Host侧。调用hi_mpi_dvpp_free接口释放输入、输出内存。调用hi_mpi_vpc_destroy_chn接口销毁通道。调用hi_mpi_sys_exit接口进行媒体数据处理系统去初始化。调用aclrtResetDevice接口复位设备释放Device上的资源。调用aclFinalize接口实现系统去初始化用于释放进程内acl接口使用的相关资源。图片缩放示例代码以下是图片缩放功能关键步骤的代码示例不能直接拷贝编译运行仅供参考。调用接口后需增加异常处理的分支并记录报错日志、提示日志此处不一一列举。您可以单击vpc_sample获取样例。// .... // 1.初始化媒体数据处理系统 int32_t ret hi_mpi_sys_init(); // 2.创建通道 hi_vpc_chn chnId; hi_vpc_chn_attr stChnAttr; ret hi_mpi_vpc_sys_create_chn(chnId, stChnAttr); // 3.执行缩放 // 3.1 构造存放输入图片信息的结构体 hi_vpc_pic_info inputPic; inputPic.picture_width 1920; inputPic.picture_height 1080; inputPic.picture_format HI_PIXEL_FORMAT_YUV_SEMIPLANAR_420; inputPic.picture_width_stride 1920; inputPic.picture_height_stride 1080; inputPic.picture_buffer_size inputPic.picture_width_stride * inputPic.picture_height_stride * 3 / 2; // 3.2 准备输入图片数据 // 将输入图片读入Device内存中该自定义函数ReadPicFile由用户实现 ReadPicFile(picName, inputPic.picture_address, inputPic.picture_buffer_size); // 3.3 构造存放输出图片信息的结构体 hi_vpc_pic_info outputPic; outputPic.picture_width 960; outputPic.picture_height 540; outputPic.picture_format HI_PIXEL_FORMAT_YUV_SEMIPLANAR_420; outputPic.picture_width_stride 960; outputPic.picture_height_stride 540; outputPic.picture_buffer_size outputPic.picture_width_stride * outputPic.picture_height_stride * 3 / 2; ret hi_mpi_dvpp_malloc(0, outputPic.picture_address, outputPic.picture_buffer_size); // 初始化内存 memset(outputPic.picture_address, 0, outputPic.picture_buffer_size); // 3.4 调用缩放接口 uint32_t taskID 0; ret hi_mpi_vpc_resize(chnId, inputPic, outputPic, 0, 0, 0, taskID, -1); // 3.5 等待任务处理结束任务处理结束后输出图片数据在outputPic.picture_address指向的内存中 uint32_t taskIDResult taskID; ret hi_mpi_vpc_get_process_result(chnId, taskIDResult, -1); // 3.6 VPC的输出图片数据可以直接作为模型推理的输入 // 可以直接使用VPC的输出图片数据在outputPic.picture_address指向的内存中 // TODO推理相关的代码逻辑 // 3.7 释放输入、输出内存 ret hi_mpi_dvpp_free(inputPic.picture_address); ret hi_mpi_dvpp_free(outputPic.picture_address); // 4.销毁通道 ret hi_mpi_vpc_destroy_chn(chnId); // 5. 媒体数据处理系统去初始化 ret hi_mpi_sys_exit(); // ....抠图示例代码以下是抠图功能关键步骤的代码示例不能直接拷贝编译运行仅供参考。调用接口后需增加异常处理的分支并记录报错日志、提示日志此处不一一列举。您可以单击vpc_sample获取样例。// .... // 1.初始化媒体数据处理系统 int32_t ret hi_mpi_sys_init(); // 2.创建通道 hi_vpc_chn chnId; hi_vpc_chn_attr stChnAttr; ret hi_mpi_vpc_sys_create_chn(chnId, stChnAttr); // 3.执行抠图 // 3.1 构造存放输入图片信息的结构体 hi_vpc_pic_info inputPic; inputPic.picture_width 1920; inputPic.picture_height 1080; inputPic.picture_format HI_PIXEL_FORMAT_YUV_SEMIPLANAR_420; inputPic.picture_width_stride 1920; inputPic.picture_height_stride 1080; inputPic.picture_buffer_size inputPic.picture_width_stride * inputPic.picture_height_stride * 3 / 2; // 3.2 准备输入图片数据 // 申请Device内存用于媒体数据处理 ret hi_mpi_dvpp_malloc(0, inputPic.picture_address, inputPic.picture_buffer_size); // 将输入图片读入Device内存中该自定义函数ReadPicFile由用户实现 ReadPicFile(picName, inputPic.picture_address, inputPic.picture_buffer_size); // 3.3 构造存放输出图片信息的结构体 // 该参数表示抠图数量 uint32_t multiCount 1; // cropRegionInfos数组的大小与抠图数量保持一致 hi_vpc_crop_region_info cropRegionInfos[1]; hi_vpc_pic_info outputPic; for (uint32_t i 0; i multiCount; i) { outputPic.picture_width 960; outputPic.picture_height 540; outputPic.picture_format HI_PIXEL_FORMAT_YUV_SEMIPLANAR_420; outputPic.picture_width_stride 960; outputPic.picture_height_stride 540; outputPic.picture_buffer_size outputPic.picture_width_stride * outputPic.picture_height_stride * 3 / 2; ret hi_mpi_dvpp_malloc(0, outputPic.picture_address, outputPic.picture_buffer_size); // 初始化内存 memset(outputPic.picture_address, 0, outputPic.picture_buffer_size); // 表示从输入图片中抠出以左上角为原点、分辨率960*540的子图 cropRegionInfos[i].dest_pic_info outputPic; cropRegionInfos[i].crop_region.left_offset 0; cropRegionInfos[i].crop_region.top_offset 0; cropRegionInfos[i].crop_region.crop_width 960; cropRegionInfos[i].crop_region.crop_height 540; } // 3.4 调用抠图接口 uint32_t taskID 0; ret hi_mpi_vpc_crop(chnId, inputPic, cropRegionInfos, 1, taskID, -1); // 3.5 等待任务处理结束任务处理结束后输出图片数据在outputPic.picture_address指向的内存中 uint32_t taskIDResult taskID; ret hi_mpi_vpc_get_process_result(chnId, taskIDResult, -1); // 3.6 VPC的输出图片数据可以直接作为模型推理的输入 // 可以直接使用VPC的输出图片数据在outputPic.picture_address指向的内存中 // TODO推理相关的代码逻辑 // 3.7 释放输入、输出内存 ret hi_mpi_dvpp_free(inputPic.picture_address); inputPic.picture_address nullptr; for (uint32_t i 0; i multiCount; i) { hi_mpi_dvpp_free(cropRegionInfos[i].dest_pic_info.picture_address); cropRegionInfos[i].dest_pic_info.picture_address nullptr; } // 4.销毁通道 ret hi_mpi_vpc_destroy_chn(chnId); // 5. 媒体数据处理系统去初始化 ret hi_mpi_sys_exit(); // ....【免费下载链接】docs该仓库用于维护cann公共文档项目地址: https://gitcode.com/cann/docs创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考