功能及约束说明
功能说明
本章节介绍媒体数据处理V1版本（DVPP，Digital Vision Pre-Processing）的功能，如表1所示。
|
功能 |
功能 |
|---|---|
|
VPC（Vision Preprocessing Core） |
负责图像处理功能，支持对图片做抠图、缩放、格式转换等操作，详细描述请参见VPC约束说明。 |
|
JPEGD（JPEG Decoder） |
负责完成图像解码功能，将.jpg、.jpeg、.JPG、.JPEG图片解码成YUV格式图片，详细描述请参见JPEGD功能及约束说明。 |
|
JPEGE（JPEG Encoder） |
负责完成图像编码功能，将YUV格式图片编码成.jpg图片，详细描述请参见JPEGE功能及约束说明。 |
|
VDEC（Video Decoder） |
负责视频解码，详细描述请参见VDEC功能及约束说明。 |
|
VENC（Video Encoder） |
负责视频编码，详细描述请参见VENC功能及约束说明。 |
|
PNGD（PNG Decoder） |
负责PNG格式图片的解码，详细描述请参见PNGD功能及约束说明。 |
整体约束说明
使用本章中介绍的接口，有以下注意点：
- 关于异步接口：
对于本章介绍的异步接口，调用接口成功仅表示任务下发成功，不表示任务执行成功。对于相互之间有依赖的异步接口，为确保能按序执行任务，建议用户在多个异步接口中指定同一个Stream，因为同一个Stream中的任务按接口调用顺序执行。调用异步接口后，不能马上释放资源，需调用同步等待接口（例如，aclrtSynchronizeStream）确保Device侧任务执行完成后才能释放。从性能角度考虑，建议一个Stream上下发多个异步接口任务后，执行一次aclrtSynchronizeStream接口。
- 关于内存申请/释放：
- 实现媒体数据处理的VPC、JPEGD、JPEGE等功能前，若需要申请Device上的内存存放输入或输出数据，需调用acldvppMalloc申请内存、调用acldvppFree接口释放内存。如果多个功能串联使用的场景，需要复用同一段内存，则按最大内存要求来申请内存。
- 调用1申请出来的内存可以满足媒体数据处理的要求，也可以在其它任务中使用，例如，从性能角度，为了减少拷贝，媒体数据处理的输出作为模型推理的输入，实现内存复用。
- 但由于媒体数据处理访问的地址空间有限，为确保媒体数据处理时内存足够，除媒体数据处理功能外的其它功能（例如，模型加载），建议调用其它内存申请接口，例如aclrtMalloc接口等。
- 关于通道的要求：
实现媒体数据处理的各功能前，必须调用接口创建对应功能的通道，创建通道的接口请参见通道创建与释放。通道的创建与销毁会涉及资源的申请与释放，反复创建与销毁通道会影响业务性能，因此建议根据实际场景管理通道，例如，如果有持续VPC图片处理，则创建VPC的通道后，等到所有VPC功能调用完成后，再销毁该VPC通道。
通道数量多，会影响Device的CPU占用率和内存占用，通道数量建议参考各功能章节下的性能指标的路数。
媒体数据处理各功能的通道数上限不同，如下所示：