文档
注册

aclmdlLoadFromMemWithQ

函数功能

从内存加载离线模型数据(适配昇腾AI处理器的离线模型),模型的输入、输出数据都存放在队列中,同步接口。

系统完成模型加载后,返回的模型ID,作为后续操作时用于识别模型的标志。

约束说明

  • 本接口只支持加载固定Shape输入的模型。
  • 模型加载、模型执行、模型卸载的操作必须在同一个Context下(关于Context的创建请参见aclrtCreateContext)。

函数原型

aclError aclmdlLoadFromMemWithQ(const void *model, size_t modelSize, uint32_t *modelId, const uint32_t *inputQ, size_t inputQNum, const uint32_t *outputQ, size_t outputQNum)

参数说明

参数名

输入/输出

说明

model

输入

存放模型数据的内存地址指针。

modelSize

输入

内存中的模型数据长度,单位Byte。

modelId

输出

模型ID的指针。

系统成功加载模型后会返回的模型ID。

inputQ

输入

队列ID的指针,一个模型的输入对应一个队列ID。

inputQNum

输入

输入队列大小。

outputQ

输入

队列ID的指针,一个模型的输出对应一个队列ID。

outputQNum

输入

输出队列大小。

返回值说明

返回0表示成功,返回其它值表示失败。

相关接口

当前AscendCL还提供了aclmdlSetConfigOpt接口、aclmdlLoadWithConfig接口来实现模型加载,通过配置对象中的属性来区分,在加载模型时是从文件加载,还是从内存加载,以及内存是由系统内部管理,还是由用户管理。

搜索结果
找到“0”个结果

当前产品无相关内容

未找到相关内容,请尝试其他搜索词