下载
中文
注册

LLMENGINE_memorytype_enum枚举

枚举功能

内存类型枚举。

枚举格式

typedef enum LLMENGINE_memorytype_enum {
    LLMENGINE_MEMORY_CPU,
    LLMENGINE_MEMORY_CPU_PINNED,
    LLMENGINE_MEMORY_GPU
} LLM_ENGINE_MemoryType;

枚举值

枚举名

说明

LLMENGINE_MEMORY_CPU

表示内存位于CPU上。

LLMENGINE_MEMORY_CPU_PINNED

表示内存位于CPU上并且是固定的(pinned),即不能被交换到磁盘,这种内存通常用于需要快速且一致的访问速度的情况。

LLMENGINE_MEMORY_GPU

表示内存位于GPU上。