LLMENGINE_memorytype_enum枚举
枚举功能
内存类型枚举。
枚举格式
typedef enum LLMENGINE_memorytype_enum { LLMENGINE_MEMORY_CPU, LLMENGINE_MEMORY_CPU_PINNED, LLMENGINE_MEMORY_GPU } LLM_ENGINE_MemoryType;
枚举值
枚举名 |
说明 |
---|---|
LLMENGINE_MEMORY_CPU |
表示内存位于CPU上。 |
LLMENGINE_MEMORY_CPU_PINNED |
表示内存位于CPU上并且是固定的(pinned),即不能被交换到磁盘,这种内存通常用于需要快速且一致的访问速度的情况。 |
LLMENGINE_MEMORY_GPU |
表示内存位于GPU上。 |
父主题: 结构体和枚举说明