create_quant_retrain_model
功能说明
量化感知训练接口,将输入的待量化的图结构按照给定的量化配置文件进行量化处理,在传入的图结构中插入量化相关的算子(数据和权重的量化感知训练层以及找N的层),生成量化因子记录文件record_file,返回修改后可用于量化感知训练的torch.nn.module模型。
函数原型
quant_retrain_model = create_quant_retrain_model (config_file, model, record_file, input_data)
参数说明
参数名 |
输入/返回值 |
含义 |
使用限制 |
---|---|---|---|
config_file |
输入 |
用户生成的量化感知训练配置文件,用于指定模型network中量化层的配置情况。 |
数据类型:string |
model |
输入 |
待进行量化感知训练的模型,已加载权重。 |
数据类型:torch.nn.module |
record_file |
输入 |
量化因子记录文件路径及名称。 |
数据类型:string |
input_data |
输入 |
模型的输入数据。一个torch.tensor会被等价为tuple(torch.tensor)。 |
数据类型:tuple |
quant_retrain_model |
返回值 |
修改后可用于量化感知训练的torch.nn.module模型。 |
默认值:None 数据类型:torch.nn.module |
返回值说明
量化感知训练的模型。
函数输出
无。
调用示例
1 2 3 4 5 6 7 8 9 10 11 12 13 |
import amct_pytorch as amct # 建立待进行量化感知训练的网络图结构 model = build_model() model.load_state_dict(torch.load(state_dict_path)) input_data = tuple([torch.randn(input_shape)]) scale_offset_record_file = os.path.join(TMP, 'scale_offset_record.txt') # 插入量化API quant_retrain_model = amct.create_quant_retrain_model( config_json_file, model, scale_offset_record_file, input_data) |
父主题: 量化感知训练接口