{ "per_channel": true, "reduce_range": true, "per_model_config": { "decoder_model": { "op_types": [ "Tile", "MatMul", "ConstantOfShape", "Sub", "Expand", "Cast", "LessOrEqual", "Log", "Sqrt", "Less", "Tanh", "Shape", "Neg", "Mul", "Softmax", "Constant", "Pow", "Reshape", "ReduceMean", "Gather", "Add", "Where", "Transpose", "Concat", "Range", "Div", "Unsqueeze", "Min" ], "weight_type": "QInt8" }, "encoder_model": { "op_types": [ "MatMul", "ConstantOfShape", "Sub", "Cast", "Log", "Sqrt", "Less", "Tanh", "Shape", "Mul", "Softmax", "Constant", "Pow", "Reshape", "ReduceMean", "Gather", "Add", "Where", "Transpose", "Concat", "Range", "Div", "Unsqueeze", "Min", "Abs", "Greater" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Tile", "MatMul", "ConstantOfShape", "Sub", "Expand", "Cast", "LessOrEqual", "Log", "Sqrt", "Less", "Tanh", "Shape", "Neg", "Mul", "If", "Softmax", "Constant", "Slice", "Pow", "Reshape", "ReduceMean", "Gather", "Add", "Where", "Transpose", "Concat", "Range", "Div", "Unsqueeze", "Min" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Tile", "MatMul", "ConstantOfShape", "Sub", "Expand", "Cast", "LessOrEqual", "Log", "Sqrt", "Less", "Tanh", "Shape", "Neg", "Mul", "Softmax", "Constant", "Slice", "Pow", "Reshape", "ReduceMean", "Gather", "Add", "Where", "Transpose", "Concat", "Range", "Div", "Unsqueeze", "Min" ], "weight_type": "QInt8" } } }