摘要: import copya = { 'key1': 1, 'key2': [1, 2, 3], 'key3': {'subkey': 'value'},}b = copy.deepcopy(a)# 验证深拷贝a['key2'].append(4)a['key3']['subkey'] = 'new v 阅读全文
posted @ 2025-01-14 16:57 tslam 阅读(6) 评论(0) 推荐(0)
摘要: 量化是一种技术,用于减少模型的存储需求和计算复杂度。通过使用较低精度的数据类型来表示模型的权重和激活值,量化能够显著降低内存使用和提高推理速度,同时对模型精度的影响尽可能小。 大模型问答效果区别 模型精度: int4: 由于精度较低,模型的表现可能会受显著影响,尤其是在处理复杂任务或需要高精度的细节 阅读全文
posted @ 2025-01-14 16:43 tslam 阅读(501) 评论(0) 推荐(0)