unbuntu上下载hugface模型DeepSeek-R1-1.5b


huggingface-cli download --resume-download deepseek-ai/DeepSeek-R1-Distill-Qwen-1.5B
# 默认下载会失败,因为需要外网访问

配置huggingface镜像环境变量

export HF_ENDPOINT=https://hf-mirror.com

export HF_HOME=/mnt/workspace/huggingface

echo $HF_HOME

huggingface-cli download --resume-download deepseek-ai/DeepSeek-R1-Distill-Qwen-1.5B

命令中,--resume-download 参数的作用是启用断点续传功能。具体来说,如果下载过程中被中断,再次执行相同的命令时,huggingface-cli 会从上次中断的地方继续下载,而不是重新开始下载整个文件

这样设置后模型下载地址就在  /mnt/workspace/huggingface  目录下

要使用huggingface-cli需要

pip install huggingface_hub

在使用 HuggingFace CLI 进行高级操作时,环境变量的设置是一个关键步骤。通过设置环境变量,可以实现自定义下载路径、多线程下载、配置代理等功能。以下是一些常用的环境变量及其设置方法:

设置自定义下载路径
通过设置 HF_HOME 环境变量,可以指定 HuggingFace 工具链的缓存目录。默认情况下,缓存目录位于 ~/.cache/huggingface。

export HF_HOME="/path/to/your/custom/cache"
设置镜像站

通过设置 HF_ENDPOINT 环境变量,可以使用 HuggingFace 的镜像站来加速下载。

export HF_ENDPOINT="https://hf-mirror.com"
启用多线程下载

通过设置 HF_HUB_ENABLE_HF_TRANSFER 环境变量,可以启用 HuggingFace 的多线程下载模块 hf_transfer

export HF_HUB_ENABLE_HF_TRANSFER=1

 

posted @ 2025-02-25 16:29  study_php_java_C++  阅读(500)  评论(0)    收藏  举报