利用huggingface-cli和hf-mirror,下载deepseek大模型
发布于 作者:苏南大叔 来源:程序如此灵动~ 我们相信:世界是美好的,你是我也是。平行空间的世界里面,不同版本的生活也在继续...
继续说huggingface.com
在国内加速的事情,龙套角色依然是风头正劲的deepseek
大模型。那么,通过huggingface
的官方命令行工具,如何加速下载deepseek-ai/DeepSeek-R1
大模型呢?
苏南大叔的“程序如此灵动”博客,记录苏南大叔的代码编程经验总结。本文测试环境:win10
,python@3.12.3
,huggingface-hub@0.28.0
。
前文回顾
在上面的文章里面,苏南大叔利用hf-mirror.com
提供的镜像功能,利用git
下载了deepseek
大模型。参考文章:
本文中,git
命令行变成了huggingface
官方出品的huggingface-cli
命令行。值得特别说明的是:在命令行里面叫做huggingface-cli
,安装的时候叫做huggingface-hub
,两者一定意义上是同一个东西,连版本输出都是混着来的。
安装huggingface-cli
这个命令行是基于pip
安装的,所以安装命令是:
pip install huggingface-hub
查看版本号
huggingface-cli version
huggingface_hub version: 0.28.0
设置镜像地址
没有设置镜像地址的话,使用huggingface-cli
下载大模型的话,大概率是失败的。需要设置个HF_ENDPOINT
设置个https://hf-mirror.com
。
下载大模型
huggingface-cli download deepseek-ai/DeepSeek-R1 --local-dir deepseek-ai/DeepSeek-R1
必须设置--local-dir
,否则就会下载到临时文件夹里面去了,找不到了,但是不需要事先创建文件夹。
下载数据集
这里的命令行,将要下载一个名叫carlesgp2000/IRIS
的数据集到本地文件夹,不用事先建立本地文件夹。
huggingface-cli download --repo-type dataset carlesgp2000/IRIS --local-dir carlesgp2000/IRIS
结语
更多人工智能的经验文章,可以参考苏南大叔的博客文章:
如果本文对您有帮助,或者节约了您的时间,欢迎打赏瓶饮料,建立下友谊关系。
本博客不欢迎:各种镜像采集行为。请尊重原创文章内容,转载请保留作者链接。
本博客不欢迎:各种镜像采集行为。请尊重原创文章内容,转载请保留作者链接。