西安网站代维护,ddns怎么做网站,wordpress 更换谷歌,seo网站建设培训Huggingface国内开源镜像 https://hf-mirror.com/ 上面总结了多种从Huggingface上下载模型的方法#xff0c;如下图。
方法一#xff1a;使用huggingface官网提供的huggingface-cli工具
官方详解地址https://huggingface.co/docs/huggingface_hub/guides/download 1. 安装…Huggingface国内开源镜像 https://hf-mirror.com/ 上面总结了多种从Huggingface上下载模型的方法如下图。
方法一使用huggingface官网提供的huggingface-cli工具
官方详解地址https://huggingface.co/docs/huggingface_hub/guides/download 1. 安装依赖 创建项目的虚拟环境后激活该环境并执行
pip install -U huggingface_hub可以运行huggingface-cli download --helps命令来查看download功能的参数如下图 以下载zjunlp/knowlm-13b-ie模型为例模型地址https://huggingface.co/zjunlp/knowlm-13b-ie/tree/main运行以下命令
huggingface-cli download --resume-download --local-dir-use-symlinks False zjunlp/knowlm-13b-ie --local-dir D:\Code\KnowLM\knowlm-13b-ie或者以下命令
huggingface-cli download --resume-download zjunlp/knowlm-13b-ie --local-dir D:\Code\KnowLM\knowlm-13b-ie --local-dir-use-symlinks False --token hf_*****这条命令会将zjunlp/knowlm-13b-ie模型下载到本地的D:\Code\KnowLM\test路径下 支持多线程下载如图 比直接从项目地址网页https://huggingface.co/zjunlp/knowlm-13b-ie/tree/main下载方便快捷得多 方法一本质上还是从huggingface官网上下载因此需要科学上网。 2. 基本命令示例
export HF_ENDPOINThttps://hf-mirror.com3. 下载需要登录的模型
方法二从镜像网站下载
方法二的本质是从huggingface的国内开源镜像下载需要关闭科学上网才能达到理想的速度 1. 直接从镜像网站手动下载 在搜素栏里搜索想要的模型例如knowlm-13b-ie确定以后会转到相应的镜像网站 结构目录和huggingface上一样只是域名已经变成了https://hf-mirror.com/zjunlp/knowlm-13b-ie/tree/main 仍然可以手动使用浏览器下载每个文件速度可达1.5MB/s巅峰时可6-7MB/s且不中断困扰快一周的问题终于解决 2. 用wget等工具下载
