huggingface模型/数据集下载
本文介绍了使用Hugging Face Hub下载模型和数据集的方法。首先需要安装huggingface_hub库，然后设置HF_ENDPOINT环境变量以配置镜像源。后续可通过hf download命令下载模型和数据集到本地，需指定资源名称和本地保存路径。对于数据集下载，还需添加--repo-type dataset参数。文中提供了安装依赖、环境变量设置和具体下载命令的完整示例。
·
1. 安装依赖
pip install -U huggingface_hub
2. 设置环境变量
Linux
export HF_ENDPOINT=https://hf-mirror.com
Windows Powershell
$env:HF_ENDPOINT = "https://hf-mirror.com"
3. 下载模型
# 命令行运行
hf download 模型名 --local-dir 本地保存路径
# 例子
hf download BAAI/llm-embedder --local-dir llm-embedder
3. 下载数据集
# 命令行运行
hf download 数据集 --local-dir 本地保存路径 --repo-type dataset
# 例子
hf download din0s/asqa --local-dir asqa --repo-type dataset
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
2
0- 0
已为社区贡献2条内容
所有评论(0)