huggingface国内镜像网站下载模型、数据集（简单）
总结了两种简单的HuggingFace镜像站下载方式：1)直接在模型主页Files and Versions中下载少量文件；2)使用huggingface-cli工具批量下载。使用CLI需先安装依赖并设置环境变量HF_ENDPOINT指向镜像地址，然后通过命令下载模型(如gpt2)或数据集(如wikitext)，支持断点续传(--resume-download)和指定本地目录(--local-di
·
进入网站后直接搜索想要的模型或数据集
方法一：如果要下载的文件较少，可直接在在模型主页的Files and Version中下载文件。
方法二：使用huggingface-cli工具
1. 安装依赖
pip install -U huggingface_hub2. 设置环境变量
Linux
export HF_ENDPOINT=https://hf-mirror.comWindows Powershell
$env:HF_ENDPOINT = "https://hf-mirror.com"***安装好huggingface-cli以及设置好环境变量之后，就可以下载模型和数据集了***
3.下载模型
huggingface-cli download --resume-download gpt2 --local-dir gpt24. 下载数据集
huggingface-cli download --repo-type dataset --resume-download wikitext --local-dir wikitext
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
20
0- 0
已为社区贡献2条内容
所有评论(0)