走镜像即可!
首先要感谢搜狗做了个 hugging face 的镜像
import os
os.environ["HF_ENDPOINT"] = "https://hf-mirror.com"
from datasets import load_dataset
dataset = load_dataset(path='squad', split='train')
print(dataset)
因为原网址是不可用的,如图
hf 原网址
上面修改的环境变量是在 datasets 库中的 config.py 文件中的变量,如下图:
环境变量