Bootstrap

替代huggingface下载大模型的站点

0. 引入

huggingface是个好网站,大模型的下载都得靠他,但是网络问题一直是一言难尽,所以只好找找其他替代品。目前发现的代替网站如下,后续如有新发现,还会再来更新到这里。

1. aliendao

https://aliendao.cn/ 是一个能替代huggingface下载大模型(完整大模型,包括二进制文件和其他配置、代码)的网站,实测网速会比较慢,但好歹能用,而且托管了很多知名大模型,这就很不错了。

使用方法如下,以下载chatglm3-6b为例:

  1. 从网站首页下载 model_download.py
  2. 安装huggingface_hub:pip install huggingface_hub
  3. 运行这个命令,就能下载到大模型:python model_download.py --repo_id THUDM/chatglm3-6b

注意,下载到的模型,会放到运行python命令的dataroot/目录下

2. modelscope

ModelScope(https://www.modelscope.cn/ )是阿里推出的下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,其开发目标为让模型应用更简单。从这上面下载模型,和huggingface比较类似。注册后就能看到大模型的repo和下载方式,比如,以下载chatglm3-6b为例(实测这个下载速度很快):

git lfs install
git clone https://www.modelscope.cn/ZhipuAI/chatglm3-6b.git

3. hf-mirror

这个是Huggingface 镜像站:https://hf-mirror.com/,目前没有太多实测经验,不知道它收录模型的完整度怎么样。但是至少至少它已经收录了mixtral-8x7b:https://hf-mirror.com/someone13574/mixtral-8x7b-32kseqlen

4. AI快站

AI快站,https://aifasthub.com/,初步看模型收录的也比较全,很多主流模型也都有在这托管。提供所谓加速下载方式:“在AI快站,可以体验到高达4M/s的下载速度,大幅减少等待时间”。

;