对于深度学习工程师,经常遇到需要下载大型模型权重/大型数据集的情况。大部分的情况是比较好处理的,比如通过huggingface公开的数据集。然而,Google Drive,One Drive等网盘没有提供命令行工具,不方便大批量下载数据;GitHub release虽然提供了可供直接wget/curl的超链接,但是直接下载非常缓慢。针对这两类问题,调研解决方法如下:
使用命令行下载Google Drive/OneDrive大文件:https://zhuanlan.zhihu.com/p/632737814
使用镜像网站提供的超链接快速下载GitHub release:https://zhuanlan.zhihu.com/p/521472595
命令行快速下载Google Drive,One Drive,GitHub release大文件
最新推荐文章于 2026-06-21 11:09:45 发布
本文介绍了深度学习工程师在处理大型模型权重和数据集下载时遇到的问题,如无命令行工具和GitHubrelease下载速度慢。作者分享了如何利用命令行下载GoogleDrive/OneDrive大文件以及使用镜像网站加速GitHubrelease下载的方法。

2319

被折叠的 条评论
为什么被折叠?



