使用Git LFS下载大文件到本地(Linux)

这篇具有很好参考价值的文章主要介绍了使用Git LFS下载大文件到本地(Linux)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

背景

很多时候我们想要从huggingface中下载模型文件,若直接clone往往下载不完全.

下载文件后可通过以下命令来查看该文件各个文件的大小

ls -lh

 

如下图,第一行total显示整个目录的文件大小,下面即为每个文件的大小git lfs下载大文件,git尤其是对于GB级文件而言,很多时候都无法完全clone,且由于直接git会不稳定,因此引出Git LFS.

Git LFS是一个GitHub开发的Git扩展,主要用于实现对大文件的支持。

安装

Linux

curl -s https://packagecloud.io/install/repositories/github/git-lfs/script.deb.sh | sudo bash
sudo apt-get install git-lfs
git lfs install

注意:Git 版本不低于 1.8.5文章来源地址https://www.toymoban.com/news/detail-723849.html

下载模型

git lfs install
git clone https://```

到了这里,关于使用Git LFS下载大文件到本地(Linux)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包赞助服务器费用

相关文章

  • 如何下载github上用git-lfs工具下载的大文件

    要下载 GitHub 上使用 Git LFS 工具存储的大文件,您可以进行以下步骤: 安装 Git LFS:如果您的系统上没有安装 Git LFS,请先安装它。可以通过终端或命令行进行安装。 克隆存储库:使用以下命令克隆项目存储库到本地: 下载大文件:进入存储库目录,并使用以下命令下载大文

    2024年02月12日
    浏览(10)
  • Github上git lfs oid sha256文件无法下载的解决方案

    Github上git lfs oid sha256文件无法下载的解决方案

    当我克隆Github上的一个库时,其中有一个包的内容格式如下: version https://git-lfs.github.com/spec/v1 oid sha256:一堆数字和字母 size 一堆数字 这堆东西类似百度网盘的下载链接和密码,并不是一个完整文件,只是一个链接。 使用Git lfs重新clone这个项目时,仍然没有解决这个问题,因

    2024年02月09日
    浏览(13)
  • 使用Git LFS上传Unity大型资源文件

    使用Git LFS上传Unity大型资源文件

    注意,本文仅供参考,不同情况下解决方案可能不同                  在使用Unity制作结课作业时,使用到git工具进行版本控制与多人协作。在提交项目至远程仓库的过程中,git bash提示了以下报错: remote: warning: File Assets/Models/Z_India_5.29.fbx is 57.31 MB; this is larger than GitH

    2024年01月25日
    浏览(8)
  • 要Git的文件太大,如何使用Git-LFS

    要Git的文件太大,如何使用Git-LFS

    问题:要Git的文件太大 解决:使用Git-LFS,LFS原理这里不详说了 版本新一点的Git已经集成了Git-LFS, 不用单独去下载 。LFS的路径就在D:Program FilesGitmingw64bin,其中D:Program FilesGit是Git的安装目录。 如何用Git-LFS clone: 1、先打开一个文件夹,d:Desktop新建文件夹,cmd进入它(那

    2024年02月10日
    浏览(14)
  • 使用Git将文件夹上传到Github以及使用Git LFS上传大文件

    使用Git将文件夹上传到Github以及使用Git LFS上传大文件

    2024年04月14日
    浏览(18)
  • windows下安装使用git-lfs克隆大文件

    首先去git-lfs这里,下载相应平台的工具,我下载的windows版本,非安装版本,直接配置到系统环境变量里 执行以下命令验证是否成功 这样自动会下载里边的大文件 如果clone的时候还没有安装git-lfs,可以直接在项目目录里执行以下命令获取大文件

    2024年02月11日
    浏览(14)
  • 【Git】在 Linux 系统中使用 apt 包管理器来安装 Git LFS

    LFS 的含义为: Large File Storage Git LFS 是 Git 的扩展,旨在解决 Git 无法高效处理大文件的问题。 通常情况下, Git 将整个文件存储在版本控制中,这对于大型文件来说可能效率低下并且占用大量存储空间。 而 Git LFS 则通过将大文件存储在远程服务器上,并在 Git 仓库中保留指向

    2024年02月10日
    浏览(12)
  • Git LFS【部署 01】Linux环境安装git-lfs及测试

    Git LFS【部署 01】Linux环境安装git-lfs及测试

    Git LFS(Large File Storage)是一个用于Git版本控制系统的扩展,它专门用来管理大型文件,如图像、音频和视频文件。 安装包下载页面:https://github.com/git-lfs/git-lfs/releases 根据系统信息下载对应的安装包: 本次下载的为: git-lfs-linux-amd64-v3.4.1.tar.gz 下载一个大模型文件: 复制的

    2024年03月18日
    浏览(19)
  • Git 服务器上的 LFS 下载

    以llama为例: https://huggingface.co/meta-llama/Llama-2-7b-hf 报错 GIT_LFS_SKIP_SMUDGE=0 报错 注意 Not in a Git repository. 报错,查看: 因此: 使用 git lfs fetch ,报错: 原因: 对象不存在:指定的对象在远程仓库中不存在。这可能是因为对象已被删除、重命名或移动。请确保你正在尝试获取正

    2024年02月04日
    浏览(11)
  • 【git】git lfs 大文件管理

    【git】git lfs 大文件管理

    目录 常用命令 原理 使用方法 报错记录 certificate signed by unknown authority       安装 yum install git-lfs 第一次同时下载文件指针: git lfs clone 第一次同时下载同时下载文件本身: git lfs clone 已经下载了的用下面的命令拉文件本身 git lfs pull Git LFS 其他命令 git lfs ls-files 显示当前被

    2024年02月14日
    浏览(12)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包