HuggingFace下載的模型緩存到了C盤,如何安全遷移到其他盤

HuggingFace下載的模型緩存到了C盤,如何安全遷移到其他盤

    • ? 方法一:通過環境變量永久遷移緩存目錄(**推薦**)
      • 步驟如下:
      • 1?? 在 D 盤創建一個目錄(比如):
      • 2?? 設置環境變量(`HF_HOME`)
        • ? 方法 A:代碼中設置(只對當前運行有效)
        • ? 方法 B:永久設置(推薦)
      • 3?? 把你原來的模型文件夾**剪切**到新位置:
      • 4?? 重新運行你的程序,驗證是否成功
    • ? 方法二:使用 `TRANSFORMERS_CACHE`(僅限 Transformers,不推薦)
    • ? 總結

Hugging Face的詞嵌入模型文件目錄默認緩存在C盤,比較占用空間,是否能遷移到D盤呢,我的C盤沒有空間了。C:\Users\你的用戶名.cache\huggingface\hub\models–BAAI–bge-large-zh-v1.5\snapshots\

當然!你完全可以把 Hugging Face 的模型緩存目錄遷移到 D 盤,從而釋放 C 盤空間 ?。


? 方法一:通過環境變量永久遷移緩存目錄(推薦

這是 Hugging Face 官方支持的方式,可以把 .cache/huggingface 整個目錄遷移到 D 盤。

步驟如下:

1?? 在 D 盤創建一個目錄(比如):

D:\HuggingFaceCache

2?? 設置環境變量(HF_HOME

? 方法 A:代碼中設置(只對當前運行有效)

在你的 Python 腳本開頭加入:

import os
os.environ["HF_HOME"] = "D:/HuggingFaceCache"

? 方法 B:永久設置(推薦)

如果你想所有 Python 項目都默認使用 D 盤

  • 打開 Windows 的“系統環境變量”設置

  • 新建一個用戶變量:

    • 變量名:HF_HOME
    • 變量值:D:\HuggingFaceCache

重啟終端或電腦后生效。


3?? 把你原來的模型文件夾剪切到新位置:

例如:

從:

C:\Users\你的用戶名\.cache\huggingface\hub\models--BAAI--bge-large-zh-v1.5\

剪切到:

D:\HuggingFaceCache\hub\models--BAAI--bge-large-zh-v1.5\

📌 注意保持結構一致,hub/models--... 的路徑不能改變。


4?? 重新運行你的程序,驗證是否成功

你可以加一段打印緩存路徑的代碼來確認:

from huggingface_hub import hf_hub_download
print("Hugging Face 緩存路徑:", os.getenv("HF_HOME", "~/.cache/huggingface"))

? 方法二:使用 TRANSFORMERS_CACHE(僅限 Transformers,不推薦)

Hugging Face 支持另一個環境變量叫:

TRANSFORMERS_CACHE=D:/my_cache_dir

但它只會影響 transformers 庫,不影響 sentence-transformersdatasets,所以推薦使用統一的 HF_HOME


? 總結

操作推薦說明
設置 HF_HOME?????官方推薦方式,統一管理緩存目錄
TRANSFORMERS_CACHE??僅部分模塊支持,不推薦
手動復制模型?易出錯,不建議

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/911875.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/911875.shtml
英文地址,請注明出處:http://en.pswp.cn/news/911875.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

vue 開啟 source-map 后構建速度會很慢

vue.config.js 的 configureWebpack.devtool 設置為 source-map 后,編譯速度會變慢,嚴重影響開發進度。 改善方法: 一:改為 module-eval-source-map 改為 module-eval-source-map 在打包速度和源碼信息還原程度都屬于良好程度。…

三維空間數據格式全景圖:OSGB | 3Dtiles | I3S | S3M

前言 當城市數字孿生遇上國產化替代,開發者該如何選型? ——深入解析四大主流格式的技術基因與落地場景 🔮 趨勢預言: 2025年國土空間規劃全面實景三維化 ? S3M市占率將突破60%Cesium開源生態持續領跑Web端 ? 3Dtiles仍是跨國項…

【服務器】服務器選型設計

一、服務器產品說明 1.1 基礎服務器說明 1.1.1、服務器產品分類與核心指標?? ??1. 通用分類體系?? ??類型?? ??適用場景?? ??代表產品指標?? 塔式服務器 中小企業應用 ≤2路CPU,32G內存,支持熱插拔HDD 機架服務器 數據中心主…

【C++】noexcept的作用

【C】noexcept的作用 noexcept是C11引入的關鍵字,用于指定函數是否會拋出異常。它既是一個修飾符也是一個操作符,在現代C編程中扮演著重要角色。 一、noexcept的基本概念 noexcept主要有兩種形式: 無條件形式?:void func() n…

Docker 到底是個什么?

Docker 技術全面解析:從安裝到應用 一、引言 在當今的軟件開發和運維領域,Docker 已經成為了一個不可或缺的工具。它以其輕量級、可移植性和高效性等特點,改變了開發者和運維人員的工作方式,使得應用的打包、分發、運行變得更加…

Python 可迭代的對象、迭代器 和生成器(Sentence類第3版:生成器函數)

Sentence類第3版:生成器函數 實現相同功能,但卻符合 Python 習慣的方式是,用生成器函數代替 SentenceIterator 類。先看示例 14-5,然后詳細說明生成器函數。 示例 14-5 sentence_gen.py:使用生成器函數實現 Sentence…

5G自協商

好的&#xff0c;下面是一個基于裸機 C 環境的自協商實現示例代碼&#xff0c;支持 **最高 5G 并向下兼容**。這個代碼框架假設你使用的是 IEEE 802.3 規范下的 **MDIO** 接口和常見的 **Marvell PHY**&#xff08;或類似支持 5G/2.5G 的PHY&#xff09;。 c #include <std…

sublime 4200 激活

目錄 下載激活方式一&#xff1a;sublime 打開方式二&#xff1a;https://hexed.it 打開 下載 sublime官方下載 sublime_text_build_4200_x64.zip 激活 方式一&#xff1a;sublime 打開 1、復制 sublime_text.exe 為 sublime_text_activation.exe 2、直接使用 sublime_ 打開…

Ceph 和 MinIO

Ceph 和 MinIO 是兩種主流的分布式存儲系統&#xff0c;但它們的設計目標、架構和使用場景存在顯著差異。以下是清晰的對比解析&#xff1a; &#x1f9e9; 核心定位對比 維度CephMinIO定位統一存儲平臺&#xff08;塊/對象/文件&#xff09;純對象存儲&#xff08;S3兼容&…

cili3d筆記20 正交投影3d重建筆記1

正交視圖轉3d mostFrequentCluster.lines.forEach(line > {const [x1, y1, x2, y2] line;let xhat{x1,x2};let yhat{y1,y2};}); 沒考慮到側視圖 const clusters clusterLines(inputlines, 5);const lines3d:[number,number,number,number,number,number][][]const { mostM…

【Docker基礎】Docker容器生命周期管理:從創建到刪除的完整指南

目錄 1 容器生命周期概述 2 容器創建&#xff08;docker create&#xff09; 2.1 docker create命令詳解 2.2 創建流程解析 2.3 創建與運行的區別 3 容器啟動&#xff08;docker start&#xff09; 3.1 docker start命令詳解 3.2 啟動流程解析 3.3 啟動與運行的區別 …

Docker、Docker composer與Docker desktop

文章目錄 Docker、Docker composer與Docker desktop一、docker、docker composer、docker desktop1.1 Docker1.2 Docker Compose1.3 Docker Desktop1.4 三者之間的區別 二、docker desktop的安裝和換源2.1 前期準備WSL2 2.1 Docker Desktop 安裝下載 Docker Desktop安裝 Docker…

H5錄音、圖文視頻IndexDB儲存最佳實踐:用AI生成語音備忘錄

引言 早在大學的時候&#xff0c;我就期望做一款屬于自己的 APP&#xff0c;可惜那時不懂技術。現在有了技術&#xff0c;但卻沒有時間。好在 AI 的快速發展終于讓我完成了這個愿望。于是&#xff0c;我用半天的時間&#xff0c;用 AI 生成了一個純前端的 H5 程序&#xff1a;…

簡述C++ nlohmann/json 庫

目錄 JSON概述 nlohmann/json 庫的使用 創建json數組/對象 字符串解析&#xff08;parse反序列化&#xff09; 數據訪問 序列化 文件讀寫 JSON概述 JSON(JavaScrip Object Notation)是一種輕量級、跨語言的數據交換格式。它基于 ECMAScript 子集&#xff0c;以獨立于編程…

定制開發開源AI智能名片與S2B2C商城小程序的內容分發體系構建:基于“1+N“素材復用模型的創新實踐

摘要&#xff1a;在數字內容爆炸式增長的當下&#xff0c;本文針對內容分發效率低下的行業痛點&#xff0c;提出基于"定制開發開源AI智能名片S2B2C商城小程序"的一體化解決方案。通過構建"1篇長文10條長視頻20條短視頻10個平臺"的素材復用公式&#xff0c;…

c++26新功能—hive容器

一、容器的演進 科學進步的過程一般來說都是從先解決常用的、迫切的問題開始&#xff0c;然后再逐步解決一些少見不迫切的問題&#xff0c;直到最終解決到認知程度內的諸多問題。舉一個網上的例子&#xff0c;以前說咱們無法生產水筆的尖頭上的鋼球&#xff0c;其實這對于國內…

Kafka 源碼剖析:消息存儲與協議實現(二)

四、協議實現機制探秘 4.1 生產者協議 4.1.1 消息發送流程 Producer 在向 Kafka 集群發送消息時&#xff0c;首先會根據分區策略選擇目標分區 。常見的分區策略有輪詢、按消息鍵的哈希值分區以及自定義分區策略 。如果生產者在發送消息時指定了分區號&#xff0c;那么消息就…

Vue.js 與 TypeScript:最佳實踐

1. 引言 Vue.js 是一個漸進式、靈活的 JavaScript 框架&#xff0c;廣泛用于構建用戶界面和單頁應用&#xff08;SPA&#xff09;。而 TypeScript 是 JavaScript 的一個超集&#xff0c;添加了靜態類型和其他高級特性。將兩者結合使用&#xff0c;可以幫助開發者構建更具可維護…

webpack5 css-loader:從基礎到原理

webpack 處理樣式 webpack本身是不能識別樣式資源的&#xff0c;需要借助Loader來幫助webpack解析樣式資源&#xff0c;樣式資源包括但不限于css/less/sass/scss/styl 未使用樣式處理加載器前 運行webpack打包命令 bash npx webpack報錯信息如圖&#xff0c;提示無法識別css…

【GESP】C++三級練習 luogu-B2096 直方圖

GESP C三級練習&#xff0c;一維數組練習&#xff0c;難度★★☆☆☆。 題目題解詳見&#xff1a;【GESP】C三級練習 luogu-B2096 直方圖 | https://www.coderli.com/gesp-3-luogu-b2096/ 【GESP】C三級練習 luogu-B2096 直方圖 | OneCoderGESP C三級練習&#xff0c;一維數組…