本地使用 modelscope 大模型 來進行文本生成視頻(Text-to-Video)

?

  • 1. ? 創建并激活 Conda 環境(Python 3.8)

  • conda create -n modelscope python=3.8 -yconda activate modelscope

  • 2.? 安裝了 PyTorch(CPU 版本)

  • 如果你是 CPU-only 用戶(沒有 NVIDIA 顯卡 或不想用 GPU):

    conda install pytorch torchvision torchaudio cpuonly -c pytorch

    驗證安裝是否成功
    進入 Python shell:

    python
    然后測試一下:

    import torch
    print(torch.__version__)
    print(torch.cuda.is_available()) ?# True 表示 GPU 可用

  • 3.? 安裝了 TensorFlow

  • ? 環境名是 modelscope

4.現在你想在本地使用 modelscope 來進行文本生成視頻(Text-to-Video)。

遇到的問題:

1.No module named 'sortedcontainers'Exce

pip install sortedcontainers

Traceback (most recent call last):
? File "text-to-video.py", line 7, in <module>
? ? pipe = pipeline('text-to-video-synthesis', model='damo/text-to-video-synthesis')
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/pipelines/builder.py", line 151, in pipeline
? ? model = normalize_model_input(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/pipelines/builder.py", line 39, in normalize_model_input
? ? model = snapshot_download(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/snapshot_download.py", line 108, in snapshot_download
? ? return _snapshot_download(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/snapshot_download.py", line 289, in _snapshot_download
? ? _download_file_lists(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/snapshot_download.py", line 540, in _download_file_lists
? ? _download_single_file(filtered_repo_files)
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/utils/thread_utils.py", line 66, in wrapper
? ? results.append(future.result())
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/concurrent/futures/_base.py", line 437, in result
? ? return self.__get_result()
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/concurrent/futures/_base.py", line 389, in __get_result
? ? raise self._exception
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/concurrent/futures/thread.py", line 57, in run
? ? result = self.fn(*self.args, **self.kwargs)
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/snapshot_download.py", line 527, in _download_single_file
? ? download_file(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/file_download.py", line 691, in download_file
? ? file_digest = http_get_model_file(
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/modelscope/hub/file_download.py", line 582, in http_get_model_file
? ? retry = retry.increment('GET', url, error=e)
? File "/home/powersys/miniconda3/envs/modelscope/lib/python3.8/site-packages/urllib3/util/retry.py", line 519, in increment
? ? raise MaxRetryError(_pool, url, reason) from reason ?# type: ignore[arg-type]
urllib3.exceptions.MaxRetryError: None: Max retries exceeded with url: https://www.modelscope.cn/api/v1/models/damo/text-to-video-synthesis/repo?Revision=v1.1.0&FilePath=text2video_pytorch_model.pth (Caused by OSError(28, 'No space left on device'))

from modelscope.pipelines import pipeline
from modelscope.outputs import OutputKeys
from modelscope.models import Model
import os# 文生視頻 pipeline
pipe = pipeline('text-to-video-synthesis', model='/home/powersys/work/miniconda/damo/text-to-video-synthesis')# 指定輸出路徑
output = pipe({'text': 'A panda is eating bamboo'})  # 你可以替換成中文,如 "一個小貓在跳舞"print('輸出視頻路徑:', output[OutputKeys.OUTPUT_VIDEO])

在線下載呢?但是在線下載的路徑要指定到/home/powersys/work/miniconda/ 這個路徑來

在線下載 ModelScope 模型,并將模型緩存到你指定的目錄 /home/powersys/work/miniconda/,可以通過設置環境變量 MODELSCOPE_CACHE 來實現。


? 一步一步操作指南

? 第一步:設置緩存路徑

執行以下命令,將 ModelScope 的緩存路徑指定為 /home/powersys/work/miniconda

export MODELSCOPE_CACHE=/home/powersys/work/miniconda

?? 注意:每次重啟終端后都要重新設置一次,或者寫入 .bashrc 文件中持久保存:

echo 'export MODELSCOPE_CACHE=/home/powersys/work/miniconda' >> ~/.bashrc source ~/.bashrc

from modelscope.pipelines import pipeline
from modelscope.outputs import OutputKeys
from modelscope.models import Model
import os# 文生視頻 pipeline
pipe = pipeline('text-to-video-synthesis', model='damo/text-to-video-synthesis')# 指定輸出路徑
output = pipe({'text': 'A panda is eating bamboo'})  # 你可以替換成中文,如 "一個小貓在跳舞"print('輸出視頻路徑:', output[OutputKeys.OUTPUT_VIDEO])

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/910186.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/910186.shtml
英文地址,請注明出處:http://en.pswp.cn/news/910186.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

文生視頻(Text-to-Video)

&#x1f552; 生成時間&#xff1a;每張圖大概 10–60 秒&#xff08;取決于設備&#xff09; ? 二、文生視頻&#xff08;Text-to-Video&#xff09; 以下項目中&#xff0c;很多都基于 SD 模型擴展&#xff0c;但視頻生成復雜度高&#xff0c;生成時間一般 超過 30 秒&am…

CLion + STM32環境配置,親測有效(2025.06.19記)

CLion STM32環境配置 遇到的問題描述&#xff1a; > "moniton" command not supported by this target. > You cant do that when your target is exec > 上傳完成&#xff0c;但存在問題 > monitor reset > "monitor" command not …

借助ChatGPT快速開發圖片轉PDF的Python工具

一、開發背景與適用場景 隨著數字文檔處理需求的激增&#xff0c;圖片轉PDF的需求日益廣泛。從學生提交圖像化作業&#xff0c;到教師整合掃描試卷等資料&#xff0c;再到行政人員歸檔證件照片&#xff0c;工作中的方方面面都離不開圖片的處理。如何高效、批量地將多個圖片文件…

SuGAR代碼精簡解讀

目錄 一、全流程訓練腳本 train_full_pipeline.py 二、核心訓練邏輯 train.py 粗優化 (coarse_density_and_dn_consistency.py) 網格提取 (extract_mesh_from_coarse_sugar) 精優化 (refined_training) 兩次優化&#xff08;粗優化和精優化&#xff09;中使用的損失函數及…

大模型安全關鍵技術研究

? 引言 隨著人工智能技術的迅猛發展&#xff0c;大模型已成為推動各行業變革的核心力量。從智能客服、醫療影像識別到金融風險預測&#xff0c;大模型的應用場景不斷拓展&#xff0c;深刻改變著人們的生產生活方式。大模型已經轉變為AI領域的基礎設施&#xff0c;為解決各種…

java面試題04成員變量和局部變量的區別

成員變量(Member Variable)和局部變量(Local Variable)是面向對象編程中兩種作用域和生命周期不同的變量,主要區別體現在以下幾個方面: 1. 聲明位置 成員變量: 聲明在類內部、方法/構造器/代碼塊外部。 例如: public class Person {// 成員變量(實例變量)private Str…

升級到 .NET 9 分步指南

隨著激動人心的 .Net 9 更新正式發布&#xff0c;漫長的等待終于結束了。它帶來了一些令人驚嘆的特性&#xff0c;例如改進的 LINQ 功能、HybridCache 等等。此外&#xff0c;憑借其卓越的性能提升、更佳的安全性、更完善的協議和更易維護的特性&#xff0c;它必將吸引開發者和…

day30打卡

# 導入模塊 import math print("方式1&#xff1a;使用 import math") print(f"圓周率π的值&#xff1a;{math.pi}") print(f"2的平方根&#xff1a;{math.sqrt(2)}\n") # 導入特定項 from math import pi, sqrt print("方式2&#…

優化數據庫查詢

優化數據庫查詢 在實際開發中,數據庫查詢的性能直接關系到系統響應速度和用戶體驗。尤其在高并發環境下,低效的SQL語句會成為瓶頸,導致系統負載升高,甚至引發宕機。因此,查詢優化是數據庫性能優化中最為關鍵的一環。 為了系統性地理解數據庫查詢優化策略,本節將從SQL語…

【LeetCode#第198題】打家劫舍(一維dp)

198. 打家劫舍 - 力扣&#xff08;LeetCode&#xff09; 你是一個專業的小偷&#xff0c;計劃偷竊沿街的房屋。每間房內都藏有一定的現金&#xff0c;影響你偷竊的唯一制約因素就是相鄰的房屋裝有相互連通的防盜系統&#xff0c;如果兩間相鄰的房屋在同一晚上被小偷闖入&#…

微前端MFE:(React 與 Angular)框架之間的通信方式

在 微前端&#xff08;MFE, Micro Frontends&#xff09; 中使用 CustomEvent 是非常常見的&#xff0c;尤其是在不同子應用&#xff08;Micro Apps&#xff09;之間通信的時候。今天將以React 主應用 ? Angular 子應用 之間的通信進行示例 React 主應用 <-> Angular 子…

408考研逐題詳解:2010年第1題——理解棧的基本操作

2010年第1題 若元素 a&#xff0c;b&#xff0c;c&#xff0c;d&#xff0c;e&#xff0c;f 依次進棧&#xff0c;允許進棧、退棧操作交替進行&#xff0c;但不允許連續三次進行退棧操作&#xff0c;則不可能得到的出棧序列是&#xff08; &#xff09; A. dcebfa \qquad B.…

python追加合并excel效率記錄

第一種合并方法&#xff1a; 在sheet的第一行&#xff0c;追加新表concat舊表 read_excel讀取舊表全部 to_excel新表追加寫入舊表 需要的時間&#xff1a; 第二種合并方法&#xff1a; 在sheet的最后一行&#xff0c;直接追加新表 load_book只讀用來獲取舊表sheet行數 read_ex…

公鑰加密與簽名算法計算詳解(含計算題例子)

一、RSA 加密算法 密鑰生成&#xff1a; 選兩個大素數 p 和 q計算 n p q計算 φ(n) (p-1)(q-1)選整數 e 滿足 1 < e < φ(n) 且 gcd(e, φ(n)) 1計算 d 滿足 d e ≡ 1 mod φ(n) 公鑰&#xff1a;(e, n) 私鑰&#xff1a;(d, n) 加密&#xff1a; c ≡ m? mod…

63 網絡交互的過程中目標設備的選擇

前言 這里主要是 調研一下 發送網絡數據包的過程中 選擇網絡設備 比如 向本機發送信息, 走的是 lo 向局域網其他主機發送信息, 走無線網卡 或者 有線網卡 基于 linux 的調試 這里主要是基于 ping 192.168.1.2 的調試 skb->dev 的初始化是在 skb->_skb_refdst 初…

DE2-115板子上用 Verilog編程實現一個分秒計數器

一、實驗目的 掌握 Verilog 語言在硬件描述中的應用&#xff0c;通過編程實現分秒計數器的邏輯功能。 學習并實踐按鍵消抖的原理與實現方法&#xff0c;提升對硬件電路中信號處理的理解。 熟悉在 DE2-115 開發板上進行 Verilog 程序的開發、調試及下載驗證流程&#xff0c;將…

R4 LSTM-火災溫度預測

import tensorflow as tf import pandas as pd import numpy as npgpus tf.config.list_physical_devices("GPU") if gpus:tf.config.experimental.set_memory_growth(gpus[0], True) #設置GPU顯存用量按需使用tf.config.set_visible_devices([gpus[0]],&…

什么是跨域問題?后端如何解決跨域問題?

跨域問題是指瀏覽器為了安全&#xff0c;對不同域&#xff08;包含不同協議、不同端口或不同主機名&#xff09;的請求進行限制&#xff0c;從而導致請求無法正常訪問后端接口。 跨域問題的產生源于瀏覽器的同源策略&#xff08;Same-Origin Policy&#xff09;&#xff0c;這…

vue | rollup 打包 | 配置 rollup.config.js 文件,更改 rollup的行為

原因&#xff1a;將入口文件 轉為 esm 和 umd 兩種格式&#xff0c;要配置 rollup Rollup 已內置到 vite 工具中&#xff0c; 命令行打包&#xff0c;參數多&#xff0c;麻煩——》解決&#xff1a;創建配置文件&#xff0c;js 寫的&#xff0c;rollup.config.js 配置 rollup.…

服務器中物理處理器和邏輯處理器的區別?

在服務器或任何計算機系統中&#xff0c;**物理處理器&#xff08;Physical Processor&#xff09;和邏輯處理器&#xff08;Logical Processor&#xff09;**是兩個不同的概念&#xff0c;它們分別代表了硬件層面和操作系統層面的處理能力。 物理處理器&#xff08;Physical P…