mac本地部署Qwq-32b記錄

導語

昨天看到阿里開源了Qwq-32b,號稱性能可以媲美Deepseek-R1。今天晚上有空就在Mac上折騰了一下,使用ollma進行了部署,效果感覺還不錯,特此記錄。

環境

硬件

  • 型號:Macbook M1 Pro 14寸
  • 內存:32G

環境配置

首先需要安裝ollama,直接前往Ollama官網下載對應系統版本安裝包并進行安裝即可。

之后,打開命令行(mac是zsh),輸入

jiexing@MacBook-M1-Pro ~ % ollama run qwq
pulling manifest 
pulling c62ccde5630c... 100% ▕█████████████████████████████████████████████████████████████████████████████████████████████████████▏  19 GB                         
pulling 41190096a061... 100% ▕█████████████████████████████████████████████████████████████████████████████████████████████████████▏ 1.2 KB                         
pulling d18a5cc71b84... 100% ▕█████████████████████████████████████████████████████████████████████████████████████████████████████▏  11 KB                         
pulling 4afe5edfdb51... 100% ▕█████████████████████████████████████████████████████████████████████████████████████████████████████▏   77 B                         
pulling 6a8faa2fb8b0... 100% ▕█████████████████████████████████████████████████████████████████████████████████████████████████████▏  488 B                         
verifying sha256 digest 
writing manifest 
success 
>>> 請介紹一下你自己
<think></think>你好!我是通義千問,阿里巴巴集團旗下的超大規模語言模型。我可以幫助你回答問題、創作文字,比如寫故事、寫公文、寫郵件、寫劇本,進行邏輯推理、編程等。我熟練掌握多種語言,包括但不限于中文、英文、德語、法語、西班牙語等。如果你有任何問題或需要幫助,歡迎隨時告訴我!

WebUI搭建

完成部署后,看著簡陋的命令行背景,感覺還是不如chatgpt、Deepseek那些網頁版體驗好,于是找了一下如何部署一個Web UI。主要參考ollama-webui-lite項目,嘗試如下:

首先需要clone項目:

git clone https://github.com/ollama-webui/ollama-webui-lite.git
cd ollama-webui-lite

然后運行

yarn

結果我這里報錯

zsh command not found yarn

于是我使用brew來安裝yarn,直接brew install yarn是無法成功的,經過搜索發現需要更新brew update,然后順利安裝yarn。

在運行之前,還需要確保本機的node>=16,可以直接使用
brew install node來安裝。

啟動界面

在項目目錄下,運行yarn dev,即可成功設置WebUI,點擊 http://localhost:3000/ 即可打開本地的WebUI。

jiexing@MacBook-M1-Pro ollama-webui-lite % yarn dev
yarn run v1.22.22
$ vite dev --host --port 3000Forced re-optimization of dependenciesVITE v4.5.9  ready in 499 ms?  Local:   http://localhost:3000/?  Network: http://192.168.71.174:3000/?  Network: http://10.50.50.18:3000/?  press h to show help

在這里插入圖片描述

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/web/72152.shtml
繁體地址,請注明出處:http://hk.pswp.cn/web/72152.shtml
英文地址,請注明出處:http://en.pswp.cn/web/72152.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

blender學習25.3.11

【05-進階篇】Blender咖啡小場景之咖啡杯建模_嗶哩嗶哩_bilibili 杯子 首先做一個圓柱體 循環切割 crtlr 往下拖拽 框住按s往里收 Gz向上點 點擊頂面按插入i&#xff0c;往里收一下&#xff0c;這樣就插入了一個面 插入完成之后選中這個面&#xff0c;按下鍵盤的擠壓E 然后…

數據可信、隱私可控:CESS 如何打造波卡生態數據新基建?

原文&#xff1a;https://messari.io/report/cess-network-a-deep-dive-into-programmable-data-value-infrastructure作者&#xff1a;Messari編譯&#xff1a;OneBlock波卡生態一直以來以其跨鏈互操作性和靈活性吸引了眾多創新項目&#xff0c;尤其是在 DePIN&#xff08;去中…

Android 列表頁面終極封裝:SmartRefreshLayout + BRVAH 實現下拉刷新和加載更多

在 Android 開發中&#xff0c;列表頁面是常見的 UI 設計模式&#xff0c;而下拉刷新和加載更多是提升用戶體驗的關鍵功能。本文將帶你從零開始&#xff0c;封裝一個高復用性的 SmartRefreshHelper 工具類&#xff0c;結合 SmartRefreshLayout 和 BRVAH&#xff0c;實現高效、靈…

css基本功

為什么 ::first-letter 是偽元素&#xff1f; ::first-letter 的作用是選擇并樣式化元素的第一個字母&#xff0c;它創建了一個虛擬的元素來包裹這個字母&#xff0c;因此屬于偽元素。 grid布局 案例一 <!DOCTYPE html> <html lang"zh-CN"><head&…

基于WebRTC技術的EasyRTC嵌入式音視頻SDK:多平臺兼容與性能優化

在當今數字化、智能化的時代背景下&#xff0c;實時音視頻通信技術已成為眾多領域不可或缺的關鍵技術。基于WebRTC技術的EasyRTC嵌入式音視頻SDK&#xff0c;憑借其在ARM、Linux、Windows、安卓、iOS等多平臺上的兼容性&#xff0c;為開發者提供了強大的工具&#xff0c;推動了…

【Pandas】pandas Series last_valid_index

Pandas2.2 Series Time Series-related 方法描述Series.asfreq(freq[, method, how, …])用于將時間序列數據轉換為指定的頻率Series.asof(where[, subset])用于返回時間序列中指定索引位置的最近一個非缺失值Series.shift([periods, freq, axis, …])用于將時間序列數據沿指…

批量將 Excel 文檔中的圖片提取到文件夾

前面我們介紹過如何批量刪除 Excel 文檔中的所有圖片或者指定的圖片&#xff0c;其中就需要用到批量提取 Excel 文檔中圖片的操作。我們如何才能夠將 Excel 文檔中的圖片快速的提取出來呢&#xff1f;其實單個 Excel 文檔中的圖片提取到文件夾中是有多種方法可以完成的&#xf…

【氮化鎵】開態GaN HEMTs中氧誘導Vth漂移的缺陷演化

2019年,中國工程物理研究院電子工程研究所的Rong Wang等人基于實驗研究和第一性原理計算,研究了開啟態偏置下AlGaN/GaN高電子遷移率晶體管(HEMTs)中氧誘導的閾值電壓(Vth)漂移的缺陷演化機理。實驗結果表明,在開啟態應力作用下,T型柵AlGaN/GaN HEMT的Vth發生了明顯的負…

谷粒商城:性能壓測JVM堆區

目錄 Kit Apache JMeter VisualVM 堆內存 jvm內存模型 垃圾回收&#xff08;Garbage Collection, GC&#xff09; 新對象分配內存 GC步驟 MinorGC 性能優化 影響因素 優化 nginx動靜分離 優化三級分類獲取 Jvm參數配置堆區 測試 Kit Apache JMeter 壓力測試&…

STM32全系大閱兵(2)

接前一篇文章:STM32全系大閱兵(1) 本文內容參考: STM32家族系列的區別_stm32各個系列區別-CSDN博客 STM32--STM32 微控制器詳解-CSDN博客

7、基于osg引擎實現讀取vtk數據通過著色器實現簡單體渲染(1)

1、頂點著色器代碼 #version 110 /* GLSL 1.10需要顯式聲明精度 (OpenGL ES要求) */ #ifdef GL_ES precision highp float; #endif // 體數據采樣步長 uniform float xStepSize,yStepSize,zStepSize; // 體數據紋理和顏色紋理 uniform sampler3D baseTexture; uniform sample…

基于Ollama平臺部署的Qwen大模型實現聊天機器人

文章目錄 基于Ollama平臺部署的Qwen大模型實現聊天機器人1 概述2 技術棧2.1 開發技術2.2 環境 3 實現步驟3.1 環境搭建3.1.1 WSL配置及Ubuntu安裝3.1.2 Ollama安裝及模型部署 3.2 模塊安裝3.2.1 安裝Streamlit 1.42.23.2.2 安裝requests 2.32.33.2.3 安裝ollama 0.4.7 3.3 后端…

用DasViewer的時候3Dtiles 轉osgb 可以直接指定目標坐標系嗎?

沒有指定坐標系選項&#xff0c;可以轉換后&#xff0c;再進行一次坐標系轉換。 DasViewer是一款免費極速實景三維模型瀏覽器&#xff0c;采用多細節層次模型逐步自適應加載技術,讓用戶在極低的電腦配置下,也能流暢的加載較大規模實景三維模型,提供方便快捷的數據瀏覽操作。 目…

【MySQL】MySQL服務器——mysqld

1.MySQL服務器 是名為 mysqld 的數據庫服務器程序&#xff0c;和“主機”&#xff08;host&#xff09;不一樣是一個多線程的單進程管理對磁盤和內存中數據庫的訪問支持并發的客戶端連接支持多個存儲引擎&#xff0c;常見的存儲引擎包括InnoDB、MyISAM、Memory、Archive支持事…

vue啟動 localhost無法訪問

1. localhost 和 127.0.0.1 雖然都指向本機&#xff0c;但它們有細微的區別&#xff1a; - localhost 是一個域名&#xff0c;需要通過 DNS 解析或本地 hosts 文件解析為 IP 地址 - 127.0.0.1 是直接的 IP 地址&#xff0c;不需要解析過程 2. 無法訪問 localhost 的可…

爬蟲案例十三js逆向模擬登錄中大網校

提示&#xff1a;文章寫完后&#xff0c;目錄可以自動生成&#xff0c;如何生成可參考右邊的幫助文檔 文章目錄 前言一、網站分析二、代碼 前言 提示&#xff1a;這里可以添加本文要記錄的大概內容&#xff1a; js 逆向模擬登錄中大網校 提示&#xff1a;以下是本篇文章正文內…

Java IO 與文件系統:File 類與流操作詳解

在 Java 編程中&#xff0c;IO&#xff08;輸入輸出&#xff09;操作是處理文件和數據流的核心部分。本文將圍繞文件系統、硬盤存儲、Java 的 File 類以及 InputStream 和 OutputStream 的使用進行詳細總結&#xff0c;幫助讀者全面掌握 Java IO 編程的核心知識。 一、IO、存儲…

我與DeepSeek讀《大型網站技術架構》(13)- 大型網站典型故障案例分析

文章目錄 第13章 大型網站典型故障案例分析日志管理缺陷引發的故障高并發數據庫訪問問題鎖機制濫用導致服務超時緩存運維不當引發的全站癱瘓流程不規范導致的線上事故編程習慣問題引發功能異常生產環境濫用問題其他典型問題總結 第13章 大型網站典型故障案例分析 本章通過九個…

Git與GitHub:它們是什么,有什么區別與聯系?

1.Git是什么&#xff1f; Git 是一個開源的、分布式版本控制系統&#xff08;Version Control System, VCS&#xff09;&#xff0c;由 Linus Torvalds 于 2005 年開發&#xff0c;最初用于管理 Linux 內核的開發。它的核心功能是跟蹤文件的變更歷史&#xff0c;幫助開發者高效…

江科大51單片機筆記【12】AT24C02(I2C總線)

寫在前言 此為博主自學江科大51單片機&#xff08;B站&#xff09;的筆記&#xff0c;方便后續重溫知識 在后面的章節中&#xff0c;為了防止篇幅過長和易于查找&#xff0c;我把一個小節分成兩部分來發&#xff0c;上章節主要是關于本節課的硬件介紹、電路圖、原理圖等理論知識…