Vue項目中遇到了大文件分片上傳的問題

Vue項目中遇到了大文件分片上傳的問題,之前用過webuploader,索性就把Vue2.0與webuploader結合起來使用,封裝了一個vue的上傳組件,使用起來也比較舒爽。

上傳就上傳吧,為什么搞得那么麻煩,用分片上傳?

分片與并發結合,將一個大文件分割成多塊,并發上傳,極大地提高大文件的上傳速度。
當網絡問題導致傳輸錯誤時,只需要重傳出錯分片,而不是整個文件。另外分片傳輸能夠更加實時的跟蹤上傳進度。

實現后的界面:

主要是兩個文件,封裝的上傳組件和具體的ui頁面,上傳組件代碼下面有列出來。這兩個頁面的代碼放到github上了:https://github.com/shady-xia/Blog/tree/master/vue-webuploader。

在項目中引入webuploader

  1. 先在系統中引入jquery(插件基于jq,坑爹啊!),如果你不知道放哪,那就放到index.html中。
  2. 在官網上下載Uploader.swfwebuploader.min.js,可以放到項目靜態目錄static下面;在index.html中引入webuploader.min.js。
    (無需單獨再引入webuploader.css,因為沒有幾行css,我們可以復制到vue組件中。)
<script src="/static/lib/jquery-2.2.3.min.js"></script>
<script src="/static/lib/webuploader/webuploader.min.js"></script>

需要注意的點:

  1. 在vue組件中,通過import './webuploader';的方式引入webuploader,會報''caller', 'callee', and 'arguments' properties may not be accessed on strict mode ...'的錯, 這是因為你的babel使用了嚴格模式,而caller這些在嚴格模式下禁止使用。所以可以直接在index.html中引入webuploader.js,或者手動去解決babel中'use strict'的問題。

基于webuploader封裝Vue組件

封裝好的組件upload.vue如下,接口可以根據具體的業務進行擴展。

注意:功能和ui分離,此組建封裝好了基本的功能,沒有提供ui,ui在具體的頁面上去實現。

<template><div class="upload"></div>
</template>
<script>export default {name: 'vue-upload',props: {accept: {type: Object,default: null,},// 上傳地址url: {type: String,default: '',},// 上傳最大數量 默認為100fileNumLimit: {type: Number,default: 100,},// 大小限制 默認2MfileSingleSizeLimit: {type: Number,default: 2048000,},// 上傳時傳給后端的參數,一般為token,key等formData: {type: Object,default: null},// 生成formData中文件的key,下面只是個例子,具體哪種形式和后端商議keyGenerator: {type: Function,default(file) {const currentTime = new Date().getTime();const key = `${currentTime}.${file.name}`;return key;},},multiple: {type: Boolean,default: false,},// 上傳按鈕IDuploadButton: {type: String,default: '',},},data() {return {uploader: null};},mounted() {this.initWebUpload();},methods: {initWebUpload() {this.uploader = WebUploader.create({auto: true, // 選完文件后,是否自動上傳swf: '/static/lib/webuploader/Uploader.swf',  // swf文件路徑server: this.url,  // 文件接收服務端pick: {id: this.uploadButton,     // 選擇文件的按鈕multiple: this.multiple,   // 是否多文件上傳 默認falselabel: '',},accept: this.getAccept(this.accept),  // 允許選擇文件格式。threads: 3,fileNumLimit: this.fileNumLimit, // 限制上傳個數//fileSingleSizeLimit: this.fileSingleSizeLimit, // 限制單個上傳圖片的大小formData: this.formData,  // 上傳所需參數chunked: true,          //分片上傳chunkSize: 2048000,    //分片大小duplicate: true,  // 重復上傳});// 當有文件被添加進隊列的時候,添加到頁面預覽this.uploader.on('fileQueued', (file) => {this.$emit('fileChange', file);});this.uploader.on('uploadStart', (file) => {// 在這里可以準備好formData的數據//this.uploader.options.formData.key = this.keyGenerator(file);});// 文件上傳過程中創建進度條實時顯示。this.uploader.on('uploadProgress', (file, percentage) => {this.$emit('progress', file, percentage);});this.uploader.on('uploadSuccess', (file, response) => {this.$emit('success', file, response);});this.uploader.on('uploadError', (file, reason) => {console.error(reason);this.$emit('uploadError', file, reason);});this.uploader.on('error', (type) => {let errorMessage = '';if (type === 'F_EXCEED_SIZE') {errorMessage = `文件大小不能超過${this.fileSingleSizeLimit / (1024 * 1000)}M`;} else if (type === 'Q_EXCEED_NUM_LIMIT') {errorMessage = '文件上傳已達到最大上限數';} else {errorMessage = `上傳出錯!請檢查后重新上傳!錯誤代碼${type}`;}console.error(errorMessage);this.$emit('error', errorMessage);});this.uploader.on('uploadComplete', (file, response) => {this.$emit('complete', file, response);});},upload(file) {this.uploader.upload(file);},stop(file) {this.uploader.stop(file);},// 取消并中斷文件上傳cancelFile(file) {this.uploader.cancelFile(file);},// 在隊列中移除文件removeFile(file, bool) {this.uploader.removeFile(file, bool);},getAccept(accept) {switch (accept) {case 'text':return {title: 'Texts',exteensions: 'doc,docx,xls,xlsx,ppt,pptx,pdf,txt',mimeTypes: '.doc,docx,.xls,.xlsx,.ppt,.pptx,.pdf,.txt'};break;case 'video':return {title: 'Videos',exteensions: 'mp4',mimeTypes: '.mp4'};break;case 'image':return {title: 'Images',exteensions: 'gif,jpg,jpeg,bmp,png',mimeTypes: '.gif,.jpg,.jpeg,.bmp,.png'};break;default: return accept}},},};
</script>
<style lang="scss">
// 直接把官方的css粘過來就行了
</style>

使用封裝好的上傳組件

新建頁面,使用例子如下:

ui需要自己去實現。大概的代碼可以點這里。

<vue-uploadref="uploader"url="xxxxxx"uploadButton="#filePicker"multiple@fileChange="fileChange"@progress="onProgress"@success="onSuccess"
></vue-upload>

分片的原理及流程

當我們上傳一個大文件時,會被插件分片,ajax請求如下:

  1. 多個upload請求均為分片的請求,把大文件分成多個小份一次一次向服務器傳遞
  2. 分片完成后,即upload完成后,需要向服務器傳遞一個merge請求,讓服務器將多個分片文件合成一個文件

分片

可以看到發起了多次upload的請求,我們來看看upload發送的具體參數:

第一個配置(content-disposition)中的guid和第二個配置中的access_token,是我們通過webuploader配置里的formData,即傳遞給服務器的參數
后面幾個配置是文件內容,id、name、type、size等
其中chunks為總分片數,chunk為當前第幾個分片。圖片中分別為12和9。當你看到chunk是11的upload請求時,代表這是最后一個upload請求了。

合并

分片后,文件還未整合,數據大概是下面這個樣子:

做完了分片后,其實工作還沒完,我們還要再發送個ajax請求給服務器,告訴他把我們上傳的幾個分片合并成一個完整的文件。

我怎么知道分片上傳完了,我在何時做合并?

webuploader插件有一個事件是uploadSuccess,包含兩個參數,file和后臺返回的response;當所有分片上傳完畢,該事件會被觸發,
我們可以通過服務器返回的字段來判斷是否要做合并了。
比如后臺返回了needMerge,我們看到它是true的時候,就可以發送合并的請求了。

存在的已知問題

在做單文件暫停與繼續上傳時,發現了這個插件的bug:

1、當設置的threads>1,使用單文件上傳功能,即stop方法傳入file時,會報錯Uncaught TypeError: Cannot read property 'file' of undefined

出錯的源碼如下:這是因為暫停時為了讓下一個文件繼續傳輸,會將當前的pool池中pop掉暫停的文件流。這里做了循環,最后一次循環的時候,v是undefined的。

2、設置的threads為1,能正常暫停,但是暫停后再繼續上傳是失敗的。

原理和上一個一樣,暫停時把當前文件流在pool中全部pop了,當文件開始upload的時候,會檢查當期pool,而此時已經沒有之前暫停的文件流了。

如果是針對所有文件整體的暫停和繼續,功能是正常的。
如果想實現單文件的暫停和繼續功能,需要修改源碼(我改了下源碼,發現耦合度較高,工程量比想象的大,遂放棄)

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/387081.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/387081.shtml
英文地址,請注明出處:http://en.pswp.cn/news/387081.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

NDK學習筆記-使用現有so動態庫

前面將的都是如何使用C/C文件生成so動態庫&#xff0c;那么在使用別人的so動態庫的時候應該怎么做呢&#xff1f;這篇文章就是使用一個變聲功能的動態庫&#xff0c;完成對于以有so動態庫的說明。 動態庫來源 在互聯網中&#xff0c;有著許許多多動態庫&#xff0c;很多廠商也對…

Spring cloud系列十四 分布式鏈路監控Spring Cloud Sleuth

1. 概述 Spring Cloud Sleuth實現對Spring cloud 分布式鏈路監控 本文介紹了和Sleuth相關的內容&#xff0c;主要內容如下&#xff1a; Spring Cloud Sleuth中的重要術語和意義&#xff1a;Span、Trance、AnnotationZipkin中圖形化展示分布式鏈接監控數據并說明字段意義Spring …

Linux源碼編譯安裝程序

一、程序的組成部分 Linux下程序大都是由以下幾部分組成&#xff1a; 二進制文件&#xff1a;也就是可以運行的程序文件 庫文件&#xff1a;就是通常我們見到的lib目錄下的文件 配置文件&#xff1a;這個不必多說&#xff0c;都知道 幫助文檔&#xff1a;通常是我們在linux下用…

selenium用法詳解

selenium用法詳解 selenium主要是用來做自動化測試&#xff0c;支持多種瀏覽器&#xff0c;爬蟲中主要用來解決JavaScript渲染問題。 模擬瀏覽器進行網頁加載&#xff0c;當requests,urllib無法正常獲取網頁內容的時候一、聲明瀏覽器對象 注意點一&#xff0c;Python文件名或者…

haoop筆記

8:00 2019/3/141&#xff1a;什么是hadoop? hadoop是解決大數據問題的一整套技術方案2&#xff1a;hadoop的組成? 核心框架 分布式文件系統 分布式計算框架 分布式資源分配框架 hadoop對象存儲 機器計算3&#xff1a;hadoop 云計算 大數據 微服務 人工智能關系 參見word學習…

Sleuth則是用來共方便的集成Zipkin。

簡述 使用 spring cloud 用到最多的是各種rest服務調用&#xff0c;Twitter的Zipkin 是一種實現分布式跟蹤解決方案&#xff0c;Sleuth則是用來共方便的集成Zipkin。調用跟蹤系統的業務場景 隨著服務的拆分&#xff0c;系統的模塊變得越來越多&#xff0c;不同的模塊可能由不同…

Spring Cloud 中 分布式事務解決方案 -- 阿里GTS的使用

1&#xff1a;依賴引入<!--gts相關--><!--數據庫連接--><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-jdbc</artifactId></dependency><dependency><groupId>mysql&…

《HTTP 權威指南》筆記:第十五章 實體與編碼

&#xfffc; 如果把 「HTTP 報文」想象為因特網貨運系統的「箱子」,那么「HTTP 實體」就是報文中的實際的「貨物」. 其中,實體又包含了「實體首部」 和 「實體主體」,實體首部用于描述各種參數,實體主體就是原始貨物. 常見的實體首部 實體的大小: Content-Length 定義: 報文的…

Spring Cloud Sleuth進階實戰

為什么需要Spring Cloud Sleuth 微服務架構是一個分布式架構&#xff0c;它按業務劃分服務單元&#xff0c;一個分布式系統往往有很多個服務單元。由于服務單元數量眾多&#xff0c;業務的復雜性&#xff0c;如果出現了錯誤和異常&#xff0c;很難去定位。主要體現在&#xff…

Element表格嵌入復選框以及單選框

1&#xff0c;element 表格嵌入CheckBox 效果圖如下&#xff1a; 2&#xff0c;element結合checkBox實現單選效果如下&#xff1a; html代碼&#xff1a; <template><div><p>shopInfo</p><el-tableref"multipleTable":data"tableDat…

溫故之 “插入排序”

概念&#xff1a;將一個數據插入已經排好序的有序數組中&#xff0c;從而得到一個新的多一個數據的有序數組。 概念理解~~ 將要排序的是一個亂的數組int[] arrays {3, 2, 1, 3, 3}; 在未知道數組元素的情況下&#xff0c;我們只能把數組的第一個元素作為已經排好序的有序數據&…

實驗二3

#include "stdafx.h" #include "stdio.h" int main(int argc, char* argv[]) {int a,b,c; scanf("%d %d %d",&a,&b,&c);if(ab&&bc) printf("等邊三角形");else if((ab&&b!c)||(ac&&c!b)||(bc&a…

webpack來打包你的vue項目,如發現你的vendor.js過大

1.如果你使用了webpack來打包你的vue項目&#xff0c;如發現你的vendor.js過大則可以參考本文的解決方案. 2.造成過大的原因是因為在main.js導入第三庫太多時,webpack合并js時生成了vendor.js(我們習慣把第三方庫放在vendor里面)造成的.如下圖在main.js引用element-ui等第三方…

TF01 簡介

總覽 如何從實體中提取特征&#xff0c;對于很多傳統機器學習算法的性能有巨大影響。 一旦解決了數據表達和特征提取&#xff0c;很多人工智能任務也就解決了90%。 對許多機器學習算法來說&#xff0c;特征提取不是一件簡單的事情。 深度學習解決的核心問題之一就是自動的將簡…

K8s基本概念入門

序言 沒等到風來&#xff0c;綿綿小雨&#xff0c;所以寫個隨筆&#xff0c;聊聊k8s的基本概念。 k8s是一個編排容器的工具&#xff0c;其實也是管理應用的全生命周期的一個工具&#xff0c;從創建應用&#xff0c;應用的部署&#xff0c;應用提供服務&#xff0c;擴容縮容應用…