winform 線程監聽兩個目錄下的文件_vb.net 利用.net自帶的GZipStream壓縮或者解壓文件的代碼,不需要任何第三方控件...

網上很少有用VB寫的壓縮文件的代碼,但是,在網絡傳輸,文件下載,打包發布等等方面的需求又比較多,所以,借鑒了一下C#代碼的例子,改造成了VB用的類。另外加上了多層文件夾壓縮解壓。但是,因為時間有限,只是將文件全部讀取到緩存處理,所以,針對大文件沒有做特別的處理。例子里面有提示,根據需要自己改動一下吧。

文件:n459.com/file/25127180-478678624

以下內容無關:

-------------------------------------------分割線---------------------------------------------

在日常開發中,為了保證數據的一致性,我們一般都選擇關系型數據庫來存儲數據,如 MySQLOracle 等,因為關系型數據庫有著事務的特性。然而在并發量比較大的業務場景,關系型數據庫卻又往往會成為系統瓶頸,無法完全滿足我們的需求,所以就需要使用到緩存,而非關系型數據庫,即 NoSQL 數據庫往往又會成為最佳選擇。

NoSQL 數據庫最常見的解釋是 non-relational,也有人解釋為 Not Only SQL。非關系型數據庫不保證事務,也就是不具備事務 ACID 特性,這也是非關系型數據庫和關系型數據庫最大的區別,而我們即將介紹的 Redis 就屬于 NoSQL 數據庫的一種。

什么是 Redis

Redis 全稱是:REmote DIctionary Service,即遠程字典服務。Redis 是一個開源的(遵守 BSD 協議)、支持網絡、可基于內存亦可持久化的日志型、Key-Value 數據庫。Redis 具有以下特性:

  • 1、支持豐富的數據類型:字符串(strings),散列(hashes),列表(lists),集合(sets),有序集合(sorted sets),位圖等。
  • 2、功能豐富:提供了持久化機制,過期策略,訂閱/發布等功能。
  • 3、高性能,高可用且支持集群。
  • 4、提供了多種語言的 API

Redis 的安裝

  • 1、下載對應版本的安裝包,如:Redis 5.0.5 版本,其他版本也可以點擊這里進行下載。
  • 2、下載好之后傳到服務器指定目錄,執行命令 tar -zxvf redis-5.0.5.tar.gz 進行解壓。
  • 3、解壓成功之后,進入 Redis 主目錄,執行命令 make && make install PREFIX=/xxx/xxx/redis-5.0.5 進行安裝,如果不指定目錄,則默認是安裝在 /usr/local 目錄下。
  • 4、安裝成功之后可以看到 Redis 主目錄下多了一個 bin 目錄,bin 目錄內包含了一些可執行腳本。
  • 5、回到 Redis 主目錄下,找到 redis.conf 配置文件,將其中的配置 daemonize no 修改為 daemonize yes,表示在后臺啟動服務。
  • 6、然后就可以執行命令 /xxx/xxx/redis-5.0.5/bin/redis-server /xxx/xxx/redis-5.0.5/redis.conf 啟動 Redis 服務。

Redis 到底有多快

大家可能都知道 Redis 很快,可是 Redis 到底能有多快呢,比如 Redis 的吞吐量能達到多少?我想這就不是每一個人都能說的上來一個具體的數字了。

Redis 官方提供了一個測試腳本,可以供我們測試 Redis 的 吞吐量。

  • redis-benchmark -q -n 100000 可以測試常用命令的吞吐量。
  • redis-benchmark -t set,lpush -n 100000 -q 測試 Redis 處理 setlpush 命令的吞吐量。
  • redis-benchmark -n 100000 -q script load "redis.call('set','foo','bar')" 測試 Redis 處理 Lua 腳本等吞吐量。

下圖就是我這邊執行第一條命令的自測結果,可以看到大部分命令的吞吐量都可以達到 4 萬以上,也就是說每秒鐘可以處理 4 萬次以上請求:

26bd41b62e7f7c32ec2a069325b028c3.png

但是如果你以為這就是 Redis 的真實吞吐量,那就錯了。實際上,Redis 官方的測試結果是可以達到 10 萬的吞吐量,下圖就是官方提供的一個基準測試結果(縱坐標就是吞吐量,橫坐標是連接數):

3913d466b98469700c72d9a1fe190269.png

Redis 是單線程還是多線程

這個問題比較經典,因為在很多人的認知里,Redis 就是單線程的。然而 Redis4.0 版本開始就有了多線程的概念,雖然處理命令請求的核心模塊確實是保證了單線程執行,然而在其他許多地方已經有了多線程,比如:在后臺刪除對象,通過 Redis 模塊實現阻塞命令,生成 dump 文件,以及 6.0 版本中網絡 I/O 實現了多線程等,而且在未來 Redis 應該會有越來越多的模塊實現多線程。

所謂的單線程,只是說 Redis 的處理客戶端的請求(即執行命令)時,是單線程去執行的,并不是說整個 Redis 都是單線程。

Redis 為什么選擇使用單線程來執行請求

Redis 為什么會選擇使用單線程呢?這是因為 CPU 成為 Redis 瓶頸的情況并不常見,成為 Redis 瓶頸的通常是內存或網絡帶寬。例如,在一個普通的 Linux 系統上使用 pipelining 命令,Redis 可以每秒完成 100 萬個請求,所以如果我們的應用程序主要使用 O(N)O(log(N)) 復雜度的命令,它幾乎不會使用太多的 CPU

那么既然 CPU 不會成為瓶頸,理所當然的就沒必要去使用多線程來執行命令,我們需要明確的一個問題就是多線程一定比單線程快嗎?答案是不一定。因為多線程也是有代價的,最直接的兩個代價就是線程的創建和銷毀線程(當然可以通過線程池來一定程度的減少頻繁的創建線程和銷毀線程)以及線程的上下文切換。

在我們的日常系統中,主要可以區分為兩種:CPU 密集型 和 IO 密集型。

  • CPU 密集型:這種系統就說明 CPU 的利用率很高,那么使用多線程反而會增加上下文切換而帶來額外的開銷,所以使用多線程效率可能會不升反降。舉個例子:假如你現在在干活,你一直不停的在做一件事,需要 1 分鐘可以做完,但是你中途總是被人打斷,需要花 1 秒鐘時間步行到旁邊去做另一件事,假如這件事也需要 1 分鐘,那么你因為反復切換做兩件事,每切換一次就要花 1 秒鐘,最后做完這 2 件事的時間肯定大于 2 分鐘(取決于中途切換的次數),但是如果中途不被打斷,你做完一件事再去做另一件事,那么你最多只需要切換 1 次,也就是 21 秒就能做完。
  • IO 密集型:IO 操作也可以分為磁盤 IO 和網絡 IO 等操作。大部分 IO 操作的特點是比較耗時且 CPU 利用率不高,所以 Redis 6.0 版本網絡 IO 會改進為多線程。至于磁盤 IO,因為 Redis 中的數據都存儲在內存(也可以持久化),所以并不會過多的涉及到磁盤操作。舉個例子:假如你現在給樹苗澆水,你每澆完一次水之后就需要等別人給你加水之后你才能繼續澆,那么假如這個等待過程需要 5 秒鐘,也就是說你澆完一次水就可以休息 5 秒鐘,而你切換去做另一件事來回只需要 2 秒,那么你完全可以先去做另一件事,做完之后再回來,這樣就可以充分利用你空閑的 5 秒鐘時間,從而提升了效率。

使用多線程還會帶來一個問題就是數據的安全性,所以多線程編程都會涉及到鎖競爭,由此也會帶來額外的開銷。

什么是 I/O 多路復用

I/O 指的是網絡 I/O, 多路指的是多個 TCP 連接(如 Socket),復用指的是復用一個或多個線程。I/O 多路復用的核心原理就是不再由應用程序自己來監聽連接,而是由服務器內核替應用程序監聽。

Redis 中,其多路復用有多種實現,如:selectepollevportkqueue 等。

我們用去餐廳吃飯為的例子來解釋一下 I/O 多路復用機制(點餐人相當于客戶端,餐廳的廚房相當于服務器,廚師就是線程)。

  • 阻塞 IO:張三去餐廳吃飯,點了一道菜,這時候他啥事也不干了,就是一直等,等到廚師炒好菜,他就把菜端走開始吃飯了。也就是在菜被炒好之前,張三被阻塞了,這就是 BIO(阻塞 IO),效率會非常低下。
  • 非阻塞 IO:張三去餐廳吃飯,點了一道菜,這時候張三他不會一直等,找了個位置坐下,刷刷抖音,打打電話,做點其他事,然后每隔一段時間就去廚房問一下自己的菜好了沒有。這種就屬于非阻塞 IO,這種方式雖然可以提高性能,但是如果有大量 IO 都來定期輪詢,也會給服務器造成非常大的負擔。
  • 事件驅動機制:張三去餐廳吃飯,點了一道菜,這時候他找了個位置坐下來等:
    • 廚房那邊菜做好了就會把菜端出來了,但是并不知道這道菜是誰的,于是就挨個詢問顧客,這就是多路復用中的 select 模型,不過 select 模型最多只能監聽 1024socketpoll 模型解決了這個限制問題)。
    • 廚房做好了菜直接把菜放在窗口上,大喊一聲,某某菜做好了,是誰的快過來拿,這時候聽到通知的人就會自己去拿,這就是多路復用中的 epoll 模型。

需要注意的是在 IO 多路復用機制下,客戶端可以阻塞也可以選擇不阻塞(大部分場景下是阻塞 IO),這個要具體情況具體分析,但是在多路復用機制下,服務端就可以通過多線程(上面示例中可以多幾個廚師同時炒菜)來提升并發效率。

Redis 中 I/O 多路復用的應用

Redis 服務器是一個事件驅動程序,服務器需要處理兩類事件:文件事件和時間事件。

  • 文件事件:Redis 服務器和客戶端(或其他服務器)進行通信會產生相應的文件事件,然后服務器通過監聽并處理這些事件來完成一系列的通信操作。
  • 時間事件:Redis 內部的一些在給定時間之內需要進行的操作。

Redis 的文件事件處理器以單線程的方式運行,其內部使用了 I/O 多路復用程序來同時監聽多個套接字(Socket)連接,提升了性能的同時又保持了內部單線程設計的簡單性。下圖就是文件事件處理器的示意圖:

3614898d3d81f004b5a9730b306e6fb8.png

I/O 多路復用程序雖然會同時監聽多個 Socket 連接,但是其會將監聽的 Socket 都放到一個隊列里面,然后通過這個隊列有序的,同步的將每個 Socket 對應的事件傳送給文件事件分派器,再由文件事件分派器分派給對應的事件處理器進行處理,只有當一個 Socket 所對應的事件被處理完畢之后,I/O多路復用程序才會繼續向文件事件分派器傳送下一個 Socket 所對應的事件,這也可以驗證上面的結論,處理客戶端的命令請求是單線程的方式逐個處理,但是事件處理器內并不是只有一個線程。

Redis 為什么這么快

Redis 為什么這么快的原因前面已經基本提到了,現在我們再進行總結一下:

  • 1、Redis 是一款純內存結構,避免了磁盤 I/O 等耗時操作。
  • 2、Redis 命令處理的核心模塊為單線程,減少了鎖競爭,以及頻繁創建線程和銷毀線程的代價,減少了線程上下文切換的消耗。
  • 3、采用了 I/O 多路復用機制,大大提升了并發效率。

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/279227.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/279227.shtml
英文地址,請注明出處:http://en.pswp.cn/news/279227.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

什么是“ rpcsvchost”,以及為什么它在Mac上運行?

You find something called rpcsvchost while using Activity Monitor to see what’s running on your Mac. What is this process, and should you be worried? In a word, no: rpcsvhost is a core part of macOS. 在使用“活動監視器”查看Mac上正在運行的內容時&#xff…

自定義異常禁用異常堆棧_如何在Mac上禁用或自定義自動更正

自定義異常禁用異常堆棧Sometimes, autocorrect gets it wrong, replacing a word you meant to type with something completely different. You can customize it to fix these issues or disable it altogether. 有時候,自動更正會把它弄錯,用完全不同…

控制dcom程序使用端口_使用VS Code調試.net控制臺應用程序的方法

本文由 比特飛 原創發布,歡迎大家踴躍轉載。轉載請注明本文地址:https://www.byteflying.com/archives/6928。1、概述本文向大家介紹使用Visual Studio Code調試.net控制臺應用程序的方法。2、方案首先在創建好一個控制臺應用程序,再在擴展中…

omnipay支付--支付寶支付

最近負責的項目事關支付寶APP支付 也踩了一些坑 這邊記錄下 以下代碼基于laravel框架下: 生成APP支付參數: $gateway $this->getGateway();$request $gateway->purchase();$request->setBizContent([subject > ,//產品描述out_trade_no > ,//本地訂單號…

4khz的帶寬是指什么意思_揚聲器和耳機的Hz-KHz范圍是什么意思?

4khz的帶寬是指什么意思If you’ve looked at high-end headphones or speakers, you’ve probably noticed numbers on the spec sheet that read something like “20Hz-20KHz.” What do these numbers mean? 如果您看過高端耳機或揚聲器,則可能已經注意到規格表…

mysql兩種引擎的適用場景_MySQL兩種引擎的區別和應用場景

Innodb引擎Innodb引擎提供了對數據庫ACID事務的支持,并且實現了SQL標準的四種隔離級別。該引擎還提供了行級鎖和外鍵約束,它的設計目標是處理大容量數據庫系統,它本身其實就是基于MySQL后臺的完整數據庫系統,MySQL運行時Innodb會在…

linux里查看最耗CPU的線程

1、top后按c查看最耗cpu的進程,得到pid 2、top -Hp pid 查看該進程里的線程資源使用情況,找到最耗資源的線程的pid 3、jstack pid來查看進程的各個線程棧,注意這里的pid是第一步中進程的pid,不是第二步得到的線程id 4、將第二步得…

vlc傳輸_如何使用VLC通過網絡流式傳輸視頻和音樂

vlc傳輸VLC includes a fairly easy-to-use streaming feature that can stream music and videos over a local network or the Internet. You can tune into the stream using VLC or other media players. VLC包括一個相當易于使用的流媒體功能,可以通過本地網絡…

python實現異步的幾種方式_終于搞明白了,異步Python比同步Python究竟快在哪里?...

大家好,你是否聽人們說過,異步 Python 代碼比“普通(或同步)Python 代碼更快? 果真是那樣嗎?同步和異步是什么意思?Web 應用程序通常要處理許多請求,這些請求在短時間內來自不同的客戶端。為避免處理延遲&a…

您可能沒有注意到的7個Ubuntu File Manager功能

The Nautilus file manager included with Ubuntu includes some useful features you may not notice unless you go looking for them. You can create saved searches, mount remote file systems, use tabs in your file manager, and more. Ubuntu隨附的Nautilus文件管理器…

P3174 [HAOI2009]毛毛蟲(樹形dp)

P3174 [HAOI2009]毛毛蟲 題目描述 對于一棵樹,我們可以將某條鏈和與該鏈相連的邊抽出來,看上去就象成一個毛毛蟲,點數越多,毛毛蟲就越大。例如下圖左邊的樹(圖 1 )抽出一部分就變成了右邊的一個毛毛蟲了&am…

wdcp mysql密碼_WDCP提示無法連接mysql及創建站點提示mysql密碼不正確

一、wdcp系統訪問提示無法連接mysql1、可能是mysql服務沒啟動,首先ssh登陸服務器,然后執行service mysqld restart重啟mysql再訪問試下,如果無法啟動,先用df -lh查看下home分區有沒有掛載,如果沒有掛載嘗試先重啟&…

applecare多少錢?_否,AppleCare +無法覆蓋丟失或被盜的iPhone

applecare多少錢?Losing your iPhone or getting it stolen is pretty common these days, but it’s important to know that while AppleCare covers accidental damage, it doesn’t cover a lost or stolen iPhone. 如今,丟失iPhone或使其被盜很普遍&#xff0…

10以內數的組成分解圖_大班數學教案《10以內數的組成》

大班數學教案《10以內數的組成》作為一名教學工作者,時常需要編寫教案,借助教案可以讓教學工作更科學化。那么什么樣的教案才是好的呢?以下是小編收集整理的大班數學教案《10以內數的組成》,希望能夠幫助到大家。大班數學教案《10…

HDFS文件目錄操作代碼

分布式文件系統HDFS中對文件/目錄的相關操作代碼,整理了一下,大概包括以下部分: 文件夾的新建、刪除、重命名文件夾中子文件和目錄的統計文件的新建及顯示文件內容文件在local和remote間的相互復制定位文件在HDFS中的位置,以及副本…

craigslist_如何設置Craigslist警報(用于電子郵件或SMS)

craigslistWhether you’re looking for apartments or used gadgets on Craigslist, you don’t have to keep checking the website. You can stay on top of things by getting notified when new posts go up that match your searches. 無論您是在Craigslist上尋找公寓還是…

merge r語言daframe_R語言總結

R語言總結數據框操作(plyr包)輔助小函數1 splat函數:作用:把原函數中多個參數打包為一個list作為參數,然后輸出新的函數。也就是說本來某個函數需要輸入多個參數,現在套上splat后,只要輸入一個參數list就可以了&#x…

Django模板語言中的自定義方法filter過濾器實現web網頁的瀑布流

模板語言自定義方法介紹 自定義方法注意事項 Django中有simple_tag 和 filter 兩種自定義方法,之前也提到過,需要注意的是 擴展目錄名稱必須是templatetagstemplatetags中的自定義標簽和過濾器必須依賴于一個django app,也就是說,自定義標簽和過濾器是綁…

dsp怪胎_2012年6月最佳怪胎文章

dsp怪胎This past month we covered topics such as why you only have to wipe a disk once to erase it, what RSS is and how you can benefit from using it, how websites are tracking you online, and more. Join us as we look back at the best articles for June. 在…

mysql 回退查詢_MYSQL數據庫表排序規則不一致導致聯表查詢,索引不起作用問題...

Mysql數據庫表排序規則不一致導致聯表查詢,索引不起作用問題表更描述: 將mysql數據庫中的worktask表添加ishaspic字段。具體操作:(1)數據庫worktask表新添是否有圖片字段ishaspic;新添字段時,報錯[SQL] alter table WorkTask add …