多任務管理類 MutilTaskManager

計算和計算所需的數據能被較為平均的非配到若干task的時候,下面的任務管理類可以提供在大數據大計算量的情況下非精確的控制task的執行數量來限制計算量和內存占用量.

?

下面是代碼(非線程安全版本):

?

復制代碼
public?class?MutilTaskManager
????{
????????private?readonly?int?_maxRun;
????????private?readonly?int?_maxQuenen;
????????private?List<Task>?_taskRunningList;
????????private?readonly?Queue<Task>?_taskQueue;

????????public?bool?IsQueueFull
????????{
????????????get?{?return?_taskQueue.Count?>?_maxQuenen;?}
????????}

????????public?MutilTaskManager(int?maxRun?=?8,?int?maxQuenen?=?2)
????????{
????????????_maxRun?=?maxRun;
????????????_maxQuenen?=?maxQuenen;
????????????_taskRunningList?=?new?List<Task>(maxRun);
????????????_taskQueue?=?new?Queue<Task>(2);
????????}

????????public?void?TakeBooting(int?sleepTime?=?10)
????????{
????????????if?(_taskRunningList.Count?>=?_maxRun)
????????????{
????????????????_taskRunningList?=?_taskRunningList.Where(it?=>?!it.IsCompleted).ToList();
????????????}
????????????while?(_taskRunningList.Count?<?_maxRun?&&?_taskQueue.Count?>?0)
????????????{
????????????????var?t?=?_taskQueue.Dequeue();
????????????????_taskRunningList.Add(t);
????????????????t.Start();
????????????}
????????????System.Threading.Thread.Sleep(sleepTime);
????????}

????????public?void?Enqueue(Task?task)
????????{
????????????_taskQueue.Enqueue(task);
????????????TakeBooting(0);
????????}

????????public?void?WaitAll()
????????{
????????????while?(_taskQueue.Count?>?0)
????????????{
????????????????TakeBooting();
????????????}
????????????Task.WaitAll(_taskRunningList.ToArray());
????????}
????}
復制代碼

線程安全版本:

復制代碼
public?class?MutilTaskManager
????{
????????private?readonly?int?_maxRun;
????????private?readonly?int?_maxQuenen;
????????private?List<Task>?_taskRunningList;
????????private?readonly?Queue<Task>?_taskQueue;
????????private?object?_lockObj?=?new?object();
????????public?bool?IsQueueFull
????????{
????????????get?{?return?_taskQueue.Count?>?_maxQuenen;?}
????????}

????????public?MutilTaskManager(int?maxRun?=?8,?int?maxQuenen?=?2)
????????{
????????????_maxRun?=?maxRun;
????????????_maxQuenen?=?maxQuenen;
????????????_taskRunningList?=?new?List<Task>(maxRun);
????????????_taskQueue?=?new?Queue<Task>(2);
????????}

????????public?void?TakeBooting(int?sleepTime?=?10)
????????{
????????????lock?(_lockObj)
????????????{
????????????????if?(_taskRunningList.Count?>=?_maxRun)
????????????????{
????????????????????_taskRunningList?=?_taskRunningList.Where(it?=>?!it.IsCompleted).ToList();
????????????????}
????????????????while?(_taskRunningList.Count?<?_maxRun?&&?_taskQueue.Count?>?0)
????????????????{
????????????????????var?t?=?_taskQueue.Dequeue();
????????????????????_taskRunningList.Add(t);
????????????????????t.Start();
????????????????}
????????????}
????????????System.Threading.Thread.Sleep(sleepTime);
????????}

????????public?void?Enqueue(Task?task)
????????{
????????????lock?(_lockObj)
????????????{
????????????????_taskQueue.Enqueue(task);
????????????}
????????????TakeBooting(0);
????????}

????????public?void?WaitAll()
????????{
????????????while?(_taskQueue.Count?>?0)
????????????{
????????????????TakeBooting();
????????????}
????????????Task.WaitAll(_taskRunningList.ToArray());
????????}
????}
復制代碼

?

使用示例:

復制代碼
void?Test()
????????{
????????????var?mtm?=?new?MutilTaskManager();
????????????foreach(int?i?in(new?int[10]))
????????????{
????????????????while?(mtm.IsQueueFull)
????????????????{
????????????????????mtm.TakeBooting();
????????????????}
????????????????mtm.Enqueue(new?Task(myTask));
????????????}
????????}

????????void?myTask()
????????{
????????????//read?data
????????????
//do?something
????????}
復制代碼

?

?

本文轉自today4king博客園博客,原文鏈接:http://www.cnblogs.com/jinzhao/archive/2012/03/21/2410191.html,如需轉載請自行聯系原作者

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/540168.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/540168.shtml
英文地址,請注明出處:http://en.pswp.cn/news/540168.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

[轉載] Scanner和bufferreader讀取控制臺字符的區別

參考鏈接&#xff1a; Java中Scanner和BufferReader類之間的區別 從開始學習Java就用了scanner&#xff0c;因為比較簡單每當遇到空格鍵或者換行鍵則讀取下一個字符&#xff0c;一般用法 while(input.hasNextInt()){ int n input.nextInt(); int t input.nextInt(); int c …

Node.js meitulu圖片批量下載爬蟲1.051

原有1.05版程序沒有斷點續傳模式&#xff0c;現在在最近程序基礎上改寫一版1.051. // // meitulu圖片批量下載爬蟲1.051 // 用最近的斷點續傳框架改寫原有1.05版程序 // 2017年11月21日 //// 內置https模塊 var httpsrequire("https");// 內置http模塊 var httprequi…

[轉載] Java實現歸并排序(超詳細,新手請進)

參考鏈接&#xff1a; Java中將數組合并為的新數組 歸并排序 大家好&#xff0c;這是我第一次在CSDN上寫東西&#xff0c;因為我一直覺得有需要就去找別人的blog看看就好&#xff0c;但我發現自己寫出來的東西確實能加深記憶。我半路出家&#xff0c;屬實是個菜鳥&#xff0…

centos6設置靜態IP

#編輯配置文件,添加修改以下內容 vim /etc/sysconfig/network-scripts/ifcfg-eth0 BOOTPROTOstatic #啟用靜態IP地址 ONBOOTyes #開啟開機自動啟用網絡連接 IPADDR192.168.21.129 #設置IP地址 NETMASK255.255.255.0 #設置子網掩碼 GATEWAY192.168…

[轉載] 1022 D進制的A+B (20分)【java題解】【80ms】

參考鏈接&#xff1a; Java流Stream 題解 使用 toUnsignedString&#xff08;&#xff09;即可 我有仔細讀過toUnsignedString&#xff08;&#xff09;&#xff0c;有興趣可以看看 第3章 java的基本程序設計結構【補缺學習】【注釋與數據類型】【核心技術卷I】 impor…

mysql 5.6.4以上版本innodb支持全文索引的測試

對于mysql 5.6.4以上版本innodb支持全文索引的測試 在mysql官網&#xff0c;innodb引擎在5.6.4版本提供了對全文索引的支持&#xff0c;筆者對此做了測試&#xff0c;發現對中文全文檢索的支持依然不理想&#xff0c;但卻確實提供了對英文的全文支持。 12.9.5 Full-Text Restri…

[轉載] Java字符串分割方法

參考鏈接&#xff1a; Java中的StringTokenizer方法的示例 2 [sizemedium]1.用split()方法進行分割&#xff0c;分割開的子字符串放入數組&#xff0c;然后進行處理。 示例代碼如下&#xff1a; public class SplitTest { /** * param args * author colin */ …

[轉載] Java StringBuilder StringJoiner

參考鏈接&#xff1a; 何時在StringBuilder上使用StringJoiner 1. StringBuilder Java編譯器對String做了特殊處理&#xff0c;使得我們可以直接用拼接字符串。 雖然可以直接拼接字符串&#xff0c;但是&#xff0c;在循環中&#xff0c;每次循環都會創建新的字符串對象&a…

EMC VMAX的磁盤構成,fast policy(重要)

首先是流程&#xff0c; 不同種類的磁盤&#xff08;sata&#xff0c;fc&#xff0c;flah&#xff09;->disk group->raid->DATA volume->thin pool->TDEV and BCVDEV (lun) 然后細看&#xff1a; 1&#xff09; 不同種類的磁盤叫做disk&#xff0c;這是可見的物…

[轉載] Java反射是什么?看這篇絕對會了!

參考鏈接&#xff1a; Java中的util.Arrays與Reflection.Array的示例 作者&#xff1a;火星十一郎 https://www.cnblogs.com/hxsyl 一.概念 反射就是把Java的各種成分映射成相應的Java類。 Class類的構造方法是private&#xff0c;由JVM創建。 反射是java語言的一個特性…

[精講-3]Offline Domain Join

從windows 2008 ,windows 7開始起就具備脫機加入域的功能,就是它們在未連接DC的情況下,也可以加入域. 假如環境lab.com ,一臺已加入域的PC (WIN7Client) 和即將加入域的PC(win7-2) 在win7client上run下面這個命令 DC已作了一次預先的動作:創建了computer object 在win7-2上,用本…

[轉載] Java——toArray,集合轉換為數組

參考鏈接&#xff1a; 從ArrayList到Java的Array數組轉換&#xff1a;toArray()方法 package day04; import java.util.ArrayList; import java.util.Collection; /** * 集合轉換為數組 * Collection中定義了兩個方法 * Object[] toArray * <T>Y[] toArray(T[] array) …

c#匿名方法

//以下示例和說明都源于《visual c# 2005 技術內幕》 //匿名函數就是沒有名字的函數&#xff0c;是專用于委托的函數。 using System; using System.Collections.Generic; using System.Text; namespace 匿名方法 { public delegate void DelegateClass(); public dele…

[轉載] JAVA8 創建流的5種方式

參考鏈接&#xff1a; 用Java創建流的10種方法 java8中的流式操作是一個很重要的內容 1、通過 stream 方法把 List 或數組轉換為流&#xff0c;如Arr.stream()&#xff1b; //通過stream方法把List或數組轉換為流 Arrays.asList("a1", "a2", "a3&…

用戶反饋:對 Rafy 開發框架的一些個人建議

對Rafy開發框架的一些個人建議 1、潛在使用群體分析 個人認為使用類似Rafy、AgileEAS.NET、PDF.NET及OpenWorks框架的群體主要為以下幾種&#xff1a; 1.1、小微軟件企業 小微軟件企業&#xff0c;這類軟件公司的開發人員一般在10人以下&#xff0c;多以項目實施為主基本談不上…

[轉載] Java8新特新--Stream語法應用在ArrayList的元素移除和排序

參考鏈接&#xff1a; 如何在Java 8中打印Stream的元素 單元測試&#xff1a; Test public void Test02(){ // 源 ArrayList<Integer> IdsSour new ArrayList<>(); IdsSour.add(5); IdsSour.add(1); IdsSour.add(3); IdsSour.add(2); IdsSour.add(6); IdsSour.a…

搭建iscsi存儲系統

搭建iscsi存儲系統 NAS和SAN服務器概述 NAS網絡附屬存儲&#xff1a; NAS&#xff08;Network Attached Storage)&#xff0c;NAS服務器是連接在網絡上&#xff0c;具備資料存儲功能的服務器&#xff0c;一種與用數據存儲服務器。網絡附屬存儲基于標準網絡協議&#xff08;Tcp/…

[轉載] Java8 Stream流遍歷 如何使用索引

參考鏈接&#xff1a; Java 8中迭代帶有索引的流Stream 1. 問題來源 Java8的Stream流為我們的遍歷集合帶來了方便&#xff0c;基本可以取代for循環了。但是有一些情況需要知道當前遍歷的索引&#xff0c;使用for循環當然可以輕易獲得&#xff0c;但使用stream就很難了。 比如…

Jquery簡單的右側浮動菜單

今天有空稍微看了下Jquery動畫函數animate這個方法&#xff0c;發現可以用這個方法來做下簡單的右側浮動菜單 因為經常做淘寶頁面時候會碰到這樣的效果 以前都是用人家的javascript組件代碼 發現老是用人家也不好&#xff0c;所以今天有空用jqeury中的animate這個方法寫了一個簡…

[轉載] Java8-Stream API 詳解

參考鏈接&#xff1a; 如何在Java 8中從Stream獲取ArrayList 摘要 Stream 作為 Java 8 的一大亮點&#xff0c;它與 java.io 包里的 InputStream 和 OutputStream 是完全不同的概念。它也不同于 StAX 對 XML 解析的 Stream&#xff0c;也不是 Amazon Kinesis 對大數據實時處理…