c#多線程開發

来源:https://www.cnblogs.com/DSC1991/archive/2019/12/10/12018316.html

1 //要執行的業務是從阿裡雲上下載將近40000條的音頻到本地,單條下載忒慢,就想採用多線程,分配了二十個線程同時下載,省了很大部分的時間 class Program 2 { 3 4 static void Main(string[] args) { 5 string sql = "select ... ...


  1
        //要執行的業務是從阿裡雲上下載將近40000條的音頻到本地,單條下載忒慢,就想採用多線程,分配了二十個線程同時下載,省了很大部分的時間
          class Program
  2     {
  3        
  4         static void Main(string[] args) {
  5             string sql = "select en_audio,us_audio from t_audio LIMIT 198 ";
  6             MySqlDataReader mySqlDataReader = DBHelper.ExecuteReader(sql);         
  7             List<String> sList = new List<String>();
  8             sList.Add("https://qutifen-qudao.oss-cn-beijing.aliyuncs.com/mfg/audio/v3/1abacus_en.ogg");
  9             sList.Add("https://qutifen-qudao.oss-cn-beijing.aliyuncs.com/mfg/audio/v3/2abacus_en.ogg");
 10             if (mySqlDataReader.HasRows)
 11             {
 12                 while (mySqlDataReader.Read())
 13                 {                 
 14                     sList.Add(mySqlDataReader.GetString(0));
 15                     sList.Add(mySqlDataReader.GetString(1));
 16                 }
 17             }              
 18             Console.WriteLine(sList.Count);
 19             Stopwatch stopwatch = new Stopwatch();
 20             stopwatch.Start();
 21             ThreadStart(sList);
 22             WaitHandle.WaitAll(waits);  //監聽wait裡面的所有的線程都已經set了 才執行下麵的代碼,否則一直在這裡等待
 23             stopwatch.Stop();
 24             Console.WriteLine($"耗時{stopwatch.ElapsedMilliseconds}毫秒");
 25             Console.ReadKey();
 26 
 27 
 28         }
 29        static  Thread[] threads = new Thread[20];
 30         static WaitHandle[] waits = new WaitHandle[20];
 31         public  static void ThreadStart(List<String> nums) {
//分配線程
32 for (int i=0;i<20;i++) { 33 threads[i] = new Thread(DownLoadFile); 34 waits[i] = new AutoResetEvent(false); 35 36 }
//為每個線程分配要執行的數據並開始執行
37 for (int i = 0; i < 20; i++) 38 { 39 if (i== threads.Length-1) { 40 var retult = nums.Skip(nums.Count / 20 * i).Take(nums.Count- nums.Count / 20*i).ToList(); 41 threads[i].Start(new Objpt() 42 { 43 sList = retult, 44 WaitHandle = waits[i], 45 ThreadIndex = i 46 }); 47 } 48 else { 49 var retult= nums.Skip(nums.Count / 20 * i).Take(nums.Count / 20).ToList(); 50 threads[i].Start(new Objpt() { 51 sList= retult, 52 WaitHandle=waits[i], 53 ThreadIndex=i 54 }); 55 } 56 57 } 58 } 59 60 public static void DownLoadFile(Object obj) 61 { 62 int count = 0; 63 Objpt optObj = (obj as Objpt); 64 var sList = optObj.sList; 65 Console.WriteLine($"線程{optObj.ThreadIndex}開始了"); 66 foreach (var url in sList) 67 { 68 try 69 { 70 count++; 71 var arrs = url.Split('/'); 72 WebRequest request = WebRequest.Create(url); 73 HttpWebResponse res = (HttpWebResponse)request.GetResponse(); 74 WebResponse response = request.GetResponse(); 75 if (res.StatusCode.ToString() == "OK") 76 { 77 Stream responseStream = response.GetResponseStream(); 78 using (FileStream fsWrite = new FileStream($"F:/Audio/v4/{arrs[arrs.Length - 2]}/{arrs[arrs.Length - 1]}", FileMode.OpenOrCreate, FileAccess.Write)) 79 { 80 byte[] buffer = new byte[response.ContentLength]; 81 while (true) 82 { 83 ////返回本次實際讀取到的位元組數 84 int r = responseStream.Read(buffer, 0, buffer.Length); 85 if (r == 0) 86 { 87 break; 88 } 89 fsWrite.Write(buffer, 0, r);///寫入 90 91 } 92 } 93 } 94 //if (count % 20 == 0 || count == sList.Count) 95 //{ 96 // Console.WriteLine($"線程{optObj.ThreadIndex}已處理個數:{count}"); 97 //} 98 99 } 100 catch (Exception ex) 101 { 102 string strErrorLogFile = System.AppDomain.CurrentDomain.BaseDirectory + $"\\{optObj.ThreadIndex}ErrorLog.log"; 103 if (!System.IO.File.Exists(strErrorLogFile)) 104 System.IO.File.WriteAllText(strErrorLogFile, "//系統錯誤日誌記錄文件\r\n"); 105 object objSql ="線程"+ optObj.ThreadIndex.ToString()+ ex.Message; 106 System.IO.File.AppendAllText(strErrorLogFile, DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss") + "\t" + objSql.ToString() + url + "\r\n"); 107 108 } 109 110 } 111 Console.WriteLine($"線程{optObj.ThreadIndex}結束"); 112 (optObj.WaitHandle as AutoResetEvent).Set(); //set方法是當某個線程結束起做個標記的作用 113 } 114 } 115 116 public class Objpt { 117 public List<String> sList { get; set; } 118 public WaitHandle WaitHandle { get; set; } 119 public int ThreadIndex { get; set; } 120 121 }

 


您的分享是我們最大的動力!

更多相關文章
  • 前言 最近在實習,在公司看到前輩的一些代碼,發現有很多值得我學習的地方,其中有一部分就是對集合使用Stream流式操作,覺得很優美且方便。所以學習一些Stream流,在這裡記錄一下。 Stream是什麼 Stream 是Java 8中出現的新特性,極大增強了集合對象的功能,專註於對集合對象進行方便、 ...
  • 資料庫 tcp協程實現併發 回顧 一、回顧 進程池,線程池,回調函數 二、tcp服務端實現協程 演示 三、資料庫安裝以及修改配置等操作 理論知識加語法 ...
  • Scala中sortBy是以方法的形式存在的,並且是作用在Array或List集合排序上,並且這個sortBy預設只能升序,除非實現隱式轉換或調用reverse方法才能實現降序,Spark中sortBy是運算元,作用出發RDD中數據進行排序,預設是升序可以通過該運算元的第二參數來實現降序排序的方式 ...
  • 本筆記摘抄自:https://www.cnblogs.com/zhili/archive/2012/07/23/Mutex_And_Semaphore.html,記錄一下學習過程以備後續查用。 一、信號量(Semaphore) 信號量(Semaphore)是由內核對象維護的int變數。當信號量為0時 ...
  • 1.24小時時間格式制定 按照2019-12-10-13-00-00格式輸出:string dtnow = string.Format("{0:yyyy-MM-dd-HH-mm-ss}", DateTime.Now); //24小時制 按照2019-12-10-01-00-00格式輸出:string ...
  • 當新建一個core項目後,使用identity基架後,確認郵件出現了錯誤,並不能正常使用。 建立文檔在這裡 https://docs.microsoft.com/zh-cn/aspnet/core/security/authentication/scaffold-identity?view=aspn ...
  • From https://www.cnblogs.com/zjbky/p/9242140.html ...
  • using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.Threading.Tasks; using System.Data; using System.Co... ...
一周排行
  • 【五分鐘的dotnet】是一個利用您的碎片化時間來學習和豐富.net知識的博文系列。如果您現在正在使用.NetCore的話,相信您對await 和 async這兩個關鍵字再熟悉不過了。它們是為非同步編程提供的語法糖,便於我們在代碼中更便捷的進行非同步操作。await 和 async其實是對Task對象都... ...
  • .NET基金會是一個獨立的非營利組織,於2014年成立,旨在圍繞 .NET 不斷增長的開源技術集合,促進開放開發和協作。它是商業和社區開發人員的論壇,通過促進開放性,社區參與和快速創新來增強.NET生態系統的未來。要使.NET 基金會真正獨立並由社區運營,則需要獨立資助。過去,.NET 基金會依靠來... ...
  • 微信公眾號: "Dotnet9" ,網站: "Dotnet9" ,問題或建議: "請網站留言" , 如果對您有所幫助: "歡迎贊賞" 。 .NET CORE(C ) WPF 方便的實現用戶控制項切換(祝大家新年快樂) 快到2020年了,祝大家新年快樂,今年2019最後一更,謝謝大家支持! 閱讀導航 1 ...
  • 內容有點多,請耐心! 最近公司的有這個業務需求,又很湊巧讓我來完成: 首先想要對接,先要一個公眾號,再就是開發文檔了:https://developers.weixin.qq.com/doc/offiaccount/Getting_Started/Overview.html 不過請註意這一點 ok, ...
  • MyBatis MyBatis是Apache的一個開源項目iBatis, iBatis一詞來源於“internet”和“abatis”的組合,是一個基於Java的持久層框架。 iBatis 提供的持久層框架包括SQL Maps和Data Access Objects(DAO) Mybatis 是一個 ...
  • 前言 Stanley B.Lippman 先生所著的《C++ Primer》是學習C++的一本非常優秀的教科書,但《C++ Primer》作為一本大部頭書,顯然不適合所有的初學者。所以Lippman先生又返璞歸真地寫了這本短小輕薄的《Essentia C++》。這本書以簡短的章節篇幅,幫助初學者快速... ...
  • 大數據環境需要的安裝包合集,包括: apache flume 1.7.0 bin.tar.gz apache hive 1.2.1 bin.tar.gz hadoop 2.7.2.tar.gz hbase 1.3.1 bin.tar.gz jdk 8u144 linux x64.tar kafka_ ...
  • 在項目當中資料庫一般都會成為主要的性能與負載瓶頸,那麼針對資料庫各項性能指標的監控與對應的優化是開發與運維人員需要面對的主要工作,而且這部分的工作會貫穿項目從開發到運行的整個周期里。 這篇文章中我們對MySql資料庫中的幾個主要的性能指標的計算與統計進行下說明與總結。 在MySql中通過show g ...
  • 1. Cookie Cookie,有時也用其複數形式Cookies,指某些網站為了辨別用戶身份、進行session跟蹤而儲存在用戶本地終端上的數據(通常經過加密)。Cookie最早是網景公司的前雇員Lou Montulli在1993年3月的發明。Cookie是由伺服器端生成,發送給User-Agen ...
  • 1. PreparedStatement預編譯的語句對象 預編譯語句PreparedStatement 是java.sql中的一個介面,它是Statement的子介面。通過Statement對象執行SQL語句時,需要將SQL語句發送給DBMS,由 DBMS首先進行編譯後再執行。預編譯語句和State ...
x