」工欲善其事,必先利其器。「—孔子《論語.錄靈公》
首頁 > 程式設計 > Go 中的扇出-扇南模式

Go 中的扇出-扇南模式

發佈於2024-07-31
瀏覽:918

Fanout-Fanin Pattern in Go

在先前的兩篇文章中,我們分別介紹了 Fanout 和 Fanin。通常情況下,我們將它們一起使用,因為我們有一個資料流,我們希望單獨對專案進行操作,並且可以使用並發安全地執行此操作。因此,我們扇出到多個工作線程,然後扇回到單一流。

例如,假設您有一個很大的日誌檔案。您可以將文件分成多個區塊,允許每個工作人員同時操作文件的不同部分,然後合併結果。

如果您遵循前兩篇文章,這種模式是顯而易見的。如果您不確定,請參閱上面的連結。

// produce is simulating our single input as a channel
func produce() chan int {
    ch := make(chan int)
    go func() {
        for i := 0; i 



有一個 Produce() 函數可以建立模擬的數位輸入流。

有一個工作函數在輸入通道上運行,直到沒有更多資料為止。它對每個值「處理」輸入資料(確定該值是奇數還是偶數),然後將結果結構傳送到輸出通道。

請注意,當每個工作人員完成後,它會關閉其結果通道。這對於防止死鎖是必要的,因為否則 fanin 操作將休眠等待 chan 上的更多資料。

主執行緒從生產中獲取輸入流,然後啟動許多工作人員,為每個工作人員提供自己的通道,將其結果發送到該通道。

這些結果通道隨後被送到 fanin 操作。為了扇入,我們建立一個通道來接收輸出,然後為每個工作通道啟動一個 goroutine。每個 goroutine 只是在通道上進行迭代,直到沒有更多資料為止,然後終止。 請記住,我們關閉了工作線程中的結果通道,這就是允許 for 循環終止的原因

請注意,我們使用 WaitGroup 進行 fanin 過程。這讓我們知道所有結果通道的所有結果何時已組合到輸出通道中。當發生這種情況時,我們關閉輸出通道,以便任何消耗輸出的下游執行緒都可以終止。

有了輸出通道中的所有數據,主執行緒就可以繼續顯示結果了。請注意,我們使用布林通道來防止主執行緒在一切完成之前終止;否則,它將終止進程。

請注意,還有另一種使用 select 語句進行扇入的方法。這裡使用的技術更乾淨一些,因為我們可以增加或減少工人的數量。

另請注意,我們尚未解決有關 SIGTERM 或 SIGINT 等問題的提前終止的任何問題。這增加了一點複雜性。

您將如何實現這一點? 扇出/扇入模式還有其他實作。請在下面留下您的評論和想法?

謝謝!

這篇文章以及本系列所有文章的程式碼可以在這裡找到

版本聲明 本文轉載於:https://dev.to/johnscode/fanout-fanin-in-go-3h9o?1如有侵犯,請聯絡[email protected]刪除
最新教學 更多>
  • 如何使用非標準憑證檔案在Go Web伺服器上建立HTTPS?
    如何使用非標準憑證檔案在Go Web伺服器上建立HTTPS?
    如何使用非標準憑證檔案在 Go Web 伺服器上建立 HTTPS提供的文件建議連接三個 .pem 檔案。但是,如果您沒有這些文件,以下是如何使用您擁有的證書文件設定HTTPS:組合中間證書:雖然Go 通常需要一個串聯的證書文件,其他平台僅儲存根憑證。為了確保相容性,請連接中間憑證:cat websi...
    程式設計 發佈於2024-12-21
  • 如何可靠地處理帶有子元素的絕對定位 div 上的滑鼠移出事件?
    如何可靠地處理帶有子元素的絕對定位 div 上的滑鼠移出事件?
    在沒有jQuery 的情況下處理帶有子元素的絕對Div 中的Mouseout 事件處理絕對定位的div 時,處理mouseout 事件可能具有挑戰性。預設情況下,如果滑鼠懸停在父 div 內的子元素上,則在滑鼠退出外部 div 之前,mouseout 事件會提前觸發。 要解決此問題,請考慮使用 on...
    程式設計 發佈於2024-12-21
  • PHP 的 `==` 和 `===` 運算子有什麼不同?
    PHP 的 `==` 和 `===` 運算子有什麼不同?
    PHP Double (==) 和 Triple (===) 相等比較有何不同? 在 PHP 中比較值時,兩個可以使用不同的運算子:鬆散相等 (==) 運算子和嚴格相同 (===) 運算子。了解它們的細微差別對於確保可靠的比較至關重要。 鬆散相等 (==) 比較鬆散相等運算子在比較值之前執行型別雜亂...
    程式設計 發佈於2024-12-21
  • 如何在 JavaScript 中對字串執行數學運算?
    如何在 JavaScript 中對字串執行數學運算?
    將字串轉換為數字進行數學運算儘管包含數字字符,但字串不能直接作為數字進行操作。要執行算術運算,必須先將它們轉換為數字形式。 考慮給出的例子:var num1 = '20', num2 = '30.5';直接添加這些字串會導致串聯:num1 num2; // '2030.5'要強制將它們視...
    程式設計 發佈於2024-12-21
  • 儘管程式碼有效,為什麼 POST 請求無法擷取 PHP 中的輸入?
    儘管程式碼有效,為什麼 POST 請求無法擷取 PHP 中的輸入?
    解決PHP 中的POST 請求故障在提供的程式碼片段中:action=''而非:action="<?php echo $_SERVER['PHP_SELF'];?>";?>"檢查$_POST陣列:表單提交後使用 var_dump 檢查 $_POST 陣列的內...
    程式設計 發佈於2024-12-21
  • 為什麼我的 Div 重疊?了解並解決保證金崩潰問題
    為什麼我的 Div 重疊?了解並解決保證金崩潰問題
    邊距折疊:理解並解決Div 佈局中的重疊設計具有多個div 元素的佈局時,理解邊距的概念至關重要折疊以避免不必要的重疊邊距。邊距折疊是一種 CSS 行為,當相鄰元素的邊距合併在一起時會發生,有效地增加了它們之間的總邊距空間。 邊距折疊的原因在您的具體情況,重疊邊距可能是由於以下CSS 規則的組合造成...
    程式設計 發佈於2024-12-21
  • 第一個 PHP 8.3 候選版本現已可測試
    第一個 PHP 8.3 候選版本現已可測試
    即將推出的 PHP 版本的第一個候選版本 PHP 8.3 現已可供測試。 第一個普遍可用的PHP 版本計劃於今年11 月23 日發布,PHP 8.3 的第一個候選版本是一個重要的預發布里程碑,因為它表明了PHP 8.3 的所有更改現在已經實現,只剩下完善和錯誤修復了。 在 11 月 23 日 ...
    程式設計 發佈於2024-12-21
  • 插入資料時如何修復「常規錯誤:2006 MySQL 伺服器已消失」?
    插入資料時如何修復「常規錯誤:2006 MySQL 伺服器已消失」?
    插入記錄時如何解決「一般錯誤:2006 MySQL 伺服器已消失」介紹:將資料插入MySQL 資料庫有時會導致錯誤「一般錯誤:2006 MySQL 伺服器已消失」。當與伺服器的連線遺失時會出現此錯誤,通常是由於 MySQL 配置中的兩個變數之一所致。 解決方案:解決此錯誤的關鍵是調整wait_tim...
    程式設計 發佈於2024-12-21
  • 如何正確處理 JSON 資料中的換行符號?
    如何正確處理 JSON 資料中的換行符號?
    處理 JSON 中的換行符處理 JSON 資料時,必須正確處理換行符號以避免意外錯誤。以下是該問題及其解決方案的詳細說明。 問題使用eval 或JSON.parse 解析包含換行符的JSON 資料時,可能會遇到這樣的錯誤作為“未終止的字串文字” 。這是因為 JSON 中的雙引號字串中無法辨識換行符(...
    程式設計 發佈於2024-12-21
  • Bootstrap 4 Beta 中的列偏移發生了什麼事?
    Bootstrap 4 Beta 中的列偏移發生了什麼事?
    Bootstrap 4 Beta:列偏移的刪除和恢復Bootstrap 4 在其Beta 1 版本中引入了重大更改柱子偏移了。然而,隨著 Beta 2 的後續發布,這些變化已經逆轉。 從 offset-md-* 到 ml-auto在 Bootstrap 4 Beta 1 中, offset-md-*...
    程式設計 發佈於2024-12-21
  • 您是否應該使用持久 PDO 連線:權衡效能效益與潛在風險?
    您是否應該使用持久 PDO 連線:權衡效能效益與潛在風險?
    使用持久PDO 連線的缺點:意外後果使用持久PDO 連線的缺點:意外後果雖然PDO 中的持久連線旨在透過快取和重複使用連線來增強效能,但它們可以還會引入可能影響效能的意外後果。 事務和連接狀態問題:持久連接的一個顯著缺點是意外的腳本終止會留下打開的連接,這可能會導致各種問題:鎖定表: 如果死腳本鎖定...
    程式設計 發佈於2024-12-21
  • 大批
    大批
    方法是可以在物件上呼叫的 fns 數組是對象,因此它們在 JS 中也有方法。 slice(begin):將陣列的一部分提取到新數組中,而不改變原始數組。 let arr = ['a','b','c','d','e']; // Usecase: Extract till index ...
    程式設計 發佈於2024-12-21
  • 如何在 PHP 中顯示 MySQL BLOB 映像?
    如何在 PHP 中顯示 MySQL BLOB 映像?
    從MySQL 顯示PHP BLOB 影像背景在MySQL 資料庫中將影像作為二進位大物件(BLOB) 儲存和擷取是一種常見技術。然而,顯示這些圖像有時可能具有挑戰性。 解決方案解決方案插入映像:使用file_get_contents 函數讀取映像$query = "INSERT INTO ...
    程式設計 發佈於2024-12-21
  • 在 Go 中使用 WebSocket 進行即時通信
    在 Go 中使用 WebSocket 進行即時通信
    构建需要实时更新的应用程序(例如聊天应用程序、实时通知或协作工具)需要比传统 HTTP 更快、更具交互性的通信方法。这就是 WebSockets 发挥作用的地方!今天,我们将探讨如何在 Go 中使用 WebSocket,以便您可以向应用程序添加实时功能。 在这篇文章中,我们将介绍: WebSocke...
    程式設計 發佈於2024-12-21
  • 深入研究 Reactjs
    深入研究 Reactjs
    模因生成器 Meme Generator 是一個有趣的互動式 Web 應用程序,允許用戶使用各種模板創建自訂 Meme。我已經透過教育平台學習軟體開發幾個月了,這個專案是課程的一部分。 目錄 示範 特徵 技術堆疊 安裝 用法 作者 執照 表達您的支持 ...
    程式設計 發佈於2024-12-21

免責聲明: 提供的所有資源部分來自互聯網,如果有侵犯您的版權或其他權益,請說明詳細緣由並提供版權或權益證明然後發到郵箱:[email protected] 我們會在第一時間內為您處理。

Copyright© 2022 湘ICP备2022001581号-3