golang的串行處理和並行處理區別

Posted on by

程序運算時往往需要數據，而數據的IO又往往需要時間傳輸，而常見的串行處理，是一個任務處理完成才接著處理新的任務， 其效率低下可想而知。 假如有3個任務要處理，而每個任務都有一定的阻塞，串行處理大概是這個樣子:

main.go 

package main

import (
    "fmt"
    "time"
)

type Task struct {
    Duration time.Duration
    Name string
}

func main() {
    // 聲明要處理的任務
    taskList := []Task {
        {
            1,
            "處理1",
        },
        {
            2,
            "處理2",
        },
        {
            3,
            "處理3",
        },
    }
    starTime := time.Now().Unix()
    for _, item := range taskList {
        goProcess(item)
    }
    fmt.Printf("用時:%ds\n", time.Now().Unix() - starTime)
}

/**
 * 進行處理
 */
func goProcess(task Task) {
    time.Sleep(time.Second * task.Duration) // 假設這是io阻塞會在這裡阻塞一些時間，而這些io可能是網絡io也可能是磁盤io等，io完成後才會接著運行下去
    fmt.Printf("任務:%s 處理完畢\n", task.Name)
}

處理打印結果
任務:處理1 處理完畢
任務:處理2 處理完畢
任務:處理3 處理完畢
用時:6s

這種串行處理遇到IO阻塞時，弊端就是太費時間瞭

可以看到，程序在計算時或許用不到多少時間反而是IO阻塞占用瞭大量的時間。這種占著茅坑不拉屎，外面等著人直跳腳，確實不太好。而用異步處理則可以跳過阻塞，達到避免占坑的情況發生。

用協程的話，則可以在阻塞時先異步執行下去而不用等待，等所有協程都處理結束，再把處理的結果匯總起來就可以瞭，代碼大概是這樣子：

main.go 

package main

import (
    "fmt"
    "sync"
    "time"
)

type Task struct {
    Duration time.Duration
    Name string
}

func main() {
    // 聲明要處理的任務
    taskList := []Task {
        {
            1,
            "處理1",
        },
        {
            2,
            "處理2",
        },
        {
            3,
            "處理3",
        },
    }
    starTime := time.Now().Unix()
    var res []string //處理結果收集
    resChang := make(chan string, len(taskList))
    wg := &sync.WaitGroup{}
    // 這裡收集異步處理的結果, 通過管道把數據傳遞過來，類似於單一訂閱功能吧
    go func() {
        wg.Add(1)
        defer wg.Done() // 通道關閉後 處理結果也收集完畢，則觸發 用於通知下方批處理，處理結果已經收集完畢
        for resItem := range resChang {
            res = append(res, resItem)
        }
    }()
    taskWG := &sync.WaitGroup{}
    for _, item := range taskList {
        taskWG.Add(1) // 批處理 信號量+1
        go goProcess(item, &resChang, taskWG)
    }
    taskWG.Wait()// 這裡阻塞，等待所有處理執行完畢, 才接著運行下去
    close(resChang)// 已經處理完畢後就關閉處理傳輸通道
    wg.Wait() // 這是阻塞 等待處理收集完畢, 才接著運行去
    // 打印批處理收集的處理結果
    for _, i := range res {
        fmt.Printf("%s", i)
    }
    fmt.Printf("用時:%ds\n", time.Now().Unix() - starTime)
}

/**
 * 進行處理
 */
func goProcess(task Task, resChan *chan string, taskWG *sync.WaitGroup) {
    time.Sleep(time.Second * task.Duration) // 假設這是io阻塞會在這裡阻塞一些時間，而這些io可能是網絡io也可能是磁盤io等，才會接著運行下去
    res := fmt.Sprintf("任務:%s 處理完畢\n", task.Name)
    defer func() {
        *resChan <- res // 把處理結果傳出去
        taskWG.Done() // 批處理信號量-1 來報告處理完畢
    }()
}

運行結果
任務:處理1 處理完畢
任務:處理2 處理完畢
任務:處理3 處理完畢
用時:3s

相對於之前的串行，這次的並行有效處理IO的阻塞，相當於，串行就是占坑不用的角，並行則不管這些，你不用，先把你踹開，給有需要的人用先，這樣一腳腳的踹，效率就上一來瞭。

到此這篇關於golang的串行處理和並行處理實現的文章就介紹到這瞭,更多相關golang 串行處理和並行處理內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet！

推薦閱讀：