Node.js 與生俱來的單線程模型與回調式異步風格,讓人時而欣喜時而苦惱。
很多人費解:單線程的 Node 如何做到高並發?這裡澄清一點:Node 的單線程僅指 JavaScript 引擎是單線程的。我們確實無法在 JS 中實現多線程或阻塞,但 Node 的其他部分並非不能多線程——文件讀寫、網絡 IO 在底層都是線程池完成的。
當大量請求湧入且都是 IO 密集型的時候,Node 每接受一個請求,遇到耗時較長的 IO 操作時,JS 線程不會一直乾等,而是交出控制權,在回調隊列裡登記「IO 完成後要做的事」。若回調層級過深、並發量過大,大量回調鏈甚至可能撐爆調用棧。而在等待的這段時間裡,Node 可以去處理其他請求。
所以:JS 是單線程,同一時刻只處理一個請求;但每個請求的處理時間往往很短(IO 密集場景下),只要能異步,處理過程中就會釋放控制權。這樣一來,請求在 JS 層是串行調度的,IO 卻始終處於並發狀態。減少處理請求所需的線程數,把資源更多地投入到 IO 上,對通常耗時很長的 IO 密集型請求來說,反而能帶來性能提升。
反過來,Node 的弱項就是 CPU 密集型請求。道理很簡單:JS 不會並發,同一時間只有一個請求在被處理,單個請求處理得越久,其他請求排隊越久。因此有一條原則值得記住:Node 中不應該出現阻塞,能用異步 API 就用異步 API(例如用 fs.readFile() 而非 fs.readFileSync())。
這裡要介紹的正是那個「之外」——fiber。fibers 的運行並不在 Node 主線程中,因此在 fiber 內部實現阻塞,對 Node 整體性能沒有影響,而且實現起來相當容易:想阻塞時把 fiber yield 掉,想繼續時執行 run() 恢復。
以處理一個 HTTP 請求為例:
var Fiber = require('fibers');
var http = require("http");
Fiber(function () {
var httpFiber = Fiber.current;
var html = "";
http.get("https://www.baidu.com", function (res) {
res.on("data", function (data) {
html += data;
});
res.on("end", function (data) {
httpFiber.run(); // 數據接收完畢,恢復主流程
});
});
Fiber.yield(); // 主動掛起,等待數據到齊
console.log(html); // 以「同步」的方式拿到結果
}).run();
調用 http.get 之後立刻 Fiber.yield() 中斷當前 fiber,控制權交還給事件循環,Node 可以去服務其他請求。
在 response 的監聽中,一旦觸發 end 事件,說明數據傳輸完成,此時在回調裡調用 Fiber.current.run() 恢復 fiber。於是 yield() 之後的代碼才會執行,html 也就以看似同步的方式拿到了值。
對 Fiber 的 yield() 與 run() 不熟悉的話,可以回頭參考 fibers 的相關文檔。
上面只是提供一個思路。如果把它抽象封裝一下——比如對「接受回調函數作為最後參數」的異步方法做一次柯裡化,調用後中斷當前 fiber,同時劫持那個回調函數,把「恢復程序」作為新的回調,並在恢復後觸發預定的回調——基本就能實現異步方法的同步化寫法。
這段描述可能有些繞,但基本就是 fibers/future 的實現思路,有興趣可以直接翻它的源碼。
值得補充的是,async/await 達成了幾乎相同的效果,卻完全不需要原生模塊:
async function main() {
const html = await fetch('https://www.baidu.com').then(r => r.text());
console.log(html); // 寫起來像同步,跑起來仍是非阻塞
}
main();
差別在於:fiber 是把當前執行上下文真正掛起、之後恢復,代碼「看起來同步、實際阻塞了這個 fiber」;而 await 是把函數切成「 awaits 之前」與「之後」兩段,之後那段作為微任務排入隊列,函數本身並不佔有任何執行上下文。
理解 fibers 的價值,主要在於它直觀地說明了「如何在保留同步可讀性的同時不佔用線程」這個問題;而在實際項目中,async/await 是更現實的選擇。