国产成人精品18p,天天干成人网,无码专区狠狠躁天天躁,美女脱精光隐私扒开免费观看

谷歌云故障 14 個(gè)小時(shí):“隊列突變大量積壓”引

發(fā)布時(shí)間:2022-05-21 10:01 來(lái)源:好主機 閱讀:138 作者:好主機 欄目: 經(jīng)驗分享 歡迎投稿:712375056


谷歌云服務(wù)器添加了內存,重新啟動(dòng)服務(wù)器,眼睜睜看著(zhù)情況變得更糟糕……所幸現在重新掌握了局面。
發(fā)生在3月26日的那次故障導致 谷歌在多個(gè)地區的 云服務(wù)癱瘓,包括Dataflow、Big Query、DialogFlow、Kubernetes Engine、Cloud Firestore、App Engine和Cloud Console。這些系統受影響的時(shí)間總共長(cháng)達14個(gè)小時(shí)。
多云服務(wù)依賴(lài)身份和訪(fǎng)問(wèn)管理(IAM)中的分布式訪(fǎng)問(wèn)控制列表(ACL)來(lái)驗證權限、激活新的API或創(chuàng )建新的云資源。這些權限存儲在一個(gè)分布式 數據庫中,被大量緩存起來(lái)。兩個(gè)進(jìn)程確保數據庫內容最新:一個(gè)是實(shí)時(shí)進(jìn)程,一個(gè)是批處理進(jìn)程。然而,如果實(shí)時(shí)管道遠遠落在后面,提供的會(huì )是過(guò)時(shí)數據,這可能導致下游服務(wù)的操作受到影響。
據谷歌最近發(fā)布的一項內部調查顯示,故障是該公司的緩存服務(wù)器內存不足導致的。調查稱(chēng):“觸發(fā)這起事件的誘因是批量更新組成員(group membership ),結果修改后權限的數量增加到了超出預期的程度,因而生成了大量積壓的隊列突變(queued mutation)需要實(shí)時(shí)生效?!?
“由于緩存服務(wù)器存在一個(gè)潛在的問(wèn)題,處理積壓的隊列突變的能力下降,這導致緩存服務(wù)器內存不足;而這反過(guò)來(lái)又導致對IAM的請求超時(shí)中斷。為了緩解內存使用量高企而執行的緊急部署措施在各個(gè)地區更是短暫加劇了這個(gè)問(wèn)題?!?
谷歌通過(guò)在緩存服務(wù)器中安裝更多的內存并重新啟動(dòng)服務(wù)器解決了該問(wèn)題。但是到這個(gè)時(shí)候,已積累了一大堆過(guò)時(shí)的數據,這導致了進(jìn)一步的問(wèn)題,系統工程師不得不另花費幾個(gè)小時(shí)來(lái)處理。第二天早上05點(diǎn)55分,系統恢復正常運行。
谷歌表示,為了應對這些問(wèn)題,它“現在確保緩存服務(wù)器可以處理引發(fā)這起事件的那種批量更新”,并且“正在努力優(yōu)化緩存服務(wù)器上的內存使用和保護機制,在無(wú)需重新啟動(dòng)的情況下面對緊急情況時(shí)可以進(jìn)行配置變更?!?
“為了讓我們將來(lái)可以更迅速地應對數據過(guò)時(shí)問(wèn)題,我們還將對數據庫批處理進(jìn)行切分處理,以便支持并行化和更頻繁的運行。我們明白區域可靠性對我們的用戶(hù)來(lái)說(shuō)有何等重要,并為該事件表示歉意?!?
故障報告鏈接: https://status.cloud.google.com/incident/zall/20003#20003014

發(fā)布者:水橋丶帕露西

免責聲明:本站發(fā)布的內容(圖片、視頻和文字)以原創(chuàng )、來(lái)自本網(wǎng)站內容采集于網(wǎng)絡(luò )互聯(lián)網(wǎng)轉載等其它媒體和分享為主,內容觀(guān)點(diǎn)不代表本網(wǎng)站立場(chǎng),如侵犯了原作者的版權,請告知一經(jīng)查實(shí),將立刻刪除涉嫌侵權內容,聯(lián)系我們QQ:712375056,同時(shí)歡迎投稿傳遞力量。

内射老妇女BBWXOX| 好屌爽在线视频| 最新国产乱人伦偷精品免费网站| 蜜臀AV午夜一区二区三区| 无码免费一区二区三区| 在线观看午夜亚洲一区|