與其糾結(jie)于(yu)“背鍋人”是誰，我們更應該把精力放(fang)在未來應該如何未雨綢繆，避免類(lei)似情況(kuang)的發生。
所謂(wei)“好事不(bu)出(chu)門，壞事傳千里(li)”，身為一名在(zai)京(jing)工(gong)作的陜(shan)西(xi)人民，看到自(zi)己的家(jia)鄉西(xi)安最近總是(shi)(shi)以各種(zhong)負面姿態出(chu)現在(zai)熱(re)搜榜(bang)上，心里(li)難免(mian)不(bu)是(shi)(shi)滋味兒。
疫情(qing)的(de)突然爆發讓所有(you)人都猝(cu)不及(ji)防，在抗疫過程中各種問題也(ye)隨(sui)之暴露(lu)，#一碼(ma)通崩了#是目前西安遇到的(de)諸多(duo)問題中比較典型、影響面也(ye)比較廣的(de)一個，而且短短兩(liang)個星(xing)期內竟然發生了兩(liang)次。
放(fang)在以前(qian)我們可能(neng)很難想象，一個(ge)數字化系統(tong)的故障竟然可以引起如此大規模(mo)的社會(hui)混亂。
在一碼通崩(beng)潰的當天，大量市民無法(fa)乘坐地鐵和(he)出租(zu)車，進不(bu)(bu)了公司(si)和(he)商廈，甚至有家(jia)都不(bu)(bu)能回，一時間怨聲載道——我們同(tong)學、同(tong)鄉(xiang)群里各種(zhong)問候祖(zu)宗的“優美陜(shan)西話”此(ci)起彼(bi)伏，讓(rang)人不(bu)(bu)禁感(gan)慨中文的“表意(yi)豐富”和(he)“博大精深”。
這事兒(er)也引(yin)起了(le)領導層(ceng)的高度重視(shi)，這不，據工信部官網4日(ri)發布，2021年12月30日(ri)至31日(ri)，工業(ye)和信息化部總工程師(shi)韓夏到(dao)陜西省通信管理局開(kai)展(zhan)疫情(qing)防控工作調(diao)研。
工信部官網截圖(tu)
韓夏強調，西(xi)安“一(yi)碼通(tong)”要加(jia)強技術改進和網(wang)絡擴容，確保平(ping)臺安全穩(wen)定運行。韓夏甚至還專程來到(dao)西(xi)安“一(yi)碼通(tong)”工作專班，了解核酸采樣系統應急處(chu)置措施(shi)，要求系統再優化，細節再完善，確保不出現(xian)擁(yong)塞宕機現(xian)象。
到(dao)了(le)5日(ri)上午，“西安大(da)數據資源管理局局長被停(ting)職”突然曝(pu)出(chu)，事件再度升級，“一碼通崩(beng)了(le)的鍋究竟該由誰來(lai)背(bei)”的話題(ti)也(ye)引(yin)發(fa)了(le)網(wang)友們的廣(guang)泛議論。
身為一名在(zai)京工作(zuo)家鄉又在(zai)陜西(xi)的(de)科技圈媒(mei)體(ti)人，覺得(de)有必要趁此來聊(liao)(liao)聊(liao)(liao)這(zhe)個事兒。
問題出在哪里？
首(shou)先，“西(xi)安一(yi)碼通”為什(shen)么會崩？關于問(wen)題的原因(yin)，目(mu)前(qian)可謂是眾說(shuo)紛紜，筆者也咨(zi)詢(xun)了(le)一(yi)些業內(nei)專家，在沒有官方詳細的調查報告出來之(zhi)前(qian)，大家給了(le)以(yi)下幾種猜測：
第一種可能是網絡堵塞
當“一碼通(tong)”系統(tong)第一次崩(beng)潰的時候，原西安市大(da)數據資源(yuan)管理局(ju)局(ju)長劉軍在出席新聞(wen)發(fa)布會(hui)時對此做(zuo)出回應(ying)稱，近日因“一碼通(tong)”使(shi)用(yong)頻率加大(da)，對網絡與平臺造成較大(da)壓(ya)力，“12月20日早7:40分左右，西安‘一碼通(tong) ’用(yong)戶訪問量激增，每秒訪問量達到以(yi)往峰(feng)值(zhi)的10倍以(yi)上(shang)，造成網絡擁塞(sai)，致使(shi)包(bao)括 ‘一碼通(tong)’在內的部分應(ying)用(yong)系統(tong)無(wu)法正常使(shi)用(yong)。經(jing)緊急協調資源(yuan)并采取擴(kuo)容(rong)、限流等應(ying)急措施(shi)，平臺已逐步恢復使(shi)用(yong)，但因訪問量仍很大(da)，尚可能有部分卡(ka)頓現象。”
然而，對于該回應，部分專家和網友并不完全買賬。網友分析道——西安“一碼通”其實上線已經很長時間了，大部分時候還是很穩定的。西安上班高峰期，也就是掃碼高峰期應該在8點至9點之間，但“一碼通”崩潰是從7點多開始的，當時大部分人都還沒出門，更談不上掃一碼通了。網絡應該不可能在那個時候擁堵，更不可能因為擁堵造成系統崩潰。
某不愿意透露姓名的通信專家則向筆者直截了當地吐槽：“這個和網絡的關系應該不大，大家用的都是4G，難道西安的4G就比其他地方的4G慢？大家(jia)平時上(shang)網(wang)打游(you)戲看視(shi)頻(pin)都沒(mei)有問題，掃個(ge)碼網(wang)絡就承(cheng)受不(bu)了(le)了(le)？更多(duo)的(de)可能是和服務器(qi)、計算(suan)能力(li)或大數據(ju)相關。”
第二種可能是系統不夠健壯
西安電子(zi)科技大(da)學(xue)網絡與信息安全(quan)學(xue)院教授楊超則在(zai)接受(shou)媒(mei)體(ti)采(cai)訪時表(biao)示，“一(yi)碼通”此次出現(xian)長時間(jian)、大(da)范圍不(bu)(bu)能掃碼的情況，可能是系(xi)統(tong)不(bu)(bu)夠健壯，同(tong)時掃碼人數(shu)的激增導致系(xi)統(tong)的壓力變大(da)了(le)，軟硬件系(xi)統(tong)負荷大(da)了(le)以后，會出現(xian)各種意想(xiang)不(bu)(bu)到(dao)的問題(ti)，不(bu)(bu)一(yi)定是系(xi)統(tong)本(ben)身計算能力不(bu)(bu)行。”
第三種可能是安全問題
這(zhe)個(ge)從工信(xin)部總工韓夏在陜西(xi)調研時強調的話中就可以一窺端倪。韓夏表示：“要切實加(jia)強網(wang)絡和信(xin)息安(an)全(quan)(quan)，優(you)化(hua)應急預案(an)，強化(hua)安(an)全(quan)(quan)防護，排查安(an)全(quan)(quan)隱(yin)患，防止出現網(wang)絡安(an)全(quan)(quan)事故，出現問題(ti)要及(ji)時響應，快速修復。”
物聯網智庫在采訪時，也有多位專家提到了安全問題的可能性。比如(ru)，以前電商(shang)平臺會經常(chang)出現被黑產薅(hao)羊毛的情況，類似的情形也會在一碼通亮碼的場景(jing)下發生，比如(ru)有(you)的用戶手機(ji)上(shang)安裝了(le)有(you)缺(que)陷的軟(ruan)件，那該類軟(ruan)件就會不(bu)停重復訪(fang)問行為，或者越是亮不(bu)了(le)碼，用戶越是不(bu)停的重試，如(ru)果系統本身沒有(you)安全機(ji)制，那就識別(bie)不(bu)了(le)這(zhe)種(zhong)異常(chang)訪(fang)問。
第四種可能是數據庫和服務器的問題
有來自某IT大廠的專家猜測，可能是反向代理服務器崩了。反向(xiang)代(dai)理服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)位于(yu)用(yong)戶(hu)與目(mu)標(biao)(biao)服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)之(zhi)間(jian)，但是(shi)對于(yu)用(yong)戶(hu)而言(yan)，反向(xiang)代(dai)理服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)就相當(dang)于(yu)目(mu)標(biao)(biao)服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)，即用(yong)戶(hu)直接訪問(wen)反向(xiang)代(dai)理服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)就可以獲得目(mu)標(biao)(biao)服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)的(de)資源。同時(shi)，用(yong)戶(hu)不需要(yao)知道目(mu)標(biao)(biao)服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)的(de)地址，也無(wu)須在用(yong)戶(hu)端作任何設定。反向(xiang)代(dai)理服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)通常(chang)可用(yong)來作為Web加(jia)速，即使用(yong)反向(xiang)代(dai)理作為Web服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)的(de)前置機來降(jiang)低網絡和服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)的(de)負載，提高訪問(wen)效率，反向(xiang)代(dai)理服務(wu)(wu)(wu)器(qi)(qi)(qi)(qi)崩(beng)了自然系統也就出問(wen)題(ti)了。
第五種可能是容災和備份機制存在缺陷
所謂“容災(zai)(zai)”，是(shi)指災(zai)(zai)難(nan)發生(sheng)時(shi)，在(zai)保證生(sheng)產(chan)系(xi)(xi)(xi)(xi)統的(de)(de)數(shu)據(ju)盡量(liang)少丟失(shi)(shi)的(de)(de)情(qing)況下，保持生(sheng)存(cun)系(xi)(xi)(xi)(xi)統的(de)(de)業務不間斷地運行。“備份(fen)”則是(shi)指為防止系(xi)(xi)(xi)(xi)統出現操作失(shi)(shi)誤或(huo)系(xi)(xi)(xi)(xi)統故障導致數(shu)據(ju)丟失(shi)(shi)，而將全系(xi)(xi)(xi)(xi)統或(huo)部(bu)分數(shu)據(ju)集合從應(ying)用主機的(de)(de)硬盤或(huo)陣列復制到其它的(de)(de)存(cun)儲介質的(de)(de)過程，是(shi)數(shu)據(ju)高可(ke)用的(de)(de)最后(hou)一道(dao)防線，目的(de)(de)是(shi)為了系(xi)(xi)(xi)(xi)統數(shu)據(ju)崩潰時(shi)能夠恢復數(shu)據(ju)。
很容易(yi)理解，容災和(he)備(bei)份其實都(dou)是系統未雨綢(chou)繆的(de)措施(shi)，如果容災和(he)備(bei)份機(ji)制(zhi)做得足夠好的(de)話，是完全可以(yi)在(zai)(zai)短時間內(nei)恢復(fu)到(dao)昨天(tian)或者前天(tian)的(de)狀態的(de)。如果容災和(he)備(bei)份機(ji)制(zhi)存在(zai)(zai)問(wen)題(ti)(ti)，那出(chu)了問(wen)題(ti)(ti)就沒(mei)有辦法及(ji)時得到(dao)解決。
從系統反反復復的表現看，西安一碼通雖有一定的備份機制，但是備份機制明顯不夠完善。
誰應該為之“背鍋”？
出了問題的時(shi)候，除(chu)了分(fen)析(xi)問題的原因(yin)，還有一個大家都很關心的點(dian)在(zai)于“誰來(lai)為此負責”？
為了(le)找到真正的(de)“背鍋俠”，媒體們已經把“西(xi)安一碼通(tong)”涉及的(de)機構和單(dan)位扒(ba)了(le)個底兒朝天。
相(xiang)關資料顯(xian)示，該數(shu)(shu)字化系統由西(xi)安(an)(an)市大數(shu)(shu)據資源管理局(ju)牽頭(tou)，中國電信西(xi)安(an)(an)分公(gong)司(si)開發(fa)部署，于2020年2月25日在(zai)全市范圍內推廣使(shi)用(yong)。參與西(xi)安(an)(an)“一碼(ma)通”安(an)(an)全工作的還有啟明、安(an)(an)恒、思安(an)(an)、東軟、阿里云、美林數(shu)(shu)據等(deng)多家公(gong)司(si)，從網絡(luo)、應用(yong)、數(shu)(shu)據等(deng)多個層面為其提供(gong)安(an)(an)全防護。
根據公眾號“云頭(tou)條(tiao)”的部分整理：
2020年3月(yue)1日，中國(guo)電信股份有限公(gong)司西安(an)分公(gong)司發(fa)布《疫情(qing)聯控平臺一碼通項目》單一來(lai)源采購公(gong)示，單一來(lai)源采購供應商為(wei)“西安(an)東軟系統集成有限公(gong)司”。
2020年7月13日，西安電信發布(bu)《“一碼通”應用采買(mai)短信服務項目》中(zhong)選人公示，阿(a)里巴巴云計算（北京）有限公司中(zhong)標。
2021年10月25日，西安電信發布《2021年“一(yi)(yi)碼通(tong)”服(fu)務專席熱(re)線業務外包項目》單一(yi)(yi)來(lai)源(yuan)采(cai)購公示，單一(yi)(yi)來(lai)源(yuan)采(cai)購供(gong)應商為(wei)中通(tong)服(fu)旗下(xia)“陜西省通(tong)信服(fu)務有限(xian)公司中意科技分公司”。
2020年12月10日，西(xi)安(an)電信發布《西(xi)安(an)“一(yi)碼通(tong)”安(an)全平臺項(xiang)目》單一(yi)來(lai)源(yuan)采(cai)購(gou)公示，單一(yi)來(lai)源(yuan)采(cai)購(gou)供應商為“杭(hang)州安(an)恒信息技(ji)術股份有(you)限公司 ”。
2020年12月10日，西(xi)安(an)(an)電信發(fa)布《西(xi)安(an)(an)“一碼通”大數據可(ke)視化(hua)分析項目(mu)》單一來源(yuan)采(cai)購公(gong)示，單一來源(yuan)采(cai)購供(gong)應商(shang)為“中譯語通科技（陜西(xi)）有限公(gong)司 ”。
......
網友們對此評論：“哦，我知道原因了，原來是單一來源采購的鍋！”
事情發生后(hou)，立即有網友涌到相關企業的官方(fang)渠道下方(fang)留言(yan)詢(xun)問。
對此，安(an)恒信息在互動平臺表示(shi)，公(gong)司在西安(an)一碼通業務中負責部分應(ying)用(yong)層(ceng)安(an)全防護及合規產品，以應(ying)對可能存在的(de)網絡攻(gong)擊和運維風險。自服(fu)務一碼通以來，公(gong)司長(chang)期(qi)安(an)排技術人員(yuan)值(zhi)守(shou)，重點(dian)時(shi)期(qi)進行24小時(shi)不間斷(duan)的(de)監測(ce)和保障，到目前為(wei)止，并無黑客攻(gong)擊導致業務問題的(de)跡象。
上游新聞記者(zhe)也曾多(duo)次致電西(xi)安(an)一(yi)碼(ma)通(tong)(tong)(tong)的(de)(de)(de)開(kai)發公(gong)司(si)(si)美林數據(ju)以及運營維護公(gong)司(si)(si)西(xi)安(an)東(dong)軟，但兩(liang)家公(gong)司(si)(si)的(de)(de)(de)聯系(xi)電話(hua)均處于(yu)可以撥通(tong)(tong)(tong)、無人(ren)接聽(ting)狀態。去年(nian)12月20日，西(xi)安(an)一(yi)碼(ma)通(tong)(tong)(tong)首次出現故障(zhang)之(zhi)后，記者(zhe)就(jiu)撥打(da)了(le)美林數據(ju)的(de)(de)(de)公(gong)司(si)(si)和西(xi)安(an)東(dong)軟的(de)(de)(de)公(gong)司(si)(si)電話(hua)，當(dang)時(shi)接聽(ting)熱線的(de)(de)(de)工(gong)作人(ren)員對這一(yi)事件進行(xing)了(le)回(hui)應(ying)。美林數據(ju)的(de)(de)(de)工(gong)作人(ren)員強調他們(men)僅負(fu)責一(yi)碼(ma)通(tong)(tong)(tong)的(de)(de)(de)后臺和賦碼(ma)算法，不(bu)負(fu)責運營和維護，因此崩(beng)潰與他們(men)無關。西(xi)安(an)東(dong)軟則不(bu)愿就(jiu)一(yi)碼(ma)通(tong)(tong)(tong)崩(beng)潰原因做過多(duo)分析。
總結一下大家的回復，“不知道，不清楚，不是我的鍋。”
北京數洋智慧科技有限公司CEO朱瑾鵬則對此表示：“說到責任這個話題，更應該強調每個建設環節、每個參與者都應該有相應的認責機制，才能做到各環節層層把關，層層防護，主動擔當。”
以后如何“未雨綢繆”？
無論是尋找問題的根源，還是找到所謂的責任人，本意都是為了防患未然，避免再次發生。
在北京數洋智慧科技有限公司CEO朱瑾鵬看來，采取一些有效的手段和措施，杜絕類似問題的發生才是關鍵所在，而相(xiang)關措施則可(ke)以分為事前、事中(zhong)和事后(hou)三個方面。
首先，在事前，我們可(ke)以通過良好(hao)的(de)(de)架構設計、有效的(de)(de)方案預審、評審等(deng)方式去避免系(xi)統設計缺陷，另外，系(xi)統還需(xu)要(yao)進行(xing)充分的(de)(de)壓(ya)力與仿(fang)真(zhen)測(ce)(ce)試。朱瑾鵬表(biao)示(shi)，“一碼通這(zhe)個應用雖然數據(ju)接口比較復(fu)雜，但是(shi)業(ye)務(wu)邏輯并不是(shi)很(hen)復(fu)雜，數據(ju)量(liang)容易(yi)測(ce)(ce)算，民眾在高峰期(qi)間訪問(wen)的(de)(de)行(xing)為模(mo)式也可(ke)以通過大數據(ju)算法仿(fang)真(zhen)模(mo)擬，所以說應該(gai)比較容易(yi)模(mo)擬類似的(de)(de)場景，當前(qian)的(de)(de)測(ce)(ce)試與數據(ju)算法技(ji)術(shu)是(shi)完(wan)全(quan)具(ju)備支(zhi)撐條(tiao)件的(de)(de)。但從結果來(lai)看顯然是(shi)當初(chu)壓(ya)力與仿(fang)真(zhen)測(ce)(ce)試沒有做(zuo)好(hao)，沒有預料(liao)到(dao)會(hui)出現現在這(zhe)么一個極端負荷的(de)(de)情況。”
接著，在事中，應通過技術(shu)、算法和主(zhu)動運維手段去實時監(jian)控關鍵指(zhi)標(biao)，做到(dao)主(zhu)動監(jian)控，甚至(zhi)主(zhu)動預(yu)警(jing)，一(yi)旦(dan)流量超過閾值或前兆預(yu)警(jing)指(zhi)標(biao)出現應主(zhu)動觸發排(pai)障(zhang)機制，通過啟動備用線路、增加處理能力(li)甚至(zhi)系(xi)統降(jiang)速等手段確保系(xi)統不(bu)宕機。
最后，在事后，系(xi)統遇到故障怎么搶修(xiu)？從目(mu)前看前期預案考慮的不夠完善，技(ji)術、管(guan)理與運維保障機制準(zhun)備不足(zu)，才會出現搶修(xiu)慢以及屢次發生的情況
結語
文章的最(zui)后(hou)，想再(zai)強調(diao)一(yi)下，雖然西安(an)此次應對疫情(qing)出現了各種(zhong)混亂(luan)和(he)(he)諸多(duo)問題(ti)，但也希望(wang)大家也能多(duo)給這座城市一(yi)點兒耐(nai)心和(he)(he)信心。
也由衷的祝愿(yuan)我家鄉的親(qin)人(ren)和朋友(you)們早日恢復平靜的生(sheng)活。
西安，加油~
最后的最后，對愿意為本文提供支持的5位業內專家表示由衷的感謝~
參考資料：
1.《西安一碼通，兩個星期兩次崩潰(kui)，這到(dao)底為了什么(me)？》，鋒利傳媒法(fa)治視野
2.《不堪(kan)重(zhong)負(fu)！西安“一(yi)碼通”半個月內再次故障(zhang)，細數(shu)崩潰(kui)的N種可能》，智領云科技
3.《#西安一碼通#又崩了。。。誰之(zhi)責 ？》，云頭條(tiao)
4.《西(xi)安(an)(an)“一碼通”系統崩潰背(bei)后：多家公司(si)為其提(ti)供安(an)(an)全防護》，紅星新聞
