1. 程式人生 > 程式設計 >雙十一背後的三場戰役:高併發、黑產、物流

雙十一背後的三場戰役:高併發、黑產、物流

雙十一這一瘋狂的社會現象,已經走到了第十一個年頭。在無數消費者忙著買買買,但在商家眼中,除了在確保每個人都能享受雙十一的好處上,還有三場沒有硝煙的大戰,在等著他們。

又是一年雙十一。

無數的社會議題被討論,消費升級、精緻窮、消費貸月光族、直播網紅、帶貨達人、國貨復興等等,整個雙十一變成了全社會各行業都積極參與的大事件。

這場全民參與的消費狂歡,經過了十年時間,已經成為了特殊的社會現象。而巨大的消費狂歡背後,還有很多無聲的較量一直在進行。

成交資料或注水,高併發不水

根據天貓的報告,今年的消費水平和搶貨速度又打破了新的記錄。但很快微博上就有網友稱,最終定格的 2684 億人民幣的全站銷售額明顯注水。

該網友將 2009 年—2019 年連續十年的雙十一銷售資料進行擬合,得出了實際生產資料幾乎完美地分佈在三次迴歸曲線上,擬合度均超過 99.94 %,幾乎為 1 的結果。

資料過於完美,因此他斷言,阿里為了吸引雙十一的購物熱度,對銷售額資料進行了人工修飾,存在造假事實。

天貓也很快做出官方解釋,並譴責該名網友太過武斷。

天貓在微博上對資料造假進行闢謠

其他網友便不再深究這一事件,畢竟這些數字對普通民眾來說並不重要。同樣對於網際網路圈來說也是一樣,電商平臺們一起創造的商業模式和背後的技術更值得細細探索。

在今年 VLDB 2019 會議上,李飛飛的分享 《Cloud-Native Database Systems at Alibaba: Opportunities and Challenges》

中提到阿里公佈的 2018 年雙十一零點,阿里資料庫後臺的瞬時流量達到了歷史新高。

「雙十一零點的一瞬間,淘寶全網的交易量從每秒幾千筆,迅速躍遷到每秒 49 萬筆,上漲 122 倍,而後臺資料庫需要承擔每秒 7000 萬次的訪問流量。」

而今年訂單建立峰值,更是創下新的世界紀錄,達到 54.4 萬筆/秒。

想要應對這種量級的併發,並順利完成支付環節,無論是阿里、京東、網易還是其他電商平臺,都不得不自研資料庫、提前全鏈路壓測、全員加班如臨大敵的氛圍。

電商平臺的伺服器,要承受著來自瞬間噴發的資料壓力。

所以在工程師們眼中,從雙十一從第一秒開始,就直接演變成一場消費極限與技術極限的戰爭。

雙 11:也是黑產的狂歡節

每次在消費者購物狂歡之時,也是網購平臺最受黑產衝擊的時刻。常見的具體盈利手段有:植入軟體暗釦話費、羊毛黨惡意薅毛、惡意推送廣告流量變現、手機 App 分發惡意軟體、通過手機木馬刷量、實施勒索病毒攻擊、採用 DDoS 攻擊等。

比如在前不久的天貓在 618 期間,類似的系統就在 18 天裡,成功攔截了 502 億次惡意攻擊。

整個網際網路安全行業的產值才不過 500 億但黑灰產「薅」走的就超過 2000 億

行業內專家預估,僅僅在中國大陸,網路黑產已經有 200 萬從業人員,大部分都是 16 – 28 歲、缺乏法律常識的年輕人。在全國每年有至少超過 2000 億的資產會被黑產給薅走。

目前電商平臺可以做到,消費者在下單的 0.01 秒之內,系統就已完成了上百項安全檢測和技術防護,能夠有效打擊黑灰產的入侵。

系統覆蓋假貨識別及防控、商品合規稽核、營商環境治理、惡意流量清洗、智慧物流、新零售安防等上百個商業場景,能夠實現自動決策、智慧對抗、實時處理,精準識別黑灰產行為。

阿里打擊刷單風控系統用到的演演算法

但是道高一尺,魔高一丈。面對巨大的利益有些黑產也逐漸形成了團夥跨境作案,利用人工智慧等新技術實施犯罪並逃避打擊。

對於風控和預警來說,在於黑產鬥爭的網路戰場上,新的技術不是萬能的,但沒有新的技術也是萬萬不能的。

爭分奪秒的快遞人機大戰

除了保證網購的安全性,保障優惠補貼的發放,搶購之後大量的物流訂單,也幾乎成了快遞行業的「噩夢」。

工人正在處理堆積的包裹

根據業內預測,預計在雙十一期間,物流最高日處理量將超過 5 億件,這對物流來說是十分巨大的挑戰。在實際情況中,全自動快遞分揀機器人,早在 2017 年開始,就逐漸成為雙十一戰場上,挑揀貨物環節的主力軍。

藍色的自動揀貨機器人,輕鬆地托起貨架

在智慧倉庫裡,像小盒子的全自動分揀機器人,內建有 AI 系統,它們能夠自動識別包裹,然後托起貨物或者貨架,按自動規劃的合適路徑,有序地運送到制定位置。

最關鍵的是,數百臺 AGV 機器人能夠協調地工作,互不幹擾,還可以自動尋路充電。

機器人將小包裹送入不同的儲存點

根據介紹,這些靈巧的機器人,主要負責貨物的分揀、移動和包裝。它們會帶著訂單箱到貨架指定區揀貨、移動貨架和找到訂單箱裝貨。然後與工作人員配合,完成包裹的傳送。

說不定你搶下的 9.9 包郵的寶貝,都經過了這些耗資上億機器人的運送。

機器人的使用能夠大大地提升效率,通常的情況下,一個機器人每小時能處理近 2 萬個包裹,可以為快遞公司節省約一半的人工。

消費背後:慾望的因,技術的果

不管你是快樂又懊悔地剁著手,還是波瀾不驚清心寡慾,資料都表明,全社會都在被雙十一推動著。

整個雙十一,消費者在在購物車裡左挑右選,猶豫不定,和購物慾進行大戰;電商平臺的前後端工程師們,和全國的消費衝動大戰,伺服器和數百萬部手機大戰;分佈全球的黑產分子和電商安全團隊,來回遊擊作戰。

這些獨特的現象,也在間接或直接地,推動更多技術的誕生和發展。不知道雙十一在未來,還會給全社會帶來哪些驚喜和驚嚇。

但在這些大戰中,也沒有永遠的贏家或輸家。

—— 完 ——