2023年成立的滴滴打車,僅用了三年時間就書寫了:覆蓋300個城市,使用者數從2200萬增到1.5億,月活躍使用者增長了600多倍(2023年平安夜當天,全國用滴滴打車出行人數超過了3000萬人),打車成功率高於90%……這些永遠會被銘記在移動網際網路歷史中的神奇記錄。而不為人知的是,支撐滴滴打車如此龐大使用者數量的架構,以及那些曾無數次不眠不休應對挑戰的技術夥伴們。
人稱「博師傅」的滴滴打車cto張博這樣描述:「三年來,基本天天都在『打仗』。每天一睜眼就要想生和死的問題。比誰能最先穩定,能將使用者留住,誰就是勝利者。我們用技術和時間賽跑。而生死時速之後,我們開心地發現沉澱了非常多的寶貴經驗,培養了大批優秀的實戰人才。」
滴滴打車cto張博往往被朋友們親切地稱為「博師傅」
滴滴打車成立初衷是為了解決司機與乘客之間的資訊不對稱的問題,通過移動網際網路和智慧型手機來打破資訊的壁壘。從打車到專車再到順風車,滴滴打車三款產品的背後是架構的挑戰和系統的變遷。
csdn:如果從產品角度來看,滴滴打車發展有幾個階段?作為cto,你的工作重點有哪些?
張博:滴滴打車成立初衷就是為了解決司機與乘客之間的資訊不對稱的問題。乘客和司機通過傳統手段往往無法實現資訊對接,一方是打不到車或被拒載;另一方是空車行駛耗時耗力耗費資源。這是資訊的壁壘,完全可以通過移動網際網路和智慧型手機來打破。而在後續運營中,我們發現即使計程車空駛降低到o,也無法滿足早晚高峰乘客出行需求。以北京為例,計程車10.6萬輛,但人口卻有2000萬常住人口,1000萬流動人口。要匹配這樣的需求需要集中社會用力,排程社會資源,這就是滴滴打車的第二款產品——滴滴專車。目前專車訂單量已經逼近計程車訂單量,而車租車訂單量沒有下降,顯然撬動的是新增量市場。第三款產品是順風車,滿足的場景很有代表性。通過滴滴大資料分析系統,發現很多人居住地和工作地都比較接近,收入水平相當,行業屬性相近,這些人往往都會使用計程車或專車,如果能夠將需求合併,顯然無論是幫助乘客提供低成本出行,還是節省社會資源,都很有價值。更有趣的是,其上增加了社交屬性,人們可以結交新的朋友,出行變得更有意思。作為cto,我的工作主要有三部分:第一是產品,第二是工程技術,第三是大資料。
csdn:三款產品代表了滴滴打車的不同發展階段。相信每個階段背後的架構都有很明顯的特徵?
第二次架構變化是在第二款產品滴滴專車時,因為最初架構設計是為支撐一款產品,而今架構要同時支撐多款產品。產品之間,有相同也有不同。為此,我們特別成立了技術架構部,將通用型服務下沉到架構,避免重複造輪子,將個性化服務放到業務層,實現服務開發。舉個例子,比如支付、賬號體系、計算、儲存等,都是通用型服務,可以放到架構中。這次架構重構是比較成功的,也正是這樣的組織和技術變化,所以在第三款產品順風車的時候,以及我們馬上發布的更多新產品時,都可以得到很順暢的支撐和服務。
csdn:攜程、藝龍事件之後,cto們更加重視資料安全。滴滴打車在安全方面如何規劃的?
滴滴打車正在滴公尺系統、使用者畫像系統、精準營銷、智慧型匹配、需求**系統和運能**系統等方面構建自己的技術核心競爭力。在研發的路上,大資料、機器學習不僅是滴滴打車產品的心臟,還是滴滴打車商業的心臟。
csdn:2023年在滴公尺系統、使用者畫像系統、精準營銷、智慧型匹配、需求**系統和運能**系統等方面,滴滴大資料技術逐步深入。那麼研發的整體思路是怎麼樣的?
張博:是的。大資料是滴滴打車的心臟。不只是滴滴打車產品的心臟,還是滴滴打車商業的心臟。我們的研發的基本原則是想辦法撮合乘客和司機,滿足他們的需求,保證他們的體驗。舉個例子,某乙個時刻在中關村,同時出現很多訂單,周圍有很多司機。我們要做的決策是:將訂單傳送給合適的司機。因為司機在任何時刻都只能聽到同時爆發訂單中的乙個。所以匹配要準確,那麼背後就是推薦演算法要準確,匹配效率要高,計算要快,推送要及時。這還不夠。我們在推送訂單到這位司機之前,應該先**他對訂單感興趣的程度,廣告領域稱為ctr,我們稱為str。在後驗過程中,滴滴可以做到80%的準確度。其中,不僅要計算司機的個人特徵,還要結合其決策體系,如喜好,是對小費敏感,長短途敏感,時間敏感,還是對方向敏感等靜態特徵和司機和訂單之間的位置關係、時間關係等動態特徵進行綜合分析。除此以外,還有補貼,給乘客什麼樣的補貼,給司機什麼樣的補貼,誰更敏感,多少金額影響更積極,這些策略的背後都是大資料在起作用。我們希望用有限的資源最大化提公升使用者的質量和活躍度,這不可能通過人肉實現,只有技術才能實現這些。而實現的過程中,對架構、運營、產品等挑戰都很大。
csdn:滴滴打車在大資料方面是傾向於開源技術優化還是自主研發?
張博:我們業務分了幾層。基本都是使用的開源技術。基礎層面是資料平台,主要是大資料計算和儲存,用的是業內比較成熟的開源系統,hadoop。基礎層上是自建的資料倉儲,然後是策略架構,通過實驗平台讓策略迭代更加敏捷,如快速提取特徵完成模型訓練,並通過小流量測試驗證模型,通過後迅速上線。這些都是工程方面的研發。再上面是機器學習,滴滴打車現在每天湧入的資料接近10tb,通過不斷蒐集使用者標準資料特徵,優化機器學習模型。比如推送給司機訂單,司機是否搶單,這就是乙個天然的標註。而通過這些標註,就可以優化學習體系。最上面就是整個大資料體系,支援新產品開發和策略決策。在我看來,目前很多開源專案演化的比較穩定,效能表現也不錯,沒有必要從頭開始搭積木了,盡快將技術服務於應用最重要。而在不斷實踐中,通過對開源技術的改進和優化,在反饋給社群,我們是願意這樣做的。
csdn:人工智慧發展速度很快。滴滴在機器學習方面已經到了什麼樣的程度?
張博:我們馬上會有重量級產品發布。滴滴大資料領域負責人是機器學習領域世界級頂尖學者何曉飛。我們在機器學習的投入是相當巨大的。
csdn:哪些寶貴的經驗可以分享出來?
張博:第一是如何應對大流量、高併發的挑戰。比如每乙個介面可能被訪問頻次如何設計,背後訪問多少次快取,資料庫會讀寫多少次,後端每乙個服務,瞬間併發量能到什麼級別,每一層壓力測試要扛住多大讀寫併發,10臺機器能扛住多大讀寫併發等,都要做到心中有數。再比如每一次營銷活動前,要對系統做一次體檢,評估到底可以承接多大的量。第二是要有非常好的運維工具,要能實時監測線上每乙個後端服務模組的負載,能夠及時發現問題並報警。第三是設定多套應急預案,當問題發生時,團隊可以盡快反應,做準備好的動作。第四是要有降級策略,在大流量衝擊下,要優先保證主流層。對滴滴而言就是發單,使用者發單、司機搶單是主流程,在這樣的特殊情況中,積分**等都是非主流層,可以被捨棄。
每一次生死戰役,都是拼命在和時間賽跑。而每一次戰役勝利之後,都為滴滴打車培養了優秀的實戰人才。最讓張博開心的是,團隊成員在飛速的成長的同時,沒有乙個流失。
csdn:滴滴打車成立只有三年,但對產業的影響有目共睹。作為技術負責人,你認為最大的挑戰是什麼?
csdn:如何評價和你「共生死」的團隊?
張博:我的團隊非常優秀,正因為經歷了非常多的生死戰役,他們每個人的成長速度會是大公司的2-3倍。也許2-3年前,他們還只是大公司技術團隊的不知名的一員,但現在他們已經是滴滴打車的頂梁柱,承擔了非常重要的工作。比如曾經乙個ios工程師如今負責滴滴公共產品和技術,已經成為全棧選手。這樣的例子還有很多。我最開心的也是這一點,看到他們飛速的成長,而且從入職開始,沒有乙個流失。我們下一步會建立滴滴技術學院,每乙個角色都有技術成長路線圖,會有導師輔導,會有定期培訓。我們也會引入高精尖人才,比如何教授等,請這些頂級專家帶領大家走下去。
csdn:滴滴快的合併後,實施聯合ceo制度,人員架構不變。但在技術團隊方面是否會有合併?
張博:技術平台和相應的架構正在做合併。我們希望變成不同的專業團隊,將所負責領域做深,做精,幫助業務跑的更快。
csdn:未來技術規劃是如何考慮的?
張博:加大在大資料等方面的持續投入,加大在基礎架構層面的投入。我們看到矽谷很多企業在大規模分布式計算、儲存和機器學習的平台的投入是巨大的。比如谷歌通過對mapreduce的優化,使得其計算要遠勝於其他平台。我們在這些方面也要繼續學習,完善在技術方面的核心競爭力。
csdn:你的轉型很成功。對於從cio到cto或者從技術骨幹到cto,這兩條不同的發展路徑,有什麼好建議麼?
張博:從cio到cto,要清晰認識到技術為產品服務,產品為商業服務。cto要有商業眼光。倒推回來,cio要從技術入手,支撐產品發展,進而支撐公司現在和未來的商業計畫。簡單來說就是:從技術骨幹到產品骨幹,要懂網際網路產品、明白使用者需求,知道如何做出一款滿足使用者需求的產品、你要知道這些使用者過來了以後,商業模式是什麼,企業如何創造利潤。而從技術骨幹到cto,難度更大。技術專家往往在某一領域精深,但要變成全能選手,就需要對每個領域都有所了解,找到這個領域真正的頂尖人才,然後組織起你的團隊,駕馭團隊實現目標。
寫在最後:
滴滴打車CTO張博 我們要這樣玩社群和大資料
近期,剛剛完成7億美元融資的滴滴打車正式對外披露 滴公尺 系統。在此之前,滴公尺 系統並沒有引起外界太多的關注,但是從滴滴打車cto張博透露的資訊來看,這卻是乙個殺手級功能,並在滴滴公司內部被寄予厚望。什麼是 滴公尺 系統呢?我們先聽聽張博的介紹 今年年中時碰到了新問題,滴滴打車雖然發展很快,但實際...
無奈之舉 滴滴打車
據中國之聲 央廣新聞 報道,昨天,打車軟體嘀嘀打車 表示,已正式更名 滴滴 小桔科技ceo程維表示,這個名字更符合使用者習慣。但這真的是全部的理由嗎?符合使用者習慣,恐怕真的不是全部理由。因為日前,近日,杭州妙影微電子 宣布,起訴北京小桔科 技 商標侵權,要求小桔科技停止使用商標,並賠償八千萬元。目...
我和滴滴打車司機的那些事
滴滴打車毫無疑問是當前共享經濟的傑出代表,但是有時我在想 它有沒有可能成為一種社交的新方式?下面以我為例,講講我和滴滴打車司機的一些事。有一次我帶著乙個親人的小孩打個滴滴出去玩。滴滴司機年紀和我相仿。大家一聊之下,原來早期他也算是 it從業人員,現在他也有乙個哥們在金山當乙個產品負責人。既然是同行眾...