特徵服務典型場景 離線與實時統計

2022-08-24 18:48:12 字數 457 閱讀 8785

例如有這樣乙個需求:業務方希望獲取司機實時更新的累計完單量,需保證收到完單事件後秒級更新。由於滴滴訂單量很大,單個司機的完單量從幾單到幾萬單不等,直接查詢底層儲存如mysql、elasticsearch等儲存,會對底層儲存造成很大查詢壓力,並且延時也較高,在高併發等情況下容易出現各種問題。在特徵服務這邊採用批處理+流處理這樣的lambda架構來實現這類需求,整個的資料流如下:

可以看到這是乙個典型的lambda架構,不了解的可以參考維基百科:lambda architecture

在統計特徵彙總歷史完單量和實時完單量,需要注意以下情況:當t-1天未準備就緒時,需要使用t-2天的歷史資料、t-1天實時資料、t天實時資料相加。舉例如下:

假設批處理計算司機歷史完單量的任務平均在上午6點完成並匯入kv儲存系統。

典型使用者 場景

典型使用者 名字黃德勝 性別 年齡 男,35歲 職業自由投資人 收入20萬元 年 知識層次和能力 專科,有一定的投資經驗,對經濟有自己的看法 生活 工作情況 已婚,生活負擔在加重 動機,目的,困難 想要增加收入,給家庭更好的生活。困難 沒有好用的投資輔助計算工具,自己計算容易出錯 使用者偏好 接受新...

典型使用者場景 使用者場景描述

第一階段承擔的專案任務 登入及註冊介面的實現,維護團隊部落格 小美 普通同學 名字小美 性別 年齡 女 20 職業學生 收入無正式收入 知識層次和能力 大學生活 工作情況 生活不規律,沒有好習慣,不愛上課,不愛學習,更不願意交作業 動機,目的,困難 按時交作業,困難 不記得作業要求,以至於平時成績很...

典型使用者與場景

典型使用者 名字王然 性別 年齡 男,36歲 職業銀行普通職員 收入14萬元 年 知識層次和能力 大學本科,每天處理銀行業務 生活 工作情況 每天固定在銀行上班,已婚 動機,目的,困難 在有一定收入的前提下想要進行一些投資,實現利滾利。困難 想要實時檢視投資狀況。使用者偏好 關注資金動態。使用者比例...