京東資料採集整理標準化流程介紹

用電商資料採集軟體採集過資料的朋友就應該很清楚，我們輸入指令通過採集軟體將我們需要的**、天貓、京東等平台資料採集回來後，其實裡面包含了很多配件及其他不相關的產品。如果是需要需要用這批資料做產品的分析我們需要刪除配件，整理品牌、型號。整理這過程極其枯燥乏味，而且費眼力，很多客戶雖然花錢買了原始資料，但是很不願意做這個整理工作。antuodata針對目前市場需求專門成立了乙個清洗資料小組，培訓了一支專業的團隊來做這件事情。下面以京東家電品類為例跟大家一起學習下他們是如何做資料清洗工作的。

首先將採集好的京東家電**分類（具體到產品品類）原始資料從採集軟體裡面逐個匯出到excel**裡面。如圖

繼續上面操作。同時大資料系統裡面的資料每天進行採集更新銷量、評價量、**以及活動情況等資訊。這樣不管客戶什麼時候要資料，我們直接從系統匯出都是已整理好的，避免了重複整理工作。