「電商評論觀點挖掘」 比賽總結

2021-09-26 19:28:35 字數 1007 閱讀 7533

一:序列標註部分

序列標註思路 : 採用的bio 資料標註模式

基於bert 或 ( bi-lstm + crf) 進行 模型訓練 和 ** 任務

生成後的結果合併 到 picklabel_test.txt

二:觀點 屬性 分類 模型

1. 利用 標註處理工具,將提取結果 格式化

2. 根據 提取結果 , 在原文本中進行抽取 文字進行合併, 劃分資料集

3. 基於bert模型 進行 觀點 和屬性 模型訓練,

4. 呼叫屬性模型和觀點模型進行**

三:資料合併,提交最終結果

呼叫處理工具把分類模型**結果格式化

根據 官方提供的 需要哪些字段, 將**出的結果 進行合併成最後的輸出結果

為方便廣大讀者 更能清晰的 理解 整個專案的 框架, 筆者 簡單的 畫 個草圖, ( 哈哈, 畫的 不好, 請包涵哈)

一: **的框架圖:

第一次參加 相關 自然語言處理的比賽,總的來說 收穫也比較多,也通過比賽 認識到自己的不足之處,

初賽結束後, 目前得分是 0.725, 排名是 82名, 基本進入 複賽 希望不大了, 在這裡 我要感謝 xmxoxo, 他對我的幫助很大, 真心的感謝他。下面我總結在比賽中的一些 收穫 還有 些 不足吧。

1.雖然未進入複賽, 但 初賽中 針對特定問題做出的處理 還是很有收穫, 再次在這裡感謝 xmxoxo

2. 整理在這個專案中 技術上的一些細節處理 以及 自己遇到的一些問題

3. 完整梳理一遍 參賽思路 以及 實現流程, 相信對我幫助還是挺大的

原始碼位址

大家有好的思路或者需要問題 可以**一起交流哦,

電商顧客評論熱點分析(R 3 5)

隨著電子商務的快速發展,越來越多的人通過電商 來了解產品資訊 購買商品並通過評價表達自己購買商品過程的感受 對購買商品的滿意程度和對所購買商品的建議和要求等。電商 商品評價輿情是客戶了解商品和店家服務的一種重要渠道和表達方式。讀取資料 if require readxl if require jie...

情感分析之 電商產品評論資料

資料預處理由3個部分組成 文字去重 機械壓縮去詞 短句刪除。coding utf 8 import pandas as pd inputfile r e 情感分析 data meidi jd.txt outputfile r e 情感分析 data meidi jd process 1.txt da...

怎麼用python電商文字挖掘? 5

定義檔案路徑 os.chdir os.chdir 用glob把裡面檔名都拿到 並賦值給filenames5 filenames5 glob.glob xlsx filenames5 讀取其中的bai的資料 轉換為列表為後邊處理文字使用 接下來要把這些資料洗乾淨,然後再做 詞云啊 dtm啊 看需要是否...