學習筆記 NLP漢語自然語言處理 原理與實踐

2021-10-01 17:56:16 字數 510 閱讀 8665

自然語言處理(natural language processing,nlp)是能夠實現人與計算機之間用自然語言進行有效通訊的各種理論方法,也是人工智慧領域中乙個最重要,最艱難的方向。

(1)從語法層面來說,是中文分詞,詞性標註,句法解析

(2)從語義層面來說,是命名實體識別,語義組塊,語義角色標註

其中又有一部分之間其實是相關聯的,這是由於中文的特殊性造成的

本書主要介紹了哈工大nlp平台及其演示環境

它是哈工大社會計算與資訊檢索研究中心開發的一整套中文語言處理系統。該平台不僅提供中文分詞,詞性標註,命名實體識別,依存句法分析,語義角色標註,還可以通過視覺化的圖形輸出,使使用者一目了然。這也是乙個開源系統,**是:哈工大語言雲演示平台

,但是我沒能成功使用

斯坦福自然語言處理涉及廣泛的nlp應用,主要有:

斯坦福句法解析器

斯坦福命名實體識別器, 該識別器基於條件隨機場序列模型

斯坦福詞性標註器,基於最大熵演算法

斯坦福分詞器,基於crf演算法

NLP自然語言處理

第1部分自然語言處理入門 1.1自然語言處理入門.mp4 第2部分hmm和crf 1.1crf模型簡介.mp4 1.1hmm模型介紹.mp4 1.2文字處理的基本方法 part1.mp4 2.1新聞主題分類任務 第4步 part2.mp4 第43部分rnn 1.1rnn模型小結.mp4 1.1rnn...

NLP自然語言處理

老實來講這課我一頭霧水滿腦袋問號 import numpy as np from collections import counter counttime 0 def seperate filename totalnum 0 郵件的總數 global counttime i 0 file open ...

自然語言處理(NLP)學習筆記(二) NLP技術

nlp 此為第二部分,漫談nlp相關技術。說到nlp的相關技術,因為是要教會計算機理解人類語言嘛,所以先弄清楚語言在大腦中是怎麼產生的是很有必要的。歸納來說,目前人們認為語言在大腦中形成有下面兩種看法。其一就是從理性主義的角度出發,認為人類的語言能力就好像是我們生來就會吃飯一樣是天生具備的。這派觀點...