共指消解的評價方法和演算法非常重要,它不但可以給出不同系統之間效能優劣的指標,同時能為進一步提高系統效能指明方向。乙個好的用於評價共指消解效能的標準應該具備兩點一是辨別能力二是解釋能力。前者是指能夠判斷出系統共指關係消解處理好壞的能力後者是指具備對評價結果合理直觀解釋的能力。
muc評測演算法
muc-6演算法是一種基於鏈(link-based)的評價標準演算法,曾廣泛用於muc會議的指代消解任務。演算法定義了兩個術語"key"和"response"。key是指手工標註的共指鏈參照標註共指鏈；response是指由某一參評系統輸出的共指鏈系統輸出共指鏈。同時,定義等價類為共指鏈的閉包，演算法基本思路如下：
首先,以s
ss表示由生成的乙個共指類集，以r1,
...,
rm
r_1,...,r_m
r1,..
.,rm
表示由response生成的等價類,然後在s
ss上定義如下函式: tod
o...
....
.todo........
todo..
....
..
neuralcoref使用教程 指代消解
編譯器 jupyter notebook neuralcoref與spacy的配合使用，目前版本上存在不相容現象 今天是2020.3.1 需要將spacy降解到2.1.0版本才可以正常使用 pip install spacy 2.1.0如果事前已經安裝過了，可以使用下面的語句來解除安裝 pip un...
模型評價指標
機器學習模型中常見的是分類問題，分類模型的評價指標主要有 1 精確率 2 召回率 3 f值 4 auc值 roc曲線 分類問題可劃分成二分類和多分類問題，其中二分類最為常見，多分類問題大都也是轉化成二分類問題求解，因此本文主要基於二分類模型進行模型評價指標的分析。1 給定標記好的模型訓練資料，經分類...
評價指標總結
我們需要通過評價指標來判斷模型的好壞 1 分類準確度 即 成功的在總數中的佔比 2 利用混淆矩陣 fn false negative,被判定為負樣本，但事實上是正樣本。fp false positive,被判定為正樣本，但事實上是負樣本。tn true negative,被判定為負樣本，事實上也是負...