關于 NLP 最佳實踐的一個可能非?；镜膯栴}。標點符號會影響 NLTK 的詞性標注器的行為嗎？或者在將句子傳遞給 POS 標記器之前從句子中刪除標點符號是否可以？
1 回答
慕桂英546537
TA貢獻1848條經驗 獲得超10個贊
通常，標點符號在 POS 標記之前與單詞標記分開。標點符號有其自己的正字法作用，與周圍的詞標記不同。
例如，標記這個句子：名詞動詞。
For PREP
example N
, ,
tokenize V
this PRON
sentence N
: :
Noun N
verbs V
. .
是否在這個階段保留標點符號取決于您的最終目標。對于語法標記，標點符號確實具有語法作用，刪除它通常會降低分析的質量。對于情感分析，標點符號通常不會產生任何極性（盡管大量的劉海可能會傳達出強調或強烈的極性?。。。。。。。?/p>
添加回答
舉報
0/150
提交
取消