斯坦福NLP：标点符号错误识别

作者: v-star*위위
发布时间: 2024-04-19 02:29:09 (16小时前)
转自：

2 条回复

0#
回复此人
土豆 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 看起来像 <code> edu.stanfordn.nlp.process.DocumentPreprocessor </code> 可以用来将段落分成句子，但我不知道如果没有适当的标点符号它的效果如何。 </p> <P> 还有许多其他句子级标记符可用于预处理语料库，查看NLTK <a href="http://www.nltk.org/api/nltk.tokenize.html#module-nltk.tokenize.punkt" rel="nofollow"> nltk.tokenize.punkt模块 </A> 它使用ML算法在没有良好的大写/标点符号的情况下制作句子令牌。 </p> </DIV>

编辑

登录后才能参与评论