文档详情

2.5.11 N 元分词.pdf-罗刚-人民邮电出版社

发布：2021-04-22约字共页下载文档

文本预览下载声明

第2章中文分词原理与实现87量(V)=20000时，可能的二元（bigrams）组合数量有400000000个，可能的三元（trigrams）组合数量有8×10

显示全部

相似文档

2.5.1 一元模型.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现532.5概率语言模型的分词方法两个词可以组合成一个词的情况叫作组合歧义。例如：“上海/银行”和“上海银行”。最大长度匹配算法无法正确切
2021-04-25 约字页立即下载
2.5.7 二元词典.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现77前驱节点和二级前驱节点。二级前驱节点是一级前驱节点的最佳前驱节点，也就是说，二级前驱节点已经确定了。把以节点i结束的词叫作节点i的一
2021-04-23 约字页立即下载
2.5.5 数据基础.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现67j=i+word.length();g.addEdge(newCnToken(i,j,word.freq,word.term));}i=wordMatch.
2021-04-23 约字页立即下载
2.2.2 使用Ant 构建分词jar 包.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现23读入词典的代码如下：InputStreamfile=null;if(System.getProperty(dic.dir)==null)//用户没有指定词典存放路径时，从缺省的路径加载file=getClass
2021-04-26 约字页立即下载
2.5.3 表示切分词图.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现59Dequepath=newArrayDeque();//最佳节点序列//从后向前回朔最佳前驱节点for(in
2021-04-27 约字页立即下载
11.2.1 问题类型.pdf-罗刚-人民邮电出版社 315第11章问答系统咨询信箱、电话信箱、办事大厅等版块。一个问题可能有多个参考答案，系统最好能够整合出一个最完整、最准确的答案。可以采用精准匹配的方式实现问答系统，为了提高召回率，也可以用查询的方式返回一个最有可能的答案。精准匹配的问答系
2021-04-24 约字页立即下载
8.4.4 支持向量机.pdf-罗刚-人民邮电出版社 261第8章文本分类//类别数量floatV=tdm.getTraningClassifications().length;return((dfwc+1)/(Nc+M+V));}利用样
2021-04-24 约字页立即下载
5.1.4 地名相似度.pdf-罗刚-人民邮电出版社 197第5章文档语义if(!termText.equals(other.termText)){returnfalse;}returntrue;}上述相似度计算方法中没有考虑词语之间的语义相关度。例如，“国道”和“高速公路”在字面上不相似，但
2021-04-25 约字页立即下载
2.12.1 最大熵.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现141}else{//如果有零概率的词，则这个词的概率是reservedMass分摊到每个零概率词的概率return(reservedMass/remainingKeys);}}}这种方法中的lambda值不好选取，
2021-04-24 约字页立即下载
2.8 词性标注.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现101序。此外，通常会创建一个“设置”选项（activity），将选项传递给IME服务。还可以定义设置UI，作为系统设置的一部分显示。Manifest.xml文件中的以下代码片段
2021-04-25 约字页立即下载
2.6 新词发现.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现95图2-31中文分词结构图中文分词切分过程如下。（1）从整篇文章识别未登录词。（2）按规则识别英文单词或日期等未登录词。（3）将输入字符串切分成句子：对一段文本进行切分，先依次从这段文本里面切分出一个句子，再对这个
2021-04-22 约字页立即下载
2.8.3 存储数据.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现1132.8.3存储数据计算两个词性之间的转移概率的公式：(,)(|)()jiijjFreqttPttFreqt=，例如：P(|)量词数词=数词现词数数词现总数后出量的次出的次。如果需要，还可以平滑转移概率：12(,
2021-04-24 约字页立即下载
2.3.2 三叉Trie 树.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现33System.out.print(word);//输出“印度尼西亚”也可以把标准Trie树当作散列表使用
2021-04-24 约字页立即下载
2.3.1 标准Trie 树.pdf-罗刚-人民邮电出版社 第2章中文分词原理与实现29运行jar任务：./gradlewjar现在build/libs/building-java-libraries-0.1.0.jar中生成的jar文件包含预期的版本。为了构建jar包，也可以运行：gradle
2021-04-25 约字页立即下载
基础篇.pdf-罗刚-人民邮电出版社 自然语言处理与Java语言实现人才培养系列qq为读者提供的应用任务多个自然语言处理详细讲解包含大量编程语言实现注重实践，群答疑以及丰富的教学支持
2021-04-24 约字页立即下载