168大数据

标题: Nlpir Parser灵玖智能文本挖掘平台新词识别 [打印本页]

作者: ljrj123 时间: 2017-7-6 15:25
标题: Nlpir Parser灵玖智能文本挖掘平台新词识别
　　语言随着社会的发展而发展，在词汇中的一大表现就是新词语的出现。自古以来，汉语词汇就带有特定时代的烙印，必然会从一个侧面反映出社会政治、经济、文化以及人们价值观念、生活方式的变迁等。近年来随着互联网的普遍使用和蓬勃发展，大量的新词和网络用语更是层出不穷。
　　新词虽然也是未在词典中出现的词，但是新词是一个融入了时间的动态概念，在识别和标注是带来了很大的困难。
　　Nlpir Parser灵玖智能文本挖掘平台新词自动发现技术能够识别出词典中没有出现过的词汇、短语、命名实体、流行用语，是语言文献分析方面的一把利器。新词发现脱胎于语言自动分词技术，又是对分词技术的有效提升和补充。
　　灵玖采用基于语义的统计语言模型，所处理的文档不受行业领域限制，能够有效地挖掘出新出现的特征词汇，所输出的词汇可以配以权重。
　　Nlpir Parser灵玖智能文本挖掘平台新词发现系统的主要特色在于：
　　1、速度快：可以处理海量规模的网络文本数据，平均每小时处理至少60万篇文档;
　　2、处理精准：Top N的分析结果往往能反映出当时的时事流行语和热点实体，适合于舆情热点计算;与国际上著名厂商的技术相比，各项指标远远领先，或许是灵玖更懂中文吧;
　　3、精准排序：新词汇按照影响权重排序，可以输出权重值;
　　5、开放式接口：新词发现组件作为Nlpir Parser的一部分，采用灵活的开发接口，可以方便地融入到用户的业务系统中，可以支持各种操作系统，各类调用语言。
　　新词发现组件可以应用于文本挖掘、知识管理、词典编辑、舆情监测等多种应用中。
汉语词语是一个开放集合，它时刻处于不断扩充中，特别是网络新语言迅速扩张的今天，因此对未登录词的识别就是一个重要的问题。Nlpir Parser灵玖智能文本挖掘平台新词自动发现技术的出现为大家提供了解决的方法，并推动了技术的发展。

欢迎光临 168大数据 (http://www.bi168.cn/)