关键词优化-未登录词处理
未登录词就是分词词典中没有的词,也称为新词。*典型的是人名、地名、专业术语等。例如,人可以很容易理解句子“王军虎去广州了”中,“王军虎”是个词,因为是一个人的名字,但要是让计算机去识别就困难了。如果把“王军虎”作为一个词收录到字典中去,全世界有那么多名字,而且每时每刻都有新增的人名,收录这些人名本身就是一项巨大的工程。即使这项工作可以完成,还是会存在问题,例如: 在句子“王军虎头虎脑”中的,“王军虎”还能不能算词?
未登录词中除了人名以外,还有机构名、地名、产品名、商标名、简称、省略语等都是很难处理的问题,而且这些又正好是人们经常使用的词,因此对于搜索引擎来说,分词系统中的新词识别十分重要。目前,对未登录词的处理一般采用统计的方法,首先从语料中统计出出现频率较高的字组,然后按照某种规则把它们作为新词添加到辅助词典中。
目前,中文自动分词技术在搜索引擎中已经得到广泛应用,分词准确度已经达到96%以上,但是在对大规模网页进行分析处理的时候,现有的中文自动分词技术还存在许多不足,例如上面提到的歧义问题和未登录词的处理问题等。因此,国内外的科研院校,如北大、清华、中科院、北京语言学院、东北大学、IBM研究院、微软中国研究院等都一直关注并研究中文自动分词技术,这主要是因为网络上的中文信息越来越多,对网络上的中文信息的处理必将成为一个巨大的产业和广阔的市场,存在无限的商机。但是,中文自动分词技术要想更好地服务于网络中文信息的处理并形成产品,还要在基础研究方面和系统的集成方面做许多工作。
更多精彩来源: http://ec.trueland.net/ |
王先生
021-51093095
http://ec.trueland.net/
|
友情提示:
信息由用户自行发布,采用请谨慎,我们鼓励您当面交易。如有不符合法规或造成侵权,请及时通知本站更正或删除,具体联系方式见页面底部联系我们。名站在线只为传递信息,我们不做任何双方证明,也不承担任何法律责任。 信息转载,请标明来源于www.fwol.cn ,谢谢。 |
当前页在本站[名站在线]7天内点击次数(点击次数为零的日期不显示): |
信息评估: |
(还没有网友对该信息作出评估,你想为该信息提供第一个评估吗?) |
想买好的pp板就到明鑫塑胶pp板专卖想买好的pp板就到明鑫胶pp板专卖公司信息 明鑫胶拥有雄厚的技术力量、精密**的工艺过程控制、先进可靠的生产、检验设备,郑州明鑫胶有限公司就是这么一拥有完善质量理的有限责任公司,具有比较完善的检测设备,且先后引进先进的pp板生产设备,为高品质的产品提供了有利的基础。来电咨询。 专业的pp板,供销pp板,pp板价格行情 请继续关注更多基本信息产品参数pp板品牌明鑫型号pn6生产厂郑州明鑫胶有限公司存储环境远离火源...济南别墅亭子安装_临沂别墅庭院设计_日照别墅植物墙安装,请找山...    值得信赖临沂植物墙设计安装哪儿有专业的临沂植物墙设计安装公司信息    山东尚景生态环境科技公司是一以景观工程为主要业务的生产型个体经营,多年来,始终坚持以“客户满意和信赖是我们永恒的追求”为服务宗旨,不断开拓进取,大胆创新,服务与每一个需求群体,致力提供良好的临沂植物墙设计安装。公司地址山东临沂经济开发区&a...河北好的9TMRL-8全日粮饲料制备机供应|衡水tmr饲料搅拌机厂家河北好的9TMRL-8全日粮饲料制备机供应|衡水tmr饲料搅拌机厂公司信息 石庄市金源机械有限公司自2005-06-17创立至今,规模从小到大,凭着过硬的技术、丰富的经验,优质的服务和良好的信誉,在农业机械里不断的发展壮大。在短时间内完成了企业创建、完善、发展过程,9TMRL-8全日粮饲料制备机产品已经销到河北;湖南;广东;宁夏;贵州;云南市场。各界人士前来洽谈,联系人孙利平,联系电话13111507098 tmr饲料搅拌机厂代理,tmr饲料...长沙五年制大专的优势五年制大专又叫“五年一贯制大专”或“五年一贯制高职”,是我国高等教育的一种重要形式,招生初中起点学生,不用高考,直接进入全日制高等专科学校学习,五年内,修满规定的课程,考试合格后,颁发大专学历,与普通高中学生将来通过普通高考获得的专科学历层次完全相同。5年学制的前两年,系统学习文化基础课,后三年学习专业技能知识。这种文凭和技能“双丰收”的模式受到初中毕业生的吹捧。
另外,在中考时成绩不理想的考生...微信营销饮料机就选全自动咖啡饮料机,设备机械品牌**者1.广州巨米智能设备有限公司注册资本万元、100,员工51-100人,是一家中型微信营销饮料机口碑样的私营企业。巨米智能尊崇“踏实、拼搏、责任”的企业精神,并以诚信、共赢、开创经营理念,创造良好的企业环境,以全新的管理模式,完善的技术,周到的生产服务,**的设备机械品质为生存根本,我们始终坚持用户至上,用心服务于客户,坚持用自己的服务去打动客户。
2.巨米智能以雄厚的实力、合理的价格、优良的服务与众多企业建立了...
|
|
|
|
|