开源中文分词软件

ENVI5.6 批量处理GF-2/GF-6/GF-7:从安装到融合的完整自动化流程 本文详细介绍了ENVI5.6环境下批量处理GF-2/GF-6/GF-7卫星数据的完整自动化流程,包括环境配置、工具安装、正射校正、图像融合等关键步骤。通过实战案例和优化技巧,帮助用户高效完成高分卫星影像处理,提升工作效率。特别针对GF-6和GF-7的特殊处理要点进行了深入解析。 阅读详情
赞赏nzinfo的开源精神,并为中文检索技术的推广添砖加瓦。由于工作关系,这段时间对全文检索技术做了一些了解,论坛新张,特将我平时收集的一些开源中文分词项目列在下面,还很不全面,大家帮忙总结。(商业的有海量、猎兔等,就不放在这里了)


名称: 计算所汉语词法分析系统ICTCLAS
这可是最早的中文开源分词项目之一,很多后来的分词项目都参� �� ��了他,有中科院计算所开发,网站上有很多相关资源可供研� ��� �参考,不过好像现专人维护网站了,很多死链。
许可证方式: 自然语言处理开放资源许可证
运行环境: Win9X, Win2000, Win NT, Win XP, Linux
语言 C/C++
链接: URL


名称: 极易分词
语言:java 提供lucence 接口
链接: URL

名称: 庖丁解牛分词
语言:java 提供lucence 接口
License: Apache License 2.0
链接: URL


名称: SCWS - 简易中文分词系统
语言:php
链接: URL
sooner
会员
#2 | 发表时间: 10 4月 2008 06:00
回复  引用
【转贴】关于一些中文分词器
【来源】http://h-rain.javaeye.com/blog/169896

找了一些,列出来,备忘.部分内容来自http://lihaiyan.javaeye.com/blog/1276 74

1 计算所汉语词法分析系统 ICTCLAS
中 国科学院计算技术研究所在多年研究基础上,耗时一年研制出� ��基于多层隐马模型的汉语词法分析系统 ICTCLAS(Institute of Computing Technology, Chinese Lexical Analysis System),该系统的功能有:中文分词;词性标注;未登录词识别。 分词正确率高达97.58%(最近的973专家组评测结果),基于角色标注� �未登录词识别能取得高于90%召回率,其中中国人名的识别召回率 接近98%,分词和词性标注处理速度为31.5KB/s。ICTCLAS 和计算所其他14项免费发布的成果被中外媒体广泛地报道,国内� �多免费的中文分词模块都或多或少的参考过ICTCLAS的代码。

下载页面: http://www.nlp.org.cn/project/project.php?proj_id=6

由于 ICTCLAS 是由 C 语言写成的,现在主流的开发工具用起来不太方便,于是有一些� ��心的程序员把 ICTCLAS 改为 Java 和 C# 等其他语言。

(1)fenci,Java 的 ICTCLAS,下载页面: http://www.xml.org.cn/printpage.asp?BoardID=2&id=11502

(2)AutoSplit,另一个 Java 的 ICTCLAS,已经找不到下载页面,点击本地下载

(3)小叮咚中文分词,曾经有下载页面,现在找不到了。据作者 介绍,从 ICTCLAS 中改进,有 Java,C# 和 C++ 三个版本,介绍页面: http://www.donews.net/accesine

2 海量智能分词研究版

海量智能计算技术研究中心为了使中文信息处理领域的研究者们� ��够共同分享海量智能中心的研究成果,共同提高中文信息处理� �平,特此发布《海量智能分词研究版》,供专家、学者和爱好者 进行研究。

下载页面: http://www.hylanda.com/cgi-bin/download/download.asp?id=8


3 CSW中文智能分词组件

运行环境:Windows NT、2000、XP 或更高,可以在 ASP,VB 等微软的开发语言中调用。

简介: CSW中文智能分词DLL组件,可将一段文本自动的按常规汉语词组进� ��拆分,并以指定方式进行分隔,且可对其拆分后的词组进行语义� ��词频标注。其广范应用于各行各业的信息资料检索、分析。

下载页面: http://www.vgoogle.net/

4 C# 写的中文分词组件

据作者介绍,一个 DLL 文件,可以做中英文分词组件。完全C#托管代码编写,独立开发� �

下载页面: http://www.rainsts.net/article.asp?id=48

5 (C) scws-1.0.0 正式发布 (含php扩展及2文本词典) http://www.hightman.cn/


6 MMSeg Java开源实现http://www.solol.org/projects/mmseg/


7 小麻雀搜索引擎http://www.sqlet.com/

8 (C#) 开源 ShootSearch 分词组件 1.0 bate 070312 (支持dotlucene)http://www.shootsoft.net/home/show.aspx?id=38&cid=8

9 (Java) Paoding Analysis(庖丁解牛)http://code.google.com/p/paoding/

10 (Java) lucene开源中文分词器 IKAnalyzer2.0.2 共享及源码发布http://linliangyi2007.javaeye.com/blog/165287

11 (ruby) RMMSeg 作者,一些介绍
根据作者自己博客上面的测试,中文分词的准确率可以达到98%以� ��.应该是MMSEG的Ruby实现.

12 (C) MMSEGhttp://technology.chtsai.org/mmseg/

13 (C++)FirteX 是一个功能强大、高性能、灵活的全文索引和检索平台http://www.fi rtex.org/


其他:
搜索引擎资料收集(转)http://wind-bell.javaeye.com/blog/81504
几个免费的中文分词模块http://lihaiyan.javaeye.com/blog/127674
开源研究,中文分词http://www.j-kanban.com/bbs/thread-1806-1-1.html
手把手教你用NE555+LM324搭建红外倒车雷达(附Multisim仿真文件) 本文详细介绍了如何使用NE555定时器和LM324运算放大器搭建一个红外倒车雷达系统。内容涵盖从核心原理拆解、模块电路设计(包括红外发射、接收放大、检波与电压比较)到实战焊接调试的全过程,并提供了Multisim仿真验证思路,帮助电子爱好者与初学者将模拟电路理论转化为可工作的实用项目。 阅读详情

相关推荐

8.23拼多多笔试真题-护栏补强(C++/Py/Java /Js/Go)

拼多多笔试 8月23号真题,拼多多笔试第二题【护栏补强】,提供详细思路讲解以及Java、C++、Python、Go、JavaScript多语言代码实现。拼多多技术岗笔试真题【护栏补强】多语言题解。

qq_45776114的博客 228

14款中文分词开源软件

链接:http://www.oschina.net/project/tag/264/segment   开源中国社区 ‍ 1、IKAnalyzer IKAnalyzer是一个开源的,基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始,IKAnalyzer已经推出 了3个大版本。最初,它是以开源项目Luence为应用主体的,结合词典分词和文法分析算法的中文分词

u010384318的专栏 4049

TMS320F28335 DSP最小系统ad设计原理图+PCB布局+封装文件.zip

TMS320F28335 DSP最小系统ad设计原理图+PCB布局+封装文件,ad 设计的工程文件,包括原理图及PCB印制板图,可以用Altium Designer(AD)软件打开或修改,可作为你产品设计的参考。

中文分词开源软件

链接:http://www.oschina.net/project/tag/264/segment   开源中国社区 ‍ 1、IKAnalyzer IKAnalyzer是一个开源的,基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始,IKAnalyzer已经推出 了3个大版本。最初,它是以开源项目Luence为应用主体的,结合词典分词和文法分析算法的中文分词

阳光梦的专栏 1589

【转】开源中文分词软件分析

赞赏nzinfo的开源精神,并为中文检索技术的推广添砖加瓦。由于工作关系,这段时间对全文检索技术做了一些了解,论坛新张,特将我平时收集的一些开源中文分词项目列在下面,还很不全面,大家帮忙总结。(商业的有海量、猎兔等,就不放在这里了)名称:计算所汉语词法分析系统ICTCLAS这可是最早的中文开源分词项目之一,很多后来的分词项目都参考了他,有中科院计算所开发,网站上有很多相关资源可供研究参考,不过好像现专人维护网站了,很多死链。许可证方式: 自然语言处理开放资源许可证运行环境: Win9X, Win2000,

lengyuhong的专栏 1528

【文本分类】中文分词开源软件介绍

链接:http://www.oschina.net/project/tag/264/segment   开源中国社区 ‍ 1、IKAnalyzer IKAnalyzer是一个开源的,基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始,IKAnalyzer已经推出 了3个大版本。最初,它是以开源项目Luence为应用主体的,结合词典分词和文法分析算法的

Walter的专栏 4258

Java开源在线考试系统怎么选?从技术选型到落地部署的完整指南

Java开源在线考试系统怎么选?本文从技术选型、核心功能、部署运维、二次开发等维度,梳理了Java开源在线考试系统的选型要点。

麦塔在线考试培训系统 343

大数据 之 Snappy

【代码】大数据 之 Snappy。

zhixingheyi_tian的博客 172

41面向对象(高级)-抽象类

当父类的某些方法,需要声明,但是又不确定如何实现时,可以将其声明为抽象方法,那么这个类就是抽象类。

weixin_52770734的博客 356

商超智能运营如何落地?从系统架构到实战避坑的完整技术路径

3. **多端交互展示层**:需覆盖顾客使用的**小程序、APP及H5公众号**,以及员工使用的管理后台。答:在应用层引入**适配器模式**。在项目启动时,应强制要求供应商或自研团队产出**部署文档**(含环境变量清单)和**二次开发文档**(含核心流程时序图),确保后续维护不受限于个人。- **多租户插件**:MyBatis Plus的`TenantLineInnerInterceptor`可实现SQL层面的自动拼接`store_id`条件,防止开发者因SQL编写疏漏导致的数据越权。

weixin_56812938的博客 440

【手搓 Agent 第2.3关】搭建 Agent 进阶能力:工具注册中心架构重构

本篇优化了之前编写 Agent 时的杂乱硬编码,使用工具注册中心统一调度,促使后期增添工具更加容易。顺便优化了 RAG 知识库的懒加载,使 Agent 启动更快。

2502_92964924的博客 336

Java深入解析篇二十之JavaStream API详解

Stream(流)是引入的数据处理抽象,位于包。它表示从数据源产生的元素序列,并支持对其进行函数式、聚合式操作。不是集合:流不存储数据,只描述对数据的计算;不是 IO 流:与无关;惰性管道:中间操作只是登记,终端操作才触发实际计算。// 命令式写法(对照) // List<String> r = new ArrayList<>();

萧瑟余晖的博客 347

电商推返模式的技术架构与系统落地实践

成功的电商推返模式系统,本质是。

weixin_42804741的博客 188

RocketMQ订单事务消息实战教学

用户下单要同时扣库存、扣余额、加积分,拆成 MQ 异步履约后,原子性、重复投递、部分成功三大难题怎么破?本文用一个真实可跑的下单案例,讲透 RocketMQ 事务消息(half 消息/本地事务/回查)、三层幂等防线(Redis SETNX + DB 唯一索引 + ▎ 条件更新)、业务失败与消费失败的区分处理、按状态补偿的 Saga 关单逆向流程,以及死信工单 + 人工重放的完整闭环。全量代码含 import、pom 依赖、建表 SQL,附三条可演示链路、生产落地清单与面试题速答,跟着做即可复现。

zhenyu333的博客 318

MYBATIS=PLUS批量插入数据提效

**原因**:如果开启事务,`saveBatch` 在执行完 `flush` 后,Spring 并不会立即提交事务,而是等待方法结束才 `commit`。- **优化**:如果业务允许部分失败(或无需强事务),**去掉**该方法上的 `@Transactional`,让 `saveBatch` 内部自动提交;* **优化建议**:如果业务允许,**去掉方法上的 `@Transactional`**,让 `saveBatch` 利用自动提交模式,或者使用编程式事务来精确控制边界。

datalover的专栏 377

C++ 理解 std::thread 在单核和多核上的行为差异

std::thread 本身的行为在单核和多核上是完全一致的——它都是创建操作系统级别的线程,由操作系统调度器负责分配CPU时间。真正的差异在于操作系统的调度策略以及硬件并行能力。 形象地说: 单核CPU = 一个人(一个核心)同时只能做一件事,但可以在多任务之间快速切换(时间片轮转)。 多核CPU = 多个人(多个核心)可以真正同时做不同的事。

q610098308的专栏 263
上一篇: html的变化
下一篇: 关于一些中文分词器
digmouse
博客等级 码龄18年 10粉丝 16原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值