中文分词支持库 eFriso

镇坛道德标杆 · 发表于 2018-6-7 03:14:40

本帖最后由镇坛道德标杆于 2018-6-7 09:26 编辑

这个支持库我也用不上，就是写支持库制作教程的时候拿来当例子的，有更多需要的请自行完善。(例如实际上支持 UTF-8 , 我偷懒直接传的文本型所以...)

Friso 来源: https://github.com/lionsoul2014/friso

Friso 是使用 c 语言开发的一款开源的高性能中文分词器，使用流行的mmseg算法实现。完全基于模块化设计和实现，可以很方便的植入其他程序中，例如：MySQL，PHP，源码无需修改就能在各种平台下编译使用，加载完 20 万的词条，内存占用稳定为 14.5M.
      同时支持对 UTF-8/GBK 编码的切分...
      三种切分模式：
            简易模式：FMM 算法，适合速度要求场合。
            复杂模式- MMSEG 四种过滤算法，具有较高的岐义去除，分词准确率达到了98.41%。
            (!New)检测模式：只返回词库中已有的词条，很适合某些应用场合。(1.6.1版本开始)

本地的，效果还行, 主要是词典可以自定义, 比如“精易”自定义进去就可以识别到了:

Friso.zip (1.42 MB, 下载次数: 496)

镇坛道德标杆 · 发表于 2018-6-7 13:28:36

不苦小和尚发表于 2018-6-7 13:17
少模块了，希望楼主能把模块也共享出来

用到的模块开源地址:

https://bbs.125.la/forum.php?mod=viewthread&tid=14069145

何处天涯 · 发表于 2024-1-7 02:45:27

这个真是个大宝贝。

sunfly · 发表于 2023-12-12 19:07:12

尝试改了一下，把控制台程序改成窗口程序。支持库和data、ini下楼主例子有
共同学习。

易分词1.e (5.96 KB, 下载次数: 9)

cloudmorn · 发表于 2023-5-27 15:25:52

6了6了正好用大

和鑫 · 发表于 2023-5-10 11:56:47

一瓶矿泉水发表于 2018-6-7 20:45
666虽然能用上的人不多，但是对于能用上的人，就是大宝贝

你好，老板，请问分词功能你调试过能用了吗？

和鑫 · 发表于 2023-5-10 11:55:37

lixuhui2468 发表于 2018-6-12 20:23
多谢楼主的分享，刚好有用！！谢谢谢谢

你好，老板，请问分词功能你调试过能用了吗？

和鑫 · 发表于 2023-5-10 11:49:06

我来兜兜风发表于 2020-2-1 17:33
大佬,少个JB的易模块,还有字库是扔哪呢

你好，大神，你试了这个分词能用了吗？

和鑫 · 发表于 2023-5-10 11:48:30

ltraixj 发表于 2023-3-6 15:16
哇,太棒了,本地的,超级棒,不用下载很多东西了,还支持自定义,好好调jiao就好了,23333 ...

你好，大神，请问这个分词，你的能用了吗？

和鑫 · 发表于 2023-5-10 08:42:49

ltraixj 发表于 2023-3-6 15:16
哇,太棒了,本地的,超级棒,不用下载很多东西了,还支持自定义,好好调jiao就好了,23333 ...

你好,大神,请问你用上这个分词了吗

ltraixj · 发表于 2023-3-6 15:16:43

哇,太棒了,本地的,超级棒,不用下载很多东西了,还支持自定义,好好调jiao就好了,23333

king1999 · 发表于 2022-10-31 17:24:41

哇,太棒了,本地的,超级棒,不用下载很多东西了,还支持自定义,好好调jiao就好了,23333

		自动登录	找回密码
密码			注册

[易语言支持库] 中文分词支持库 eFriso

点评

评分

本帖被以下淘专辑推荐: