中文分词支持库 eFriso

镇坛道德标杆 · 发表于 2018-6-7 03:14:40

本帖最后由镇坛道德标杆于 2018-6-7 09:26 编辑

这个支持库我也用不上，就是写支持库制作教程的时候拿来当例子的，有更多需要的请自行完善。(例如实际上支持 UTF-8 , 我偷懒直接传的文本型所以...)

Friso 来源: https://github.com/lionsoul2014/friso

Friso 是使用 c 语言开发的一款开源的高性能中文分词器，使用流行的mmseg算法实现。完全基于模块化设计和实现，可以很方便的植入其他程序中，例如：MySQL，PHP，源码无需修改就能在各种平台下编译使用，加载完 20 万的词条，内存占用稳定为 14.5M.
      同时支持对 UTF-8/GBK 编码的切分...
      三种切分模式：
            简易模式：FMM 算法，适合速度要求场合。
            复杂模式- MMSEG 四种过滤算法，具有较高的岐义去除，分词准确率达到了98.41%。
            (!New)检测模式：只返回词库中已有的词条，很适合某些应用场合。(1.6.1版本开始)

本地的，效果还行, 主要是词典可以自定义, 比如“精易”自定义进去就可以识别到了:

Friso.zip (1.42 MB, 下载次数: 517)

镇坛道德标杆 · 发表于 2018-6-7 13:28:36

不苦小和尚发表于 2018-6-7 13:17
少模块了，希望楼主能把模块也共享出来

用到的模块开源地址:

https://bbs.125.la/forum.php?mod=viewthread&tid=14069145

我爱家人 · 发表于 2024-10-18 11:27:41

支持一下

蓝雅婷 · 发表于 2024-8-9 11:04:07

还有模块缺失，用不了

y4886154 · 发表于 2024-5-29 17:41:22

缺少jbec.ec

kc1992 · 发表于 2024-5-3 18:38:45

根本就不能用，浪费时间

何处天涯 · 发表于 2024-1-7 02:45:27

这个真是个大宝贝。

sunfly · 发表于 2023-12-12 19:07:12

尝试改了一下，把控制台程序改成窗口程序。支持库和data、ini下楼主例子有
共同学习。

易分词1.e (5.96 KB, 下载次数: 12)

cloudmorn · 发表于 2023-5-27 15:25:52

6了6了正好用大

和鑫 · 发表于 2023-5-10 11:56:47

一瓶矿泉水发表于 2018-6-7 20:45
666虽然能用上的人不多，但是对于能用上的人，就是大宝贝

你好，老板，请问分词功能你调试过能用了吗？

和鑫 · 发表于 2023-5-10 11:55:37

lixuhui2468 发表于 2018-6-12 20:23
多谢楼主的分享，刚好有用！！谢谢谢谢

你好，老板，请问分词功能你调试过能用了吗？

和鑫 · 发表于 2023-5-10 11:49:06

我来兜兜风发表于 2020-2-1 17:33
大佬,少个JB的易模块,还有字库是扔哪呢

你好，大神，你试了这个分词能用了吗？

		自动登录	找回密码
密码			注册

[易语言支持库] 中文分词支持库 eFriso

点评

评分

本帖被以下淘专辑推荐: