「GoCN酷Go推荐」Go高性能多语言NLP和分词库——gse

最新推荐文章于 2022-11-23 23:44:39 发布
最新推荐文章于 2022-11-23 23:44:39 发布
阅读量1.9k 收藏 1
点赞数
文章标签： golang go 编程语言 elasticsearch 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/RA681t58CJxsgCkJ31/article/details/123158718
版权

gse是什么？

e8e510864d9b415534b686ca22d3a67d.png

Go高性能多语言NLP和分词库, 支持英文、中文、日文等, 支持接入 elasticsearch 和 bleve Gse是结巴分词(jieba)的golang实现,并尝试添加NLP功能和更多属性

特征

940853a1e5baea47b8dfbf34397da0ce.png

  • 支持普通、搜索引擎、全模式、精确模式和 HMM 模式多种分词模式

  • 支持自定义词典、embed 词典、词性标注、停用词、整理分析分词

  • 多语言支持: 英文, 中文, 日文等

  • 支持繁体字

  • NLP 和 TensorFlow 支持 (进行中)

  • 命名实体识别 (进行中)

  • 支持接入 Elasticsearch 和 bleve

  • 可运行 JSON RPC 服务

算法

241b8722d2fc2271f3412e9af84e7bfb.png

    最低0.47元/天 解锁文章
    Go中国
    关注
    • 0
      点赞
    • 踩
    • 1
      收藏
      觉得还不错? 一键收藏
    • 0
      评论
    Go-Golang中文分词库
    08-13
    Go中文分词库，支持中英文，混合词组，自定义字典 。
    Go语言编译器简介(gocn.vip).pdf
    04-23
    Go语言编译器简介(gocn.vip).pdf
    go学习资料以及开源代码
    XR风云
    10-30 1101
    转自：https://shockerli.net/post/go-awesome/?utm_source=tuicool&utm_medium=referral 嗯~世界上第二好的语言，这里有你可能想要的:pill: 在 GitHub上稳定更新，觉得不错请点个 Star :heart: 如转载分享，请保留出处，谢谢 :laughing: 原文地址: https://shocker...
    go分词库
    Go的全部
    10-11 395
    package main import ( "fmt" "github.com/go-ego/gse" "github.com/go-ego/gse/hmm/pos" ) var ( text = "Hello world, Helloworld. Winter is coming! 你好世界. 你好" new = gse.New("zh,testdata/test_dict3.txt", "alpha") seg gse.Segmenter posSeg pos.Segmenter
    golang jieba库 分词搜索
    qq_44477844的博客
    08-09 1494
    ⚪ 有这样一个场景，某36为了推广，需要根据你的兴趣爱好给你发广·告，这个依据就是你在他游览器搜索的内容。比如36接了个广告任务，推广霸王去屑洗发水，用户在百度的时候，直接搜“霸王去屑洗发水”的很少，这时就体现了分词的力量。 ⚪36将“霸王去屑洗发水”这个字符串分成“霸王”，“去屑”，“洗发水”，甚至”屑“，”洗发“。当用户搜“如何去屑？”，“洗发水成分是什么”,“洗发水能喝吗”，“霸王别姬”类似的一旦含有以上分词，该用户就被认定为潜在的”发展对象“，这样一定程度上增加了推广的准确性。 下面是Go语言字符串
    Gse v0.40.0 发布，Go 高性能分词，增加更多常用 API
    weixin_34279061的博客
    03-13 177
    Go 语言高效分词，支持英文、中文、日文等 词典用双数组 trie（Double-Array Trie）实现， 分词器算法为基于词频的最短路径加动态规划, DAG 和 HMM (V...
    gocn-GoFrame框架介绍及设计.pdf
    最新发布
    05-27
    GoFrame是一个模块化、高性能、企业级的Go语言开发框架，支持Docker、二进制和源码模块发布，采用Go Modules进行模块管理。框架注重工程化建设、统一框架、核心组件、项目架构、设计模式、开发规范和工具，旨在提高...
    GO新闻-非原创
    01-08
    GoCN每日新闻(2019-12-27) 1. Go 开发关键技术指南 | Go 面向失败编程 https://mp.weixin.qq.com/s/1zWdSV8FmwkduX4Hfbztgw  2. Go 正则表达式入门指南 ...
    gocn_news_set:爬取go中国技术社区(https
    04-13
    gocn_news_set_2021go中文网每日资讯--2021-04-12一、Go语言中文网Go 数据结构和算法篇（一）：链表二、亚军进化史Go技术日报(2021-04-11)——rpcx支持websocket协议了!三、CloudNativeCommunity同程旅行大数据集群...
    nlp：用于Golang中自然语言处理和语义分析的选定机器学习算法
    02-03
    自然语言处理 用于golang中自然语言处理的选定机器学习算法的实现。 该软件包的主要重点是纯文本文档的统计语义，支持语义分析和语义相似文档的检索。 建立在软件包上，该软件包用于线性代数和科学计算，并从Python的和获得了一些启发。 请查看或以获取完整用法和示例。 产品特点 使用截断的实现维。 使用具有多个索引的 （随机超平面/）算法和Forest方案快速比较和检索语义相似的文档，以支持快速，近似的余弦相似度/角距离比较和近似的最近邻搜索（使用显着减少了内存和处理时间。 和反射性随机索引（RRI）（扩展了RI以支持间接推理），可在大型Web语料库上进行可扩展的 。 使用快速算法的
    nlp4go:使用GoLang进行自然语言处理的基本库和实用程序
    05-18
    nlp4go 注意：此解决方案不再开发。 进一步的开发是在NDA下完成的，无法发布 nlp4go的想法是为研究人员和开发人员提供一种基于go-lang的快速nlp工具包，该工具包提供了NLTK和其他NPL工具包的最常用功能，但具有可用于生产的计算性能。 可以在并行模式下执行的事情（例如独立句子的POS标记）应在go-routines中并行处理，以有效利用CPU内核。 当前支持的语言 英语 俄语<已计划 实施总计划 令牌生成器 树库 正则表达式 分裂 研究替代方案 POS标记器 感知器 字符串抽象可改善unicode的性能 与正则表达式的兼容性 unicode字符串的O（1）len（）操作 以字节和字符为单位 NER支持 解析中 我们需要一套完整的规则来进行语法分析 语法解析// ShiftReudce 依赖解析//汉尼拔港的Cython版本 WordNet界面 存储库结构在习惯上应类似
    gojieba_NLP_golang_分词_
    09-28
    中文分词的Golang语言版本支持多种分词方式，包括: 最大概率模式 HMM新词发现模式 搜索引擎模式 全模式核心算法底层由C++实现，性能高效。字典路径可配置，NewJieba(...string) NewExtractor(...string) 可变形参，当参数为空时使用默认词典(推荐方式)
    get-GoCN-news:爬取获得gocn的新闻，并同步到博客
    03-09
    获取GoCN新闻 爬取获得gocn的新闻，并同步到博客，每日更新从我做起 具体部署方法： ://blog.csdn.net/weixin_44024220/article/details/105960728 参考库： 博客框架：hexo 特性 支持每天定时爬取 自动推到hexo页面...
    golang 自然语言处理工具(gohanlp)
    谢小军的专栏
    03-28 1974
    GoHanlp 前言 Hanlp 是基于PyTorch和TensorFlow 2.x的面向研究人员和公司的多语言NLP库，用于在学术界和行业中推广最先进的深度学习技术。HanLP从一开始就被设计为高效，用户友好和可扩展的。它带有针对各种人类语言的预训练模型，包括英语，中文和许多其他语言。 GoHanlp 是Hanlp的api接口golang实现版本 使用方式 安装 go get -u github.com/xxjwxc/gohanlp@master 使用 申请auth认证 https://bbs.hanl
    go分词的第三方库
    Go的全部
    11-23 227
    github.com/go-ego/gse github.com/go-ego/gse/hmm/pos
    golang知识图谱NLP实战第一节——整体思路
    hotqin888的专栏
    07-22 7056
     golang知识图谱NLP实战第一节——整体思路 golang知识图谱NLP实战第二节——解析依存句法分析结果 golang知识图谱NLP实战第三节——关系抽取 最大的愿望是给engineercms工程师知识管理系统添加人工智能——知识图谱功能 它包含了自然语言处理（NLP）的十大任务里的几项（Salesforce总结的十大任务，简单来说包括：问答、机器翻译、摘要、自然语言推理、情感分析...
    go08 多语言文本
    Newin2020的博客
    05-21 487
    声明字符串 声明字符串： 字符串的零值： 字符串字面值/原始字符串字面值 字符串字面值可以包含转义字符，例如 \n 。 但如果你确实想得到 \n 而不是换行的话，可以使用 ` 来代替 “，这叫做原始字符串字面值。 ` 也可以用与打印多行文本的情况： 字符，code points，runes，bytes Unicode 联盟为超过 100 万个字符分配了相应的数值，这个数叫做 code point。 为了表示这样的 unicode code point，Go 语言提供了 rune 这个类型，它是
    go语言中的多语言文本
    CurryCoder的个人博客
    10-18 435
    package main import ( "fmt" "unicode/utf8" ) func main(){ // 声明字符串,以下三种方式为等价的 peace := "peace" // var peace = "peace" // ver peace string = "peace" fmt.Println(peace) var blank string // 字符串的零值 fmt.Println(blank) // 空字符串 // 字符串字面值与原始字符串字面值
    gocn开源说-gnet1
    08-03
    gocn开源说-gnet1

    “相关推荐”对你有帮助么？

    • 非常没帮助
    • 没帮助
    • 一般
    • 有帮助
    • 非常有帮助
    提交
    评论
    添加红包

    请填写红包祝福语或标题

    个

    红包个数最小为10个

    元

    红包金额最低5元

    当前余额3.43元 前往充值 >
    需支付：10.00元
    成就一亿技术人!
    领取后你会自动成为博主和红包主的粉丝 规则
    hope_wisdom
    发出的红包
    实付元
    使用余额支付
    点击重新获取
    扫码支付
    钱包余额 0

    抵扣说明：

    1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
    2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

    余额充值