大数据
ComputerInBook
这个作者很懒,什么都没留下…
展开
-
使用thrift搭建lucene的rpc调用
最近要使用lucene搭建全文中文检索,使用IKAnalyzer中文分词,但是这两个库的最新版本都是使用Java实现的, 如果C#要使用最新版的lucene,需要修改比较多的地方,比较难实现。索性改为使用Thrift的RPC方式实现调用,即 使用Java作为服务端,C#作为客户端,经过测试,效率也很高,下面是实现主要步聚。1. 必备库和辅助工具:1.1 必备库:jdk1.8,thrift-0.13.0,lucene-8.5.2,IKAnalyzer2017_6_6_0,.net-4.0,apa...原创 2020-07-27 11:12:21 · 239 阅读 · 0 评论 -
mongodb安装与使用
1. mongodb安装,以Windows Server 2008 x86_64平台为例 直接下载安装包,安装后后加入到环境变量,并运行如下命令以服务的方式启动: 假定数据文件放到 D:\MongoDatabase 安装:mongod.exe --install --dbpath "D:\MongoDatabase" --serviceName "MongoDB" --logpat原创 2015-07-23 19:29:58 · 1357 阅读 · 0 评论 -
sqlserver数据批量写入(转)
如何在SQLServer中处理亿万级别的数据(历史数据),可以按以下方面进行: 去掉表的所有索引用SqlBulkCopy进行插入分表或者分区,减少每个表的数据总量在某个表完全写完之后再建立索引正确的指定索引字段把需要用到的字段放到包含索引中(在返回的索引中就包含了一切) 地址如下:http://blog.jobbole.com/80395/转载 2016-01-23 12:15:41 · 997 阅读 · 0 评论