Windows上Ruby开发环境的配置

1. 下载和安装Ruby 下载:https://rubyinstaller.org/downloads   下载完后,安装即可 添加devkit到系统PATH了 1 先新建名为DEVKIT的变量。         2 然后再添加到PATH中去。   NOTE:你可能...

2018-12-20 16:17:50

阅读数 25

评论数 0

filebeat + logstash + influxdb

Filebeat是一个开源的文件收集器,主要用于获取日志文件,并把它们发送到logstash或elasticsearch。 Filebeat安装 filebeat的安装步骤见: https://www.elastic.co/guide/en/beats/filebeat/current/fil...

2018-12-14 15:15:42

阅读数 154

评论数 0

带搜索功能的下拉选择框select2

效果如下:   API:http://select2.github.io/select2/ 需要引用jquery插件select2  引入css   <link href="/select2/4.0.5/css/select2.min.css...

2018-11-14 15:29:51

阅读数 201

评论数 0

linux系统下selenium webdriver

1、selenium各版本 selenium各版本 http://mvnrepository.com/artifact/org.seleniumhq.selenium/selenium-java 2、确认使用的selenium版本及版本对应的firefox 从selenium 3.0.0开始...

2018-09-30 11:21:00

阅读数 244

评论数 0

es 原生API

1、创建索引 http://192.168.1.1:9200/indexname1?pretty {     "settings" : {         "number_of_shards" : 3,         &...

2018-08-07 17:58:50

阅读数 170

评论数 0

elasticsearch安装及常见错误

1、下载 https://www.elastic.co/downloads 2、配置 修改配置文件,详情见 https://www.elastic.co/guide/en/elasticsearch/reference/current/settings.html?nsukey=xvzjcg...

2018-08-07 11:33:25

阅读数 81

评论数 0

常用sql操作

1、创建数据库CREATE DATABASE IF NOT EXISTS secencipher DEFAULT CHARSET utf8 COLLATE utf8_general_ci2、生成数据表DROP TABLE IF EXISTS `encipher`;CREATE TABLE `enc...

2018-07-05 14:55:54

阅读数 43

评论数 0

IntelliJ IDEA 配置Tomcat 运行Web项目并打war包

1、配置web项目1.1、首先引入项目File ---> open 弹出框中选中待引入的项目;若为maven项目,可以点一下右面的 Maven Projects,引入相关依赖1.2、把项目配置好,如引入JDK等等1.3开始配置项目 File ----> ...

2018-05-17 10:58:14

阅读数 6001

评论数 0

数据采集及埋点、无埋点

随着移动互联网时代的兴起和数据量的大规模爆发,越来越多的互联网企业开始重视数据的质量,用户对数据的需求已经不仅仅局限于简单的 PV、UV,而是更加重视用户使用行为数据的相关分析。在数据分析的道路上,数据采集是重中之重。数据采集的质量直接决定了你的分析是否准确。而随着企业对数据的要求越来越高,埋点技...

2018-05-16 21:18:20

阅读数 3864

评论数 0

kafka connect

一. Kafka Connect简介  Kafka是一个使用越来越广的消息系统,尤其是在大数据开发中(实时数据处理和分析)。为何集成其他系统和解耦应用,经常使用Producer来发送消息到Broker,并使用Consumer来消费Broker中的消息。Kafka Connect是到0.9版本才提供...

2018-05-16 14:18:43

阅读数 3602

评论数 1

验证码识别

其实,验证码识别其实就是用好用好tesseract-ocr,下面我先说下步骤:1、去https://github.com/tesseract-ocr/tesseract/wiki 下载tesseract-ocr,然后安装一下;2、代码中pom中加入:<dependency&a...

2018-05-15 15:44:23

阅读数 274

评论数 0

java通过JDBC连接hiveserver

最近需要用到这个,先放这里吧,用的时候可以直接用了1、hive依赖hadoop,将hdfs当作文件存储介质,那是否意味着hive需要知道namenode的地址?     实际上在hive的hive-env.sh 中配置了 HADOOP_HOME=/home/install/hadoop-2.5.1...

2018-05-15 11:00:21

阅读数 81

评论数 0

chrome 应用程序无法启动,因为应用程序的并行配置不正确

某天电脑关机重启后,Google Chrome报出以下错误:C:\Users\Administrator\AppData\Local\Google\Chrome\Application\chrome.exe应用程序无法启动,因为应用程序的并行配置不正确。有关详细信息,请参阅应用程序事件日志,或使用...

2018-03-05 09:27:15

阅读数 14473

评论数 7

elasticsearch query and

{ "query": { "bool": { "must": [ { "match": { "name.fo...

2018-01-31 14:38:34

阅读数 157

评论数 0

elasticsearch创建索引和查询索引

1、注册索引 settings='{"settings":{"index":{"number_of_shards":15,"number_of_replicas":6,"refresh_interval&q...

2018-01-26 18:47:42

阅读数 349

评论数 0

elasticsearch性能优化

1. 多线程程序插入,可以根据服务器情况开启多个线程index   速度可以提高n倍, n>=2   2. 如果有多台机器,可以以每台设置n个shards的方式,根据业务情况,可以考虑取消replias   curl -XPUT 'http://10.1.*.*:9200/dw-s...

2018-01-26 18:20:12

阅读数 622

评论数 0

elasticsearch优化

1、elasticsearch索引优化 ES索引的过程到相对Lucene的索引过程多了分布式数据的扩展,而这ES主要是用tranlog进行各节点之间的数据平衡。所以从上我可以通过索引的settings进行第一优化:  “index.translog.flush_threshold_op...

2018-01-26 18:17:13

阅读数 306

评论数 0

MD5算法

MD5的全称是Message-Digest Algorithm 5(信息-摘要算法),是基于消息摘要原理的,消息摘要的基本特征就是很难根据摘要推算出消息报文。 消息摘要(Message Digest)又称为数字摘要(Digital Digest)。它是一个唯一对应一个消息或文本的固定长度的值...

2018-01-13 21:46:17

阅读数 125

评论数 0

ftpserver配置

简单的说,apache的ftpserver只需要我们配置两个文件:ftpd-typical.xml和users.properties(在安装目录的res/conf文件夹下),然后linux下通过bin目录下的ftpd.sh指令(windows用ftpd.bat),启动服务就可以了(ftpd指令需要...

2017-12-29 07:25:35

阅读数 519

评论数 0

hive数据直接写入到es索引中

1、创建索引     put:   http://es.dm.csdn.net/item_for_related     post: http://es.dm.csdn.net/item_for_related/item/_mapping   {     "blog":...

2017-11-23 11:41:54

阅读数 788

评论数 0

提示
确定要删除当前文章?
取消 删除