python还是java es数据库_Python-将json文件写入ES数据库

1、安装Elasticsearch数据库

PS：在此之前需首先安装Java SE环境

下载elasticsearch-6.5.2版本，进入/elasticsearch-6.5.2/bin目录，双击执行elasticsearch.bat 打开浏览器输入http://localhost:9200 显示以下内容则说明安装成功

安装head插件，便于查看管理（还可以用kibana）

再下载 elasticsearch-head-master包解压到/elasticsearch-6.5.2/下（链接：https://pan.baidu.com/s/1oX9wKuAYrvY2ZRBT0cos6A

提取码：5ik4）

修改配置文件elasticsearch-6.5.2\config\elasticsearch.yml如下：

进入elasticsearch-head-master目录下执行npm install -g grunt-cli，再执行npm install安装依赖

在elasticsearch-head-master目录下找到Gruntfile.js文件修改服务器监听地址如下：

执行grunt server命令启动head服务

访问地址http://localhost:9100/即可访问head管理页面

2、将json文件写入ES数据库（py脚本如下）

#-*- coding: UTF-8 -*-

from itertools importisliceimportjson , sysfrom elasticsearch importElasticsearch , helpersimportthreading

_index= 'indextest' #修改为索引名

_type = 'string' #修改为类型名

es_url = 'http://192.168.116.1:9200/' #修改为elasticsearch服务器

reload(sys)

sys.setdefaultencoding('utf-8')

es=Elasticsearch(es_url)

es.indices.create(index=_index, ignore=400)

chunk_len= 10num=0defbulk_es(chunk_data):

bulks=[]try:for i inxrange(chunk_len):

bulks.append({"_index": _index,"_type": _type,"_source": chunk_data[i]

})

helpers.bulk(es, bulks)except:passwith open(sys.argv[1]) as f:whileTrue:

lines=list(islice(f, chunk_len))

num=num +chunk_len

sys.stdout.write('\r' + 'num:'+'%d' %num)

sys.stdout.flush()

bulk_es(lines)if notlines:print "\n"

print "task has finished"

break