bulk批量建立索引python

# encoding=utf-8
import elasticsearch.helpers
from elasticsearch import Elasticsearch

path = '/home/fhqplzj/data/orion/news.json'
es = Elasticsearch('localhost:9200')
my_index, my_type = 'test_index', 'test_type'
if es.indices.exists(index=my_index):
    es.indices.delete(index=my_index)
es.indices.create(index=my_index)


def map_to_actions(lines):
    lines = filter(lambda x: len(x) > 0, map(lambda x: x.strip(), lines))
    for idx, line in enumerate(lines):
        yield {
            '_op_type': 'index',
            '_index': my_index,
            '_type': my_type,
            '_id': idx + 1,
            '_source': line
        }


with open(path) as f:
    contents = f.readlines()

elasticsearch.helpers.bulk(es, actions=map_to_actions(contents))

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值