- 博客(5)
- 收藏
- 关注
原创 Python elasticsearch 导入json文件数据 + 将scrapy爬虫数据直接存入elasticsearch
json文件是从网上爬下来的数据scrapy 保存的json格式数据默认Unicode格式编码,转utf-8 格式需要在settings里面加入一条:FEED_EXPORT_ENCODING='utf-8'
2018-09-14 17:21:24 2051 1
原创 字节跳动 数据处理 elasticsearch 面试问题
面试问题如下:计算机网络三次握手和四次挥手数据结构二叉树 数据的序列化和反序列化(当场写代码)进程和线程elasticsearchterms 和term 的区别filter 和query的区别MySQL 数据同步到es中: pagesize大小设置,数据超过这个pagesize该怎么处理一个数字如何设置mapping,为什么...
2018-09-14 14:44:52 4539
原创 elasticsearch 6.3.2 + Ubuntu16.04 Ubuntu18.04 集群搭建问题一览
配置3个节点的elasticsearch集群,遇到问题如下:问题一ERROR: bootstrap checks failed max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144] 解决办法:修改 /etc/sysctl.conf ,...
2018-09-14 08:57:25 491
原创 PHP-elasticsearch配置+基于elasticsearch全文搜索引擎的开发小结
首先参照官网内容下载与自己php以及elasticsearch版本相匹配的Php-elasticsearch,按照官网内容进行配置https://www.elastic.co/guide/en/elasticsearch/client/php-api/current/index.html接下来讲一下我基于elasticsearch-PHP开发的一个全文搜索项目说明一下:PHP使用...
2018-09-04 11:24:07 2561
原创 Logstash elasticsearch MySQL数据同步以及遇到问题解决
使用Logstash将MySQL数据同步到elasticsearch:input { stdin { } jdbc { jdbc_driver_library => "mysql-connector-java-5.1.46-bin.jar" jdbc_driver_class => "com.mysql.jdbc.Driv...
2018-09-03 17:47:53 3671 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人