大数据
盛桃云
Java、Python、前端、运维等技能分享
展开
-
ETL工具Kettle入门
Kettle是Java编写的一套开源的ETL解决方案。一、下载Kettle访问https://sourceforge.net/projects/pentaho/下载7.1版本,然后解压缩,找一个mysql的驱动jar包(如mysql-connector-java-5.1.49.jar)复制到kettle的lib目录下运行Spoon.bat 即可启动Kettle(注:Spoon.bat文件可以编辑,修改JAVA_HOME以及JVM参数)二、准备数据库和数据创建数据库kettle,...原创 2020-07-16 19:36:48 · 450 阅读 · 1 评论 -
elasticsearch常用命令总结
检查健康状态curl 'localhost:9200/_cat/health?v'获得集群中的节点列表curl 'localhost:9200/_cat/nodes?v'列出所有的索引curl -XGET http://localhost:9200/_cat/indices?v列出索引user的所有表结构curl -XGET http://localhost:9200/user...原创 2019-04-04 23:46:35 · 227 阅读 · 0 评论 -
CentOS7下安装Hadoop2.9.2单机模式
一、准备CentOS7jdk-8u212-linux-x64.rpmhadoop-2.9.2.tar.gz关闭防火墙 和 SELinuxsystemctl stop firewalld.servicesystemctl disable firewalld.servicesetenforce 0vi /etc/selinux/config 将“SELINUX=enforc...原创 2019-07-13 21:51:20 · 735 阅读 · 0 评论 -
CentOS7下Hadoop2.9.2完全分布式安装
一、服务器规划Host Name IP Address Node Type hadoop1 192.168.100.161 DataNode / NodeManager / NameNode hadoop2 192.168.100.162 DataNode / NodeManager / SecondaryNameNode hadoop3 ...原创 2019-07-14 14:12:54 · 980 阅读 · 0 评论 -
elasticsearch2.4.1批量删除数据
elasticsearch2.4.1只提供了按id删数据的api,不适合批量删除,但是有一个插件 delete-by-query 可以帮忙做这件事,下载地址:https://download.elastic.co/elasticsearch/release/org/elasticsearch/plugin/delete-by-query/2.4.1/delete-by-query-2.4.1....原创 2019-08-11 11:41:39 · 1577 阅读 · 0 评论 -
win7下elastic stack安装和简单使用
一、安装1、安装jdk 1.82、es 安装解压缩后运行 bin下的 elasticsearch.bat, 窗口关闭后es就停止了。 http://localhost:9200安装成服务 elasticsearch-service.bat install注:如果需要配置jdk版本,编辑 elasticsearch.bat 在第2行加入下面的内容set JAVA_HOME=D:\t...原创 2019-08-26 10:01:20 · 439 阅读 · 0 评论