2016年12月_Wang_Zhenwei

12月 11月 10月 09月 08月 07月 05月 04月 03月 02月 01月

转载 Ambari学习19_ssh 公钥认证报错：Permission denied (publickey,gssapi-keyex,gssapi-with-mic).解决2

在Ambari学习6中，我们介绍了一种解决这个问题的方法，但是，后来又出现了新的问题，经常查找资料，最终找到解决方案：down voteacceptedI encountered the same problem with him.ssh -i root@ I tried this but it wasn't solved.

2016-12-31 14:53:34 5153

转载 ElasticSearch学习27_Elasticsearch启动时 unable to install syscall filter 问题说明

[2016-11-06T16:27:21,712][WARN ][o.e.b.JNANatives ] unable to install syscall filter: java.lang.UnsupportedOperationException: seccomp unavailable: requires kernel 3.5+ with CONFIG_SECCOMP and CON

2016-12-21 15:04:39 16122

转载 ElasticSearch学习26_【入门】安装Elasticsearch5.0 部署Head插件

部署5.0版本的ES5.0版本的ES跟之前的版本最大的不同之处就是多了很多环境的校验，比如jdk,max-files等等。设置内核参数vi /etc/sysctl.conf# 增加下面的内容fs.file-max=65536vm.max_map_count=262144设置资源参数vi /etc/security/limits.conf# 修改* so

2016-12-21 11:01:34 923

转载 ElasticSearch学习25_ elasticsearch5.0 安装流程

#elasticsearch安装流程# by coco# 2016-11-091. 下载：官网地址：wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.0.0.tar.gzhttps://www.elastic.co/guide/en/elasticsearc

2016-12-21 10:40:08 553

转载 ElasticSearch学习24_elasticsearch2.3 以root用户启动

如果以root身份运行将会出现以下问题root@yxjay:/opt/elasticsearch-2.3.5/bin# ./elasticsearchException in thread "main" Java.lang.RuntimeException: don't run elasticsearch as root.at org.elasticsearch.bootstr

2016-12-19 17:39:34 2329

转载 ElasticSearch学习23_CENTOS安装ElasticSearch中don't run elasticsearch as root

CENTOS安装ElasticSearchElasticSearch 概述ElasticSearch是一个高可扩展的开源的全文搜索分析引擎。它允许你快速的存储、搜索和分析大量数据。ElasticSearch通常作为后端程序，为需要复杂查询的应用提供服务。Elasticsearch是一个基于Lucene的开源分布式搜索引擎，具有分布式多用户能力。Elasticsearc

2016-12-16 20:45:38 1843

转载 ElasticSearch学习22_百姓网 Elasticsearch 2.x 升级之路

导读：Elasticsearch 是广泛使用的一个软件，我们邀请了曾经在高可用架构分享过 ES 的王卫华继续分享在升级 Elasticsearch 过程中的经验。王卫华，资深开发工程师、架构师，具有 10+ 年互联网从业经验，曾获得微软 2002 – 2009 MVP 荣誉称号。在百姓网近 9 年，负责后端代码开发和 Elasticsearch & Solr 维护工作。现就职于途虎养车

2016-12-15 17:15:15 993

原创 Metron学习8_使用Metron安装Elasticsearch后，启动时No interface named 'eth1' found报错

在前文中，已经解决了Metron安装过程中的报错：No interface named 'eth0' found, got [name:lo (lo), name:em1 (em1)]；但是在两个slave机上启动Elasticsearch时，还是遇到了问题，描述如下：[root@slave1 elasticsearch]# service elasticsearch startStar

2016-12-15 16:57:42 1596

转载 ElasticSearch学习21_nested: NoSuchFileException[/usr/share/elasticsearch/config]错误

用wget和dpkg命令安装了ES2.3.1，到/usr/share/elasticsearch/bin目录下运行./elasticsearch的时候，出现了以下错误：Exception in thread "main" ElasticsearchException[Failed to load logging configuration]; nested: NoSuchFileExcepti

2016-12-12 15:40:52 8356

原创 Metron学习7_Metron安装过后，一些被安装工具的位置

说明：首先，在/home/szx目录下安装Metron；在目录：/home/szx/incubator-metron-Metron_0.2.0BETA_rc2/metron-platform/ 下，可以看到Metron安装的相关工具及组件；在目录：/home/szx/incubator-metron-Metron_0.2.0BETA_rc2/metron-deployment/

2016-12-12 15:12:02 1287

转载 JAVA学习40_ CentOS 7默认的jdk 1.7升级方法(到1.8) - alternatives的功能

备注：新版本的elasticsearch需要使用jdk1.8，需要对jdk进行升级；按照下面操作进行时，不能完全成功，最后还需要按照JAVA学习39进行修改。要搞整最新2.1版本的elasticsearch，最好用jdk 1.8。CentOS7默认的却是1.7，所以得升个级。首先看图一目了解java的架构JDK 8 is a superset

2016-12-12 14:29:42 2857

转载 JAVA学习39_CentOS下重新安装JDK，避免OpenJDK干扰

备注：使用这个方法更改了java环境变量，本来做完其它操作后，一直不能成功。有的时候根据自己的需要，可能要不同版本的JDK，使用如下命令可以查看JDK版本java -version Centos在安装的时候，自带了一个OpenJDK这个JDK并不是我们想要的。因此正常安装即可。用我的32位的操作系统为

2016-12-12 14:26:57 356

原创 Metron学习6_No interface named 'eth0' found, got [name:lo (lo), name:em1 (em1)]错误解决

在安装Metron的过程中，出现以下错误：TASK [metron_elasticsearch_templates : Start Elasticsearch] ********************fatal: [slave2]: FAILED! => {"changed": false, "failed": true, "msg": "Exception in thread \"m

2016-12-10 16:56:28 912

原创 Metron学习5_Install/Deploy Metron to the Cluster过程及出现的问题

Note: Adding -u user -k to the below command lines allows deployment in environments where passwordless SSH has not been enabled.cd /root/incubator-metron/metron-deployment/playbooksRun the follow

2016-12-10 14:56:55 1006

转载 Ambari学习18_ 更换服务器IP地址后,Ambari各项服务心跳丢失(heartbeat lost)的解决方案

说明：转载这篇文章，是为了解决Ambari各项服务心跳丢失问题；解决方法描述：master上关闭ambari-server，所有节点上关闭ambari-agent；然后重新启动，即，master上开启ambari-server，所有节点上开启ambari-server。【问题描述】IP地址从172.16.***.***转到了192

2016-12-09 20:59:15 6421

转载 Metron学习4_Ansible Based Vagrant Single Node VM Install

备注：Metron安装方式的一种，基于单节点虚拟机安装；This install fully automates the provisioning of Apache Metron on single, virtualized host running on Virtualbox. Metron is composed of many components and in

2016-12-09 20:16:07 944

转载 Metron学习3_Enhancing Metron Dashboard

Now that we have Metron configured to parse, index and persist telemetry events and Nifi pushing data to Metron, lets now visualize this streaming telemetry data in the Metron UI. We will be adding 3

2016-12-09 16:50:40 1020

转载 Metron学习2_Metron Installation on an Ambari-Managed Cluster

The following provides instructions on how to install Metron on an existing Ambari-managed HDP 2.4 cluster. These are not recommendations for production deployment but rather for dev/testing environme

2016-12-05 19:00:06 1694

转载 ElasticSearch学习21_TF-IDF及其算法

概念 TF-IDF（term frequency–inverse document frequency）是一种用于资讯检索与资讯探勘的常用加权技术。TF-IDF是一种统计方法，用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加，但同时会随着它在语料库中出现的频率成反比下降。TF-IDF加权的各种形式常被搜寻引擎应用，作

2016-12-02 13:16:54 4993