草根上的须子

草根上的须子

elk之使用logstash同步mysql数据到elasticsearch(aws es)

./bin/logstash-plugin install logstash-output-amazon_es ./bin/logstash-plugin install logstash-input-jdbc tar -zxvf mysql-connector-java-8.0.16.tar...

2019-06-13 17:06:14

阅读数 70

评论数 0

Hadoop: Setting up a Single Node Cluster.

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html#YARN_on_Single_Node apt-get install openjdk-7-jdk JAVA_HO...

2019-06-03 15:34:32

阅读数 29

评论数 0

yii2整合smarty

https://github.com/yiisoft/yii2-smarty php composer.phar require –prefer-dist yiisoft/yii2-smarty return [ //.... 'components' => [...

2019-05-30 11:57:58

阅读数 39

评论数 0

elk之相关技术及参考资料

Kafka与Logstash的数据采集对接 —— 看图说话,从运行机制到部署 Elasticsearch 与 Kafka 整合剖析 kafka数据同步Elasticsearch深入详解 lagstash + elasticsearch + kibana 3 + kafka 日志管理系统部署 ...

2019-05-30 11:57:21

阅读数 29

评论数 0

elk之打造日志收集系统(filebeat+kafka+logstash+elasticsearch+kibana)

jdk1.8.0_191 .bashrc JAVA_HOME=~/jdk1.8.0_191/ PATH=$JAVA_HOME/bin:$PATH filebeat 安装在业务系统的机器上, 优点比较轻量, 几乎不占资源, 用于收集nginx/apache日志 使用yum安装 配置c...

2019-05-30 11:53:22

阅读数 73

评论数 0

docker安装elasticsearch

环境: win10 安装: docker run -d –name es -p 9200:9200 -p 9300:9300 –restart=always -e “discovery.type=single-node” elasticsearch:6.4.2 访问:http://lo...

2019-05-30 11:52:48

阅读数 25

评论数 0

elk之Elasticsearch+logstash+kibana+filebeat分析apache日志

软件: filebeat-6.4.2-linux-x86_64 用于采集日志发送到logstash 配置:filebeat.yml filebeat.inputs: – type: log enabled: true paths: – /var/log/httpd/* exclude_fil...

2019-05-30 11:51:30

阅读数 29

评论数 0

elk之filebeat安装配置并使用logstash接收数据

下载: wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.4.2-x86_64.rpm 安装: rpm -ivh filebeat-6.4.2-x86_64.rpm 配置: vim /etc/fil...

2019-05-30 11:50:31

阅读数 41

评论数 0

elk之filebeat+elasticsearch+kibana

软件: jdk1.8.0_191 需要设置JAVA_HOME PATH, es会用到 elasticsearch-6.4.2 数据存储及查询 kibana-6.4.2-linux-x86_64 数据可视化 filebeat-6.4.2-linux-x86_64 日志收集 优点:轻量 断点续...

2019-05-30 11:37:31

阅读数 22

评论数 0

kafka相关资料

kafka中文文档 kafka中文教程 Kafka 设计解析(一):Kafka 背景及架构介绍 Kafka设计解析(二)- Kafka High Availability (上) kafka实战 ActiveMQ RabbitMQ KafKa对比 Kafka、RabbitMQ、Rock...

2019-05-29 09:20:09

阅读数 32

评论数 0

SQLAlchemy相关资料

sqlalchemy更新数据,update的使用 SQLAlchemy_定义(一对一/一对多/多对多)关系 SQLAlchemy技术文档(中文版)(上) https://www.sqlalchemy.org/ SQLAlchemy 1.3 Documentation ...

2019-05-29 09:19:38

阅读数 17

评论数 0

【Python】 uuid生成唯一ID

uuid是128位的全局唯一标识符(univeral unique identifier),通常用32位的一个字符串的形式来表现。有时也称guid(global unique identifier)。python中自带了uuid模块来进行uuid的生成和管理工作。(具体从哪个版本开始有的不清楚。。...

2019-05-29 09:18:26

阅读数 22

评论数 0

Ubuntu下使用Python+flask+MySQL的架构搭建Web框架

使用的是Python+flask+MySQL的架构 在Ubuntu下下载使用MySQL,由于很少使用Linux所以一开始绕了很多弯路,在网上差了好多的东西,最终就归结到了一条指令 sudo apt-get install mysql-server 当安装好SQL之后就可以在终端中使用SQL进...

2019-05-29 09:15:48

阅读数 28

评论数 0

mysql大数据量分页查询优化策略(原创)

第一此慢 不好解决,不过 把 have_query_cache 设置为 YES 用 SHOW VARIABLES LIKE ‘have_query_cache’ 看 用SHOW STATUS LIKE ‘Qcache%’看缓存状态变量 看看手册,书 改改你的VARIABLES 估计能提高一些性能...

2019-05-29 08:58:38

阅读数 28

评论数 0

vi多个 文件 和 多窗口编辑的 命令

我有3个文件要同时编辑:文件是A.C,B.C和C.BAS,vi命令如何实现,vi中如何在这3个文件中进行切换? vim可以在多分割窗口(multi-split-screen )环境下编辑多个文件。想了解有关详情可输入:help usr_08.txt。 要分割屏幕显示多个不同文件,在vi命令提示...

2019-05-29 08:58:17

阅读数 22

评论数 0

编译安装apache php mysql

tar -zxvf httpd-2.2.17.tar.gz cd httpd-2.2.17 ./configure –prefix=/usr/local/lib/apache –enable-so –enable-mods-shared=all –enable-rewrite=shared –...

2019-05-29 08:57:52

阅读数 16

评论数 0

如何选择开源许可证?

如何为代码选择开源许可证,这是一个问题。 世界上的开源许可证,大概有上百种。很少有人搞得清楚它们的区别。即使在最流行的六种—-GPL、BSD、MIT、Mozilla、Apache和LGPL—-之中做选择,也很复杂。 乌克兰程序员Paul Bagwell,画了一张分析图,说明应该怎么选择。这是我...

2019-05-29 08:55:20

阅读数 22

评论数 0

Vim 相关插件整理

很强大的 Vim 插件集合,来自 vimer… plugin: taglist:相信无人不知其大名,用来提供单个源代码文件的函数列表之类的功能。 omnicppcomplete:提供C++代码的自动补全功能 a.vim:提供快速切换.h和.cpp文件的功能 NERD_commenter:...

2019-05-29 08:48:44

阅读数 17

评论数 0

开源界的5 大开源许可协议

越来越多的开发者与设计者希望将自己的产品开源,以便其他人可以在他们的代码基础上做更多事,开源社区也因此充满生机。在我们所能想到的应用领域,都有开 源软件存在(象 WordPress,Drupal 这些开源CMS)。然而很多人对开源许可并不了解,本文介绍开源领域常用的几种许可协议以及它们之间的区别。...

2019-05-29 08:40:51

阅读数 19

评论数 0

4款开源的中文分词系统

中文分词是做好中文内容检索、文本分析的基础,主要应用于搜索引擎与数据挖掘领域。中文是以词为基本语素单位,而词与词之间并不像英语一样有空格来 分隔,因而中文分词的难点在于如何准确而又快速地进行分词。以下介绍4款开源中文分词系统。 1、ICTCLAS – 全球最受欢迎的汉语分词系统 中文词法分析是...

2019-05-28 17:47:38

阅读数 36

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭