冰河的专栏

持之以恒,贵在坚持,每天进步一点点。。。

MySQL之——实现无数据插入,有数据更新

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79210709 一、插入一条数据,存在则忽略,不存在就插入(必须现有唯一键) 使用insert ignore语句: insert ignore into table(c...

2018-01-30 21:06:23

阅读数 3063

评论数 0

Linux之——挂载新硬盘方法

Linux的硬盘识别: 一般使用”fdisk -l”命令可以列出系统中当前连接的硬盘 设备和分区信息.新硬盘没有分区信息,则只显示硬盘大小信息. 1.关闭服务器加上新硬盘 2.启动服务器,以root用户登录 3.查看硬盘信息 #fdisk -l Disk /dev/sda: 42.9...

2018-01-29 21:50:57

阅读数 1162

评论数 0

Hadoop之——本地通过Eclipse链接Hadoop操作MySQL数据库问题小结

前一段时间,在上一篇博文中描述了自己抽时间在构建的完全分布式Hadoop环境过程中遇到的一些问题以及构建成功后,通过Eclipse操作HDFS的时候遇到的一些问题,最近又想进一步学习学习Hadoop操作Mysql数据库的一些知识,在这里网上存在很多分歧,很多人可能会笑话,用那么“笨重”的Hadoo...

2018-01-29 21:47:08

阅读数 456

评论数 0

Kafka之——Kafka配置文件server.properties(三个版本)

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79194929 前言 其实每个版本都有些许改动,只不过改动大小而已,但是网上的教程都真的太老了,其实更新一下也费不了多少时间  0.9.0 # Licensed to t...

2018-01-29 14:27:56

阅读数 3486

评论数 1

Kafka之——replication factor: 1 larger than available brokers: 0 问题解决方案

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79194106 一、问题 用kfafka命令:./kafka-server-start.sh ../config/server.properties &启动时报以...

2018-01-29 13:13:39

阅读数 2594

评论数 0

Flume之——org/apache/flume/tools/GetJavaProperty : Unsupported major.minor version 52.0

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79193639 ng脚本问题,解决办法:增加如下红色字体 add_HBASE_paths() { local HBASE_IN_PATH=$(PATH="...

2018-01-29 11:52:24

阅读数 1322

评论数 1

MongoDB之——MongoDB基本用法(增删改高级查询、mapreduce)

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79190786 该示例基于的mongo驱动版本为mongo-2.10.1.jar,用junit写单元测试。 TestCase.java package com....

2018-01-28 23:44:26

阅读数 2911

评论数 0

Storm之——Storm on Yarn 部署

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79172573 1. 环境介绍 一、节点与服务映射关系 ip host 服务 192.168.209.121 master Nam...

2018-01-26 15:59:22

阅读数 308

评论数 0

Storm之——实现井字棋游戏(人工智能)

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79149418 一、下载源码 不多说,大家直接到链接http://download.csdn.net/download/l1028386804/10221555下载源码进...

2018-01-24 12:38:45

阅读数 495

评论数 0

EWMA之——EWMA指数加权移动平均模型的Java实现

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79141435 具体代码如下: package com.lyz.storm.ewma; import java.io.Serializable; /** * 实现指...

2018-01-23 16:43:59

阅读数 3242

评论数 1

Kafka之——扩展logback将日志输出到Kafka实例扩展

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79136841 一、概述 本文基于《Kafka之——扩展logback将日志输出到Kafka实例》,请先阅读《Kafka之——扩展logback将日志输出到Kafka实例》。...

2018-01-23 10:42:08

阅读数 2341

评论数 0

Kafka之——扩展logback将日志输出到Kafka实例

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79135948 一、Kafka的安装 请参见博文《Kafka之——安装并(单节点)配置启动Kafka》、《Kafka之——单机多broker实例集群搭建》、《Kafka之——...

2018-01-23 09:41:31

阅读数 6113

评论数 1

ElasticSearch之——ElasticSearch5.X在CentOS6.5上安装的注意事项

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79134385 机器环境     CentOS 6.5 x64     Oracle JDK 1.8 系统参数要求     fd 最低需要65536     vm...

2018-01-22 22:26:42

阅读数 335

评论数 0

Python之——实现自动抢火车票(基于Python3.6+splinter)

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79134306 splinter使用 首先介绍一下splinter使用: plinter.brower是一个开源工具,通过Python自动化测试web,通过电脑自动操作...

2018-01-22 22:17:52

阅读数 2535

评论数 3

Kafka之——kafka Failed to send messages after 3 tries 问题解决

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79134255 远程连接Kafka发送消息的时候出现如下错误 kafka Failed to send messages after 3 tries解决这个问题很简单,只...

2018-01-22 22:11:42

阅读数 266

评论数 0

Storm之——Storm整合Kafka pom.xml

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79134236 主要依赖如下: org.apache.storm storm-core 0.9.2-incub...

2018-01-22 22:06:17

阅读数 1157

评论数 0

Storm之——利用Trident topology实现预测疾病暴发

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79120204 今天,我们一起来实现一个Trident topology收集医学诊断报告来判断是否有疾病暴发的实例。今天,我们和以往的实例有所不同,今天,我们要贯穿整篇文章来实...

2018-01-21 14:55:38

阅读数 695

评论数 0

Storm之——自动化集群配置工具Puppet的类和模块

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79113359 使用独立的Puppet mainfest文件很容易定义资源的声明,但这种实现方法在需要管理的资源增多时变得越来越不方面。其实,Puppet有类和模块的概念,可以...

2018-01-20 12:21:28

阅读数 229

评论数 0

Storm之——自动化集群配置工具Puppet

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79113187 Puppet(https://puppet.com/)是一个IT自动化框架,用来帮助管理员管理大规模的网络设施资源,使用灵活的、声明式的实现方式来进行IT自动化...

2018-01-20 12:08:39

阅读数 273

评论数 0

Hadoop之——Windows平台下配置hadoop的javahome时空格问题解决

如题。windows 平台中经常遇包含空格的路径。这不在配置 hadoop-env.cmd 就碰到问题了。这个配置文件不能正确处理路径中包含的情况错误的配置1set JAVA_HOME=D:\Program Files\Java\jdk1.8.0_05错误的配置2set JAVA_HOME=&qu...

2018-01-18 23:13:49

阅读数 815

评论数 3

提示
确定要删除当前文章?
取消 删除
关闭
关闭