Loneliness Ends HUHU

热情坦诚

The innodb_system data file 'ibdata1' must be writable

The innodb_system data file 'ibdata1' must be writable  在安装MySQL的时候报的错,我理解的这个错是因为有个文件是Innodb需要在安装MySQL(或者创建数据库的时候)的时候需要写入这个文件,但是他现在没有写的权限...

2019-02-13 11:19:00

阅读数 416

评论数 0

mongodb和spark的整合(sparkRDD,sparkSQL)

话不多数,代码来了 sparkcore和mongodb package com.bw.day02 import com.mongodb.spark.MongoSpark import com.mongodb.spark.rdd.MongoRDD import org.apache.spar...

2018-10-23 11:38:32

阅读数 274

评论数 0

jiedis连接redis集群的测试

package com.sparkStreaming.day04 import java.util import com.sparkStreaming.day04.JedisConnectionPool.client import redis.clients.jedis._ object...

2018-10-23 10:52:36

阅读数 104

评论数 0

Linux中查询字段并切分取出字段得命令

   ifconfig eth0 |grep "inet addr" |gawk -F: '{print $2}' | gawk '{print $1}'       替换文件:  sed -i 's/#  文件中得某个字段/要修改为什么样子/'   指定...

2018-10-23 10:33:24

阅读数 238

评论数 0

Fri Oct 12 17:10:37 CST 2018 WARN: Establishing SSL connection without server's identity verificatio

Fri Oct 12 17:10:37 CST 2018 WARN: Establishing SSL connection without server's identity verification is not recommended. According to MySQL 5.5.45+,...

2018-10-12 17:13:42

阅读数 391

评论数 1

Caused by: redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in

报这个错,好奇怪的。 Caused by: redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in cluster at redis.clients.jedis.Jed...

2018-10-12 17:08:17

阅读数 457

评论数 0

java.lang.IllegalStateException: begin() called when transaction is OPEN!

亲们~    这是我在学习spark和flume整合的时候,spark自动在flume中拉取数据时写demo时报的错。   java.lang.IllegalStateException: begin() called when transaction is OPEN!     at c...

2018-09-12 14:57:17

阅读数 160

评论数 0

Kafka和flume整合------flume的配置文件

首先说明一点我的kafka在整合中是接受生产的,也就是flume生产数据,kafka用sink接受数据 flume配置如下 agent.sources = s1 ...

2018-09-06 05:22:02

阅读数 99

评论数 0

Kafka的安装和测试

首先还是要啰嗦一大堆,讲一下它主要是干嘛用的,怎么用,设计原理,等等   简单的说,Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue) 目标Scope(解决什么问题) kafka开发的主要初衷目标是构建一个用来处理海量日志,用户行为和网站运营统计等的...

2018-09-02 20:50:51

阅读数 40

评论数 0

scala概念以及语法总结

scala介绍     如何理解函数编程    scala特点 scala语法      数据类型      变量      条件表达式      for循环,while循环      方法和函数                方法:简单方法和复杂方法                函...

2018-08-28 14:09:13

阅读数 333

评论数 0

简单排序(冒泡排序,插入排序,选择排序)

简单排序(冒泡排序,插入排序,选择排序)                                 简单排序(冒泡排序,插入排序,选择排序)这些算法思想是比较简单的,执行速度也相对慢一些,不过,在某些情况下比那些复杂算法实际上还要好一...

2018-07-12 06:42:00

阅读数 16

评论数 0

简单排序(冒泡排序,插入排序,选择排序)

                                简单排序(冒泡排序,插入排序,选择排序)这些算法思想是比较简单的,执行速度也相对慢一些,不过,在某些情况下比那些复杂算法实际上还要好一些,比如,对于小规模的文件以及基本有序的文件,插入算法能比快速排序算法更为有效。如何排序:    1...

2018-07-12 06:41:53

阅读数 61

评论数 0

Azkaban启动web--javax.net.ssl.SSLException: Unrecognized SSL message, plaintext connection? at sun.se

javax.net.ssl.SSLException: Unrecognized SSL message, plaintext connection? at sun.sejavax.net.ssl.SSLException: Unrecognized SSL message, plaintext...

2018-07-11 21:54:26

阅读数 592

评论数 0

Azkaban启动web--javax.net.ssl.SSLException: Unrecognized SSL message, plaintext connection? at sun.se...

Azkaban启动web--javax.net.ssl.SSLException: Unrecognized SSL message, plaintext connection? at sun.se javax.net.ssl.SSLEx...

2018-07-11 21:54:00

阅读数 264

评论数 0

Azkaban工作流调度器

                                            Azkaban工作流调度器   在Hadoop领域常用的工作流调度系统        Oozie,Azkaban,Cascading,Hamake等等。 性能对比:   安装:...

2018-07-10 21:33:09

阅读数 62

评论数 0

Azkaban工作流调度器

Azkaban工作流调度器                                             Azkaban工作流调度器   在Hadoop领域常用的工作流调度系统        Oozie,Azkaban,Casca...

2018-07-10 21:33:00

阅读数 20

评论数 0

hive -- 自定义函数和Transform

hive -- 自定义函数和Transform                                 hive -- 自定义函数和Transform    UDF操作单行数据,    UDAF:聚合函数,接受多行数据,并产生一个输...

2018-07-10 17:53:00

阅读数 17

评论数 0

hive -- 自定义函数和Transform

                                hive -- 自定义函数和Transform自定义函数:   数据:    package UDF; import java.util.HashMap; import org.apache.hadoop.hive.ql.exec...

2018-07-10 17:52:58

阅读数 109

评论数 0

hive -- 分区,分桶(创建,修改,删除)

hive -- 分区,分桶(创建,修改,删除)                                 hive -- 分区,分桶(创建,修改,删除)分区:    静态创建分区:  1. 数据:john doe 10000.0 ma...

2018-07-09 23:47:00

阅读数 45

评论数 0

hive -- 分区,分桶(创建,修改,删除)

                                hive -- 分区(创建,修改,删除)  1. 数据:john doe 10000.0 mary smith 8000.0 todd jones 7000.0 boss man 20000.0 freed finance 15000...

2018-07-09 23:46:33

阅读数 568

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭