Rockefeller8888-CSDN博客

转载 [LINUX] 使用yum 安装、开启 telnet 服务

转本文出自 http://futeng.iteye.com/blog/2039490?utm_source=tuicool&utm_medium=referral, 经过我的实验, 比较靠谱. 文中加入了我自己在使用时遇到的问题以及是如何解决的. 感谢原著作者, 此问题困扰了挺长时间. 思考：1. 检测Linux下telnet服务存不存在。2. 存在则打开，不存在则安装。步骤：1. 使用t...

2018-06-21 22:04:39 727

转载 telnet不能用！！！提示：-bash: telnet: command not found

telnet不能用！！！提示：-bash: telnet: command not foundtelnet不能用！！！提示：-bash: telnet: command not found2014年10月13日 16:13:37一.检查1、[root@localhost ~]# telnet bash: telnet: command not found 2、查询了是否安装Telnet包，结果如...

2018-06-21 22:02:38 491

原创将KafKa的偏移量写入Mysql

package SparkStreamingKafKa.OffSetMysqlimport java.sql.{DriverManager, ResultSet}import com.typesafe.config.{Config, ConfigFactory}import org.apache.kafka.clients.consumer.ConsumerRecordimport o...

2018-06-21 09:50:37 3222

原创 SparkStreamingKafKa的集成模板代码

import org.apache.kafka.clients.consumer.ConsumerRecordimport org.apache.kafka.common.serialization.StringDeserializerimport org.apache.spark.streaming.kafka010._import org.apache.spark.streaming.k...

2018-06-20 22:20:25 183

转载 String.valueOf() 方法的使用

String.valueOf() 方法的使用1. 由基本数据型态转换成 String String 类别中已经提供了将基本数据型态转换成 String 的 static 方法也就是 String.valueOf() 这个参数多载的方法有下列几种 String.valueOf(boolean b) : 将 boolean 变量 b 转换成字符串 String.valueOf(char c) :...

2018-06-19 23:06:35 566

原创大数据技术与原理之流计算基本知识点梳理（一）

1：流数据：流数据(数据流)：在时间分布和数量上无限的一系列动态数据的集合体。:2：流数据的特点： 1：数据快速到达，潜在大小也许是无穷无尽的。 2：数据来源众多，格式复杂。 3: 数据量大，但是不十分关注存储，一旦流数据中元素经过处理，要么被丢弃，要么被归档存储。 4：注重数据的整体价值，不过分关注个别数据。 5：数据顺序颠倒，或者不完整，系统无法控制将要处理的新...

2018-06-18 20:23:18 3595

原创 DSP、SSP、RTB、ADX（概念通俗解释）

原DSP：需求方平台比如小米想要投放一个新机发布的广告，那么他想在各大网站如网易、新浪UC等地方投放这条新机信息，但他不可能一个一个的去谈，费时费财不说，效率非常低。于是他就去了一个平台，把打广告的钱冲进去，也就是广告费，然后在这个平台里选择投放的媒体，比如UC、新浪、网易等，然后跟淘宝一样的完成结算。 OK，这类似于淘宝的平台就是DSP，里面有很多的ssp提供的媒体小米把钱冲进去了，DSP...

2018-06-18 00:57:49 61686

原创 SparkStreaming版本的wordcount(updatestateByKey)保存在mysql

package sparkstreamday01.SparkStreamimport java.sql.{Connection, DriverManager, PreparedStatement, ResultSet}import org.apache.log4j.{Level, Logger}import org.apache.spark.SparkConfimport org.apache....

2018-06-15 19:25:56 306

原创把SparkStreaming版本的wordcount写入mysql数据库

package sparkstreamday01.SparkStreamimport java.sql.{Connection, DriverManager, PreparedStatement, ResultSet}import org.apache.log4j.{Level, Logger}import org.apache.spark.SparkConfimport org.apache...

2018-06-15 17:33:10 447

原创利用fsck修复/dev/mapper/VolGroup-lv_root: unexpected inconsistency; run fsck manually

如果系统启动的时候提示：/dev/mapper/VolGroup-lv_root: unexpected inconsistency; run fsck manuallyan error occurred during the file system check1：输入 root 密码；2：输入 fsck -c3: 输入 Yes 3: 输入 fsck -t ext4 /dev/sda14: 输入f...

2018-06-15 12:40:17 1453

原创 SparkStraming版本的wordcount

package sparkstreamday01.SparkStreamimport org.apache.log4j.{Level, Logger}import org.apache.spark.SparkConfimport org.apache.spark.streaming.dstream.{DStream, ReceiverInputDStream}import org.apa...

2018-06-14 21:11:13 131

原创 hdfs 之编写shell脚本自动启动datanode （王金阳）

第一步：cd ~ 切换到root下输入指令：touch my_hdfs_start .sh #新建文件夹vi my_hdfs_start .sh进入 vi 编辑器首航：#!/bin/bash注意：app是个自建的文件夹是个变量通过脚本启动 namecode/app/hadoop-2.8.3/sbin/hadoop-daemon.sh start namecode我有1台namecod...

2018-05-14 21:44:34 763

weixin_40155674的博客