linux
数据架构师
没有付出,就没有收获!
展开
-
SparkStream自定义接收器,完成WordCount
SparkStream自定义接收器 需求:自定义接收器,通过Socket完成WordCount案列 1.自定义接收器类 package com.atguigu.bigdata.stream import java.io.{BufferedReader, InputStreamReader} import java.net.Socket import org.apache.spark.stora...原创 2020-02-28 23:12:17 · 94 阅读 · 0 评论 -
Spark用户自定义函数(强类型)
1.定义函数 //输入数据 case class UserBean(name: String, age: Long) //缓冲区 case class AvgBuffer(var sum: Long, var count: Int) //输入、缓冲区、输出类型 class AgeAvgClass extends Aggregator[UserBean, AvgBuffer, Double] {...原创 2020-02-28 18:00:26 · 373 阅读 · 0 评论 -
linux上开启的tomcat使用浏览器访问不了
在linux上开启的tomcat使用浏览器访问不了。 主要原因在于防火墙的存在,导致的端口无法访问。 CentOS7使用firewall而不是iptables。所以解决这类问题可以通过添加firewall的端口,使其对我们需要用的端口开放。 1.使用命令 firewall-cmd --state查看防火墙状态。得到结果是running或者not running 2.在running 状态下,向f...翻译 2019-12-01 20:42:56 · 131 阅读 · 0 评论 -
centos7新增硬盘
centos7新增硬盘 1新增硬盘 2重启虚拟机 3给sdc分区 4格式化分区 5挂载 6设置永久挂载原创 2019-12-01 10:01:24 · 103 阅读 · 0 评论