波波鱼头
码龄4年
关注
提问 私信
  • 博客:10,575
    10,575
    总访问量
  • 8
    原创
  • 1,303,071
    排名
  • 8
    粉丝
  • 0
    铁粉

个人简介:加油

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:北京市
  • 加入CSDN时间: 2020-09-25
博客简介:

m0_51113511的博客

查看详细资料
个人成就
  • 获得11次点赞
  • 内容获得7次评论
  • 获得16次收藏
创作历程
  • 6篇
    2021年
  • 2篇
    2020年
成就勋章
TA的专栏
  • spark
  • 大数据第一阶段
  • 案例
    2篇
  • Zookeeper
    1篇
  • flink
    2篇
  • 异常
    1篇
兴趣领域 设置
  • 大数据
    stormsparkodps
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Flink处理数据写入mysql(scala实现)

import java.sql.{Connection, DriverManager, PreparedStatement}import org.apache.flink.configuration.Configurationimport org.apache.flink.streaming.api.functions.sink.{RichSinkFunction, SinkFunction}import org.apache.flink.streaming.api.scala._/* * 建表
原创
发布博客 2021.03.24 ·
2079 阅读 ·
5 点赞 ·
1 评论 ·
14 收藏

Spark

一、概念什么是Spark?Spark是一个快速、通用、可扩展的大数据分析引擎。( 详见官网:http://spark.apache.org/)简介1)于2009年诞生于加州大学,采用Scala语言编写。2) 2010年开源。3) 2013年6月成为Apache孵化项目。4) 2014年2月成为Apache顶级项目。特点 :四个特性是什么?高效性:基于内存的运算,相当于Hadoop的mapreduce的100倍,计算中的结果存在内存中,Spark实现了高效的DAG执行引擎。易
原创
发布博客 2021.03.24 ·
200 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Flink自定义数据源(scala实现)

import org.apache.flink.streaming.api.scala._case class SensorReading(id: String, timestamp: Long, temperature: Double)//样例类对象object Sensor { def main(args: Array[String]): Unit = { val env = StreamExecutionEnvironment.getExecutionEnvironment
原创
发布博客 2021.03.24 ·
602 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

如何解决Azkaban中web页面访问失败

如何解决Azkaban中web页面访问失败步骤如下:1. 细心检查配置文件;1)进入azkaban web服务器安装目录 conf目录,查看azkaban.properties文件是否正确。2)在azkaban web服务器安装目录 conf目录,修改azkaban-users.xml 文件,增加管理员用户。3)进入执行服务器安装目录conf,查看azkaban.properties是否正确。2. 检查节点是否正常启动;[hadoop@hadoop102 server]$ jps3601
原创
发布博客 2021.01.11 ·
5310 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

Zookeeper

Unit4:大数据技术进阶(Zookeeper)本章节学习目标:1. 了解zookeeper的概述和架构2. 掌握集群中各个角色的作用3. 熟悉zookeeper集群的搭建4. 掌握内部原理5. 企业面试真题一、大数据概念1 概论:zookeeper是什么?1, Zookeeper是一个分布式协调服务的开源概架,主要用来解决分布式集群中应用系统的一致性问题。2 ,ZooKeeper本质上是一个分布式的小文件存储系统,提供基于类似于文件系统的目录树方式的数据存储,并且可以对树中的节
原创
发布博客 2021.01.09 ·
1327 阅读 ·
3 点赞 ·
5 评论 ·
0 收藏

Zookeeper监听服务器节点动态上下线案例(扩展)

Zookeeper监听服务器节点动态上下线案例(扩展)需求:某分布式系统中,主节点可以有多台,可以动态上下线,任意一台客户端都能实时感知到主节点服务器的上下线。具体实现:先在集群上创建/servers节点[zk: localhost:2181(CONNECTED) 10] create /servers "servers"Created /servers服务器端向Zookeeper注册代码package com.zkp.zkcase;import java.io.IOExcep
原创
发布博客 2021.01.09 ·
151 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Shell

学习目标规划:1、 了解操作系统的作用2、 熟悉虚拟机的作用以及好处3、 掌握linux的常见命令4、 有关面试试题一、 什么是操作系统提示:这里统计学习计划的总量例如:1、 技术笔记 2 遍2、CSDN 技术博客 3 篇3、 学习的 vlog 视频 1 个# 学习目标:提示:这里可以添加学习目标例如:一周掌握 Java 入门知识csdnimg.cn/aHR0cHM6Ly9hdmF0YXIuY3Nkbi5uZXQvNy83L0IvMV9yYWxmX2h4MTYzY29tLm
原创
发布博客 2020.10.26 ·
136 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Linux系统学习

Unit1:关于Linux的基础知识以及常用命令学习目标:1、 了解什么是操作系统2、 熟悉Linux的作用以及好处3、 熟练掌握linux常见命令4、 掌握有关面试试题一 、什么是操作系统?总结:1>没有安装操作系统的计算机,通常被称为 裸机2> 如果想在 裸机 上运行自己所编写的程序,就必须用机器语言书写程序3> 如果计算机上安装了操作系统,就可以在操作系统上安装支持的高级语言环境,用高级语言开发程序常见的操作系统有哪些作用:1> 是现代计算机系
原创
发布博客 2020.10.21 ·
322 阅读 ·
1 点赞 ·
1 评论 ·
1 收藏