云星数据-http://www.cloud-star.com.cn

http://www.cloud-star.com.cn 分享大数据、云计算、微服务、大前端等前沿技术,每天有大量更新,真实原创,亲测可用,干货满满。。。。。。...

排序:
默认
按更新时间
按访问量

数据采集之解析Mysql的binlog日志发送至Kafka实时消费

本文采用Maxwell来实现实时解析mysql的binlog日志发送至kafka 1、开启mysql binlog 环境中mysql是docker容器,所以需要进入容器修改mysql配置. docker exec -it ef07dab4da9d bash 然后进入/e...

2018-03-07 16:09:26

阅读数:354

评论数:0

spark基础-001

1 概述 ## 1.1 简介 ## Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架。最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开源项目之一。 Spark为我们提供了一个全面、统一的框架用于管理各种有着不同性质(文本数...

2018-01-19 16:20:11

阅读数:283

评论数:0

Jenkins , Gitlab 配置自动化部署

前提条件:已安装好gitlab,jenkins 本文的jenkins版本为ver. 2.73.2 jenkins 需要先安装Gitlab Hook Plugin,GitLab Plugin,Gitlab Authentication plugin,有些方式安装的jenkins,没有包含这几个插件。...

2018-01-17 16:03:23

阅读数:391

评论数:0

简单Spark源码分析

1 Master启动流程 1、在start-master.sh脚本中调用Mater.scala中的main方法 2、在main方法中封装spark参数,并调用startRpcEnvAndEndpoint()创建RpcEnv 3、在startRpcEnvAndEndpoint中创建RpcEnv...

2018-01-15 19:53:33

阅读数:220

评论数:0

centos7用Let's Encrypt 获取免费证书 实现https访问

本文通过Let’s Encrypt获取免费的证书,缺点是需要三个月更新一次。 具体操作步骤如下: 安装certbot yum -y install yum-utils yum-config-manager --enable rhui-REGION-rhel-server-e...

2018-01-12 16:22:59

阅读数:817

评论数:0

TMMi连接传统与敏捷--2017中国首届TMMi国际峰会在京圆满举行

2017年11月2日,由TMMi基金会(TMMi Foundation)、盘古运营主办的2017中国首届TMMi国际峰会在北京举行,TMMi基金会认证主席Clive Bates先生、盘古运营总裁张永海先生、TMMi基金会中国分会代表陈磊先生及中国人民银行、中国建设银行、中国银行、中国农业银行、中国...

2018-01-08 13:44:14

阅读数:95223

评论数:0

【云星数据---mesos实战系列】:marathon实战Constraints篇-003

GROUP_BY operatorGROUP_BY can be used to distribute tasks evenly across racks or datacenters for high availability.$curl -v -X POST http://192.168.1...

2017-12-05 16:52:16

阅读数:1107

评论数:0

【云星数据---mesos实战系列】:marathon实战Constraints篇-002

CLUSTER operatorCLUSTER allows you to run all of your app’s tasks on slaves that share a certain attribute. This is useful for example if you have a...

2017-12-05 16:45:26

阅读数:284

评论数:0

【云星数据---mesos实战系列】:marathon实战Constraints篇-001

1.概念 Marathon可以通过Constraints来控制其app在何处运行 我们可以通过Marathon的REST API或者Marathon gem(marathon client)来设置app的constraints配置。 Constraints由三个部分组成:字段名(field nam...

2017-12-05 16:39:16

阅读数:396

评论数:0

【云星数据---Scala实战系列(精品版)】:Scala入门教程064-Scala实战源码-类访问伴生对象中的成员2

package scala_tutorial.demo18_accessModifier/** * Created by liguohua on 2015/8/2. */ class Pig { //默认private[Pig] private var name1 = “k...

2017-12-01 14:32:49

阅读数:233

评论数:0

【云星数据---Scala实战系列(精品版)】:Scala入门教程063-Scala实战源码-类访问伴生对象中的成员

package scala_tutorial.demo18_accessModifier/** * Created by liguohua on 2015/8/2. */class Cat { /* 一、类访问伴生对象中的成员 */ val n1=Cat.name1...

2017-12-01 14:30:54

阅读数:279

评论数:0

【云星数据---Scala实战系列(精品版)】:Scala入门教程062-Scala实战源码-访问权限

package scala.demo18_accessModifier/** * Created by liguohua on 2015/8/2. */ /** * 1.访问权限有private和protected两种 * 1.1.private表示私有 * 1.2.prot...

2017-12-01 14:29:41

阅读数:307

评论数:0

【云星数据---Scala实战系列(精品版)】:Scala入门教程061-Scala实战源码-Scala包引用的语法

package scala_tutorial.demo17_package/** * Created by liguohua on 2015/8/2. */ /* 一、包引用的语法 1.引入HashMap import java.util.HashMap 2.引入Ha...

2017-12-01 14:27:03

阅读数:308

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程060-Scala实战源码-Scala package 包对象

Scala 包对象 包中类package scala_learn.demo17_package/** * Created by liguohua on 2017/8/2. */ package object hadoopp { //数据 var name = "hadoopp...

2017-12-01 09:36:28

阅读数:221

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程059-Scala实战源码-Scala package 包

Scala package 包/** * Created by liguohua on 2015/8/2. */ /* *1.Scala的包是为了组织代码,中有两种包物理包和逻辑包 *2.物理包就是文件夹,用于组织文件 *3.逻辑包就是代码块,用于组织代码(包中只能写类或包) *4.逻辑包有的...

2017-12-01 09:32:16

阅读数:262

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程058-Scala实战源码-Scala 正则 Regex

Scala 正则package scala_learn.demo15_Regeximport scala.util.matching.Regex /** * Created by liguohua on 2017/3/31. */ class O1_RegexDemo {}object O1_...

2017-12-01 09:30:05

阅读数:238

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程057-Scala实战源码-Scala IO 演示键盘输入信息

Scala IO 演示键盘输入信息package scala_learn.demo14_IO/** * Created by liguohua on 2017/3/31. */ class O2_IODemo {}object O2_IODemo { //演示,如何从键盘输入信息 de...

2017-12-01 09:28:26

阅读数:327

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程056-Scala实战源码-Scala IO 读写

Scala IO 读写package scala_learn.demo14_IOimport java.io._import scala.io.Source/** * Created by liguohua on 2017/3/31. * */ class O1_IODemo {}objec...

2017-12-01 09:25:32

阅读数:238

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程055-Scala实战源码-Scala 异常处理

Scala 异常处理package scala_learn.demo13_Exceptionimport java.io.{FileNotFoundException, FileReader, IOException}/** * Created by liguohua on 2017/3/31....

2017-12-01 09:23:18

阅读数:218

评论数:0

云星数据---Scala实战系列(精品版)】:Scala入门教程054-Scala实战源码-Scala implicit 操作05

Scala implicit 操作05package scala_learn.demo12_Implicit/** * Created by liguohua on 2017/3/1. */ class O6_ImplicitDemo { }object O6_ImplicitDemo { ...

2017-11-30 09:26:38

阅读数:312

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭