Docker 学习笔记:第2节 Docker使用入门

运行一个新的容器: docker run -ti --name second ubuntu:16.04 bash 命令解释: Docker run 是从一个镜像运行一个容器的指令。 -ti 参数的含义是:terminal interactive,这个参数可以让我们进入容器的交互式终端。 ...

2019-05-04 12:11:18

阅读数 8

评论数 0

Docker 学习笔记:第1节 初遇 Docker

----摘录《Docker 极简入门指南》 本节要点: Docker 是什么? Docker 重要概念 Docker 镜像(Image) Docker 容器(Container) Docker 仓库(Registry) 为什么使用 Docker? Docker 是什么? Docke...

2019-04-28 21:06:32

阅读数 23

评论数 0

Spark:WordCount 步骤

scala> val data = sc.textFile("/library/wordcount/input/Data") //data: org.apache.spark.rdd.RDD[String] = MapPartitionsRDD[9] at te...

2019-04-21 21:03:45

阅读数 10

评论数 0

第05课:机器是如何学习的?

本文转载:《21 天入门机器学习》,以李烨老师的图文课《机器学习极简入门课》为学习素材,通过 21 天的社群学习模式带领大家入门机器学习。 什么是机器学习?就是让机器自己学会某种东西,通过自身运行,学习事物的规律。 人类对事物的认知,都不是孤立的,互相之间有着各种各样的关联。 当我们说...

2019-03-07 23:36:50

阅读数 70

评论数 0

hdfs命令列表

root@master:~# hadoop dfs -ls /user/root DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it....

2016-11-20 19:39:03

阅读数 324

评论数 0

大数据系统的Lambda架构

本文是对大数据系统的Lambda架构的理解

2016-11-11 15:27:22

阅读数 899

评论数 0

Spark SQL与Hive的关系

Shark为了实现Hive兼容,在HQL方面重用了Hive中HQL的解析、逻辑执行计划翻译、执行计划优化等逻辑,可以近似认为仅将物理执行计划从MR作业替换成了Spark作业(辅以内存列式存储等各种和Hive关系不大的优化); 同时还依赖Hive Metastore和Hive SerDe(用于兼容现...

2016-11-05 20:45:39

阅读数 2341

评论数 0

Tachyon:Spark生态系统中的分布式内存文件系统

摘要:Tachyon把内存存储的功能从Spark中分离出来, 使Spark可以更专注计算的本身, 以求通过更细的分工达到更高的执行效率。 Tachyon简介Tachyon是个分布式的内存文件系统, 它在减轻Spark内存压力的同时,也赋予了Spark内存快速大量数据读写的能力。Tachyon把内存...

2016-11-04 15:55:42

阅读数 530

评论数 0

dubbo记录

** dubbo ** 阿里开源的分布式服务架构以及流动计算架构。 架构的演进过程: 1)单一应用架构 当网站流量很小时,只需一个应用,将所有功能都部署在一起, 数据访问框架(ORM) 是关键。 2)垂直应用架构 将应用拆成互不相干的几个应用。 此时,用于加速前端页面开发的 ...

2016-11-04 15:43:10

阅读数 246

评论数 0

第58课: 广告点击广告累计点击数分析与实现

第58课: 广告点击广告累计点击数分析与实现

2016-10-12 10:36:14

阅读数 781

评论数 0

第55课: 在线广告点击流处理代码的分析和实现

第55课: 在线广告点击流处理代码的分析和实现

2016-09-28 15:53:33

阅读数 503

评论数 1

第54课: 作业讲解与广告点击实现代码

第54课: 作业讲解与广告点击实现代码

2016-09-28 13:48:54

阅读数 393

评论数 0

第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战

第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战

2016-09-28 09:40:44

阅读数 487

评论数 0

第52课: Spark大型项目广告点击项目数据建模

Spark大型项目广告点击项目数据建模

2016-09-23 08:42:19

阅读数 728

评论数 0

第51课: Spark大型项目下的Spark Streaming本质剖析

第51课: Spark大型项目下的Spark Streaming本质剖析(全面涵盖Spark 2.0的精髓)

2016-09-21 20:54:59

阅读数 907

评论数 0

第50课:Spark 2.0项目概述

第50课程 Spark 2.0项目概述

2016-09-21 19:56:05

阅读数 551

评论数 0

第48课: Spark 2.0内幕深度解密和学习最佳实践

第48课: Spark 2.0内幕深度解密和学习最佳实践

2016-09-18 20:31:22

阅读数 919

评论数 0

第37课:Spark中Shuffle详解及作业

第37课:Spark中Shuffle详解及作业

2016-09-14 19:26:13

阅读数 11669

评论数 3

第36课:Spark中Job执行过程详解

第36课:Spark中Job执行过程详解

2016-09-14 13:50:39

阅读数 3427

评论数 0

第35课Spark Master、Worker、Driver、Executor工作流程详解

第35课Spark Master、Worker、Driver、Executor工作流程详解

2016-09-12 23:10:56

阅读数 18169

评论数 2

提示
确定要删除当前文章?
取消 删除
关闭
关闭