云计算/大数据
ACxlm

使用kubeadm离线安装kubernetes v1.9.1

kubeadm简介 环境 准备 安装 kubeadm简介 kubeadm是一个工具包,可帮助您以简单,合理安全和可扩展的方式安装Kubernetes群集。它还支持管理Bootstrap...
17
ChangeSeven

docker的使用--仓库

仓库是用来集中存放镜像的地方 dl. dockerpool. com/ ubuntu 来说, dl. dockerpool. com 是 注册 服务器 地址,ubuntu是仓库名称 仓库分为私用的...
25
wu1226419614

spark快速大数据分析笔记-2

Spark快速大数据分析第三章-笔记 本章介绍Spark对数据的核心抽象--弹性分布式数据集RDD,其实就是分布式的元素集合。在Spark中,对数据的所有操作不外呼创建RDD,转化已有RDD以及调用...
33
weixin_41577291

[学习分享] R语言扩展包dplyr笔记 (转载)

2014年刚到, 就在 Feedly 订阅里看到 RStudio Blog 介绍 dplyr 包已发布 (Introducing dplyr), 此包将原本 plyr 包中的 ddply(...
5
qq_40784783

在Hadoop 2.X中设置多节点群集

Hadoop 2.x中的多节点群集 从我们之前的Hadoop教程系列博客中  ,我们学习了如何设置Hadoop单节点群集。现在,我将演示如何设置Hadoop多节点群集。Hadoop中的多节点群集...
8
ChangeSeven

docker的使用--容器

1.创建容器 docker create -it ubuntu:last docker create 的时候容器是停止运行的需要用docker run 运行 docker run ubuntu ...
26
zouyu1746430162

hadoop学习通过虚拟机安装hadoop完全分布式集群

要想深入的学习hadoop数据分析技术,首要的任务是必须要将hadoop集群环境搭建起来,可以将hadoop简化地想象成一个小软件,通过在各个物理节点上安装这个小软件,然后将其运行起来,就是一个had...
11
qq_40784783

安装Hadoop:设置单节点Hadoop集群

安装Hadoop:设置单节点Hadoop集群 从我们之前关于Hadoop教程系列的博客中,您必须对Hadoop,HDFS及其体系结构有一个理论的概念。我希望你会喜欢我们以前的HDFS架构博客  ...
10
mutiantong

connecting to host: cephm resulted in errors: IOError cannot send (already closed?)[ceph-deploy部署报错]

ceph deploy 部署报错: 执行:   ceph-deploy new node1 错误信息:   分析:      ...
16
u012421976

Mesos编译、安装、测试

Mesos 安装环境 1、meso UBUNTU 14.04 LTS 64位版本,AMD64的内核 内核版本号为 3.13.0 2、下载 wget http://www.apache.org...
8
qq_40784783

Hadoop 2.0集群体系结构联合概述

Hadoop 2.0集群体系结构联合 介绍: 在这篇博客中,我将深入探讨Hadoop 2.0集群架构联盟。自Apache Hadoop 1.x发布以来,Apache Hadoop已经发...
12
sweatOtt

单台kafka,启动kafka connect必须配置副本数为1

在自己电脑上跑了单台kafka, 之后尝试启动kafka connect,会启动失败, 因为启动的时候会创建config.storage.topic, offset.storage.topic, st...
15
weixin_39182877

Hive export/import

具体语法如下 EXPORT TABLE tablename [PARTITION (part_column="value"[, ...])] TO 'export_target_path' [ ...
4
zhaoM888

吕伟朝作品分析

名称:邮件往来关系图 类型:有向图 数据来源:Hacking Team的所有邮件以及他们的收发人信息。 可分析数据: A.源节点:发件人。 B.目的节点:收件人。 C.节点大小...
19
qq_36567024

ETL介绍

ETL介绍 1.数据来源:             用户行为数据             业务数据             数据采集(爬虫)             日志文件 2.处理 ...
14
wangbowj123

python3爬虫初步——http请求头部的构造

利用python3写爬虫,因为python3已经没有了urllib2,仅有urllib,区别就在于urllib2相当于urllib.request,调用urllib2的方法时可以通过urllib.re...
17
why_not2007

eclipse项目添加jdbc驱动

1.在新建的Project中右键新建Floder 2.创建名为lib的包 3.创建完毕之后的工程目录 4.接下来解压你下载的mysql的jar包,拷贝其中的.jar文件 5.在工程lib包下邮...
11
szj_huhu

pandas读取csv文件

Python中有许多方便的库可以用来进行数据处理,尤其是Numpy和Pandas,再搭配matplot画图专用模块,功能十分强大。CSV(Comma-Separated Values)格式的文件是指以...
4
l1028386804

Storm之——利用Trident topology实现预测疾病暴发

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/79120204 今天,我们一起来实现一个Trident topology收集医...
BornZhu

大数据数据仓库Hive概述

1.Hive产生背景 (1)MapReduce的不便性 (2)HDFS上的文件缺少Schema 2.Hive是什么? (1)由Facebook开源的,最初用于解决海量结构化的日志数据统计问题 ...
6
poorCoder_

Prometheus 通过consul动态修改Targets接入

Prometheus 通过consul动态修改Targets接入通常Prometheus 要增加一个target,需要在配置文件中已添加一个job,例如下:- job_name: 'prometheu...
17
szj_huhu

pandas哑变量

离散特征的编码分为两种情况: 1、离散特征的取值之间没有大小的意义,比如color:[red,blue],那么就使用one-hot编码 2、离散特征的取值有大小的意义,比如size:[X,XL,XXL...
7
weixin_39549656

java人脸识别

运用百度云接口完成人脸识别(免费) 完成的项目例子 首先需要开通人脸识别每秒2次访问量免费 开通地址 http://ai.baidu.com/event/facefree?hmsr=devel...
50
piankejingmo

Intellij+maven:jar包冲突的解决方法(Hbase和Guava的冲突)

Hbase依赖的guava是12.0,程序中用到的guava是22.0,jar包冲突,总是报NoSuchMethod和ClassNoDef之类的错误 解决方法:将guava-22.0单独打成jar包...
26
laxcus

Laxcus大数据管理系统2.6 - 摘要

Laxcus是多集群多用户多任务通用数据管理系统,支持百万级计算机节点,提供EB级可计算数据的存储和计算能力,综合云管理、大数据、数据库、中间件、容器五个领域的技术和功能,集运行、开发、调试、部署、维...
5
Androidlushangderen img

聊聊当前主流分布式存储系统的特点

前言 笔者最近在学习,了解当前流行的若干分布式存储系统。为什么这么做呢?因为笔者比较了解HDFS,但是对其它同等类型的存储系统知道的不多,想借此学习比较一番,希望能够做到触类旁通吧。本文可能不会...
59
yuanxiang01

Python中使用Matplotlib绘图

pyplot的相关参数 pyplot的文本显示 使用Matplotlib绘制折线图 使用Matplotlib绘图,首先要导入pyplot包: import ...
8
shujuelin

HBase详细概述

本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理存储、HBase系统架构,HBase调优、HBase Shell访问等。 不过在此之...
34
bokken

Hadoop2.X伪分布式搭建测试

Hadoop2.X伪分布式搭建测试
6
weixin_39182877

Hive的静态分区表和动态分区表

1. 相关说明 在Hive中处理数据时,当处理的一张表的数据量过大的时候,每次查询都是遍历整张表,显然对于计算机来说,是负担比较重的。所以我们可不可以针对数据进行分类,查询时只遍历该分类中的数据,这...
6

预告
img 进军Web前端工程师
讲师:曾亮老师

专家申请

img
熊佳牧

这里是我的个人简介,其实什么也没有写

img
黄海涛

概率与数理统计硕士,目前从事机器学习,深度学习与NLP研究,曾多次斩获全国数学建模竞赛一二...

img
王磊

2008-2011 后端java服务器开发 2011-2017 手机游戏客户端开发 2...

更多

官方博客

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部