云计算/大数据
ngtfood

预测物种的空间分布

预测物种的空间分布 目录  [隐藏]  1 数据准备2 绘制地图背景3 示例:提取树懒的数据4 训练SVM模型并进行预测树懒的生存范围5 使用...
4
chengyuqiang

ElasticSearch 6.x 学习笔记:25.Java API之索引管理

25.1 判定索引是否存在 package cn.hadron; import org.elasticsearch.action.admin.indices.exists.indices.In...
18
wangguohe

1.Vmware虚拟机三种网络模式详解

由于Linux目前很热门,越来越多的人在学习linux,但是买一台服务放家里来学习,实在是很浪费。那么如何解决这个问题?虚拟机软件是很好的选择,常用的虚拟机软件有vmware workstations...
10
zhouying1226

Spark使用指南

1. Spark 2.0之前,Spark主要使用RDD(Resilient Distributed Dataset 弹性分布式数据集);    Spark 2.0之后,RDD被Dataset所取代,...
5
zhouying1226

GraphX guide (1)

1. 导入Spark和GraphX到项目中 import org.apache.spark._ import org.apache.spark.graphx._ // To make some of...
4
CSDN_duomaomao

RancherOS的本地化安装

简要说明:      RancherOS是RancherLab设计的小巧、专用的容器操作系统,可用安装到服务器本地硬盘中,也可以部署到公有云上,或者配合DockerMachine使用。      ...
18
wangbowj123

python3爬取指定百度贴吧页面并保存成本地文档(批量爬取贴吧页面数据)

首先我们创建一个python文件, tieba.py,我们要完成的是,输入指定百度贴吧名字与指定页面范围之后爬取页面html代码,我们首先观察贴吧url的规律,比如: 百度贴吧LOL吧第一页:ht...
6
HANLIPENGHANLIPENG

jvm参数说明

GC算法 标记-清除算法(Mark-Sweep) 1、标记出所有需要回收的对象,在标记完成后统一回收所有被标记的对象 2、在标记完成后统一回收所有被标记的对象 缺点:一个是效率问题,标记...
6
harryxujiao

Kylin中的Cube构建

Kylin 中的CUBE构建 Kylin 中的CUBE构建 前言 入口介绍 BUILD步骤 1 计算cuboid文件 生成原始数据Create Intermediate Flat Hive Ta...
4
PengChong521

python对于mongodb微博数据的操作

自己现在正在使用python对于mongdb数据库的一些内容查询筛选 #coding=utf-8 #!/usr/bin/python  from pymongo import MongoClient...
7
wxycx11111

Spark RDD入门详解

1、Spark RDD概念 RDD即弹性分布式数据集,有容错机制并可以被并行操作的元素集合,具有只读、分区、容错、高效、无需物化、可以缓存、RDD依赖等特征。RDD只是数据集的抽象,分区内部并不会存...
13
legend_host

Linux初级文件管理

1.改变目录 cd 绝对路径 cd /home/alice cd ~alice cd 相对路径 cd Desktop/abc cd .. cd . =======================...
5
matrix_neo_nku

【项目实战】使用urllib下载淘宝搜索到的图片

下载搜索的图片,主要难点在与淘宝页面中复杂的图片地址,在源码中查找图片地址时,建议使用火狐浏览器。 import urllib.request import re import ssl #全局取消...
7
qq_41653753

图挖掘基本概念

1、图挖掘 近年来,图挖掘作为,数据挖掘的重要组成部分引起了社会各界的极大关注。图挖掘(Graph Mining)是指利用图模型从海量数据中发现和提起有用知识和信息的过程。通过图挖掘所获取的知识和信...
7
legend_host

Ceph集群部署

ceph集群部署 1、准备  1.1准备5台centos7.3机器  角色分配    1台 管理(部署)ceph集群 ceph-deploy mon osd    2/3/4台 数据存储  o...
4
li123128

Generator函数语法解析

最近接触了微信小程序 API - wx.setScreenBrightness 、wx.getScreenBrightness 接口,调用该接口可以调节并显示手机屏幕亮度数据。对于喜欢腾讯新闻、今日头...
10
zengxiaosen

Openstack架构

OpenStack既是一个社区,也是一个项目和一个开源软件,提供开放源码软件,建立公共和私有云,它提供了一个部署云的操作平台或工具集,其宗旨在于:帮助组织运行为虚拟计算或存储服务的云,为公有云、私有云...
5
eieiei438

大数据正式京淘8

大数据正式京淘8 Redis集群 为什么用redis集群 Redis哨兵的缺点 横向扩展不方便;一旦扩展,无论代码结构多么操作简单,都需要修改 散列分布式算法是has...
qq_15014327

Hadoop Core开篇

Hadoop
17
comeonzz

OpenVZ 环境的基本操作

Create and start a container vzctl create CTID --ostemplate osname osname 注意不要...
9
m0_37786726

hdfs详解

******HDFS基本概念篇****** 1. HDFS前言 l 设计思想 分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析;   ...
4
comeonzz

CentOS 安装 OpenVZ

下载openvz.repo 到 /etc/yum.repos.d/ wget -P /etc/yum.repos.d/ http://ftp.openvz.org/openvz.repo 导入Op...
9
Tyler93

IOException:Timedout 300000ms waiting for namespace table to be assigned

删除hdfs 的hbase3目录和zk的hbase节点:重启hbase服务   IOException:Timedout 300000ms waiting for namespace table ...
6
Tyler93

程序运行时用的是本地的hadoop,尝试运行winutils.exe 报错

ExitCodeExceptionexitCode=-1073741515 异常原因:程序运行时用的是本地的hadoop,尝试运行winutils.exe,如果报错,则需要安装一个软件,分析如下: ...
20
cyq6239075

btrfs 编译

先安装编译工具 sudo dnf install -y libuuid-devel libattr-devel zlib-devel libacl-devel e2fsprogs-devel lib...
4
weixin_40599563

Hadoop 2.6.0动态添加节点

文章出自:http://my.oschina.net/leoleong/blog/477508  本文主要从基础准备,添加DataNode和添加NodeManager三个部分详细说明在Hadoop2...
6
Tyler93

Mapreduce console日志程序跑到INFO run..job就不走了

.如果console日志程序跑到INFOrun..job就不走了查看日志发现connectionreset  peer 原因是因为:hdfs,yarn有机器没有开机slaves查找列表 start...
4
ms961516792

Ubuntu16.04LTS下搭建强化学习环境gym

1.安装Anaconda。 去清华镜像下载anaconda3_4.3.0-linux-x86_64.sh,然后在终端中输入以下命令进行安装: cd downloads bash anaconda3...
11
Tyler93

Linux Error: Connection activation failed: Device not managed by NetworkManager or unavailable

Linux Error: Connection activation failed: Device not managed by NetworkManager or unavailable  ...
6
Urbanears

用Python爬取京东商品评论(2)

利用Python爬取京东评论 首先打开京东的页面,输入你想要查找的某项商品的名称,这里用贝因美的某一款奶粉举例 下拉点开商品评论,可以看到本商品的对应评论。现在我们的目的就是利用爬虫来获取这些评论...
7

预告
img 进军Web前端工程师
讲师:曾亮老师

专家申请

img
熊佳牧

这里是我的个人简介,其实什么也没有写

img
黄海涛

概率与数理统计硕士,目前从事机器学习,深度学习与NLP研究,曾多次斩获全国数学建模竞赛一二...

img
王磊

2008-2011 后端java服务器开发 2011-2017 手机游戏客户端开发 2...

更多

官方博客

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部