云计算/大数据
lijinlon

Python语法基础之对象(字符串、列表、字典、元组)

依据《利用Python进行数据分析》一书对四种对象的定义索引、删减进行了汇总总结。 字符串 String 定义:S = 'spam' 索引:S[0] = 's'; S[1] = 'p' ...
7
weixin_42201566

MapReduce流程

MapReduce简介 其中Map对数据集上的独立元素进行指定的操作,生成键-值对形式中间结果。Reduce则对中间结果中相同“键”的所有“值”进行规约,以得到最终结果 MapReduce主要步骤...
1
weixin_38492276

第9章 慕课网日志实战

9-1 -课程目录 9-2 -用户行为日志概述 为什么要记录用户访问行为日志? 网站页面的访问量 网站的粘性 推荐 用户行为日志 Nginx ajax 用户行为日志:用户每次访...
15
weixin_41808308

pandas读取文件时报错OSError: Initializing from file failed

原因:当你用pandas读取文件报这种错误时,一般是因为你的文件名中带有中文,例如:         res = pd.read_csv('数据.csv') 修改(方法1):这种情况就会报错,只需...
4
weixin_40988315

hadoop/saprk Top 10列表

Java Top N static SortedMap<Integer,T> topN(List<Tuple2<T,Integer&g...
4
weixin_38492276

第8章 SparkSQL愿景

8-1 -A SparkSQL愿景之一写更少的代码(代码量和可读性)      8-2 -B SparkSQL愿景之一写更少的代码(统一访问操作接口)   8-3...
5
qq_29186199

python版MR任务完整过程(附代码)

将近期写的MR程序及过程记录下来。 简单介绍下环境: hadoop2.6.4 hadoop-streaming-2.6.0.jar 线上python2,线下python3都可以用 首先放...
11
datamining2005

【腾讯云】音视频存储管理CVS

音视频存储管理(Cloud Video Storage)基于腾讯云强大的云存储平台,为客户提供音视频上传、存储、媒资管理等聚焦于音视频领域的安全可靠的云存储服务。 ...
31
ywb201314

VMWare14 安装Mac OS系统(图解)

★ 背景 近日恰逢双十一,瞅了瞅自己干瘪的钱包,没忍心入手期待已久的 macPro,只好在虚拟机里玩一下 mac好了,等以后钱包傲气的时候再来个真实的。 安装环境: windows10 VMWar...
43
King_1874

HDFS写读文件

一.HDFS - 写文件         1.客户端将文件写入本地磁盘临时目录中.                                                         ...
6
leon528

推荐算法入门

https://blog.csdn.net/k7Jz78GeJJ/article/details/78771821
9
houzhizhen

NameNodeResourceMonitor

FSNamesystem.startActiveServices starts NameNodeResourceMonitor thread. this.nnrmthread = new Daemo...
5
quqi99 img

Play with Zabbix (by quqi99)

版权声明:可以任意转载,转载时请务必以超链接形式标明文章原始出处和作者信息及本版权声明 (作者:张华 发表于:2018-08-13) 问题 客户说keystone端口总在zabbit中报错: n...
23
tangtangshentucao

elasticsearch 6.3.0及一下版本绿色版head,免安装

因安装head需要下载nodejs与npm,不翻墙的话下载速度缓慢,还容易报错,现有绿色免安装版本,支持es6.3.0及以下。 启动目录:  使用说明: 下载地址:https://dow...
5
young_0609

hive和hbase整合,Caused by: java.lang.ClassNotFoundException

Hive-1.2.1与HBase-1.1.2的整合 这里的整合是指,将HBase作为存储数据的库,由Hive作为连接桥梁 在Hive中创建表时,出现了 FAILED: Execution Erro...
5
xiongpai1971

免费电子书《Hadoop&Spark原理、运维、与开发》

笔者编写了一本书《Hadoop&Spark原理、运维、与开发》,电子版免费贡献出来,供大家下载。正如书名所示,该书涵盖技术原理、安装配置、基本的开发等三个方面的内容。寥寥100多页的篇...
2
m0_37870649

PCA主成份分析(Spark 2.0)

转载:https://blog.csdn.net/qq_34531825/article/details/52347220 PCA在Spark2.0用法比较简单,只需要设置:  .setInputC...
25
qq_40208605

spark笔记之Scala Actor并发编程

1.1. 课程目标1.1.1. 目标一:熟悉Scala Actor并发编程1.1.2. 目标二:为学习Akka做准备 注:Scala Actor是scala 2.10.x版本及以前版本的Actor。...
5
Peter_Changyb

如果晋升为项目经理并持续拥有竞争力?

项目经理职位在一流的互联网公司至少需要奋斗三年以上,如何缩短这个非常漫长和艰苦奋斗的过程,我建议从以下几个方面做起。 一是需要责任心和主动性,不仅要按时完成项目经理交付的开发任务,最好是经常帮助小伙...
129
qq_41851222

Python爬虫-分布式爬虫-2018年我破解天眼查和启信宝企业数据爬虫--破解反爬技术那些事情

Python爬虫-2018年-我破解天眼查和启信宝企业数据爬虫--破解反爬技术那些事情   最近在自己用python+mongdb写了一套分布式多线程的天眼查爬虫系统,实现了对天眼查整个网站的全部数...
8
qq_38773184

CentOS7 部署安装KVM

centos7安装部署KVM 目录   centos7安装部署KVM 1 关闭防火墙,关selinux 2 安装工具包 3 安装kvm相关软件包 4  编辑网卡,创建网桥 5  添加镜...
9
weixin_42955902

Hadoop学习笔记之HDFS

HDFS 架构: 1个或n个namenode与n个datanode HDFS的设计目标: 非常巨大的分布文件系统 运行在普通廉价的硬件上 易扩展,为用户提供性...
4
gwd1154978352

Hadoop入门——MapReduce自定义RecordReader

一.背景 RecordReader表示以怎样的方式从分片中读取一条记录,每读取一条记录都会调用RecordReader类,系统默认的RecordReader是LineRecordReader,它是T...
ZenG_xiangt

matplotlib - inline vs notebook

inline: 内嵌方式,无需执行plt.show() notebook: 交互方式,用户能对图像进行操作
3
m0_37896011

自然语言处理 词向量

为把人们所理解的自然语言 让 计算机也能够 认识并且操作,需要将人的语言(即文字)转换成计算机的语言(即数字) 我们将其称为词向量。 把文字转换成词向量有多种编码方式:大致分为两类,离散表示和分布...
22
qq_14947737

搭建单机版的FastDFS服务器

原文出处 https://blog.csdn.net/u012453843/article/details/69951920 由于FastDFS集群搭建非常复杂,对于初期学习FastDFS来说,搭建...
19
weixin_41808308

如何设置python程序在window后台运行,开机自启动

由于服务器是window环境,运维人员没接触过python,担心启动窗口不小心会被关闭,因此提出了该需求 经过多次尝试后用以下方法实现了开机自启,后台运行的功能 1、在启动python启动文件加入...
5
Peter_Changyb

实时监控进程process并启动的工具类

public static void monitor(String EXEName, String EXEPath) {         String query_cmd = "wmic p...
14
ZenG_xiangt

Jupyter Notebook - 正常显示中文和负号

请先安装SimHei字体到系统字体库 import matplotlib mpl mpl.rcParams['font.sans-serif']=['SimHei'] #用来正常显示中文标签 mpl...
5
u014589856

Ambari2.6.2 安装HDP2.6.5(非root用户离线安装)

一、下载安装包   因为使用在线安装特别慢,所有的安装包加起来有9个G左右,所以本教程是通过下载包,然后上传到服务器,通过配置本地源的方式来实现的离线安装。也可以事先直接在服务器上下载好相应的包,如...
91

预告
img 进军Web前端工程师
讲师:曾亮老师

专家申请

img
尹庆阳

阳光、自信、一个乐于分享的人,喜欢研究新技术

img
张华洋

3年Android开发经验。

img
沈春旭

清华大学 三维影像研究所研究生

更多

日榜

官方博客

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部