云计算/大数据
shilion163

一些有用的链接

(1)Ubuntu16.04+cuda8.0+caffe安装教程 (http://blog.csdn.net/autocyz/article/details/52299889)
39
wenxindiaolong061

Flume(NG)架构设计要点及配置实践

转自:时延军 http://shiyanjun.cn/archives/915.html Flume NG是一个分布式、可靠、可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合...
41
Wee_Mita

Java面试笔试指南(七)---海量数据处理

通过对海量数据的挖掘能有效地揭示用户的行为模式,加深对用户需求的理解,提取用户的集体智慧,从而为研发人员决策提供依据,提升产品和用户体验,进而占领市场
61
ld326

大数据学习[07]:elasticsearch5.6.1集群与问题

摘要:elasticsearch5.6.1集群与问题总结前置接着上一篇:大数据学习[06]:elasticsearch5.6.1初探 前面只是感性地看了一眼elasticsearch,还未知道方向,...
462
jingyi130705008

numpy中二维数组按照某列、某行排序

如何根据二维数组中的某一行或者某一列排序?可以利用numpy中的argsort函数进行实现,代码实例如下: data = data[data[:,2].argsort()] 由于argsort返回的是...
39
wangfengjunaaa

Kafka分区机制介绍与示例

Kafka中可以将Topic从物理上划分成一个或多个分区(Partition),每个分区在物理上对应一个文件夹,以”topicName_partitionIndex”的命名方式命名,该文件夹下存储这个...
54
Chengliangyao

Hadoop运行时JAVA_HOME is not set问题

出现这个问题是因为hadoop中没有指定jdk,进入hadoop目录下的etc/hadoo/hadoop-env.sh文件中在最后追加上 export JAVA_HOME=你的jdk路径即可
57
padluo

搜狗词库爬虫(1):基础爬虫架构和爬取词库分类

基础爬虫架构基础爬虫框架主要包括五大模块:爬虫调度器、URL管理器、网页下载器、网页解析器、数据存储器。爬虫调度器:启动、执行、停止爬虫,统筹其他模块的协调工作。URL管理器:管理已爬取的URL和未爬...
72
gendlee1991

0070 IntelliJ IDEA+Scala+Hadoop +Spark的开发环境搭建

IntelliJ IDEA+Scala+Hadoop +Spark的开发环境搭建,解决了遇到的各类问题。
44
CSDN_duomaomao

【转】Rancher 下通过vxlan 网络进行 K8S 1.6.6的部署

Rancher 下通过vxlan 网络进行 K8S 1.6.6的部署 2017-08-18 分类:Docker / Docker-网络 / Rancher 原文链接:https://www.xtp...
64
qq_16403141

启动hadoop时,namenode无法启动,log中出现:java.io.IOException: NameNode is not formatted

纯属作死!hadoop配置好后,一定要先格式化:hadoop namenode -format 好像hadoop datanode -format也可以执行,但是没有什么效果。不推荐执行该语句。我就...
8
Liu62400

python排序

按“值”排序就是根据字典的值进行排序,可以使用内置的sorted()函数。     sorted(iterable[, cmp[, key[, reverse]]]) iterable:是可迭...
60
FontThrone

Hadoop集群扩展子节点

上次发了部署八节点hadoop集群的博客,本来想把master也做为一个datanode,后来感觉不太合适,最后决定还是扩展一个子节点吧。首先是准备新的节点 安装jdkhttp://blog.csdn...
39
weixin_38870360

Akka的设计理念

Akka有两种模式 1) 以库的模式:在web应用中,放到Web-INF/lib中或作为一个普通的Jar包放进classpath 2) 以微内核形式:提供一个捆绑的机制,可以通过微内核启动一个...
40
wang2008start

Hadoop/Spark推荐系统(一)——共同好友

输入:,mapper-input: #好友关系是对称的,整个数据的关系边是偶数 (u1,[f1,f2,f3]) (u2,[f2,f3]) (f1,[u1,f3]) (f2,[u1,u2]) ...
44
Joah_li

将博客搬至51CTO

aa
46
ITqingliang

大数据面试题

Big Data 面试题总结 JAVA相关 1-1)List 与set 的区别? 老掉牙的问题了,还在这里老生常谈:List特点:元素有放入顺序,元素可重复 ,Set特点:元素无放入顺序,元素不可...
69
diyiday

使用阿里云、腾讯云服务器挖比特币的方法(ubuntu)

如何使用云服务器挖比特币 注册一个矿池账号,推荐https://www.f2pool.com/通过ssh连接远程服务器创建一个路径用来保存挖矿工具使用weget命令下载挖矿工具输入命令,账号密码...
70
whatnamecaniuse

AWS IoT 限制

http://docs.aws.amazon.com/zh_cn/general/latest/gr/aws_service_limits.html AWS IoT 限制 ...
54
yangliding2011

hadoop安装完后打开网页http://localhost:50070/ 没反应

在hadoop安装完后,依次执行hadoop namenode -format,start-dfs.sh,start-yarn.sh 之后 打开浏览器 输入 http://localhost:5007...
50
wangxiaofeng0010

hadoop高可用配置笔记

1.删除masters 2.删除hdfs-site.xml中的secondary配置 3.编辑hdfs-site.xml   dfs.nameservices   mycluster ...
40
nest0321

炼数成金优惠码

博主分享了炼数成金邀请码,使用邀请码报名课程可以减免50%固定学费哦! 优惠码:HA78 优惠码长期有效!!!
41
sqh201030412

Hadoop入门之Sqoop的安装和数据导入导出

sqoop安装 1、下载并解压 最新版下载地址http://ftp.wayne.edu/apache/sqoop/1.4.6/ 2、修改配置文件 $ cd ...
71
qq_39409559

Altera Stratix V FPGA硬件加速平台

一、板卡主要硬件参数: 1.FPGA:Altera Stratix® V GX FPGA 5SGXEA7N2F45C2N 2.FPGA的配置 1)板载USB Blaster下载线或者JTAG口 ...
38
qq_31573519

Hbase Java API

JAR包解压 hbase 安装包,lib文件夹下的所有jar文件,安装文件 点此下载常用方法package hbase;import java.io.IOException; import java....
39
qq_39409559

12槽位PCIe扩展箱

一、简介 PCIE3-1605扩展系统是6槽双槽位扩展系统,采用PCIe Gen3 Multi-Root Switch,系统支持6个PCIe X16 插槽,其中一个上行连接插槽,其余为下行扩展插...
40
qqhappy8

rabbitmq一个节点无法加入集群的排查-(inconsistent_cluster)

原环境是三个节点组成的rabbitmq的mirror集群,node-1节点因为服务器重启,无法自动加入集群,后来在node-2节点做了rabbitmqctl forget_cluster_node r...
20
anyuzun

hadoop-2.7.4-翻译文档-QJM高可用

HDFS高可用(QJM)         本指南概述了HDFS高可用性(HA)功能以及如何使用Quorum Journal Manager(QJM)功能配置和管理HA HDFS集群。 本文档假设读者...
8
prcyang

克隆CentOS7 出现的网络问题

1.     克隆CentOS7 出现的网络问题 1.1.  现象: [root@localhost ~]# systemctl startnetwork.service Job for net...
33
qq_31573519

Hbase 数据模型

Hbase 数据模型 行键(rowkey) 时间戳 列族a 列族b 列族c douguo st1 1     st2 2 4 7 ...
38

必备
img python干货还有10秒到达!
讲师:Python资料

专家申请

img
杨尚伟

热爱技术 热爱分享

img
陈明

从事Android、Java Web开发4年,喜欢将新技术应用于实践并提高工作效率,有代码...

img
郑冬冬

厦门四信产品经理,无线传感网事业部技术负责人,负责LoRa、ZigBee等系列产品的开发工...

更多

官方博客

img博客搬家
img撰写博客
img专家申请
img意见反馈
img返回顶部