云计算/大数据
su20145104009

mysql超时:The last packet successfully received from the server was 172,848,658 milliseconds ago.

今天查询接口报错了。报错内容如下: The last packet successfully received from the server was 172,848,658 milliseco...
105
u011583316

Hbase入门

Hbase的特点: 1.面向列:Hbase是面向列的存储和权限控制,并支持独立索引。列式存储,其数据在表中是按照某列存储的,这样在查询只需要少数几个字段时,能大大减少读取的数据量。 2...
22
u011583316

Hbase API使用(二)

1.使用Java API插入数据 可以使用Put 类的add()方法将数据插入到HBase。可以使用HTable类的put()方法保存数据。这些类属于org.apache.hadoop.hbase....
20
acm_lkl

mybatis主配置文件解析

所谓mybatis主配置文件就是上一篇文章中提到的mybatis-config.xml,SqlSessionFactoryBuilder 通过解析这个配置文件得到代表数据库的SqlSessionFac...
15
qq_34092336

sparkRDD常用算子

sparkRDD算子
13
qq_31573519

HIVE中 ROW_NUMBER() OVER() 函数

背景描述用户IMEI表中,存在一个用户多个IMEI号的情况,需要取得用户最新的IMEI号解决思路考虑使用 max(time) 函数,依靠最大时间取得。但是这种方式生成的MapReduce效率极低,因此...
12
qq_31573519

HIVE 载入本地数据文件报错

Failed with exception Wrong file format. Please check the file’s format. FAILED: Execution Error, re...
12
panjiao119

特征选择方法之TF-IDF、DF

TF_IDF, DF都是通过简单的统计来选择特征,因此把它们放在一块介绍     1、TF-IDF     单词权重最为有效的实现方法就是TF*IDF, 它是由Salton在1988 ...
12
u014552678

安装Spark和Hadoop,亲自体验过!!(泣血提示:按照此步骤定能安装成功!)

首先说一下我所用的版本:spark-2.1.1-bin-hadoop2.7.tgz,hadoop-2.7.3.tar.gz,jdk-8u131-linux-x64.rpm,我们实验室有4台服务器:每个...
11
qq_36864672

Hadoop入门案例 全排序之TotalOrderPartitioner工具类+自动采样

代码 package com.myhadoop.mapreduce.test; import org.apache.hadoop.conf.Configured; import org.apache...
11
a786150017

机器学习---第七讲支持向量机

本文来自Standford公开课machine learning中Andrew老师的讲解内容(https://class.coursera.org/ml/class/index)
10
qq_36864672

Python API 操作Hadoop hdfs

http://pyhdfs.readthedocs.io/en/latest/ 1:安装       由于是windows环境(linux其实也一样),只要有pip或者setup_instal...
8
uisoul

PHP使用Solr全文搜索引擎

前言  本来以为网上已经有了类似博文,不想重复,可是一圈搜下来,都是一些内容不甚明了的文章,或者solr版本太过老,参考价值不高,更有甚者,直接拷贝的别人的内容。一篇博客,各大平台都能看到,也不见转载...
261
eieiei438

大数据正式10

大数据正式10 jQuery 定义:jQuery是一个“写的更少”,但“做的更多”的轻量级JavaScript函数库 优势 可以简化JavaScript代码 可以像css那样...
223
clairliu

浅析2017年双十一数据,为你揭秘这些巨额成交量背后的秘密。

2017年双十一过去已经一周之余,不知道大家是不是都已经收到了自己的战利品~今天就为大家分析揭秘双十一的巨额数据背后的秘密,顺便也可感受一下国人对于购物的热情。 首先说一个众所周知的数据:201...
184
weixin_40296858

2017年双十一最全面的大数据分析报告在此!

2017年双十一过去已经一周之余,不知道大家是不是都已经收到了自己的战利品~今天就为大家分析揭秘双十一的巨额数据背后的秘密,顺便也可感受一下国人对于购物的热情。
175
u012460749

Docker容器安装-单节点PbsPro

Docker容器安装-单节点PbsPro1 前提1.1 Docker介绍:简介 Docker 是一个开源的应用容器引擎,基于 Go 语言 并遵从Apache2.0协议开源。 Docker 可以让开发者...
129
yuan_csdn1

tar命令

tar命令[root@linux ~]# tar [-cxtzjvfpPN] 文件与目录 ….参数:-c :建立一个压缩文件的参数指令(create 的意思);-x :解开一个压缩文件的参数指令!-t...
127
u012562943 img

Kubernetes学习总结(2)——Kubernetes设计架构

Kubernetes集群包含有节点代理kubelet和Master组件(APIs, scheduler, etc),一切都基于分布式的存储系统。下面这张图是Kubernetes的架构图。Kuberne...
yuanshuai1136

面试

 最近换了个公司,从三月底开始面,面到四月底,面了有快二十家公司。我是一个喜欢总结经验的人,每经过一场面试,我在回来的路上都会仔细回想今天哪些问题可以答的更好,或者哪些问题是自己之前没遇到过...
96
u012679583

粒子群算法(PSO)

1.粒子群算法概述 粒子群算法属于群智能算法的一种,使用过模拟鸟群捕食行为设计的。假设区域里只有一块食物(即通常优化问题的最优解)鸟群的任务是找到这个任务源。鸟群在整个搜寻过程中,通过相互传递各自的...
81
freewebsys img

PythonStock(13):使用stockstats计算股票中的16个常用指标方法大全

前言使用Python开发一个股票项目。 项目地址: https://github.com/pythonstock/stock 相关资料: http://blog.csdn.net/fr...
69
A_xilixiaogui

python切片、迭代、生成器、列表生成式等高级特性学习

python高级特性1行代码能实现的功能,决不写5行代码。请始终牢记,代码越少,开发效率越高。 切片 当我们要取一个list中的前n各元素时,如果前n个少的话,我们还可以一个一个的取,但是若前n个元...
61
liguohuaBigdata

云星数据---Apache Flink实战系列(精品版)】:Flink流处理API详解与编程实战004-Flink基于流的window操作002

三、交通场景下time-window实战1.tumbling-time-window (无重叠数据)实战1.0实战目的每5秒钟统计一次,在这过去的5秒钟内,各个路口通过红绿灯汽车的数量。
59
liguohuaBigdata

云星数据---Apache Flink实战系列(精品版)】:Flink流处理API详解与编程实战003-Flink基于流的window操作001

一、流处理的基本概念1.stream和window1.源源不断的数据流是无法进行统计工作的,因为数据流没有边界,就无法统计到底有多少数据经过了这个流。 也无法统计数据流中的最大值,最小值,平均值,...
59
u013424982

青云QingCloud 镜像仓库上线|最强 IaaS 驱动下的完整容器平台

1956 年 4 月 26 日,一架起重机把 58 个铝制卡车车厢装到了一艘停泊在港内的老油轮上,谁也不会想到,一场革命就这么开始。集装箱的诞生,让货物的运输成本大大降低,也让原本混乱的运输环境,变得...
58
zx8167107

Hdfs扩容操作

这篇文章分为两部分,第一部分主要讲述的是如何将新插入的磁盘格式化并加载到服务器中,成功加载硬盘之后再通过第二部分实现hdfs扩容操作。   1、格式化添加新硬盘 (1)磁盘分区 ##注意这里是...
55
u010945683

Hadoop常用端口号

转载地址:https://www.cnblogs.com/jancco/p/4447756.html 一、常用端口组件 节点 默认端口 配置 用途说明 HDFS DataNode...
54
qq_36330643

elasticsearch的python接口使用

elasticsearch-py Installationedit It can be installed with pip: pip install elasticsearch ...
54
RoseChan

Salesforce Lightning {!expression}和{#expression}的区别

{#expression} (Unbound Expressions) Data updates behave as you would expect in JavaScript. Primitiv...
39

预告
img 进军Web前端工程师
讲师:曾亮老师

专家申请

img
邓绪佳

我是嘉仔

img
CSDN研发频道

CSDN研发频道,关注Web开发、Java、.NET、架构、数据库等技术领域。

img
郑浩

从事java开发已经四年的时间,从入行开始就坚持写博客,目前职位是java高级开发工程师,...

更多

日榜

官方博客

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部