大数据Big Data

转载自  大数据Big Data

　　2012年本站曾对大数据预测：如果说2012年是大数据概念为人所知、引人瞩目、小试牛刀的一年，那么2013年大数据将会实现产品部署，早期投资获得回报，一小部分的产业被颠覆。到了2014年，各种大数据项目和系统很可能成为标准配置，到处可见。2017年：云和大数据、数据仓库合并起来，成为了一项服务，"分析即服务"和"数据即服务"成为主流

　　"大数据"[1]作为时下最火热的IT行业的词汇，随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。

　　谈到大数据不只是云计算Hadoop这类底层技术，而是基于其构建的组件或引擎，如Shark或Hive/Pig。从大数据的定义通常和速率（数据移动得快），体积（数据规模庞大），和种类（非结构化和结构化的信息）三点有关。

　　对于"大数据"（Big data）研究机构Gartner给出了这样的定义。"大数据"是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

　　大数据分析相比于传统的BI OLAP或数据仓库应用，具有数据量大、查询分析复杂等特点。如果说云计算提供了业务数据处理能力，那么大数据提供了业务数据的挖掘分析能力，数据科学家是对那些专门从事大数据分析者的称谓。

文章与教程

什么是大数据？

如何为大数据项目选择最好的工具？

实时流大数据：Storn,Spark和Samza异同比较

In-Stream大数据处理模式

Hadoop大数据批处理架构

Storm大数据实时处理架构

Spark大数据Big Data处理框架

为什么使用Spark?

在笔记本上实现Spark-GPU集群开发教程

纽约证券交易所的实时Map/Reduce

大数据Big Data性能基准测试

Hive架构

Hive, Pig, Scalding, Scoobi, Scrunch 和 Spark等hadoop框架比较

Apache Kafka简单介绍

Kafka Stream简介

日志是每个软件工程师关心的统一数据抽象

大数据工作流开源系统一览表

全新角度总结Twitter Facebook和LinkedIn业务模型与架构

Spring Batch批处理

Redis概率数据结构之计数器HyperLogLog

Redis概率数据结构之布隆过滤器

使用Apache Flink和Kafka进行大数据流处理

单变量、双变量和多变量分析之间的区别？

机器学习

不久我们将不用计算机编程，只需像狗一样训练它们

机器学习流行算法一览

Java机器学习软件介绍

使用机器学习进行文本处理

深入学习教程：从感知到深度神经网络

Flickr使用Hadoop和Storm扩展计算机视觉处理能力

大数据会替代BI吗？

30种数据可视化工具推荐

五个有关推荐系统的资料 

使用Mahout实现自然语言处理

使用Spark和Scala分析Apache访问日志

几种基于云计算的日志分析管理工具

使用TensorFlow实现深度学习原理介绍

Tensorflow简单教程

Hello, TensorFlow入门教程

如何安装Tensorflow 0.9 GPU源码版本?

使用Python matplotlib绘制股票走势图

神经网络最基本形式感知器的入门教程

深度学习之卷积神经网络教程

卷积神经网络入门理解

更多机器学习专题

 

参考

Spring Batch数据批处理

#大数据

云计算

数据网格

NoSQL

业务数据分析