2017年06月_chenshiying007

12月 11月 09月 06月 03月

原创 spark学习一

Spark解决了什么根本性的技术问题背景：在Spark出现之前，Hadoop的迅速发展，hadoop分布式集群，把编程简化为自动提供位置感知性调度，容错，以及负载均衡的一种模式，用户就可以在普通的PC机上运行超大集群运算，hadoop有一个非常大的问题：hadoop是基于流处理的，hadoop会从(物理存储)hdfs中加载数据，然后处理之后再返回给物理存储hdfs中，这样不断的读取

2017-06-12 12:26:27 460

原创网络知识总结

环境搭建Python Unit1. python2.72. pip, 并配置Pip源配置 pip conf, 自动设置源# mkdir ~/.pip/# vim ~/.pip/pip.conf[global]Index-url=https://pypi.edu.cn/simple 也可以每次安装的时候定Source

2017-06-08 12:18:59 602

原创 storm 分布式的实时计算系统

Storm介绍更多干货分布式实战（干货） spring cloud 实战（干货） mybatis 实战（干货） spring boot 实战（干货） React 入门实战（干货）构建中小型互联网企业架构（干货） python 学习持续更新 ElasticSearch 笔记 kafka storm 实战 (...

2017-06-07 23:26:03 12512