chihuangxian4430-CSDN博客

Spark shell提供了一种学习API的简单方法，以及一种以交互方式分析数据的强大工具。它可以在Scala（在Java VM上运行，因此是使用现有Java库的好方法）或Python中使用。 scala 命令行启动方式 ./bin/spark-shell python 命令行启动方式 ...

2019-02-22 10:07:00 133

如何安装spark？ spark比Hadoop良心，既提供了Windows的运行方式，又提供了Linux的运行方式，不过推荐在Linux环境下使用。 spark依赖 Java运行环境(最低1.7版本)，请自行搭建。需要使用Linux环境的同学，自行准备Linux环境。笔者使...

2017-03-19 22:30:00 135

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。 Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同于...

2017-03-19 15:49:00 121

JAVA实现网络请求代理之HTTP篇 (一) JAVA实现网络请求代理之Socket篇(二) Java代理服务器之截取，篡改HTTP请求（应用篇）说到篡改请求，其实就是篡改底层的一些数据包，就是替换数据包里面的一些数据而已。前面我们开发了一个HTTP代理服务器，在里面我们是通过...

2015-09-11 11:07:00 668

JAVA实现网络请求代理之HTTP篇 (一) JAVA实现网络请求代理之Socket篇(二) Java代理服务器之截取，篡改HTTP请求（应用篇）用Java实现Socket代理服务，原理上和http代理有些相似，只是两种协议的格式不一样。socket是对tcp/ip协议的抽象封装，...

2015-09-10 14:57:00 862

‍‍ JAVA实现网络请求代理之HTTP篇 (一) JAVA实现网络请求代理之Socket篇(二) Java代理服务器之截取，篡改HTTP请求（应用篇）首先，需要弄明白代理服务的原理，和http协议几种请求类型的构成。代理服务器原理 http协议详解 1、请求行以一个...

2015-09-09 14:33:00 1860

chihuangxian4430的博客