- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 JAVA实战(一)IDEA用maven创建springMVC项目和配置
一.回顾创建SpringMVCSpring MVC 框架在 Java 的 Web 项目中应该是无人不知的吧,你不会搭建一个 Spring 框架?作为身为一个刚刚学习Java的我都会,如果你不会的话,那可真令人忧伤。工具准备:IDEA2016.3 Java jdk 1.81、DEA创建项目新建一个maven project,并且选择webapp原型。然后点击next这里的GroupI...
2018-10-19 11:21:15 298
原创 Hive学习之路 (二十三)Hive 行列互转(补充)
行和列的互转1)列转行 (对某列拆分,一列拆多行)使用函数:lateral view explode(split(column, ‘,’)) numeg: 如表:t_row_to_column_tmp 数据如下,对tag列进行拆分SQL代码:selectid,tag,tag_newfromt_row_to_column_tmplateral view explode(spl...
2018-10-18 17:24:54 897
转载 互联网2B和2C的区别
作为互联网从业者,我们经常听到to B(或2B)和to C(或2C)两个概念。to B即面向企业客户,to C即面向普通用户。只要是互联网人基本都懂知道这两个概念,但如果别人再问“to B和to C产品到底有什么区别”,我们可能就“呃……”了。要理解它们的区别,就需要理解两者面向的对象(customer),产品特点(product),商业模式(business)。这三块依次对应文章以下三个标题:...
2018-10-10 10:42:56 69339 2
转载 云计算的Saas、Paas、IaaS的区别
Saas、Paas、IaaS这三个词,一直困扰众人很久。就拿字面意思来说,分别是:软件即服务,平台即服务,设施即服务。小编表示这个不往深了讲,真心看不懂,还容易弄混淆。今天我们就来扒一扒这三者的深层含义,让您立刻看出区别。IaaS独领风骚aaS = “as a Service”,翻译过来就是:你出钱,我服务你。SaaS 卖软件的。你什么也不用干,只要出钱,我直接给你能用的软件。比如Gmail...
2018-10-10 10:41:35 253
转载 spark的知识点(一)collect
1.collect的作用Spark内有collect方法,是Action操作里边的一个算子,这个方法可以将RDD类型的数据转化为数组,同时会从远程集群是拉取数据到driver端。2.已知的弊端首先,collect是Action里边的,根据RDD的惰性机制,真正的计算发生在RDD的Action操作。那么,一次collect就会导致一次Shuffle,而一次Shuffle调度一次stage,然而...
2018-10-09 17:36:31 2689
原创 spark的maven项目的pom文件
这里是引用 <properties> <maven.compiler.source>1.8</maven.compiler.source> <maven.co
2018-10-09 15:29:19 5757
原创 python调用pyspark的环境配置
1.安装jdk并配置JAVA_HOME以及添加到环境变量中。2.首先在本地安装spark的运行环境,如果是纯粹使用spark,那么本地可以不配置hadoop_home。下载好压缩文件之后进行解压,本地新建spark_home文件夹,之后配置环境变量SPARK_HOME,在PATH中添加%SPARK_HOME%\bin。3.使用pyspark之前首先安装python,这里安装了python,...
2018-10-09 14:37:36 5093
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人