- 博客(4)
- 收藏
- 关注
RSS订阅转载 程序员打怪升级图
最近在琢磨程序员到底路在何方，经过不断的自虐和代入，终于在迷雾森林中得图一张，看之豁然开朗。独乐乐不如众乐乐，share了：（图1 程序员职业路线图）术语表图1中使用了很多术语，这里先做解释，只有我们大家都说同一种语言，沟通才会顺畅。● 程序员：撰写代码，生产软件，辅助提高社会生产率的脑力劳动者。据说喝的是咖啡，抽的是烟，产的是代码。他们是计算机诞生后才逐渐兴起的一个群体，鱼龙混杂，有高飞天上的白...
2018-06-25 17:59:25
1275
2
转载 Hadoop与Spark常用配置参数总结
背景MapReduce和Spark对外提供了上百个配置参数，用户可以为作业定制这些参数以更快，更稳定的运行应用程序。本文梳理了最常用的一些MapReduce和Spark配置参数。MapReduce重要配置参数1. 资源相关参数(1) mapreduce.map.memory.mb: 一个Map Task可使用的资源上限（单位:MB），默认为1024。如果Map Task实际使用的资源量超过该值，...
2018-06-25 16:55:01
230
原创 实现简单的SparkWordCount
package ****** import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} class SparkWC { } object SparkWC { def main(args: Array[String]): Unit = { // 文件信息配置类,并设置应用...
2018-06-25 16:35:32
228
原创 为什么找不到RPC.getServer方法
在学习RPC协议的时候有些人喜欢去网上找教程博客之类的,找到一些文章可能会发现一个问题就是找不到RPC.getServer.代码如下: public class MyServer { public static int PORT = 5210; public static String IPAddress = "216.192.210.111"; ...
2018-03-26 20:09:37
576
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人