ss762349239的博客

原创 1.27continue VS break

1.break用于完全结束一个循环，跳出循环体执行循环后面的语句。2.continue只是终止本次循环，接着还执行后面的循环，break则完全终止循环。举例如下：...

原创 1-20.格式化输出

原创 1-17-19.数据类型

1.int和long：2.字符串——python中只要加了引号（单双都行）就是字符串单双引号没有任何区别，只是下面这种情况，需要考虑单双的配合。3.字符串的拼接注意:字符串的拼接只能是双方都是字符串，不能跟数字或其他类型拼接单双引号。4.布尔类型True/False...

原创 1-16.用户交互和注释

1.用户交互的实现：name = input("whats your name?")print("hello"+name)运行结果如下：

原创 1-15.python变量的定义规范和常识积累

1.变量的命名规范：变量名只能是字母、数字或下划线的任意组合。变量名的第一个字符不能是数字。关键字不能作为变量名。2.常量程序员约定俗成，常量的定义全部大写。...

原创 Spark集群的安装

Spark集群的安装步骤1.下载编译好的对应版本到目标文件夹中。 2.修改conf目录中的spark-env.sh文件，添加以下内容： export JAVA_HOME=/usr/java/jdk1.7.0_45 export SPARK_MASTER_IP =cloudera-a export SPARK_MASTER_PORT = 7077 3.修改slaves文件，添加以下内容：

原创 mac下利用IDEA工具Maven编译Spark源码

编译步骤如下：1.从官网下载spark源码，注意是souce code，不是提前编译好的版本，我这里下载的是spark1.4.1。2.确保IDEA上安装了scala插件plugins，本机也安装了maven3.3.9及以上版本和java7+，如图：3.将源码文件解压，并import进IDEA导入方式选择MAVEN。 4.更改pom.xml文件。4.1 查看java版本是否跟你机子用的java版

转载 JSP九大内置对象总结

JSP中九大内置对象本转载来自http://www.cnblogs.com/moming1992/p/5604705.html。 Jsp九大内置对象包括request response session application out page config exception pageContent 其中 request response out page config exception

原创 Jess 7.2p2——Java平台规则引擎官方文档翻译2

Jess 7.2p2——Java平台规则引擎官方文档翻译2本博客是接着[本体小本营][1]之前关于Jess的官方文档的补充翻译，前一部分请看转载的Jess 7.2p2——Java平台规则引擎官方文档翻译1。4.定义函数4.1.Deffunctions你能定义自己的函数，用deffunction结构，deffunction的结构如下所示：(deffunction <function-name> [<d

转载 Jess 7.2p2——Java平台规则引擎官方文档翻译1

Jess Java平台规则引擎官方文档翻译1本博客转载自本体小本营。1.入门1.1.需求在使用Jess前请先确认JVM是否正确安装并能正常工作。 使用JessDE集成开发环境，你需要Eclipse SDK的3.1版或更新版本，这个可以从http://www.eclipse.org获得。安装JessDE前请确认Eclipse是已经安装并能正常工作。 Jess类库为另一种语言担任译员，

转载 详细探究Spark的shuffle实现

Background在MapReduce框架中，shuffle是连接Map和Reduce之间的桥梁，Map的输出要用到Reduce中必须经过shuffle这个环节，shuffle的性能高低直接影响了整个程序的性能和吞吐量。Spark作为MapReduce框架的一种实现，自然也实现了shuffle的逻辑，本文就深入研究Spark的shuffle是如何实现的，有什么优缺点，与Hadoop

原创 遇见错误：启动Hadoop相关错误之——启动不了datanode

遇见错误：启动Hadoop相关错误之——启动不了datanode1.配置hadoop所有环境后，尝试启动hadoop所有相关服务，利用start-all.sh进行启动，发现datanode启动不起来，如下如所示：2.找到hadoop的logs，查看datanode.log，结果如下：3.果然有fail，查找原因之后发现是namenode and datanode cluster ID不匹配，解决办法

原创 快速浏览《Linux从入门到精通》笔记

Linux基础指令杂记阅读《Linux从入门到精通》（刘忆智）复习了一些基础知识，在此记录，方便日后查找使用。Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ct

转载 intellj idea 如何设置类头注释和方法注释

intellj idea 如何设置类头注释和方法注释一：文件级别的注释        文件级别的注释网上已经很多介绍了，本文不做多介绍，主要是通过File--》Setting--》File and Code Template中来设置idea 如何设置类头注释和方法注释" style="margin:0px; padding:0px; border:0

原创 Elementary OS 重置密码经验

好久不用Elementary OS系统了，结果今天一登录，发现用户密码和root密码都忘记了，不过root当时应该是没有设置密码，所以今天能够重置密码成功。1.在进入开机选择系统界面前，按ESC 或者 SHIFT 键，保证进入GRUB界面。2.选择OS的高级选项，选择进入恢复模式（选择进入Recovery）3.可以获得一个bash的shell，进入shell后，尝试passwd hua

转载 Git指令使用

Git远程操作详解作者： 阮一峰日期： 2014年6月12日Git是目前最流行的版本管理系统，学会Git几乎成了开发者的必备技能。Git有很多优势，其中之一就是远程操作非常简便。本文详细介绍5个Git命令，它们的概念和用法，理解了这些内容，你就会完全掌握Git远程操作。git clonegit remote