- 博客(6)
- 收藏
- 关注
RSS订阅原创 Spark-IDEA环境报错
环境背景:IntelliJ IDEA Community Edition 2017.3.2Scala 2.11.8Spark 2.2.0Hadoop 2.6.0-cdh5.7.0报错一： System memory 259522560 must be at least 471859200.解决方案： 设置Run ->Edit Configurations->Application-
2018-02-25 13:58:45
248
原创 插入排序优化
插入排序的是十分常见的O(n^2)级别的排序算法，其排序思路如下：一次循环使前n个数都为有序，嵌套的二次循环将第n个数插入到前n个数中合适的位置，我的实现代码如下： public void insertsort(int[] a,int n) { for(int i=1;i<a.length;i++) { ...
2018-02-22 19:31:36
231
原创 配置多台互相ssh信任关系
配置ssh实现多台互信，其作用是实现多台机器免密码登陆。在集群中，配置多台互信是十分必要的，由于机器条件关系，我演示两台互信：环境简述： 两台虚拟机：hadoop 192.168.137.5和hadoop2 193.168.137.6 版本：CentOS6.5一.基础配置 hadopp的操作 - 下载sshd yum install sshd生成.shh文件（注意权限
2018-02-11 13:47:41
1181
原创 ssh遇到port 22:No route to host问题
ssh遇到这个port 22:No route to host的这个问题其实是比较常见的问题，通常是两个思路：检查防火墙状态检查ssh状态这两个方面的解决方案非常常见，无非就是查看这两个，防火墙是否关闭和ssh是否正在运行，大家自行百度方法就好，下面我要说说我遇到的坑，感觉大部分人遇到坑都是因为之前的操作，忘记了，才导致的坑。有可能网上最正统的解决方案解决不了问题，毕竟解决问题还是要...
2018-02-11 00:13:01
71854
4
原创 scala 伴生类和伴生对象的apply（）问题
伴生类与伴生对象的定义： 单例对象与类同名时，这个单例对象被称为这个类的伴生对象，而这个类被称为这个单例对象的伴生类数组源码实例：伴生类和伴生对象是相互依存的，在我们调用数组的时候，我们会发现我们有两种初始化的模式：模式一：var z = new Array[String](3)z(0) = "hadoop"; z(1) = "spark"; z(2) = "hive"...
2018-02-03 19:48:20
567
原创 IDEA+MAVEN搭建Scala错误：Error:scalac: error while loading JUnit4, Scala signature JUnit4 has
有开头是类似错误的： Error:scalac: error while loading JUnit4, Scala signature JUnit4 has wrong version expected: 5.0解决方法： 主要是版本问题 ，将maven自动生成的test和main下面的文件全部删除就好了。若泽大数据交流群：671914634...
2018-02-01 11:05:18
5877
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人