- 博客(7)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
原创 windows下调试hdfs时,没有权限解决办法
如果用idea编辑器,运行mapreduce或者spark等程序,如果出现:Permission denied: user=Adminis, access=WRITE, inode="/":root:supergroup:drwxr-xr-x这个原因是没有访问hdfs的权限,解决办法很简单:进入name node中的配置文件hdfs-site.xml中,在</configuration>...
2018-06-27 23:24:53 1589
原创 小木大数据-蒙特卡洛法求圆周率
我们配置好了spark和zk,下一步就是启动它们了,启动的方法是先把slave2,5,6的zk首先启动起来,然后到master这台机器上启动spark,最后到slave1上面启动备用的Spark-Master节点,从而实现高可用架构。接下来我来说一下什么叫做蒙特卡洛法,很简单,我们现在有一个变长为2的正方形,里面内嵌一个半径为1的圆: 我们把这个东西分为三部分,一部分是圆的内部,一部分是圆的外部且...
2018-06-21 22:11:43 805
原创 小木大数据-Zookeeper配置方法
Zookeeper配置方法很简单,我们还是按照之前讲解Spark的架构来 我们要在192.168.2.13(slave2)、192.168.2.16(Slave5)、192.168.2.17(Slave6)上面搭建Zookeeper(简称ZK)。首先我们在Zk的官网把ZK下载下来,其官网的网址是:https://zookeeper.apache.org/我们这次讲解所用的版本是:zookeeper...
2018-06-21 22:09:29 263
原创 小木讲大数据-Spark高可用架构的搭建方法
Spark高可用架构的搭建方法大家好,我是小木,这次我主讲的内容是Spark的搭建方法,Spark作为大数据里面最有用的软件,我们是必定会用到的。首先,我们要在官方网站上面下载Spark的安装包,官方网址是:http://spark.apache.org/进入官网之后,我们发现好高大上! 我曾经说过,牛逼的人说牛逼的话,装逼的人做装逼的事儿。但是Spark他装B的话也说,牛批的事儿也做。你看网站上...
2018-06-20 23:56:41 453
原创 Matlab视频系列教程-小木讲matlab-前12讲
小木讲Matlab第一讲-简介小木讲Matlab第一课,主讲内容为Matlab软件简介,本视频由小木希望学园提供,欢迎著名转载!视频地址:百度网盘:https://pan.baidu.com/s/1jmmOBy8YBhyKaYH2EMERVA2腾讯视频:https://v.qq.com/x/page/n06788gz5re.html?ptag=qqbrowser小木讲Matlab第二讲-数组1小木...
2018-06-16 09:35:43 15602 5
原创 白话文讲计算机视觉-第八讲-分水岭算法
这节课小木给大家来介绍一下啥叫分水岭算法。书上写着,算法叫做分水岭是因为它里面有水的概念。我们把图像的低密度区域想象成山谷,图像高密度区域我们想象成山峰。接下来我们往山谷里面注水,然后这些水在山峰之间开始汇聚,等一开始汇聚,我们就用一个水坝给阻挡了,阻挡的东西就叫做分割线。我们最后把所有水坝挑出来,作为图像分割的依据。具体的推导过程我下几节课会给大家讲解,这节课还是一样,教的是怎么用。首先,我们导...
2018-06-02 17:04:15 1279 1
原创 白话文讲计算机视觉-第七讲-GrabCut算法
我们在计算完成之后,我们会得到一个新的蒙版,这个蒙版里面包含了0~3的4种数据,而我们按照上述的方法进行计算,算法会判断哪些可能是前景,哪些可能是背景。因此,我们令蒙版中等于2的数据为0,也就是可能是背景的地方为0,然后令3为1,也就是前景的地方为1。在计算完毕后,如果是背景,那么仍然为0,如果是前景,那么为1。在新图层中,我们用白色的刷子,把那些本来应该是前景,但是却没算成前景的地方给标记出来,然后把应该是背景的地方,但是却搞错的用黑色标记,剩下不改变的地方用灰色标记。额,又是小熊,为啥博主总是用它呢?
2018-06-02 16:26:24 7562 3
交联反应模拟程序 cross-link reaction for polymers
2020-04-10
Flume和kafka连接的问题
2018-07-21
TA创建的收藏夹 TA关注的收藏夹
TA关注的人