- 博客(4)
- 资源 (1)
- 收藏
- 关注
原创 【通俗理解】 银行家算法的模拟和实现笔记(附代码)
最近在做操作系统的课程设计,其中实验四是“银行家算法的模拟和实现”。好在前面看过一点,有点印象。所以想尝试自己写一下,下面是我的编码过程以及个人的一点分享,如果有问题欢迎指出,也希望能和我一起交流。我的邮箱是:jiangzhengtao49@outlook.com一、 什么是银行家算法?银行家算法顾名思义就是模拟银行的借贷业务的一种算法,操作系统就相当于一个银行家,而进程就是客户,进程.........
2018-06-29 21:01:13 7997 4
原创 cloudera hadoop CDH目录下Hadoop-streaming.jar等其他jar包的路径
背景前面我是在自己的电脑上搭建分布式环境hadoop,做了一些实验,但是就今天下午上传了一个300多MB的文件,然后进行处理都非常的慢,估计没有几个小时是弄不完的。于是想起前面借用学校的一个集群,也折腾了一下,但是就是不知道他的目录结构,要找什么东西都找不到,是用cloudera进行管理和配置的,我想用hadoop-streaming-*jar来运行python脚本。于是网上百度,终于找到了!...
2018-06-20 15:58:22 5192
原创 地图匹配实验(一)
地图匹配实验(一)Hadoop实现出租车轨迹数据的并行地图匹配,此次地图匹配采用的是地图分块,然后通过添加路网骨干节点建立路网索引,为轨迹点映射路网骨干节点缩小范围,提高检索的效率,轨迹点与路网节点之间距离小于阈值就进行匹配。本次路网数据是上海市路网数据,从osm开源地图下载,进行了预处理得到路网骨干节点,使用的出租车数据是上海市4千辆出租车24个小时(07年2月20日)的行驶数据(下载链接)...
2018-06-20 15:02:07 3039 3
原创 执行start-dfs.sh后,datenode没有启动的解决办法
执行start-dfs.sh后,datenode没有启动,很大一部分原因是因为在第一次格式化dfs后,启动并使用了hadoop,后来又重新执行了格式化命令(hdfs namenode -format),这时主节点namenode的clusterID会重新生成,而从节点datanode的clusterID 保持不变导致的。解决方案(一): 在hdfs-site.xml文件下找到这两个文......
2018-06-18 17:06:29 10480
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人