城市智能停车场诱导
文章平均质量分 85
ROGEN-秀发
JAVA、linux、hadoop、hbase、hive、spark、mahout
展开
-
智能停车诱导系统--大数据部分--HBase数据导入(一)
把数据导入hbase这块当时花了我好大精力,试了四种方法都不成功,差点就用shell一个个生敲进去了。好在这段日子也找到了一些方法,下面就主要讲两种批量导入的方法吧: (1)ImportTsv 这是Hbase提供的一个命令行工具,可以将存储在HDFS上的自定义分隔符(默认\t)的数据文件,通过一条命令方便的导入到HBase表中,对于大数据量导入非常实用,原创 2016-08-16 15:08:47 · 1077 阅读 · 0 评论 -
智能停车诱导系统--大数据部分--HBase表格设计
额。。这表是我一个月前建的了,容我先想想。。。 好了。 当初花了三天时间翻了翻《hbase实战》,然后大概就知道hbase是按列存储,高读写性,看了书上几个表的设计就直接开始做了。(毕竟事关我家皇上的研究生之路,这个时候不行也得行) 关于停车场这块的行情说实话还真不怎么了解,先百度吧,查了什么停车场类型,停车场费用计算表,西安时车原创 2016-08-16 15:08:04 · 1053 阅读 · 0 评论 -
智能停车诱导系统--大数据部分--任务拆分
前面写了那么多,看了估计会有疑问:这货到底在干啥。。。好吧,毕竟只说了需求,具体的计划毛都没提,所以这篇就做个过渡吧。 复制一下前面说到的功能:把全市的停车场信息存进数据库,用户传过来位置,车型,停车时间;从数据库中算出最适合的停车场,然后把停车场的详细信息给推送过去。 所以我这里要做的工作是把他们汇总好的停车场的数据存到hbase;接收用户传来的经纬度,车原创 2016-08-16 15:07:27 · 915 阅读 · 0 评论 -
智能停车诱导系统--大数据部分--服务器搭建(三)
最近在找工作,去烦了好几次学姐终于要到了几个公司的内推,然后改简历,复习基础知识。。。。。突然想起来我的论文还没有写,感觉要完。。。 好了暂时不说这些了,继续上次的hbase安装。 (四)HBase0.98.20 (1)解压到目标文件夹 这里说提一句,我笔记本上的所有关于hadoop的东西都装在/usr/loc原创 2016-08-16 15:06:08 · 1020 阅读 · 0 评论 -
智能停车诱导系统--大数据部分--服务器搭建(二)
这篇正经点好了,学术问题毕竟是很严肃的。 上一篇说了服务器的架构:Hadoop2.6.0+Hbase0.98.20+ZooKeeper3.4.6(伪分布),接下来就实际搭一下吧。忘了说了,我现在用的系统十Ubuntu14.04。 一、JDK--1.7.0_76 最近一年多的时间一直在用jdk1.7 64位 linux版的:jdk-7u76-linux原创 2016-08-16 15:03:36 · 986 阅读 · 0 评论 -
智能停车诱导系统--大数据部分--服务器搭建(一)
半个月前决定接下实验室这个项目,功能说来也简单:把全市的停车场信息存进数据库,用户传过来位置,车型,停车时间;从数据库中算出最适合的停车场,然后把停车场的详细信息给推送过去。 系统结构清晰的不得了,可毕竟牵扯到大数据,那么问题来了。。。 一、服务器架构---Hadoop2.6.0+Hbase0.98.20+ZooKeeper3.4.6(伪分布) 1.Hado原创 2016-08-16 15:00:54 · 1448 阅读 · 0 评论