Hadoop
Bentley-2012
本人曾就职某市电信与电信研究院从事大数据挖掘方向工作,目前就职于某高校,从事数据建模挖掘及物联网教学培训工作,主要研究方向有:大数据建模与挖掘、数据库技术、物联网工程、计算机/通信专业。
展开
-
Ubuntu15.04单机/伪分布式安装配置Hadoop与Hive试验机
环境 系统: Ubuntu 15.04 32bit Hadoop版本: hadoop-2.5.2.tar.gz JDK版本: jdk-8u-45-linux-i586.tar.gz Hive版本:apache-hive-0.14.0-bin.tar.gz MySQL版本:Open-MySQL STEP 1:安装JDK 1.配置安装JDK,将JDK解压, tar原创 2015-04-29 16:05:29 · 1953 阅读 · 0 评论 -
MapReduce编程学习(1)--简要分析并附源代码
在完成了完全分布式Hadoop平台的搭建之后,一直在忙于C语言与计算机应用基础两门课程的教学与考试,好容易放了寒假,前几天在忙于LAMP与Oracle两门课程的教学备课。备课,永远是一名教师的无奈。顿时发现除了长了几斤肉肉之外,学习进展是一无是处。呵呵,也是醉了。抽了三个多小时把MapReduce编程的理念学习了一下,感觉相对来说还算好学,因为模板固定,以下记录几个实例供参考吧。在此申请:部分案例原创 2016-02-20 18:45:53 · 1004 阅读 · 0 评论 -
hadoop完全分布式集群+Win Eclipse+Hbase+Hive+Zookeeper+Sqoop+SPARK试验机平台
三台Centos6.5虚拟机,模拟3个物理节点的Hadoop平台。并配置Eclipse连接原创 2015-11-12 00:30:53 · 2509 阅读 · 0 评论 -
Python数据挖掘-Python with hadoop
一、SnakeBite1.1 Snakebite介绍介绍:Snakebite由Spotify创建,需要python2 (python3版本目前并不支持) and python-protobuf 2.4.1或更高版本。Snakebite提供了一个Python客户端库,允许客户从Python应用程序中以编程方式访问HDFS。客户端库使用protobuf与NameNode直接通信的消息。snakebit...原创 2018-02-20 15:16:24 · 3844 阅读 · 1 评论