![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
big-data
么么么SSX
I can do it!
展开
-
推荐系统--bigdata
推荐系统架构: 1、Offline层:对海量数据进行离线加工,例如:MapReduce。 2、Nearline层:利用流式处理技术对实时产生的数据进行加工,例如:Strom。 3、Online层:负责在线计算,处理相对简单运算逻辑,例如:在线引擎。原创 2017-10-17 22:41:18 · 207 阅读 · 0 评论 -
搭建Linux虚拟机平台
需要的工具: 1、VMwareWorkstation12ZhuCeJi.rar 安装参考链接 2、CentOS-6.5-x86_64-bin-DVD1.iso 首先安装VMwareWorkstation,在安装的过程中回提示:警告1909。无法创建快捷方式VMware Workstation Pro.Ink。 **解决方案:可能是用户在快捷方式文件夹的读写权限不够,那就去找到存放快捷方原创 2017-10-18 22:57:38 · 509 阅读 · 0 评论 -
hadoop集群搭建
1、安装虚拟机 先安装了master虚拟机,另外2个slave虚拟机直接复制的master的镜像,复制完之后记得修改slave1和slave2的静态ip地址,并且重新删除添加slave1和slave2的网络配置才能生效。 192.168.67.10 master 192.168.67.11 slave1 192.168.67.12 slave2 2、安装jdk和配置环境变量 安装j原创 2017-10-26 09:55:38 · 298 阅读 · 0 评论 -
python脚本语言初步学习
前言:python目前有2.0,3.0两个版本,其中2.0版本用的比较多,两个版本开发出的代码不一样,比较常见的脚本语言还有shell,perl等。脚本语言主要是为了缩短传统的编写、编译、链接、运行(c语言,java语言),脚本语言不需要走这四个过程,只需要调用的时候解释或编译,脚本语言一般都有简单易学易用等特点,python代码后缀以py结尾。 接写来进入python脚本语言的初步学习: 首先原创 2017-10-27 20:23:58 · 3097 阅读 · 0 评论 -
Centos6.5网络配置
1、打开编辑->虚拟机网络编辑。 2、把虚拟机设置的网络适配器先选择桥接模式进行初始化,再改成NAT模式。 3、打开虚拟机,打开终端,查看虚拟机的ip地址。 命令为:ifconfig 4、用root管理员登录,网卡配置静态IP。 命令步骤: # su //切换到root管理员才有编辑文件的权限 # cd /etc/sysconfig/network-scripts #原创 2017-10-23 21:13:43 · 10959 阅读 · 1 评论 -
hadoop之hive环境安装
1、 集群环境 192.168.67.10 192.168.67.11 192.168.67.12 2、下载软件包 #master wget http://mirror.bit.edu.cn/apache/hive/hive-1.2.2/apache-hive-1.2.2-bin.tar.gz tar zxvf apache-hive-1.2.2-bin.tar.gz 3、修改转载 2017-12-16 13:20:00 · 233 阅读 · 0 评论 -
hadoop2.0集群搭建
1、 集群环境 192.168.67.10 192.168.67.11 192.168.67.12 2、 关闭系统防火墙及内核防火墙 #master、slave1、slave2 #清空系统防火墙 iptables -F #保存防火墙配置 service iptables save #临时关闭内核防火墙 setenforce 0 #永久关闭内核防火墙 vim转载 2017-12-06 22:53:04 · 305 阅读 · 0 评论