Joy_cj

解压HBASE的tar包并配置HBASE的环境变量tar -zxvf hbase-1.3.1-bin.tar.gz -C /training/    设置环境变量  vi /etc/profile             HBASE_HOME=/root/training/hbase-1.3.1            export HBASE_HOME            PATH...

Linux网卡配置文件详解：DEVICE=eth0 #指出设备名称NM_CONTROLLED=yes #network mamager的参数，实时生效，不需要重启ONBOOT=yes #设置为yes，开机自动启用网络连接IPADDR=192.168.21.129 #IP地址BOOTPROTO=none #设置为none禁止DHCP，设置为static启用静态IP地址，设置为dhcp开启...

 大数据的核心是分布式存储HDFS和分布式计算MapReduce！ 其中分布式计算MapReduce最基础实例Wordcount如下所示： 依赖jar包      $HADOOP_HOME/share/hadoop/common      $HADOOP_HOME/share/hadoop/common/lib      $HADOOP_HOME/share/hadoop/mapre...

操作HDFS    1、通过Web Console: 50070、50090    2、命令行        （1）操作命令  hdfs dfs *****            -mkdir  创建目录                举例：hdfs dfs -mkdir /aaa                      hdfs dfs -mkdir -p /bbb/ccc   ...

HDFS的高级功能    1、回收站        补充：Oracle的回收站              恢复：闪回（flashback）                    (1) 闪回表  flashback table                    (2) 闪回删除  flashback drop                    (3) 闪回查询 flashba...

Linux命令分类：1.内部命令    help 命令2.外部命令    命令 --helptype 命令   查看命令是内部还是外部命令mkdir -p  创建父目录mkdir -m 创建目录的同时设置权限  mkdir -m 744 test 文件系统补充：1. ll  或者   ls-ldrwxr-xr-x. 2 root root 4096 3月  26 2015 rhdrwxr-xr-x...

为了方便hdfs可视化网页查看，需要提前关闭防火墙：firewalld的基本使用启动： systemctl start firewalld.service查看状态： systemctl status firewalld.service禁止开机启动： systemctl disable firewalld.serive停止： systemctl stop firewalld.service1.基本数...

1.首先需要启动hadoop集群，如下：2.hadoop集群的启动后的进程：3.关闭防火墙和查看防火墙状态。4.配置本机用户名：   环境变量下面添加如下所示。配置后需要重启电脑用户名才可以生效。5.添加链接需要的jar包：D:\LearningTool\eclipse\plugins  到该路径下...

hive的安装需要依附在hadoop的环境中，hadoop伪分布式搭建参考：https://blog.csdn.net/cjdashuju_java/article/details/803022671.hive安装包下载https://hive.apache.org/downloads.html  Download a release now!（最新版本下载）2.Apache产品所有版本安装包ht...

伪分布式搭建（看了这个还搭建不出来伪分布式？根本不可能！）1.修改映射文件vi /etc/hosts在最末尾添加192.168.182.66（你自己的IP）master(自己主机名)2.上传jdk和hadoop的压缩包并解压tar -xvzf hadoop-2.7.1.tar.gztar -xvzf jdk-8u121-linux-x64.tar.gz解压后删如下图所示：（压缩包我已经删除）3.配...

     现在Python这么火爆的年代，大家都在研究，我也就顺势看了一番。我用的Python3.5，但是对于centos7的系统自带Python2.7，所以需要建系统内部的Python2.7替换为Python3.5。替换网址可以为：https://blog.csdn.net/cjdashuju_java/article/details/79652279但是替换后会有yum会有一些错误，不能正常使...

大数据人工智能时代1.世界四次工业革命讲到大数据人工智能不得不提起世界著名改变时代的工业革命。大数据人工智能是继蒸汽机，电力，信息互联网后的第四次技术革命。著名的工业革命详情如下：第一次革命：18世纪60年代英国发起的蒸汽技术革命，以蒸汽机为代表。第二次革命：19世纪中期，以欧洲国家，美国，日本发起的电力技术革命，以1866年德国西门子发明的发电机为代表。第三次革命：20世纪四五十年代，世界各个国...

1.区别（1）hive是构建在hadoop基础设施上的数据仓库，通过HQL（类似SQL语言）最终转化为MapReduce。        hbase是一种key/value系统，他运行在hdfs上，和hive不一样，hbase能够在数据库上实时运行，而不是运行MapReduce任务。（2）hive查询花费时间很长，他默认遍历表中的所有数据。但可以通过hive的分区机制提高效率。        hb...

当Git无法自动合并分支时，就必须首先解决冲突。解决冲突后，再提交，合并完成。详细学习可浏览网站：廖雪峰哥Git官网1.用git log --graph命令可以看到分支合并图。git log --graph --pretty=oneline --abbrev-commitgit log --graph --pretty=oneline 2.分支管理策略通常，合并分支时，如果可能，Git会用Fast...

git分支1.创建dev分支，然后切换到dev分支：git checkout -b devgit checkout命令加上-b参数表示创建并切换，相当于以下两条命令：git branch dev （创建分支）git checkout dev （切换分支）2.查看当前分支git branchgit branch命令会列出所有分支，当前分支前面会标一个*号。3.把dev分支的工作成果合并到master...

（1）Hadoop生态系统（2）、HDFS（Hadoop分布式文件系统）HDFS是Hadoop体系中数据存储管理的基础。它是一个高度容错的系统，能检测和应对硬件故障，用于在低成本的通用硬件上运行。HDFS简化了文件的一致性模型，通过流式数据访问，提供高吞吐量应用程序数据访问功能，适合带有大型数据集的应用程序。（3）、Mapreduce（分布式计算框架）MapReduce是一种计算模型，用以进行大数...

Hadoop，Spark和Storm由于Google没有开源Google分布式计算模型的技术实现，所以其他互联网公司只能根据Google三篇技术论文中的相关原理，搭建自己的分布式计算系统。Yahoo的工程师Doug Cutting和Mike Cafarella在2005年合作开发了分布式计算系统Hadoop。后来，Hadoop被贡献给了Apache基金会，成为了Apache基金会的开源项目。Dou...

1.使用xshell登陆时,password灰色不能输入密码登录。2.解决办法如下:vi/etc/ssh/sshd_config修改最后一项为yes：PasswordAuthentication yes接着保存退出,然后重启sshd服务systemctl restart sshd.service然后重新登陆此时,已经可以输入密码了!!!...

基础命令：创建demo文件夹，下面创建one.txt文件进入demo文件夹使用git init命令把这个目录变成Git可以管理的仓库：用命令git add one.txt告诉Git，把文件添加到仓库（暂存区）用命令git commit -m “first write”告诉Git，把文件提交到仓库（本地仓库）之后提交到远程仓库，详情可以参考博文：https://blog.csdn.net/cjdas...

一、cookie和session关系图：二、Session的概念Session 是存放在服务器端的，类似于Session结构来存放用户数据，当浏览器 第一次发送请求时，服务器自动生成了一个Session和一个Session ID用来唯一标识这个Session，并将其通过响应发送到浏览器。当浏览器第二次发送请求，会将前一次服务器响应中的Session ID放在请求中一并发送到服务器上，服务器从请求中...