qq_40938267的博客

原创 大数据学习时遇到的问题

问题总结目录HIVE连接拒接数据库密码： 1Mysql乱码： 2hadoop集群中datanode会挂掉一个，原因是同步的信息不同，开启安全模式会从副本中赋值； 3Hue make apps编译出错: 4Hue 启动时报错没有hue用户 5Hadoop fs 上传文件命令不管用： 5Linux网络配置 5Yum源 9Mysql 服务停止了，启动服务 10HIVE连接拒接数据库密码： showdatabases; 远程...

原创 shell 综合练习

练习一：写一个脚本 1.设定变量FILE的值为/etc/passwd 2.依次向/etc/passwd中的每个用户问好，并且说出对方的ID是什么 形如：（提示：LINE=`wc -l /etc/passwd | cut -d" " -f1`) Hello,root，your UID is 0.3.统计一个有多少个用户 形如：（提示：LI...

原创 MySql的初始化配置

--查看系统之前是否已安装MySQL rpm -qa | grep mysql --有的话，卸载 rpm -e mysql-libs-5.1.66-2.el6_3.i686 --nodeps --离线安装mysql rpm rpm -ivh MySQL-server-5.5.28-1.linux2.6.x86_64.rpm --nodeps --force rpm ...

转载 JAVA正则表达式，matcher.find和 matcher.matches的区别

1.find()方法是部分匹配，是查找输入串中与模式匹配的子串，如果该匹配的串有组还可以使用group()函数。matches()是全部匹配，是将整个输入串与模式匹配，如果要验证一个输入的数据是否为数字类型或其他类型，一般要用matches()。2.Pattern pattern= Pattern.compile(".*?,(.*)");Matcher matcher = pattern.m...

原创 MySql 基本操作 （三）

转载:http://www.w3school.com.cn/sql/sql_isnull.asp时间函数1、NOW获取当前日期和时间的函数。语法： NOW()例如：select NOW();2、CURDATE获取当前的日期语法：CURDATE()3、CURTIME()获取当前时间语法：CURTIME()4、DATE获取日期时间或者日...

原创 MySql 基本操作（二）

-- 输出重复的去重后 所有的值 两个语句后面可以跟where条件语句SELECT Sname FROM studentUNIONSELECT Sname FROM student1-- 输出重复的 包含的所有值SELECT Sname FROM studentUNION ALLSELECT Sname FROM student1-- SQL语句 MySql不支持 SELECT...

转载 Ideal快捷键

IntelliJ Idea 常用快捷键列表Ctrl+Shift + Enter，语句完成“！”，否定完成，输入表达式时按 “！”键Ctrl+E，最近的文件Ctrl+Shift+E，最近更改的文件Shift+Click，可以关闭文件Ctrl+[ OR ]，可以跑到大括号的开头与结尾Ctrl+F12，可以显示当前文件的结构Ctrl+F7，可以查询当前元素在当前文件中的引用，然后按 ...

原创 ResutSet、List、map

A:ResutSet与List的转换class A{ String name, int age, String address}ResultSet rs = null;List<A> list = new ArrayList<A>();while(rs.next()){A a = new A();a.setName(rs.getString(1));a....

原创 MySql 基本操作（一）

http://www.w3school.com.cn/sql/sql_isnull.asp 视图可以说是一种虚拟表，建立在基本表的基础上，通过关联一个表或者多个表来获取多个表中需要的字段，视图只是用来查询数据并不能用来存储数据信息。 -- CREATE DATABASE stu; -- SHOW DATABASES; USE stu; CREATE TABLE stu(x1 VARCHA...

原创 apache-maven在Ideal中的配置

一、*.lastUpdated是EveryThing清理下载失败的文件二、一定要记住，每次新建一个Maven时，都要在Settings中配置路径，不然默认在C盘，内存越来越大，电脑越卡。 Sttings-->Build、Execution...-->Build Tools-->Maven 图中三条蓝线：前两条能看懂，最后Local_reposit...

原创 伪分布/集群搭建的详细过程

原创 Hadoop常用命令

注意：Hadoop低于2.0版本 <name>fs.defaultFS</name>高于2.0版本端口号：9000 <value>hdfs://bigdata3:9000</value>低于2.0版本端口号：8020A??当前目录下 含有JAR的文件：find . -name *.jarB??当前目录下...

原创 Hadoop基本配置

JDK和Haoop环境配置：a>在Jdk官网中下载Linux版的Jdk8（压缩包）b>解压后,进入此Jdk的目录下 c>vi /etc/profiled>在最后加上：#JAVA_HOMEexport JAVA_HOME=/opt/module/jdk1.8.0_181export PATH=$PATH:$JAVA_HOME/bin#HADOOP_HOME...

原创 centos7静态网络配置

重点：时间长了没用虚拟机，网络没有。试试挂起，然后重启。1、vi /etc/sysconfig/network-scripts/ifcfg-eth0/ens33#这里设置的静态ip前三段必须与vmware中编辑的网络编辑器中的NAT模式ip一致BOOTPROTO=staticONBOOT=yesIPADDR=192.168.1.111NETMASK=255.25...

原创 MySql 常用句

1、设置主键id为自增 AUTO_INCREMENT 或者 IDENTITYa:创建默认以1开头的自增长字段 ALTER TABLE company_home CHANGE id id INT AUTO_INCREMENT;以X开头： ALTER TABLE company_home CHANGE id id INT AUTO_INCREMENT=X;以X开头 以3增长：...

原创 大数据学习Vmware基础配置

Centos 6永久修改这个需要修改系统内的文件vi /etc/sysconfig/network把hostname的值修改为想要的就可以了Centos 71）开启虚拟机 1>输入命令 net.ifnames=0 biosdevname=02>输入用户名root 密码....3>点击编辑 选择虚拟网络编辑器 更...

转载 MYSQL command

mysql命令[转]来自：http://www.cnblogs.com/zhangzhu/archive/2013/07/04/3172486.html1、连接到本机上的MYSQL。首先打开DOS窗口，然后进入目录mysql\bin，再键入命令mysql -u root -p，回车后提示你输密码.注意用户名前可以有空格也可以没有空格，但是密码前必须没有空格，否则让你重新输入密...

转载 关于java中for和foreach循环

for循环中的循环条件中的变量只求一次值！具体看最后的图片 foreach语句是java5新增，在遍历数组、集合的时候，foreach拥有不错的性能。 foreach是for语句的简化，但是foreach并不能替代for循环。可以这么说，任何foreach都能改写为for循环，但是反之则行不通。 foreach不是java中的关键字。foreach的循环对象一般是一个集合，List、A...

转载 原生JavaScript封装ajax请求

原文链接：http://caibaojian.com/ajax-jsonp.html本文主要介绍了如何通过原生JavaScript封装ajax请求，文中给出了具体的实现代码和详细的解释，希望对你有所帮助。一、JS原生Ajaxajax：一种请求数据的方式，不需要刷新整个页面；ajax的技术核心是 XMLHttpRequest 对象；ajax 请求过程：创建 XMLHttpReques...

转载 安装linux基础网络配置

3）开启虚拟机    1&gt;输入命令     net.ifnames=0  biosdevname=02&gt;输入用户名root     密码....3&gt;点击编辑 选择虚拟网络编辑器  更改设置  VMnet8  子网  192.168.56.04&gt;选择中文   继续   安装位置  第一个  完成  开始安装  设置密码等待   ...

转载 JDK、SQL

 java数据库链接以及java教程：https://www.runoob.com/java/java-mysql-connect.htmlsql遇到问题总结：https://www.cnblogs.com/ziranquliu/p/5313315.htmlhttps://www.cnblogs.com/dunitian/p/4522990.htmljdk7下载及安装：http:...

转载 虚拟机Linux CentOS 桥接模式和NAT模式配置静态IP

桥接模式1、首先设置这台linux的网络适配器为桥接模式：网络适配器2、查看主机网络配置Ctrl + R 打开运行，输入cmd回车，然后输入ipconfig回车： IP信息 记住IPv4地址和默认网关3、虚拟机打开第一个配置文件：[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg...

转载 Unable to load native-hadoop library for your platform... using builtin-java classes where applicab

解决方案是在文件hadoop-env.sh中增加：export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib/native"  

转载 bash: mr-jobhistory-daemon.sh: command not found...

你看的教程是旧的，新版的hadoop启动脚本放在sbin下。start-all.sh已经逐渐被废弃，采用新的启动脚本： 1 2 3 4 5 sbin/hadoop-daemon.sh  --script hdfs start datanode sbin/hadoop-daemon.sh  --script hdfs start...

转载 Centos7命令行安装图形用户界面

转载：https://blog.csdn.net/zhagzheguo/article/details/79433307安装了图形用户界面的话：1. 查看系统里是否已经安装了图形用户界面。使用ctrl+alt+fx，x为1234，都试试，看看是否能切换为图形用户界面。我的是切换的都是不同的命令行界面，提示登录。2. 或者登录进去之后，在命令行里输入init 5，或者startx...

转载 xx is not in the sudoers file 问题解决【转载】

原帖地址：http://blog.sina.com.cn/s/blog_4ef045ab0100j59t.html一、$whereis sudoers －－－－－－－找出文件所在的位置，默认都是/etc/sudoers         二、 #chmod u+w /etc/sudoers    以超级用户登录su -root ，修改文件权限即添加文件拥有这的写权限 限，ls -al /etc...

转载 解決 centos -bash: vim: command not found

 i. 那么如何安裝 vim 呢?输入rpm -qa|grep vim 命令, 如果 vim 已经正确安裝,会返回下面的三行代码:root@server1 [~]# rpm -qa|grep vimvim-enhanced-7.0.109-7.el5vim-minimal-7.0.109-7.el5vim-common-7.0.109-7.el5如果少了其中的某一条,比如...

转载 DNS

1、dns是一个域名系统，是万维网上作为域名和IP地址相互映射的一个分布式数据库，能够使用户更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。2、意义：通过主机名，最终得到该主机名对应的IP地址的过程叫做域名解析（或主机名解析）。在解析域名时，可以首先采用静态域名解析的方法，如果静态域名解析不成功，再采用动态域名解析的方法，域名是互联网上的身份标识，是不可重复的唯一标识资源； ...

转载 mysql 在cmd中操作

cmd中不区分大小写，不管输入大写还是小写，统一显示小写SQL语句结束时一定要加;首先进入安装数据库目录下进入F:    然后 cd  mysql-8.0.12-winx64/bin（安装目录下） 一、基本命令 1、启动说明    说明：以管理员的身份运行cmd    格式：net start 服务名称    示例：net start mysql57123 2、...

转载 SQLyog中文版安装教程

基本简介SQLyog中文版是一款专业的图形管理软件，SQLyog操作简单，功能强大，能够帮助用户轻松管理自己的MYSQL数据库，SQLyog中文版支持多种数据格式导出，可以快速帮助用户备份和恢复数据，还能够快速地运行SQL脚本文件，为用户的使用提供便捷。相似软件版本说明软件地址 xampp下载 7.1.8 win32 查看 xampp 7.1.8 w...

转载 MVC风格

   转载：https://blog.csdn.net/alvin930403/article/details/46907747点击了解更多软件体系结构风格§模型-视图-控制器风格常被简称为MVC风格§组件：模型、视图、控制器§连接件：显式调用、隐式调用、其他机制(例如：Http协议)工作机制：Model:§模型的职责–负责数据存取–负责业务逻辑实现–负责数...

转载 Hadoop集群搭建以及遇到问题详解

转载：http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/centos7单机、分布式、伪分布：https://blog.csdn.net/qq_40938267/article/details/83416665  有详细的搭建过程环境本教程使用 Ubuntu 14.04 64位 作为系统环境，基于原生 Hadoop 2，在 Hadoo...

转载 Hadoop单机式伪分布式安装详解

Ubuntu、centos7、6集群搭建：https://blog.csdn.net/qq_40938267/article/details/83476896 一、准备阶段 1、创建用户         # useradd -m hadoop -s /bin/bash             -m：自动建立用户的登入目录；             -s：指定用户登入后所使用的shell；...

转载 Centos 7 系统安装完毕修改网卡名为eth0

     从CentOS/RHEL7起，可预见的命名规则变成了默认。这一规则，接口名称被自动基于固件，拓扑结构和位置信息来确定。现在，即使添加或移除网络设备，接口名称仍然保持固定，而无需重新枚举，和坏掉的硬件可以无缝替换。但是这样一来，虽然有好处，但也影响了不少用户的操作，因为新的命名方案接口名称比传统的eth0相比有点难以阅读。出于习惯等一些原因，你想修改网卡名称，下面为大家介绍如何在C...

转载 JDBC连接数据库 mysql serverTimezone useSSL 时差

 2018年06月25日 11:24:01 love20yh 阅读数：303更多个人分类： JavaWeb MyEclipse 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/love20yh/article/details/80799610驱动包用的是mysql-connector-java-8.0.11.jar新版的驱动类改成...

转载 Ubuntu使用教程：E: 无法获得锁 /var/lib/apt/lists/lock

具体如下： 1、ps-aux 查出apt-get进程的PID，通常是一个四位数字。 2、用sudo kill PID代码 杀死进程 3、用sudo apt-get update，sudo apt-get dist-upgrade升级。 方法一： 执行一下 sudo dpkg --configure -a 方法二（亲测可以用）： sudo rm...

转载 小故事 多看看

https://blog.csdn.net/blesswave/article/details/1759046. 1、断箭 　不相信自己的意志，永远也做不成将军。 　春秋战国时代，一位父亲和他的儿子出征打战。父亲已做了将军，儿子还只是马前卒。又一阵号角吹响，战鼓雷鸣了，父亲庄严地托起一个箭囊，其中插着一只箭。父亲郑重对儿子说：“这是家袭宝箭，配带身边，力量无穷，但千万不可抽出来。” 　那是一个...

转载 交换机

https://wenku.baidu.com/view/25630b00cc175527072208a4.html

转载 以太网简单介绍

网卡实现了串并转换，并在传输中进行对话来确定传输中的一些参数。网络适配器又称网卡或网络接口卡，是使计算机联网的设备。网卡插在计算机的主板插槽中，负责将用户要传递的数据转换成网络上其他设备能够识别的格式，通过网络介质传输。数据在计算机传输是并行的，而在网络的物理缆线中说数据主要是串行的比特流方式传输的，网卡承担串行数据和并行数据间的转换。网卡在发送数据之前要同时接收网卡进行对话以确定最大可发送数据的...

原创 网络互联——IP包的路由和转发

一、实验目的： 根据1.4.3 节 IP 网络路由中图 1.11——图 1.15 所示的内容设计一个验证性实验，要求最终 ping 1.  熟悉 Packet Tracer 实验软件环境； 2.  熟悉各种设备配置和线缆的使用； 3.  分配适当的地址给接口并记录； 4.  配置并激活 Serial 和 FastEthernet 接口； 5.  测试和验证配置；     二、实验环...