XiaoYu的博客

原创 左外连接LEFT JOIN和where

SELECT a.id, a.user_name, a.user_type, a.parent_uid, b.limit_num, b.uid FROM pms_users a LEFT JOIN pms_recommend_limit b ON a.id = b.uid WHERE a.user_type = '89' AND a.parent_uid =...

原创 ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or d

ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory解决方法打开hive的安装目录下的bin目录，找到hive文件cd $HIVE_HOME/binvi hive将鼠标定位的位置，更改成下图...

原创 数据库重复写入数据问题处理

1. IF(SELECT * FROM TABLE WHERE 字段名=插入值) IS NULL    INSERT INTO TABLE    就这样加个IF语句就行了，也可以IF NOT EXISTS(判断值是否存在的查询语句) INSERT INTO TABL2，做唯一约束的。3，使用ignore关键字INSERT INGORE INTO ·table_name· ('user_id', '...

原创 js或者jquery清空文本框所有内容

eg: <input type="text" id="txt_field_name" /> 1. var obj = document.getElementById('#txt_field_name') ;     obj.select();      $('#txt_field_name').append("<input type='text' id='txt_field_na...

原创 Linux 自动同步服务器时间

Linux服务器运行久时，系统时间就会存在一定的误差，怎样使服务器的时间和网络服务器的时间同步。网络时间服务器首先得确保这些服务器都能ping通否则是无法时间同步的。中国国家授时中心：210.72.145.44   ----暂时无法使用NTP服务器(上海) ：ntp.api.bz中国ntp服务器：cn.pool.ntp.orgpool.ntp.orgcp -y /usr/share/zoneinf...

原创 死锁产生的原因及解决方法

一、死锁的定义多线程以及多进程改善了系统资源的利用率并提高了系统 的处理能力。然而，并发执行也带来了新的问题——死锁。所谓死锁是指多个线程因竞争资源而造成的一种僵局（互相等待），若无外力作用，这些进程都将无法向前推进。二、死锁产生的原因1) 系统资源的竞争通常系统中拥有的不可剥夺资源，其数量不足以满足多个进程运行的需要，使得进程在 运行过程中，会因争夺资源而陷入僵局，如磁带机、打印机等。只有对不可...

原创 Hbase安装部署

1、在Hadoop配置的基础上，配置环境变量HBASE_HOME、hbase-env.sh　　　　编辑 vim /etc/profile  加入 　　　　　 export  HBASE_HOME=/opt/hbase-1.2.6 　　　　     export  PATH=$HBASE_HOME/bin:$PATH　　　　编辑vim /opt/hbase-1.2.6/conf/hbase-env....

原创 设置CentOS7的网卡开机自启动

1. 可以试试这条命令：  CentOS7的网卡开机启动应该是：systemctl enable network 2 .若设置了始终还没有开机启动网络服务，最好只好去改配置文件  vim / etc / sysconfig / network-scrips /ifcfg-eno16777736  将其中ONBOOT参数的值改为yes，即可...

原创 CentOS 7设置ssh服务自动启动

SSH的英文全称是Secure SHell。通过使用SSH，你可以把所有传输的数据进行加密，这样“中间人”这种攻击方式就不可能实现了，而且也能够防止DNS和IP欺骗。还有一个额外的好处就是传输的数据是经过压缩的，所以可以加快传输的速度的.ssh有很多功能，它既可以代替远程登录，又可以为FTP，POP，甚至PPP提供一个安全的“通道”。SSH在Linux中的服务是sshd，安装openssh后才可开...

原创 Hadoop2.7.1教程

总体思路，准备主从服务器，配置主服务器可以无密码SSH登录从服务器，解压安装JDK，解压安装Hadoop，配置hdfs、mapreduce等主从关系。1、环境，3台CentOS 7，64位，Hadoop2.7需要64位Linux，CentOS7 Minimal的ISO文件只有600M，操作系统十几分钟就可以安装完成，Master 192.168.0.182Slave1 192.168....

原创 CentOS 7 JDK安装

通过 rpm -qa | grep Java  命令来查询出系统自带的jdk然后通过 rpm -e --nodeps 后面跟系统自带的jdk名，这个命令来删除系统自带的jdkrpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.10...

原创 CentOS 7关闭防火墙

systemctl stop firewalld.service #停止firewallsystemctl disable firewalld.service #禁止firewall开机启动firewall-cmd --state #查看默认防火墙状态（关闭后显示notrunning，开启后显示running）...

原创 思念

下过雨的夜有些清冷站在窗边仰望阴沉的天空天空挂着暗淡的云顺着那抹暗淡好像看到父母的身影好像看到明亮温馨的家闻到了熟悉的家里饭的香味习惯了漂泊，习惯了寂寞却总是不能习惯那些思念开心快乐时他躲在心里情绪低落时浮上心头总是不经意间感染着心底的柔软拿起手机打个电话声音有点哽咽却坚强的忍着眼眶泪水深呼吸平复一下让自我说话声音在电话的那边听起来正常听一下声音以慰思念之情坚强的外壳深藏着柔软的心o(´^｀)o哈...

原创 Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=256m; support was removed in

Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=256m; support was removed in 8.0“JDK 8兼容性指南”指出，在Java 8中，命令行标志MaxPermSize已被删除。原因是永久代从热点堆中被移除并被转移到本地内存。所以为了删除这条消息，编辑MAVEN_OP...

原创 A Java Runtime Environment (JRE) or Java Development Kit (JDK) must be available in order to run Ecl

A Java Runtime Environment (JRE) or Java Development Kit (JDK) must be available in order to run Eclipse. No Java virtual machine was found after searching the following locations: /var/local/eclipse/...

原创 Linux 的五个关机重启命令

一、Linux 的五个关机重启命令　　1、shutdown　　2、poweroff　　3、init　　4、reboot　　5、halt　　二、具体说明　　在linux下一些常用的关机/重启命令有shutdown、halt、reboot、及init，它们都可以达到重启系统的目的，但每个命令的内部工作过程是不同的。　　1.shutdown　　shutdown命令安全...

原创 输入java -version竟然出现以下错误

输入java -version竟然出现以下错误：java.lang.Error:Properties init: Could not determine current working directory    at java.lang.System.initProperties(Native Method)    at java.lang.System.initializeSystemClass...

原创 为账号hadoop增加sudo权限

Shell 命令可为 hadoop 用户增加管理员权限，方便部署，避免一些对新手来说比较棘手的权限问题，执行：Shell 命令如下图，找到 root ALL=(ALL) ALL 这行（应该在第98行，可以先按一下键盘上的 ESC 键，然后输入 :98 (按一下冒号，接着输入98，再按回车键)，可以直接跳到第98行），然后在这行下面增加一行内容：hadoop ALL=(ALL) ALL （当中的间隔...

原创 项目如何介绍

谈谈XXX项目!   分析：考官通过看你的简历或者你的介绍来了解你所做的项目，那么考官肯定想更详细的了解您的项目，看是不是与你的简历写的项目经验一致。也就是考核你是否具有真实的项目经验。一般来说，在你的简历至少有一个重点项目，放在简历项目经验栏的第一位。把项目的业务功能描述清楚。在这里你就是重点谈一个项目就可以了。从下面几个方面来进行陈述1． 用一句话简述项目2． 详细的列出项目实现的功能3． 说...

原创 再次NICE!

原创 hadoop节点nodemanager启动失败

在正常启动的hadoop的时候系统没有报错，但是JPS查看进程的时候发现缺少了节点管理器，查看后台的日志进程...问题：发现如下错误：FATAL org.apache.hadoop.yarn.server.nodemanager.NodeMana ger：启动NodeManager时出错  org.apache.hadoop.yarn.exceptions.YarnRuntimeException...