Liyatao_BeiJing-CSDN博客

原创 Hadoop虚拟机完全分布式安装一 (hadoop集群、hbase集群、sqoop、phoenix)

公司决定将现有数据存储，数据清洗，离线分析，在线实时查询迁移到hadoop(数据量300亿条左右)。经调研后发现需要使用hadoop集群，hbase集群，sqoop,phoenix相关技术。环境搭建demo使用的是虚拟机，系统为ubuntu,所使用软件版本为：jdk-1.8、hadoop-2.7.3、hbase-1.2.6、sqoop-1.4.7、phoenix-...

2018-11-29 17:55:13 367

原创 Jquery常用语法(数组转字符串、去除空格trim、截取￥后所有字符串、jquery ajax、url截取参数)

数组转字符串，需要将数组元素用某个字符连接成字符串，示例代码如下： vara, b;a = newArray(0,1,2,3,4);b = a.join("-"); 字符串转数组 //实现方法为将字符串按某个字符切割成若干个字符串，并以数组形式返回，示例代码如下：vars = "abc,abcd,aaa";ss = s.split(",");// 在每个逗号(,)处进...

2018-10-25 15:42:00 769 1

原创 Mysql删除重复数据、比较两个表数据

#1.删除t_discredit_company_info表重复数据(t_discredit_company_info表数据重复)DELETE FROM t_discredit_company_info WHERE id IN (SELECT * FROM (SELECT id FROM t_discredit_company_info WHERE (company_id,attri...

2018-10-25 15:20:59 2304

原创 Linux 使用nexus搭建maven私服

1.下载 nexuswget https://sonatype-download.global.ssl.fastly.net/nexus/oss/nexus-2.11.2-03-bundle.tar.gz 2.创建目录并解压mkdir /usr/nexustar -zxvf nexus-2.11.2-03-bundle.tar.gz -C /usr/nexuscd...

2018-10-25 15:15:21 265

原创 Java多线程及synchronized关键字用法

线程的五种状态以及之间的关系1.简单的多线程例子package Demo;public class ThreadTest extends Thread{ public void run(){ for (int i = 0; i < 100; i++) { System.out.println("Thread run :"+i); } } public static vo...

2018-04-09 13:23:18 212

原创 Docker安装及应用(使用 yum 安装 CentOS 7下)

使用 yum 安装（CentOS 7下）Docker 要求 CentOS 系统的内核版本高于 3.10 ，查看本页面的前提条件来验证你的CentOS 版本是否支持 Docker 。1.通过 uname -r 命令查看你当前的内核版本uname -r2.使用yum安装Dockeryum -y install docker3.启动Dockerservice docker start4.测试运行 hel...

2018-04-09 13:16:43 410 1

原创 hadoop 开发环境搭建（windows \ eclipse）

搭建开发环境所需文件已经上传到 hadoop开发环境搭建所需文件将hadoop-2.6.2.tar.gz 解压到 D 盘配置环境变量(系统变量) HADOOP_HOME = D:\hadoop-2.6.2配置环境变量(系统变量) HADOOP_USER_NAME = (服务器hadoop的用户名)将hadoop-eclipse-plugin-2.2.0.jar 放到 eclipse plugi...

2018-04-09 13:09:19 537

转载 PostgreSql 增删改查

->> 操作符是查询JSON对象的某个字段并返回文本，用数字也可以当作数组的索引，但仍返回文本。跟 ->> 类似的还有 -> 操作符，返回不转文本的内容，可以用它来导航搜索JSON对象::类型转换增加语句：INSERT 语句用于向表中添加行：INSERT INTO weather VALUES ('San Francisco', 46, 50, 0.

2016-03-29 17:26:56 4957

原创 mongoDB基础操作，对表的常用操作

1.选择数据库use 数据库名2.查看当前数据库下所有表show collections3.创建数据表db.createCollection("stuDemo")4.修改数据表名db.stuDemo.renameCollection("studentTest")

2016-03-18 12:05:47 710

原创使用jquery获取table选中行的其他列的值

由于今天需要写一个：在table中，根据按钮选中的行，获取同一行其他的值传到后台controller的功能。刚开始也琢磨了一段时间，然后写出来了。这是我写的一个这个功能的小例子，记录一下。$(document).ready(function(){ $(".btn").click(function(){alert($(this).parent().parent().find(

2015-11-23 15:28:45 8120

原创 java开发中常用的日期时间工具类 DateUtil

java开发中常会用到的日期时间工具类。package org.demo;import java.text.DecimalFormat;import java.text.ParseException;import java.text.SimpleDateFormat;import java.util.Calendar;import java.util.Date;import j

2015-11-20 18:01:33 2131

原创 mysql 查询某表的外键关系

1. use INFORMATION_SCHEMA;2 . select TABLE_NAME,COLUMN_NAME,CONSTRAINT_NAME,REFERENCED_TABLE_NAME,REFERENCED_COLUMN_NAME from KEY_COLUMN_USAGE where table_name = '要查询的表名';查询结果：

2015-11-13 16:17:04 644

原创 Spring data jpa 浅析

Spring Data是一个用于简化数据库访问，并支持云服务的开源框架。其主要目标是使得对数据的访问变得方便快捷，并支持map-reduce框架和云计算数据服务。Spring Data JPA 是Spring Data的一个子项目，Spring Data JPA是由Spring提供的一个用于简化JPA开发的框架。Spring Data JPA可以极大的简化JPA的写法，可以在几乎不用写实现

2015-11-11 14:56:45 616

原创 html js 校验文本框设置span颜色字体

1.给span设置提示文字 ,设置文字大小，字体颜色var name=document.getElementById("name").value;if(name=''){document.getElementById("warring").innerHTML='姓名不能为空';document.getElementById("warring").style.fontSize='12p

2015-09-01 11:42:13 12587

原创点击文字链接提交Form表单

点击链接文字提交表单的方法，代码超简单，只需把链接地址改为：javascript:welcomeform.submit();就可以了，如果你能表单判断的话，可以这样：onclick="checkform"提交，然后在checkform里加入表单判断语句就可以了。点击链接提交表单 - liyatao提交

2015-08-28 14:53:12 1414

原创 html checkbox的使用

1.判断checkbox是否选中if(document.getElementById("checkboxID").checked){ alert("checkbox is checked");}2.如果有两个表单，每个表单里都有一个checkbox，并且这两个checkbox的 id 和 name都相同，可以使用通过表单的name和id来确定要获取哪一个表单下的元素。

2015-08-25 14:04:39 1577