- 博客(21)
- 收藏
- 关注
RSS订阅原创 sqoop
1 sqoop是Apache 提供的工具，用于hdfs和关系型数据库之间数据的导入和导入2 可以从hdfs导出数据到关系型数据库，也可以从关系型数据库导入数据到hdfs解压Sqoop de 安装包在lib利用指令操作1查看mysql所有数据库sh sqoop list-databases --connectjdbc:mysql://192.168.150.13...
2019-11-29 16:22:48
137
原创 map与flatMap,reduce与reduceByKey、sortBy和sortByKey
1、map与flatMap的区别两者的区别主要在于action后得到的值例子：import org.apache.spark.{SparkConf, SparkContext}object MapAndFlatMap { def main(args: Array[String]): Unit = { val sc = new SparkContext(new Spar...
2019-11-28 09:22:55
692
原创 线程的启动的两种方法，Runnable接口，run（）的调用
实现并启动线程有两种方法1、写一个类继承自Thread类，重写run方法。用start方法启动线程2、写一个类实现Runnable接口，实现run方法。用new Thread(Runnable target).start()方法来启动多线程原理：相当于玩游戏机，只有一个游戏机（cpu），可是有很多人要玩，于是，start是排队！等CPU选中你就是轮到你，你就run（），当CPU的运行的时间片执...
2019-11-14 10:14:03
1994
原创 Logstash 数据连接ElasticSearch
LogStash的配置文件： 检测一个文件的变化，并采集变化（增加）的数据vi filetoes.confinput { file{ path => "/root/apps/logstash-5.6.16/testFile.txt" } }output { elasticsearch { hosts => ["hdp-4:9200"] ...
2019-11-08 14:53:22
931
原创 Logstash安装配置
1、Logstash：flume2、安装：解压配置功能：采集日志文件（1）控制台输入和控制台输出input { stdin { } } output { stdout {} }命令：bin/logstash -e 'input { stdin { } } output { stdout {} }'在控制台上写helloyou会被Logstash采集到...
2019-11-05 16:14:22
123
原创 ElasticSearch常用api
------Create 增POST /索引/类型/ID{ //参数}curl -XPOST 'http://hdp-1:9200/search2/article2/1' -H 'Content-Type: application/json' -d '{ "title": "Test1", "tags" : "test", "summary" : "test",...
2019-11-05 15:00:13
73
原创 ElasticSearch安装配置、集群搭建
解压即可如果之前一直是root用户操作，会报错，因为es默认不允许在root用户使用增加zpark用户useradd zpark给zpark用户设置密码passwd zpark在root用户下的cd /chown -R zpark:zpark /rootchmod -R 755 /root/apps/jdk1.8.0_201chown -R zpark /...
2019-11-05 14:02:34
127
1
原创 抖音时钟罗盘
HTML:<!DOCTYPE html><html lang="en"> <head> <meta charset="UTF-8"> <meta name="viewport" content="width=device-width, initial-scale=1.0"> <meta http-...
2019-10-28 18:54:45
517
原创 Java常用的几种集合， Map集合，Set集合，List集合
Map接口常用的一些方法（无序的）size() 获取集合中名值对的数量put(key k, value v ) 添加元素get( k ) 获取键对应的值remove( key)键对应的元素clear()清空contains(key) 查询集合中是否包含某个K contains(value) 查询集合中是否包含某个value值keySet()获取所有的键va...
2019-10-24 09:24:33
227
原创 采集数据到HDFS
采集数据到HDFS安装flume在虚拟机hdp-1中,打开SFTP-hdp-1窗口,将fllume压缩包导入到虚拟机hdp-1的/root/目录中.解压flume压缩包到/root/apps/下,命令:tar -xvzf apache-flume-1.6.0-bin.tar.gz -C apps/并将apache-flume-1.6.0-bin文件夹重命名为flum...
2019-10-23 09:29:30
807
原创 大数据项目流程1
1、frame打成jar包上传到linux集群、通过java -jar，测试是否运行成功：hdp-2:81812、启动nginx目的是为了产生日志，还有负载均衡和反向代理以后更新，重点是配置文件cd /usr/local/nginx/conf/修改nginx.conf文件vi nginx.conf#user nobody;worker_processes 1...
2019-10-23 08:50:35
299
原创 编辑页面
1.点击编辑，页面跳转到edit.htmlreturn [ '<a class="btn active" href="javascript:;" οnclick="School.edit(\'ID\')">编辑</a>', '<a class="btn active" href="#">档案&...
2019-09-24 09:52:23
949
原创 springmvc常用注解标签详解
1、@Controller在SpringMVC中，控制器Controller负责处理由DispatcherServlet分发的请求，它把用户请求的数据经过业务处理层处理之后封装成一个Model，然后再把该Model返回给对应的View进行展示。在SpringMVC中提供了一个非常简便的定义Controller的方法，你无需继承特定的类或实现特定的接口，只需使用@Controll...
2019-09-19 09:42:45
97
原创 导入数据库信息
Bootstrap Tablepackage com.zpark.neimin.first.common;import java.util.List;public class BootstrapTable{ private int total; private List<?> rows; public BootstrapTable (int ...
2019-09-19 09:19:29
258
原创 加模板样式
LoginControllerpackage com.zpark.neimin.first.controller;import com.zpark.neimin.first.common.BaseResult;import com.zpark.neimin.first.common.BootstrapTable;import com.zpark.neimin.first.mode...
2019-09-19 09:08:04
147
原创 常见错误
端口号被占用1.可通过cmd ----》netstat -ano指令查看所有的端口占用情况C:\Users\Administrator>netstat -ano2.查看指定端口的占用情况C:\Users\Administrator>netstat -aon|findstr "被占用的端口号"3.查看PID对应的进程C:\Users\Administrato...
2019-09-19 08:45:11
88
原创 BootStrap用法
1、下载：https://getbootstrap.com/2.引用到自己工程中（复制粘贴（4.3.1 css/js））3<script src="https://cdn.staticfile.org/jquery/1.10.2/jquery.min.js"></script><script src="vendor/bootstrap-4....
2019-09-17 19:47:48
129
原创 jQuery
package com.zpark.neimin.first.dao;import com.zpark.neimin.first.model.User;import org.springframework.stereotype.Repository;@Repositorypublic interface UserMapper { User selByName(String...
2019-09-17 19:18:05
77
原创 jquery
<script type="text/javascript"> var Login = function(){ return { /** * 点击按钮-----获取form表单中的数据----放到d中 */ getLoginData: function ()...
2019-09-17 09:09:38
111
原创 frame框架初步解析
需求：在登陆界面输入帐号密码，点击登陆按钮之后，在数据库查询账号密码是否正确。正确即登陆成功，错误即无法登陆。简单分析：在html页面表单输入账号密码，使用serializeArray()方法获取表单全部信息。在按钮提交事件中通过ajax方式提交到指定url，在controller类中进行接收帐号密码，并通过mybatis技术在数据库中查询是否正确。最后把信息返回到回调函数。步骤分析：...
2019-09-16 15:36:29
184
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人