- 博客(21)
- 收藏
- 关注
RSS订阅原创 数据库连接池->>重入锁
看到一个重入锁的介绍很有意思：一个有娃的父亲正在打水，他的娃也到井边了，所以女凭父贵直接排到最前面打水，羡煞旁人了。以上这个故事模型就是所谓的公平锁模型，当一个人想到井边打水，而现在打水的人又不是自家人，这时候就得乖乖在队列后面排队。事情总不是那么一帆风顺的，总会有些人想走捷径，话说看井人年纪大了，有时候，眼力不是很好，这时候，人们开始打起了新主意。新来打水的人，他们看到有人排队打水...
2019-08-27 16:06:55
420
原创 json和GSON转换方式对比
问题描述： 普通的arraylist在转换json格式的时候，出现错误，多了字段 对象：public class testBean { private int id; private String name; public int getId() { return id; } public ...
2019-07-10 10:56:41
322
原创 大数据_hive和sparksql的对比
spark sql可以使用hive里面的表，并做操作，并且会很快但是需要做如下配置1.hive-site.xml hive的元数据配置文件要拷贝到spark的conf路径下2.spark的启动要加上--jars mysql连接jar包的路径 如果还是出现错误：Exception in thread "main" java.sql.SQLException: No sui...
2018-08-28 15:12:36
4669
原创 大数据_实时数据处理（Flume+Kafka+Sparkstreaming）
版本：kafka的版本:kafka_2.11-0.11.0.0spark的版本：spark-2.3.1-bin-hadoop2.6flume的本班：apache-flume-1.7.0-bin实现目的： 采集实时生成的日志数据，通过flume将数据传递给kafka 做缓冲，由spark streaming做数据处理入库具体代码的实现：可以通过Java测试代码生成日志flume...
2018-08-02 22:35:34
2485
转载 消除Linux中的烦人的滴滴声以及sublimean操作linux_小记
转载：https://blog.csdn.net/z1x2c34/article/details/693854851.消除linux客户端中bash的滴滴声编辑/etc/inputrc文件把#set bell-style none注释去掉重新登录即可2.去掉vim中的滴滴声编辑/etc/vimrc文件添加 set noeb vb t_vb=保存退出后立即生效常常...
2018-07-29 20:47:13
677
原创 大数据_本地与远程(测试篇)
软件包和代码的位置：链接：https://pan.baidu.com/s/1hmm2f-NkkHuHbhlnmo0iew 密码：vjwywordcount：1:关于hadoop里面的参数BooleanWritable：标准布尔型数值ByteWritable：单字节数值DoubleWritable：双字节数FloatWritable：浮点数IntWritable：整型数，类in...
2018-07-18 23:38:58
553
原创 大数据_Flume
大数据_FlumeFlume的安装 Flume的介绍 Flume的测试 Flume的自定义拦截器 Flume入门视频位置 Flume的安装 1.解压 tar -zxvf /home/flume/big...
2018-07-18 17:19:44
823
原创 大数据_离线数据处理
大数据_离线数据处理流程介绍 安装搭建 离线流程测试 可能遇见的问题 搭建及入门视频流程介绍mysql和oracle处理数据太慢，着急想要处理结果，搭建个大数据环境处理吧，不使用快速搭建平台环境 centos7.4 ...
2018-07-17 21:44:29
1250
原创 数据处理流程_Kettle
数据处理流程_Kettlekettle的优势 kettle的安装 kettle的使用 kettle的ETL流程例子kettle的优势 kettle是基于Java开发的jdk是必须安装的 kettle实现了数据流程拖拽实现的可视化界面 ket...
2018-04-13 18:17:14
3184
原创 网站开发_springboot
网站开发_springboot网站介绍 涉及到的相关知识点 网站源码网站介绍 做一个产品展示类的网站，涉及到的技术springboot、vue、redis 网站的样子不是很好看，界面自己调整 http://39.105.69...
2018-04-12 16:06:23
572
原创 大数据_搭建前的准备
大数据_搭建前的准备 在后台常用到数据的加工合并连接等操作形成新的表，里面会对应你想要的数据（维度等信息），在前台可以使用，一个月内的情况，近7天得情况等统计分析 。1>.最初你可能想通过web端用Java写计算公式得出结果（会...
2017-12-13 10:24:16
375
原创 Java操作linux脚本
近期在实现Java调用linux命令及脚本实现数据的批处理，文件的生成，下面记录下我所有遇见的问题1、Java调用shell脚本 RemoteShellExecutor 有很多实现demo我的脚本： #!/bin/bashsource /home/oracle/.bash_profileBATC=`sqlplus -s ia_user/ia_us
2017-10-31 18:04:00
2761
原创 ajax请求手机端加载问题
近期测试网站，发现手机版本的界面ajax加载不出东西，才想着了解一下ajax的原理。ajax:并非一种新的技术，而是几种原有技术的结合体 1.使用CSS和XHTML来表示。 2.使用DOM模型来交互和动态显示。 3.使用XMLHttpRequest来和服务器进行异步通信。 4.使用javascript来绑定和调用。关键XMLHttpRequest： XMLHttpReques...
2017-10-19 10:52:37
3682
原创 网站创建_前期知识准备
网站创建_前期知识准备 相关技术 常见问题相关技术 idea、vue、springmvc、springboot，ajax，redis常见问题打开域名直接跳转对应的请求或者页面，pom文件中配置<welcome-file-li...
2017-09-18 10:21:48
618
原创 shell调用oracle例子
数据抽取到临时表(存储过程test（num）执行该操作），在将表中数据写入到txt文件，最后将txt打包zip原先一直和代码打交道，做任何事都考虑的是使用代码完成，所以一开始就写了份代码： 1：读取配置配置文件（里面写了要操作的号）excel emptyimport jxl.Cell;im...
2017-09-14 13:21:51
4258
原创 excel表数据入库到oracle,并做数据映射操作
最近接到一个任务对800条数据做数据映射，800多条数据存储在oracle中的 zxy_department_text中，映射表在excel中zxy_department_test表 其子段EFFPREFECTURECODE没有值，需要对照一个文档，根据orgname查找excel文档和orgname匹配的中文名对应的码，例如第一个name可以拆出河北省，在excel中找到码为130
2017-08-03 18:45:26
1227
原创 kafka安装及测试
忘记在哪里看到的但是感觉解释的很好。zookeeper 协调转发 producers通过网络将消息发送到Kafka集群，集群向消费者提供消息kafka对消息进行归纳，即topic，也就是说producer发布topic,consumer订阅topic消息的发布（publish）称作producer，消息的订阅（subscribe）称作consumer，中间的存储阵列称作brok
2017-04-17 11:17:38
352
原创 关于jeesite字典表的实现，el自定义方法tld
用jeesite搭建项目发现字典表非常好用，速度的转义很快，看了下代码，简单的解释下，发现是是使用了el自定义方法tld1：在jsp的获取方式${fns:getDictList('yes_no')} 是否允许登录:
2017-04-10 11:02:38
7550
原创 spring mvc定时任务
当需要定时缓存，或者做一些定时任务时，最早可能是页面发请求（页面定时），还有就是在配置文件配置在web.xml但是遇到各种问题，例如初次启动默认多次加载多次（可解决），或者‘定时任务的下一层方法无法获取自动注入的service’（笨办法是通过参数传过去）等等，实在是费时费力spring mvc其实是自带定时任务配置的，并且可以使用自动注入实现方法 1》、在springmvc的配
2017-04-01 10:35:55
526
原创 虚拟机安装注意事项，以及nat和桥接模式的选择
背景：公司的ip和mac地址绑定，每次申请新ip比较麻烦，可以不上网，但是一定可以使用xshell连接 公司的ip网段是192.168.1.*环境：windows+虚拟机 centos7.4 192.168.1.128 master 192.168.1.129 hadoop01 192.168.1.130 hadoop02注意事项：...
2017-03-29 15:26:16
14190
原创 工作流activiti表结构
activiti工作流，在工作中正好使用上：先引入几篇文章：作者写的蛮好的 工作流扫盲：https://blog.csdn.net/zwk626542417/article/details/46592471 https://blog.csdn.net/zwk626542417/article/details/46594505 ...
2017-03-08 16:33:40
3111
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人