犀利的蛙
码龄15年
求更新 关注
提问 私信
  • 博客:98,952
    社区:1
    问答:4,915
    103,868
    总访问量
  • 102
    原创
  • 16
    粉丝
  • 127
    关注
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:新加坡
加入CSDN时间: 2010-09-11

个人简介:安安

博客简介:

Hello World

查看详细资料
个人成就
  • 获得17次点赞
  • 内容获得5次评论
  • 获得72次收藏
  • 博客总排名291,957名
创作历程
  • 2篇
    2021年
  • 1篇
    2020年
  • 1篇
    2018年
  • 1篇
    2017年
  • 3篇
    2016年
  • 23篇
    2015年
  • 38篇
    2014年
  • 75篇
    2013年
  • 30篇
    2012年
  • 1篇
    2011年
  • 1篇
    2002年
成就勋章
TA的专栏
  • 生活感悟
    3篇
  • Eclipse 插件安装以及应用
    11篇
  • JAVA 基础
    42篇
  • ubuntu
    1篇
  • javascript
    5篇
  • jquery
    1篇
  • 项目经验
    1篇
  • mysql
    5篇
  • 数据库连接池
    2篇
  • hibernate
    6篇
  • struts
    3篇
  • 开源插件
    5篇
  • Exception
    2篇
  • Environmental
    2篇
  • ORACLE
    9篇
  • SVN
    1篇
  • 代码管理
    1篇
  • SAP/BO的Crystal Reports
    1篇
  • 博文推荐
    12篇
  • 设计模式/原则
    6篇
  • 服务器
  • plsql
    6篇
  • Spring
    11篇
  • 网络编程
    1篇
  • JDBC
    1篇
  • 多线程
    10篇
  • 智力考场
    6篇
  • 数据库笔试
    1篇
  • 框架集合
    2篇
  • webservice
    3篇
  • 源码赏析
    9篇
  • 算法和数据结构
    10篇
  • JVM
    7篇
  • 缓存
    8篇
  • IO/NIO
    1篇
  • JMS
    7篇
  • zookeeper
    1篇
  • linux 笔记
    2篇
  • maven
    1篇
  • soa
    1篇
  • redis
    5篇
  • spark
    6篇
  • 数据可视化
  • hadoop
    3篇
  • hive
    1篇

TA关注的专栏 3

TA关注的收藏夹 0

TA关注的社区 1

TA参与的活动 0

兴趣领域 设置
  • 大数据
    hadoophive
创作活动更多

新星杯·14天创作挑战营·第13期

这是一个以写作博客为目的的创作活动,旨在鼓励大学生博主们挖掘自己的创作潜能,展现自己的写作才华。如果你是一位热爱写作的、想要展现自己创作才华的小伙伴,那么,快来参加吧!我们一起发掘写作的魅力,书写出属于我们的故事。我们诚挚邀请你们参加为期14天的创作挑战赛!注: 1、参赛者可以进入活动群进行交流、互相鼓励与支持(开卷),虚竹哥会分享创作心得和涨粉心得,答疑及活动群请见:https://bbs.csdn.net/topics/619781944 【进活动群,得奖概率会更大,因为有辅导】 2、文章质量分查询:https://www.csdn.net/qc

77人参与 去参加
  • 最近
  • 文章
  • 专栏
  • 代码仓
  • 资源
  • 收藏
  • 关注/订阅/互动
更多
  • 最近

  • 文章

  • 专栏

  • 代码仓

  • 资源

  • 收藏

  • 关注/订阅/互动

  • 社区

  • 帖子

  • 问答

  • 课程

  • 视频

搜索 取消

flink 1.14 异步 join 基础分析

自定义AsyncTableFunction 顺序原理
原创
博文更新于 2021.12.16 ·
2079 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

flink 小技巧记录

一、背景 flink做etl、大宽表、统计过程中有些小细节可以尝试优化,这里简单记录下:二、场景 2.1 允许延迟的数据同步。比如线上订单库binlog同步到查询库,或者简单处理进入分析库,让分析师直接查询明细. 如果吞吐要求大一点,可以开启小批处理。# 这是SQL 参数,具体的根据业务自己调节table.exec.mini-batch.enabled: 'true'table.exec.mini-batch.size...
原创
博文更新于 2021.08.26 ·
2344 阅读 ·
0 点赞 ·
1 评论 ·
6 收藏

spring +ehcache 持久化数据,重启恢复

今天有个需求,要求用户登录的时候展示一些信息,但是这些信息跨系统反复调用,比较慢,因此做数据缓存。有些系统不大,就ehcache 就可以了。但是因为有个子系统发布比较平凡,不希望重启之后缓存数据丢失,因此做持久化处理。框架是jfinal+spring+ehcache ,东西没啥区别。 下面是遇到的几个问题: 1.同一个类里面,A方法 ...
原创
博文更新于 2021.01.27 ·
4830 阅读 ·
2 点赞 ·
1 评论 ·
1 收藏

PL/SQL 游标的使用(四)

 介绍:DML / Select执行时的内存空间游标(cursor)是指向这个内存空间的指针. 属性:%ROWCOUNT %FOUND %NOTFOUNF %ISOPEN 隐式游标 / 显式游标(自定义游标名称)SQL%ROWCOUNT / mycur%ROWCOUNT 显示游标的使用步骤:1.定义游标2.打开游标3.操作游标4.关闭...
原创
博文更新于 2013.06.26 ·
164 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hibernate 自定义结果集

hibernate  中,有时候需要比较复杂的业务,比如需要从很多张表里面抽取数据,这时候就需要我们自定义结果集了。 假设:我需要分别从 7张表里面 分别取 a,b,c,d,e,f,g,h 字段。在原先的映射文件不满足的情况下,我建立了含有这些字段的实体bean. 1.Dao 的写法: String sql = "...";Session session = supe...
原创
博文更新于 2013.10.24 ·
375 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

spring+activemq - demo3-topic 持久化订阅

一、序言       demo2 留下了两个问题:      1.我们利用demo2 的配置,在queue 模式下 连续发送10W消息出现出现状况。      2.topic 模式下,消费者重启时间段收不到监听的信息怎么办? 二、问题解析:        1.测试 发送10W消息,中途会出现         socket: tcp://localhost:61616...
原创
博文更新于 2015.01.08 ·
416 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

多线程(三)--线程安全与锁

 一、引言:        JAVA 是一个多线程并发的语言,现在只要有点经验的JAVA程序员,对于多线程、并发等词汇相信并不陌生,但是对于具体的运行原理,很多也都没深入,这里我也分享一部分自己的经验,主要对于线程安全以及锁的一些机制原理,进行介绍。关于线程的基本知识点,前面也说过了,可以了解一下。 1.1 什么是线程安全?      这里我借“JAVA 并发实践”里面的话:当多...
原创
博文更新于 2014.03.13 ·
647 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

线程池 allowCoreThreadTimeOut 小知识

关于线程池:allowCoreThreadTimeOut(true) 的小知识点1.背景 检查别人程序发现堆内存2G,但是常驻内存res到3.2G了,经过一系列操作发现线程特别多(1000+), 当然有重复创建线程池的问题。除此之外,由于是数据域应用,为了加速查询,会定时把数据库数据load到缓存,还不部分是应付也个页面N次(20+)查询,希望能支持稍微高一点的并发响应。所以连接池各方面设置比较大。(线程会持续吃RES内存,不释放,默认1M)2.操作 期望线程数减少,定时任务用了线程线程之后,
原创
博文更新于 2020.06.16 ·
10102 阅读 ·
1 点赞 ·
0 评论 ·
9 收藏

springmvc 入门 问题

发布问题 2013.04.26 ·
0 回答

strust2 通过 属性赋予值,action 想获得list 对象集合,怎么获取

发布问题 2012.11.06 ·
0 回答

Cloudera-hadoop 离线安装

一.序言     这里将介绍Cloudera-hadoop(CDH) 5.5.1的安装,简单布置     我环境是:CentOS 6.5   mysql5.6   jdk1.7     机器3台:hadoop1006,hadoop1007,hadoop1008     主要是内存配置:主节点要求 最好10G ,如果你东西都装主节点。     其他:已经打通ssh 免登陆,S...
原创
博文更新于 2018.06.20 ·
243 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hive udf 唯一bigInt 生成器

一、背景        mysql数据由于自增的bigint 主键,会插入更快,因为能持续往文件末尾插入嘛,因此需要这个东西。        然后呢,服务端有专门生产id的接口,但是数据中心批量插入,肯定会拉暴他们,不让我们一起玩,只能自己玩。 二、方案        1.redis 获取数据段,程序内部自增。        问题:要用外部redis麻烦,而且要持久化...
原创
博文更新于 2018.03.08 ·
1199 阅读 ·
1 点赞 ·
0 评论 ·
3 收藏

snappy,lz4 的对比

1.介绍bzip2:一个完全免费,免费专利和高质量的数据压缩LZ4 :非常快速的压缩算法LZHAM :无损压缩数据库,压缩比率跟LZMA接近,但是解压缩速度却要快得多。LZMA :7z格式默认和通用的压缩方法。LZMAT :及其快速的实时无损数据压缩库Snappy :快速压缩和解压缩ZLib :非常紧凑的数据流压缩库ZZIPlib:提供ZIP归档的读权限这里主要看看snappy 和LZ4 的对比...
原创
博文更新于 2017.09.25 ·
7924 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

spark shuffer介绍,和操作

一.序言     简单copy下来的,记录一下,翻译有问题 请指出。 Shuffle operations<!--?xml version="1.0" encoding="UTF-8" standalone="no"?-->Certain operations within Spark trigger an event known as the shuffle. ...
原创
博文更新于 2016.09.25 ·
470 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

spark-sql应用

一.序言     这里介绍一下我们对spark-sql 的一些简单应用。  二.业务描述     我们需要对大量数据进行分析,包含历史的数据,传统数据库即使用分库分表的中间件,也只能满足基本查询,对于多表关连的分析是不太友好的,因此我们将数据放到hadoop集群,但是并不是所有的JAVA 程序员都能对hadoop 或者hive 进行开发,为了屏蔽这种差异,因此我们在几个分析软件...
原创
博文更新于 2016.03.03 ·
285 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

spark-sql应用

一.序言     这里介绍一下我们对spark-sql 的一些简单应用。  二.业务描述     我们需要对大量数据进行分析,包含历史的数据,传统数据库即使用分库分表的中间件,也只能满足基本查询,对于多表关连的分析是不太友好的,因此我们将数据放到hadoop集群,但是并不是所有的JAVA 程序员都能对hadoop 或者hive 进行开发,为了屏蔽这种差异,因此我们在几个分析软件...
原创
博文更新于 2016.03.03 ·
285 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

sqoop 数据导入脚本

一.序言     简单分享个sqoop 从mysql 集群导入到hdfs hive-table 里面进行分析的例子。     sqoop1.4.6,hadoop2.7,hive1.2.1 ,因为 环境原因,sqoop 没有升级到2~。~ 二.简单步骤    1.base_import.sh :  集中配置一些链接信息,和公共参数,并引入其他脚本执行    2.base_c...
原创
博文更新于 2015.09.29 ·
723 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

spark笔记2-spark-sql 程序

一.序言     这里介绍用idea 跑程序去连接spark-sql->hive-metastore 的小例子,关于服务器上得保证spark-sql/spark-shell 正确执行,然后再用本地的程序去实现,我这里版本用的spark1.4.1+hive1.2.1+hadoop 2.7.1. 二.连接代码     结合笔记1的代码     2.1 maven 配置:...
原创
博文更新于 2015.09.14 ·
229 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

数据可视化:Zeppelin+spark

一.序言     最近需要常见数据可视化的东西,主要是方便spark-sql ,方便内部操作方便,因此选择了个数据可视化的,hue 和 zepplin ,hue 是比较强大的,但是spark 方便也是孵化状态,是非apache 的, 先尝试下 Zeppelin 部署,最新0.6的不稳定,编译不过去,就用0.5吧。     下载地址:https://github.com/apache/i...
原创
博文更新于 2015.09.09 ·
537 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

spark 笔记1 -- spark程序连接

一.序言     spark 现在用得比较多了,但是开始连接spark 的的时候有些小问题,这里简单记录一下,  我用的spark1.4.1  hadoop2.7 hive1.2.1, 目的想用spark-sql 连接 hive 的metastore,关于集群配置 这暂时不介绍了,例子很多,这里仅仅记录java/scala 连接部分。 二.连接配置     2.1 maven ...
原创
博文更新于 2015.09.08 ·
357 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏
加载更多