纸上得来终觉浅,绝知此事要躬行

“交流、互助、提升”

排序:
默认
按更新时间
按访问量

学习Docker之Docker初体验---SpringBoot集成Docker的部署、发布与应用

准备工作 会一点springboot 不会没关系,花十几分钟补一下Quick-SpringBoot 会一点Maven 不会没关系,花几分钟补一下Maven的快速应用 会一点Linux命令 不会没关系,花十几分再补一下Linux菜鸟教程 一台联网的Centos机器 安装Dock...

2018-01-18 23:21:12

阅读数:1641

评论数:1

最近和未来要做的事

自己在大学的时候就想把学的一些东西整合在一个项目里,对自己也好对别人也好,能用的直接复制过去用,一是对知识点的总结,二是为了不重复造轮子。但是苦于自己懒,慢慢的就忘掉了,前段时间不知道什么原因,突然想起了这件事,就在平时的业余时间整理了一下放在了Github上

2017-06-17 18:05:37

阅读数:904

评论数:0

一次排查Java项目内存泄漏的过程

发现问题 公司自己维护的服务三四个,有的服务还分多个节点,自己也有几个私人服务器,所以为了能实时知道各个服务器的情况,就使用ServerStatus做了个云探针,功能很简单,能实时的监控每个服务器的内存、cpu、硬盘、流量的使用情况,如下 虽然只有几个指标,但是已经能让我全面的掌握各服务的...

2018-08-17 15:04:25

阅读数:176

评论数:1

用springboot+vw-crawler轻松抓取CSDN的文章

使用springboot+vw-crawler轻松抓取CSDN的文章 有关VW-Cralwer的介绍可以看这里,简单轻便开源的一款Java爬虫框架。 下面结合比较流行的框架SpringBoot抓取CSDN的数据(有关的Spingboot的使用可以参考这里) 配置POM 使用Spring...

2018-07-22 11:19:34

阅读数:112

评论数:0

一套简单的java爬虫框架VW-Crawler发布啦!!!

VW-Crawler 背景 自己一直对爬虫比较感兴趣,大学的毕业论文也是一个爬虫项目(爬教务处信息,然后做了个Android版教务管理系统,还获得了优秀毕业设计的称号),自那以后遇到自己感兴趣的网站就会去抓一下。前段时间工作上需要一些JD信息,我就从网上找了个开源的爬虫框架WebMagic...

2018-07-19 22:17:10

阅读数:123

评论数:0

发布自己的jar到Maven Repository公服上

前段时间自己写了一个简易的Java版爬虫框架。如果想把这个框架完善还是需要大家的力量,如果每次使用都要从Gihub上下载源码岂不是很麻烦?因为自己的项目用的是maven来管理jar包,那么就试试把这个爬虫框架放到公服仓库上去吧! 注册Sonatype账号 使用过Jira的用户就很熟悉了,事务与...

2018-07-08 23:00:44

阅读数:352

评论数:0

一张图带你理解和实现RabbitMQ的延迟队列功能

开头 先熟悉下面会用到的一些名词~ exchange: 交换机 routingkey: 路由key queue: 队列 exchange和queue是需要绑定在一起的,然后消息发送到exchange再由exchange通过routingkey发送到对应的队列中。 (不是这张图~~~...

2018-06-14 21:06:54

阅读数:257

评论数:0

搭建spark on yarn 集群

两台用的都是ubuntu IP 主机名 192.168.22.137 spark-master 192.168.22.150 spark-slave1 更改主机名 确定每个节点的主机名与它在集群中所处的位置相同 如果不同,需要修改vi /e...

2018-05-03 17:46:24

阅读数:244

评论数:0

学习Docker之使用docker-compose编配一整套服务

使用docker compose可以一键完成“一整套”服务的搭建也可以完成服务集群化部署。  这两天在用python写一个爬虫,数据暂时保存在本地的mongodb数据库,到部署的时候,发现线上的服务器没有python环境和mongodb,这个时候立马就想到了Docker!  最初的思路...

2018-04-14 11:08:40

阅读数:328

评论数:0

通过shell脚本和企业微信实现报警功能(完整版)

最终效果如图(GIF太大了 就截了两张图) #!/bin/sh expireTime=7200 dbFile="db.json" corpid=xxx corpsecret=xxx touser="xxx&quot...

2018-03-18 00:14:18

阅读数:813

评论数:0

通过shell脚本和企业微信实现实时报警功能

工作中,我们会有一些应用跑在线上服务器,那么这些应用出现问题,如内存、CPU超过阈值之后我们必须要在第一时间知道,第一时间处理这些问题,尽可能的让用户感受不到应用的异常。 有的公司有运维人员,那么恭喜了,运维自己应该会有一套监控体系,作为开发者就可以专心的攻克业务逻辑;但是有的公司可能没有,...

2018-03-11 23:03:49

阅读数:1181

评论数:1

我的ElasticSearch使用笔记

最新的整理在这里 https://github.com/vector4wang/elasticsearch-quick 以下基于Elastic 5.4版本 部署 这里使用Docker部署 获取镜像docker pull elasticsearch:5.4 启动 docker r...

2018-03-04 22:40:47

阅读数:454

评论数:0

学习Docker之Dockerfile的命令

使用Dockerfile去构建镜像好比堆积木、使用pom去构建maven项目一样,有异曲同工之妙,下面就把Dockerfile中主要的命令介绍一下。 组成部分 部分 命令 基础镜像信息 FROM 维护者信息 MAINTAINER 镜像操作指令...

2018-02-01 23:49:58

阅读数:258

评论数:0

学习Docker之Docker、容器和镜像的简介和常用命令

第一篇通过部署SpringBoot项目来见识到了Docker的强大点我,接下来就来简单聊聊什么是Docker? 什么是Docker 镜像与容器 Docker常用命令 问题 小王在工作之余接了个私单,功能很简单,开发完之后只要在本地将程序跑起来,就能完成客户的需求。于是小王每天晚上花个一...

2018-01-21 23:45:11

阅读数:267

评论数:0

微信短链接秒进支付宝拆红包的逆向分析与代码获取(不用写任何代码)

最近支付宝红包风靡全国,真的是谁的群多并且发的比其他人早就能很赚一笔,目前想要拿到红包有以下两种途径 复制别人的邀请码,打开支付宝 用支付宝扫描别人的红包二维码 有人感觉很麻烦于是就做了在微信里点击短链接即可自动跳转到支付宝领红包的方式,理想情况下真的是在1秒以内。下面是一个演示图: ...

2018-01-11 23:41:32

阅读数:21741

评论数:1

Springboot与Selenium合体变蜘蛛爬企查查

最近工作上需要一些企业的详细的数据,工商信息啦,基本信息啦,还有一些关系图(投资关系、人物图谱)之类的,然后我来负责从企查查上弄些数据。 强调:下面只是快速实现数据抓取的思路,没有详细的代码,同时也拒绝伸手党。   现实中,一些工商信息网站会被无数的爬虫“骚扰”,所以网站的反爬虫策略也是越来越...

2018-01-09 23:27:57

阅读数:1499

评论数:3

平静的2017,不安的2018

距离上次写博客已经有近四个月的时间了,没有写的原因有以下几点:

2018-01-01 23:38:41

阅读数:288

评论数:0

使用生产者消费者解决海量数据的处理与相关优化

最近一直在优化海量数据(几千万)处理这一块。我使用的是java提供的ExecuterPool线程池来实现的,这几天在研究如何使用生产者和消费者模式去解决类似处理数据的问题,下面是思考与实现的过程与思考。

2017-08-21 00:50:09

阅读数:487

评论数:0

微信小程序娱乐---哇哦窝

自从去年微信小程序诞生到现在已经有段时间了,个人还是挺看好小程序的,去年的时候就打算玩一玩小程序,但是一直都抽不出时间。自从上次弄了台阿里云ECS之后,就又有了玩玩小程序的欲望,于是花了两个晚上的时间玩了玩,算是开发完成了。

2017-07-30 17:23:10

阅读数:591

评论数:0

CSDN博客迁移至Hexo之Html2Md服务(专为csdn打造)

接着上篇CSDN博客迁移至Hexo之同步CSDN博文到本地MD文件 此篇介绍下html2md服务,我将上篇遗留的问题—csdn中的代码高亮转换失败的问题修复了下,结果还算满意,自己搭了服务,大家可以试一试,玩一玩,有问题可以私信我~

2017-07-23 16:30:21

阅读数:580

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭