- 博客(50)
- 资源 (2)
- 收藏
- 关注
RSS订阅
原创 ElasticSearch(ES)JAVA批量更新批量插入——就一步
注：此Es处理方式是基于Spring-data 集成的1. 批量更新 public void allChangeCart(CartsSearchDTO cartsSearchDTO) { Assert.notNull(cartsSearchDTO, "对象不能为空！"); UpdateByQueryRequestBuilder updateByQue...
2019-07-19 11:53:28
20988
2
原创 SpringBoot集成Impala
直接上干货---------------1.由于impala的jar包可能无法直接maven下载，所以需要提前准备好jar 我是把jar直接放到nexus上方便pom文件引入 <!-- 驱动包 --> <dependency> <groupId>org.apache.impala</groupId> <artifactId>ImpalaJDBC</arti
2022-01-13 15:35:32
1894
转载 Linux系统Iptables拦截对外访问规则（模拟Kafka宕机）
转载于我的好大哥----松松 测试案例中有个场景是测试kafka宕机不可用的情况，由于考虑到kafka是很多应用公用的，直接停kafka服务可能会给别的应用带来问题，决定在要测试的应用所在机器上打开防火墙iptables服务，添加iptables对外访问过滤规则，测试完成后删除规则，关闭防火墙复原。 1、在filter表中追加一条规则，匹配到对外访问tcp协议9092端口时拒绝访问：iptables -t filter -A OUTPUT -p tcp --dp...
2020-06-11 09:35:26
923
原创 ES批量更新和如何添加新字段——LINUX
注：ES版本不同语法略有差距1.新增字段： 1.1. 操作命令： Curl -H ‘Content-Type:application/json’-X POST http://IP:9200/索引名/_mapping/索引类型?pretty-d ’{“properties”:{“新字 段名称”:{“type”:”数据类型”}}}’ 1.2.响应结果： 2.批量更新： 2.1.操作命令： ...
2020-06-11 09:29:59
2564
原创 设计模式——单例模式（Singleton）
单例对象（Singleton）是一种常用的设计模式。在Java应用中，单例对象能保证在一个JVM中，该对象只有一个实例存在。这样的模式有几个好处：a.某些类创建比较频繁，对于一些大型的对象，这是一笔很大的系统开销b.省去了new操作符，降低了系统内存的使用频率，减轻了GC压力c.有些类如交易所的核心交易引擎，控制着交易流程，如果该类可以创建多个的话，系统完全乱了。所以使用单例模式，才能保证...
2019-10-29 14:29:01
2066
1
原创 CSRF修复——看完的你多了一把刷子
近期项目对漏洞修复这一块比较看重，例举下CSRF的修复之路吧(提到我就心累)1、CSRF是什么 CSRF（Cross Site Request Forgery, 跨站域请求伪造）是一种网络的攻击方式，它在 2007 年曾被列为互联网 20 大安全隐患之一。其他安全隐患，比如 SQL 脚本注入，跨站域脚本攻击等在近年来已经逐渐为众人熟知，很多网站也都针对他们进行了防御。然而，对于大...
2019-09-05 13:15:02
6076
1
转载 一些缓存常用概念及解决方案
缓存都是部署在应用到数据库之间的，抗住流量高峰为数据库保驾护航。在分布式应用中，常见的问题有这些： 一、缓存穿透 描述： 缓存和数据库都没有的记录被频繁请求，缓存没有起到缓冲请求的作用，请求直接到达数据库。 解决方案： 1、应用中过滤数据库中绝对不可能出现的Key值，在到达缓存前拦截。比如：商品ID自增长从1开始，而外部请求频繁请求0或-1以及其他小于0的...
2019-07-15 21:21:37
478
转载 电商商城MQ业务补救方案
电商商城业务需要发送一些MQ消息，这些消息中部分消息根据业务要求需要进行发送失败的补救。 讨论出补救方案是在需要用到的MQ业务确认出哪些业务需要补救，这些业务中发送kafka消息时进行监听回传发送结果。当发送过程中出现异常导致发送失败时，记录下来保存到Mongo中。然后启一个定时任务执行器，定期从Mongo中根据Topic扫描出那些未处理待补救的记录，重新发送kafka消息，发送成...
2019-07-15 21:19:47
532
转载 基于MySQL的高性能高可用数据库集群部署方案
公司最近在研发电商品7.0产品，重新设计了商城的整体架构。一款产品要满足三高（高性能、高可用、高扩展）的要求，除了优秀的后端架构还得有优秀的数据库部署设计来做支撑。后端架构设计不在此篇博客描述范围内，主要说一下数据库的部署设计。 数据分类 整个商城系统可以拆分几大模块：用户、店铺、商品、订单、支付、物流，针对这些模块所存储的数据大致可以分为高价值数据、普通数据，具体根据业务...
2019-07-15 21:17:07
1521
原创 对于连续多次调用数据库——Mysql性能配置
# 开启慢查询日志log-error=/mydata/mysql/data/slow.loglong_query_time=1slow_query_log=ON##开启查询缓存explicit_defaults_for_timestamp=true#禁用反向解析dns skip-name-resolve##开启查询缓存explicit_defaults_for_...
2019-01-16 09:58:10
772
原创 常用js校验数字百分数保留小数
//1.只能输入数字，并且保留两位小数<input type = "text" name= "price" id = 'price' onkeyup= "if( ! /^d*(?:.d{0,2})?$/.test(this.value)){alert('只能输入数字，小数点后只能保留两位');this.value='';}" /> //2.百分数校验function chec...
2019-01-07 20:03:46
3053
原创 session的使用——spring boot
springboot中默认session时长是60s，根据业务需求，可以在主程序ApplicationMain.java中配置。/** * Created by ph 18/7/12. * */@Configuration//配置控制@ComponentScan(basePackages = {"cn.com.hisee.hdta.configcenter","cn.com.hisee....
2018-07-12 18:40:32
10970
4
原创 Hadoop-HDFS的增删改查
hadoop-HDFS除了在linux上以shell的方式进行操作外，还可以利用java来操作，接下来我们就来实现吧1.新建java工程，引入hadoop的源码包 java操作hadoop1.png当然，也可以新建lib包，复制hadoop/下的jar2 代码操作方式一：FileSystem与IOUtil...
2018-07-12 14:09:23
1298
原创 Struts2配置后ClassNotFoundException
Struts2配置后出现了ClassNotFoundException: rg.apache.struts2.dispatcher.ng.filter.StrutsPrepareAndExecuteFilt 问题解决如下：练习Struts2时，配置web.xml：<filter> <filter-name>struts2</filter-name> <fo...
2018-06-28 11:29:37
475
原创 设计模式——解释器模式（Interpreter）
一般主要应用在OOP开发中的编译器的开发中，所以适用面比较窄。Context类是一个上下文环境类，Plus和Minus分别是用来计算的实现public interface Expression { public int interpret(Context context);}public class Plus implements Expression { @Override p...
2018-05-25 10:42:39
759
原创 设计模式——中介者模式（Mediator）
中介者模式也是用来降低类类之间的耦合的，因为如果类类之间有依赖关系的话，不利于功能的拓展和维护，因为只要修改一个对象，其它关联的对象都得进行修改。如果使用中介者模式，只需关心和Mediator类的关系，具体类类之间的关系及调度交给Mediator就行，这有点像spring容器的作用。User类统一接口，User1和User2分别是不同的对象，二者之间有关联，如果不采用中介者模式，则需要二者相互持有...
2018-05-25 10:40:34
630
原创 设计模式——访问者模式（Visitor）
访问者模式把数据结构和作用于结构上的操作解耦合，使得操作集合可相对自由地演化。访问者模式适用于数据结构相对稳定算法又易变化的系统。因为访问者模式使得算法操作增加变得容易。若系统数据结构对象易于变化，经常有新的数据对象增加进来，则不适合使用访问者模式。访问者模式的优点是增加操作很容易，因为增加操作意味着增加新的访问者。访问者模式将有关行为集中到一个访问者对象中，其改变不影响系统数据结构。其缺点就是增...
2018-05-24 09:42:00
677
原创 设计模式——状态模式（State）
核心思想就是：当对象的状态改变时，同时改变其行为。很好理解！就拿QQ来说，有几种状态，在线、隐身、忙碌等，每个状态对应不同的操作，而且你的好友也能看到你的状态，所以，状态模式就两点：1、可以通过改变状态来获得不同的行为。2、你的好友能同时看到你的变化。▼State类是个状态类(这里用DispenserState)及实现类public interface DispenserState { ...
2018-05-24 09:40:44
676
原创 设计模式——备忘录模式（Memento）
主要目的是保存一个对象的某个状态，以便在适当的时候恢复对象，个人觉得叫备份模式更形象些，通俗的讲下：假设有原始类A，A中有各种属性，A可以决定需要备份的属性，备忘录类B是用来存储A的一些内部状态，类C呢，就是一个用来存储备忘录的，且只能存储，不能修改等操作。Original类是原始类，里面有需要保存的属性value及创建一个备忘录类，用来保存value值。Memento类是备忘录类，Storage...
2018-05-24 09:38:20
562
原创 设计模式——命令模式（Command）
命令模式很好理解，举个例子，司令员下令让士兵去干件事情，从整个事情的角度来考虑，司令员的作用是，发出口令，口令经过传递，传到了士兵耳朵里，士兵去执行。这个过程好在，三者相互解耦，任何一方都不用去依赖其他人，只需要做好自己的事儿就行，司令员要的是结果，不会去关注到底士兵是怎么实现的。我们看看关系图：Invoker是调用者（司令员），Receiver是被调用者（士兵），MyCommand是命令，实现了...
2018-05-24 09:36:46
640
原创 设计模式——责任链模式（Chain of Responsibility）
接下来我们将要谈谈责任链模式，有多个对象，每个对象持有对下一个对象的引用，这样就会形成一条链，请求在这条链上传递，直到某一对象决定处理该请求。但是发出者并不清楚到底最终那个对象会处理该请求，所以，责任链模式可以实现，在隐瞒客户端的情况下，对系统进行动态的调整。Abstracthandler类提供了get和set方法，方便MyHandle类设置和修改引用对象，MyHandle类是核心，实例化后生成一...
2018-05-24 09:35:26
698
原创 设计模式——迭代子模式（Iterator）
迭代器模式就是顺序访问聚集中的对象。一是需要遍历的对象，即聚集对象，二是迭代器对象，用于对聚集对象进行遍历访问。这个思路和我们常用的一模一样，MyCollection中定义了集合的一些操作，MyIterator中定义了一系列迭代操作，且持有Collection实例，我们来看看实现▲两个接口：public interface Collection { public Iterator iter...
2018-05-24 09:33:52
655
原创 设计模式——观察者模式（Observer）
包括这个模式在内的接下来的四个模式，都是类和类之间的关系，不涉及到继承，学的时候应该 记得归纳，记得本文最开始的那个图。观察者模式很好理解，类似于邮件订阅和RSS订阅，当我们浏览一些博客或wiki时，经常会看到RSS图标，就这的意思是，当你订阅了该文章，如果后续有更新，会及时通知你。其实，简单来讲就一句话：当一个对象变化时，其它依赖该对象的对象都会收到通知，并且随着变化！对象之间是一种一对多的关系...
2018-05-24 09:32:33
887
原创 设计模式——模板方法模式（Template Method）
一个抽象类中，有一个主方法，再定义1...n个方法，可以是抽象的，也可以是实际的方法，定义一个类，继承该抽象类，重写抽象方法，通过调用抽象类，实现对子类的调用 就是在AbstractCalculator类中定义一个主方法calculate，calculate()调用spilt()等，Plus和Minus分别继承AbstractCalculator类，通过对AbstractCalculator的调用...
2018-05-24 09:30:41
726
原创 设计模式——策略模式（strategy）
策略模式定义了一系列算法，并将每个算法封装起来，使他们可以相互替换，且算法的变化不会影响到使用算法的客户。需要设计一个接口，为一系列实现类提供统一的方法，多个实现类实现该接口，设计一个抽象类（可有可无，属于辅助类），提供辅助函数●抽象折扣类：public interface MemberStrategy { /** * 计算图书的价格 * @param booksPr...
2018-05-24 09:28:48
992
原创 设计模式——享元模式（Flyweight）
享元模式的主要目的是实现对象的共享，即共享池，当系统中对象多的时候可以减少内存的开销，通常与工厂模式一起使用。FlyWeightFactory（1..n） → FlyWeight ↑ ↗ ↖ Client FlyWeight1 FlyWeight2FlyWeightFactory负责创建和管理享元单元，当一个客户端请求时，工厂需要检查当前对象池中是否有符合条件的对象。如...
2018-05-24 09:26:39
686
原创 设计模式——组合模式（Composite）
组合模式有时又叫部分-整体模式在处理类似树形结构的问题时比较方便▲代码：public class TreeNode { private String name; private TreeNode parent; private Vector<TreeNode> children = new Vector<TreeNode>(); public TreeNod...
2018-05-23 11:14:04
720
原创 设计模式——桥接模式（Bridge）
桥接模式就是把事物和其具体实现分开，使他们可以各自独立的变化。桥接的用意是：将抽象化与实现化解耦，使得二者可以独立变化。像我们常用的JDBC桥DriverManager一样，JDBC进行连接数据库的时候，在各个数据库之间进行切换，基本不需要动太多的代码，甚至丝毫不用动。原因就是JDBC提供统一接口，每个数据库提供各自的实现，用一个叫做数据库驱动的程序来桥接就行了。▼先定义接口：public int...
2018-05-23 11:07:17
819
原创 设计模式——外观模式（Facade）
外观模式是为了解决类与类之家的依赖关系的，像spring一样，可以将类和类之间的关系配置到配置文件中，而外观模式就是将他们的关系放在一个Facade类中，降低了类类之间的耦合度，该模式中没有涉及到接口。我们以一个计算机的启动过程为例：◆CPU类：public class CPU { public void startup(){ System.out.println("cpu startu...
2018-05-23 11:06:00
795
原创 设计模式——代理模式（Proxy）
其实每个模式名称就表明了该模式的作用，代理模式就是多一个代理类出来，替原对象进行一些操作。比如我们在租房子的时候回去找中介，为什么呢？因为你对该地区房屋的信息掌握的不够全面，希望找一个更熟悉的人去帮你做，此处的代理就是这个意思。再如我们有的时候打官司，我们需要请律师，因为律师在法律方面有专长，可以替我们进行操作，表达我们的想法。●接口Sourceable：public interface Sour...
2018-05-23 11:04:24
1107
原创 设计模式——装饰模式（Decorator）
顾名思义，装饰模式就是给一个对象增加一些新的功能，而且是动态的，要求装饰对象和被装饰对象实现同一个接口，装饰对象持有被装饰对象的实例Source类是被装饰类，Decorator类是一个装饰类，可以为Source类动态的添加一些功能★接口Sourceable：public interface Sourceable { public void method();}★Source被装饰类：pub...
2018-05-23 11:02:36
1058
原创 设计模式——适配器模式（Adapter）
适配器模式是其他结构型模式的起源。 （1）适配器模式 类的适配器模式 ↓ （2）装饰模式 ←对象的适配器模式→ （5）桥接模式 ↓ ↓ ↓ （3）代理模式 接口的适配器模式 （6）组合模式 ↓ ...
2018-05-23 11:00:45
1409
原创 设计模式——原型模式（Prototype）
原型模式虽然是创建型的模式，但是与工程模式没有关系，从名字即可看出，该模式的思想就是将一个对象作为原型，对其进行复制、克隆，产生一个和原对象类似的新对象。本小结会通过对象的复制，进行讲解。在Java中，复制对象是通过clone()实现的。●先创建一个原型类：public class Prototype implements Cloneable { public Object clone() ...
2018-05-23 10:57:42
1121
1
原创 设计模式——建造者模式（Builder）
工厂类模式提供的是创建单个类的模式，而建造者模式则是将各种产品集中起来进行管理，用来创建复合对象，所谓复合对象就是指某个类具有不同的属性。其实建造者模式就是前面抽象工厂模式和最后的Test结合起来得到的。★产品类：一般是一个较为复杂的对象，也就是说创建对象的过程比较复杂，一般会有比较多的代码量：class Product { private String name; private Strin...
2018-05-23 10:54:01
1738
1
原创 设计模式——工厂方法模式（Factory Method）
工厂方法模式分为三种：1-1.普通工厂模式就是建立一个工厂类，对实现了同一接口的一些类进行实例的创建。★共同接口：Senderpublic interface Sender { public void Send();}★创建实现类：public class MailSender implements Sender { @Override public void Send() { System.o...
2018-05-23 10:45:41
3946
原创 SpringMVC转型之路--SpringBoot
初学链接-------springboot简单应用深入学习-------springboot深入学习1.序言伴随着springmvc的使用，对复杂的部署流程、各种服务的集成、服务之间的影响、配置文件的编写都是耗时耗力的体力活，因此spring开源组织诞生了springboot。本文主要讲述spring boot的由来，即其它诞生的背景，初衷，现状，及对未来的展望。2.背景在很早的年代，J2EE还是...
2018-05-18 15:12:22
1335
原创 阿里云服务器搭建私服gitlab
一、gitlab搭建的硬件要求：建议阿里云服务器的配置为:最低2核4G内存； 最优4核8G 之前搜了很多资源，有的说1核1G就够用了，有的说很耗硬件配置。自己试了下：先用的阿里云1核1G 的服务器搭建，搭建过程中就报错，以失败而告终。后来升级了服务器配置到2核4G，搭建中略有卡顿，不过还是成功了。补充说明：必须掌握一些基本的linux命令，以及xshell等工具的熟练运用。二、gitlab安装方式...
2018-05-16 16:42:49
4598
1
原创 Springboot的第一个程序
Springboot的第一个程序一、什么是Springboot随着动态语言的流行（Ruby、Groovy、Scala、Node.js），Java的开发显得格外的笨重：繁多的配置、低下的开发效率、复杂的部署流程以及第三方技术集成难度大。在上述环境下，Springboot应运而生。它使用"习惯优于配置"（项目中存在大量的配置，此外还内置一个习惯性的配置，让你无须手动进行配置）的理念让你的项目快速运行起...
2018-05-16 16:14:48
268
原创 数据结构之算法时间复杂度
想要学会算法时间复杂度，那么就要先弄清楚几个概念。什么是算法时间复杂度？它有什么用呢？写法记作 T(n)=O(f(n))T(n):语句执行的总次数关于n的函数n：问题规模f(n):问题规模n的某个函数用O()来体现算法时间复杂度的记法时间复杂度的定义是：如果一个问题的规模是n，解决这一问题所需算法所需要的时间是n的一个函数T(n)，则T(n)称为这一算法的时间复杂度。所谓算法时间复杂度就是一句话：...
2018-05-04 13:14:58
276
原创 Python时间格式转换及时间戳转换
对开发中常用的时间格式的转换，希望能方便你我。 import time; # 引入time模块 date = "2018-04-20 15:42:54" #转换成时间数组 timeArray = time.strptime(date, "%Y-%m-%d %H:%M:%S") #1).转换成时间戳 timestamp = time.m...
2018-04-20 15:36:21
2734
Jenkins配置Sonar教程
2018-04-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人