oQiuQian的博客

一.概述数据库数据分片，分垂直分片和水平分片。由于大部分公司按照业务拆分事业部门和小组，所以天然就是垂直分片。数据库数据垂直分片，单实例有性能瓶颈，后期只能通过水平分片提高数据处理能力。数据库水平分片采用分库分表形式。分库还能够用于有效的分散对数据库单点的访问量。分库和分表均可以有效的避免由数据量超过可承受阈值而产生的查询瓶颈。数据库水平分片，会增加数据实例数，减少单个实例单个库的压力，增加数据TPS操作能力，也能增加QPS操作能力，但Q...

1.创建内存表ycl_doctor_memDROP TABLE IF EXISTS `ycl_doctor_mem`;CREATE TABLE `ycl_doctor_mem`ENGINE=MEMORYMAX_ROWS=50000000select loginId from base_doctor where loginId is not null and source<>1;ALTER TABLE `ycl_doctor_mem` ADD INDEX `index_loginI.

一。概述数据库读写分离，数据多出一份，数据库选用AP模型，为提高数据库性能，必然有数据一致性问题。写及时读，读不到最新数据。数据库写及时读，未读到最新数据，本身发生概率较小。一般都是高并发，数据实例出现性能问题导致。应首先从减少服务器负载考虑，从尽量避免写及时读考虑。数据库读写分离后，写及时读应该是数据存储层解决的问题，本不应延伸上层。通过提高数据库实例性能，可满足大部分写及时读场景。理论上，业务方从编码或产品设计上，可避免写及时读这一操作的发生。二。不...

概述读写分离数据库实例一般采用主从方式。多主多从方式，虽能整体提高数据处理能力，但多主之间数据同步，数据一致性问题，暂无较完善的开源解决方案。目前大多数系统采用一主多从的方式。主为读写实例，从为读实例。请求随机，轮训或加权（多从读实例负载均衡策略）等分配到不同从读实例。主通过异步，半异步方式复制数据到从。主从异步复制数据，写及时读，从读实例数据尚未完成同步，就有可能读到过期数据。读写分离，要解决写及时读到最新数据的问题。读写分离一般在应用层添加读写分离中间件或在数据存储层添...

数据库 MySql Druid Presto Kylin PostgreSQL Tidb Impala ES Spark SQL

CAP BASE NWR

基本原则原则1：KISS(Keep it simple,sutpid) 和保持每件事情都尽可能的简单。用最简单的解决方案来解决问题。原则2：YAGNI(You aren’t gonna need it)-不要去搞一些不需要的东西，需要的时候再搞吧。原则3：爬，走，跑。换句话说就是先保证跑通，然后再优化变得更好，然后继续优化让其变得伟大。迭代着去做事情，敏捷开发的思路。...

/*Navicat MySQL Data TransferSource Server : 192.168.254.128Source Server Version : 50725Source Host : 192.168.254.128:3307Source Database : testTarget Server Type :...

一个公司肯定有一个文档是应该必须从一开始就保留的，这就是公司技术架构迭代文档。

电商的商品中心包括商品，类目（标准类目(发布商品时候使用)，销售类目（导购用户购买时候使用）），属性（销售属性，服务属性等）等。如果业务模型简单，一开始我们都会提供一个GoodsService（商品）包括了CategoryService，AttributeService，统一提供商品的服务。这是一个正常的思维。而这个思维其实就是设计模式中的门面模式GoodsService应该为GoodsFac...

大家感觉学习设计模式很抽象很难，这里提供一种学习方法。对于代码民工来说大家写什么代码最多？业务代码。业务代码什么写的最多？Service，其他的dal层或者controller基本都是借助spring的Copy。业务代码会有这样一个场景，每个Service都有一些公共的抽象方法，基本上每个Service都要写实现方法。比如get()，add()，edit()，query()，del()。这样大家...

SOA 服务化 非幂等操作 处理方法非幂等操作场景添加，删除操作前端操作按钮未遮罩造成重复提交HTTP中间件重试机制造成重复提交消息中间件重试机制造成重复提交服务调用服务失败重试机制解决方法添加，删除操作后前端操作按钮遮罩或者跳转页面HTTP 消息中间件，服务调用最多调用一次设置Token令牌一次使用后就失效Code ID唯一性限制重复提交最牛把非幂等操作变成幂等操作非幂等操作场景场景添加，...

swagger为接口文档   接口参数必须带说明   接口命名参考http规范 根据id得到唯一信息建议不用path，用？ 查询多个参数建议封装对象，使用post 放在body里面 ，requestBody 接口规则 package ink.taigu.yingke.user.account.web.controller.account;import com.github.p...

很牛的开放api规范，参考一下https://github.com/OAI/OpenAPI-Specification/blob/master/versions/3.0.0.md

三范式 表设计1.什么时候该把数据copy一份到新创建的表？比如采购单派单后变成供应商的生产订单，那地址是通过关系使用采购单的，还是重新创建一个地址表，从采购表copy一份？1）通过关系找采购单的地址，采购单地址改了生产订单也改了。2）通过关系找采购单的地址，生产订单改了影响采购单的地址。订单一般都是有限状态机，而且都是不可逆的，所以采购单派单之后肯定不能改的。生产订单的收...

对应关系Relational DB -&gt; Databases -&gt; Tables -&gt; Rows -&gt; ColumnsElasticsearch -&gt; Indices -&gt; Types -&gt; Documents -&gt; Fields区别确切值(Exact values) vs. 全文文本(Full text)查询与过滤操作重建...

数据类型float、double是浮点数，decimal是定点数，浮点数会丢失精度。事务级别SELECT @@tx_isolation。（repeatable read：重读读取：可以解决脏读 和 不可重复读 ---mysql默认的）。mysql&gt; SELECT @@tx_isolation;+-----------------+| @@tx_isolation |+-...

1.DTS在整体架构中的位置(数据层)2.DTS作用3.Canal伪装成Mysql的slave，通过读取整合binlog的日志，输出对数据库的修改内容。4.安装服务端4.1）下载版本目前稳定版本为1.0.244.2）解压缩。文件夹说明logs日志，conf配置。4.3）确认master数据库配置已经添加[mysqld]log-bin=mysql-bin ...

编译器

什么时候打印日志1.检查出错误时，要返回给前端错误信息。在返回错误信息要打日志。//参数判断if (saveAgentInfoParam == null || saveAgentInfoParam.getAgentInfoDTO() == null) { log.warn(BaseErrorMsgEnum.ParamError.getMsg());//打印日志 return ne...