- 博客(100)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 cannot change version of project facet dynamic web module to 3.0问题解决办法
在Eclipse中使用maven创建web-app的过程中总会遇到一个问题：cannot change version of project facet dynamic web module to 3.0，尝试勾选工程的properties中的Facet选项发现这个办法没用。 解决方案： 1.修改项目的web.xml文件，修改将版本号3.0<web-app xmlns:xsi="http...
2018-03-31 19:38:11
242
转载 算法复杂度
算法复杂度是指算法在编写成可执行程序后，运行时所需要的资源，资源包括时间资源和内存资源。应用于数学和计算机导论。通常，对于一个给定的算法，我们要做 两项分析。第一是从数学上证明算法的正确性，这一步主要用到形式化证明的方法及相关推理模式，如循环不变式、数学归纳法等。而在证明算法是正确的基础上，第二部就是分析算法的时间复杂度。算法的时间复杂度反映了程序执行时间随输入规模增长而增长的量级，在很大程度上能...
2018-03-31 13:10:11
9509
转载 Java中Volatile关键字详解
阅读目录一、基本概念二、Volatile原理一、基本概念先补充一下概念：Java 内存模型中的可见性、原子性和有序性。可见性： 可见性是一种复杂的属性，因为可见性中的错误总是会违背我们的直觉。通常，我们无法确保执行读操作的线程能适时地看到其他线程写入的值，有时甚至是根本不可能的事情。为了确保多个线程之间对内存写入操作的可见性，必须使用同步机制。 可见性，是指线程之间的可见性，一个线程修改的状态...
2018-03-31 12:53:13
190
转载 Java线程安全的实现方法
1.互斥同步 互斥同步（Mutual Exclusion＆Synchronization）是常见的一种并发正确性保障手段。同步是指在多个线程并发访问共享数据时，保证共享数据在同一个时刻只被一个（或者是一些，使用信号量的时候）线程使用。而互斥是实现同步的一种手段，临界区（Critical Section）、互斥量（Mutex）和信号量（Semaphore）都是主要的互斥实现方式。因此，在这4个...
2018-03-31 11:24:07
746
转载 悲观锁和乐观锁
乐观锁（ Optimistic Locking ） 相对悲观锁而言，乐观锁机制采取了更加宽松的加锁机制。悲观锁大多数情况下依靠数据库的锁机制实现，以保证操作最大程度的独占性。但随之而来的就是数据库性能的大量开销，特别是对长事务而言，这样的开销往往无法承受。而乐观锁机制在一定程度上解决了这个问题。乐观锁，大多是基于数据版本（ Version ）记录机制实现。何谓数据版本？即为数据增加一个
2018-03-31 11:16:21
151
转载 mysql和Oracle的区别
一、并发性并发性是oltp数据库最重要的特性，并发涉及到资源的获取、共享与锁定。mysql以表级锁为主，对资源锁定的粒度很大，如果一个session对一个表加锁时间过长，会让其他session无法更新此表中的数据。虽然InnoDB引擎的表可以用行级锁，但这个行级锁的机制依赖于表的索引，如果表没有索引，或者sql语句没有使用索引，那么仍然使用表级锁。 oracle使用行级锁，对资源锁定的粒度要小很多...
2018-03-29 09:11:39
272
原创 分布式重建缓存的并发冲突问题
分布式重建缓存的并发冲突问题缓存更新和缓存重建在不同机器上的并发冲突问题基于zookeeper分布式锁的冲突解决方案 重建缓存： 比如我们这里，数据在所有的缓存中都不存在了（LRU算法弄掉了），就需要重新查询数据写入缓存，重建缓存 分布式的重建缓存，在不同的机器上，不同的服务实例中，去做上面的事情，就会出现多个机器分布式重建去读取 相同的数据，然后写入缓存中,可能出现分布式重建缓存的并发冲...
2018-03-11 20:08:29
1308
原创 高并发场景下的缓存+数据库双写不一致问题分析与解决方案
1、最初级的缓存不一致问题以及解决方案 问题： 先修改数据库，再删除缓存，如果删除缓存失败了，那么会导致数据库中是新数据，缓存中是旧数据，数据出现不一致。 解决思路： 先删除缓存，再修改数据库，如果删除缓存成功了，如果修改数据库失败了，那么数据库中是旧数据，缓存中是空的，那么数据不会不一致。因为读的时候缓存没有，则读数据库中旧数据，然后更新到缓存中2、比较复杂的数据不一致问题分析 过程： 有...
2018-03-11 20:06:11
3748
转载 nginx+storm基于流量分发策略自动降级解决缓存热点问题
热点缓存导致系统崩溃的问题热点缓存的解决方案1、在storm中，实时的计算出瞬间出现的热点其中比较简单的算法：某个storm task，上面算出了1万个商品的访问次数，LRUMap频率高一些，每隔5秒，去遍历一次LRUMap，将其中的访问次数进行排序，统计出往后排的95%的商品访问次数的平均值1000999
2018-03-11 20:03:57
772
转载 Nginx配置参数说明
原文连接：https://www.cnblogs.com/fansik/p/6952453.html一、主配置段1、正常运行必备的配置#运行用户和组，组身份可以省略user nginx nginx;#指定nginx守护进程的pid文件pid path/to/nginx.pid;#指定所有worker进程所能打开的最大文件句柄数worker_rlimit_nofile 100000;2、性能优化相关...
2018-03-11 19:44:48
373
转载 _nginx缓存命中率低及其解决方案
1、缓存命中率低缓存数据生产服务那一层已经搞定了，相当于三层缓存架构中的本地堆缓存+redis分布式缓存都搞定了就要来做三级缓存中的nginx那一层的缓存了如果一般来说，你默认会部署多个nginx，在里面都会放一些缓存，就默认情况下，此时缓存命中率是比较低的2、如何提升缓存命中率分发层+应用层，双层nginx分发层nginx，负责流量分发的逻辑和策略，这个里面它可以根据你自己定义的一些规则，比如根...
2018-03-11 19:41:41
960
原创 _nginx开启本地缓存
/usr/servers/nginx/conf/nginx.conf文件中在http部分加入lua_shared_dict my_cache 128m;重启nginx/usr/servers/nginx/sbin/nginx -s reload 开启nginx本地缓存之后，可以在lua脚本中通过使用local cache_ngx = ngx.shared.my_cachecache_ngx:ge...
2018-03-11 19:40:46
905
原创 _nginx启动报错
nginx启动报错：80端口被占用bind() to 0.0.0.0:80 failed (98: Address already in use) 解决： fuser -k 80/tcp 杀掉进程 重新启动nginx/usr/servers/nginx/sbin/nginx -s reload
2018-03-11 19:39:01
313
原创 4.nginx发送kafka消息
背景：使用cache03作为流量分发服务器，cache02和cache01作为应用服务器nginx日志目录 /usr/servers/nginx/logs1、nginx+lua将访问流量上报到kafka中 在nginx应用服务器这一层，接收到访问请求的时候，就把请求的流量上报发送给kafka这样的话，storm才能去消费kafka中的实时的访问日志，然后去进行缓存热数据的统计用得技术方案非常简单，...
2018-03-11 19:38:04
6099
1
原创 3.nginx请求数据，动态渲染网页模板
分发层nginx，lua应用，会将商品id，商品店铺id，都转发到后端的应用nginx1、应用nginx的lua脚本接收到请求2、获取请求参数中的商品id，以及商品店铺id3、根据商品id和商品店铺id，在nginx本地缓存中尝试获取数据4、如果在nginx本地缓存中没有获取到数据，那么就到redis分布式缓存中获取数据，如果获取到了数据，还要设置到nginx本地缓存中但是这里有个问题，建议不要用...
2018-03-11 19:36:54
2918
原创 2.nginx流量分发服务器部署
使用cache03作为流量分发服务器，cache02和cache01作为应用服务器nginx日志目录 /usr/servers/nginx/logs想法： 1、获取请求参数，比如productId 2、对productId进行hash 3、hash值对应用服务器数量取模，获取到一个应用服务器 4、利用http发送请求到应用层nginx 5、获取响应后返回这个就是基于商品id的定向流量分发的策略，l...
2018-03-11 19:35:10
1610
原创 1.nginx服务器部署
1。部署第一个nginx，作为应用层nginx因为我们要用nginx+lua去开发，所以会选择用最流行的开源方案，就是用OpenRestynginx+lua打包在一起，而且提供了包括redis客户端，mysql客户端，http客户端在内的大量的组件（1）部署openresty（我在111.230.234.30上弄）安装需要的环境yum install -y re
2018-03-11 19:33:37
719
转载 sql优化
1.实践中如何优化SQL数据库（mysql） 1) SQL语句及索引的优化 2) 数据库表结构的优化 3) 系统配置的优化 4) 硬件优化2.sql语句优化 1) 尽量避免耗时操作。 带有DISTINCT,UNION,MINUS,INTERSECT,ORDER BY的SQL语句会启动SQL引 执行，耗费资源的排序(SORT)功能。DISTINCT需要一次排序操作, 而其他的至少需要执行两次排序 2...
2018-03-10 23:06:56
209
转载 sql高级--约束
1.SQL NOT NULL 约束 NOT NULL 约束强制列不接受 NULL 值。 NOT NULL 约束强制字段始终包含值。这意味着，如果不向字段添加值，就无法插入新记录或者更新记录。 CREATE TABLE Persons ( Id_P int NOT NULL, LastName varchar(255) NOT NULL, FirstName varchar(255)...
2018-03-10 23:06:34
156
转载 sql高级--模糊查询like和通配符
LIKE 操作符用于在 WHERE 子句中搜索列中的指定模式。1.希望从上面的 "Persons" 表中选取居住在以 "N" 开始的城市里的人 SELECT * FROM Persons WHERE City LIKE 'N%'2.希望从 "Persons" 表中选取居住在以 "g" 结尾的城市里的人 SELECT * FROM Persons WHERE City LIKE '%g'3.希望从 ...
2018-03-10 23:06:14
2420
转载 sql高级--函数
1.SQL COUNT(column_name) 语法COUNT(column_name) 函数返回指定列的值的数目（NULL 不计入）： SELECT COUNT(column_name) FROM table_name 希望计算客户 "Carter" 的订单数。 我们使用如下 SQL 语句： SELECT COUNT(Customer) AS CustomerNilsen FROM Order...
2018-03-10 23:05:51
1010
转载 sql高级--创建索引
可以在表中创建索引，以便更加快速高效地查询数据。用户无法看到索引，它们只能被用来加速搜索/查询。注释：更新一个包含索引的表需要比更新一个没有索引的表更多的时间，这是由于索引本身也需要更新。因此，理想的做法是仅仅在常常被搜索的列（以及表）上面创建索引。1.1创建一个简单的索引，名为 "PersonIndex"，在 Person 表的 LastName 列： CREATE INDEX PersonIn...
2018-03-10 23:05:28
235
转载 sql高级--view
什么是视图？在 SQL 中，视图是基于 SQL 语句的结果集的可视化的表。视图包含行和列，就像一个真实的表。视图中的字段就是来自一个或多个数据库中的真实的表中的字段。我们可以向视图添加 SQL 函数、WHERE 以及 JOIN 语句，我们也可以提交数据，就像这些来自于某个单一的表。SQL CREATE VIEW 语法 CREATE VIEW view_name AS SELECT column_n...
2018-03-10 23:05:01
152
转载 sql高级--union
SQL UNION 操作符 UNION 操作符用于合并两个或多个 SELECT 语句的结果集。 请注意，UNION 内部的 SELECT 语句必须拥有相同数量的列。列也必须拥有相似的数据类型。 同时，每条 SELECT 语句中的列的顺序必须相同。 注释：默认地，UNION 操作符选取不同的值。如果允许重复的值，请使用 UNION ALL。列出所有在中国和美国的不同的雇员名: SELECT E_N...
2018-03-10 23:04:39
173
转载 sql高级--select into
SELECT INTO 语句SELECT INTO 语句从一个表中选取数据，然后把数据插入另一个表中。SELECT INTO 语句常用于创建表的备份复件或者用于对记录进行存档。SQL SELECT INTO 实例 - 制作备份复件制作 "Persons" 表的备份复件： SELECT * INTO Persons_backup FROM Persons拷贝某些域，可以在 SELECT 语句后列出这...
2018-03-10 23:04:17
248
转载 sql高级--limit-top-rownum返回规定记录数
TOP 子句用于规定要返回的记录的数目。对于拥有数千条记录的大型表来说，TOP 子句是非常有用的。注释：并非所有的数据库系统都支持 TOP 子句。MySQL 和 Oracle 中的 SQL SELECT TOP 是等价的MySQL 语法 SELECT * FROM table LIMIT 5,10; // 检索记录行 6-15 SELECT * FROM Persons LIMIT 5 ...
2018-03-10 23:03:55
606
转载 sql高级--join
为了得到完整的结果，我们需要从两个或更多的表中获取结果。我们就需要执行 join"Persons" 表："Id_P" 列是 Persons 表中的的主键Id_P LastName FirstName Address City1 Adams John Oxford Street London2 Bush George Fifth Avenue New York3 Carter T...
2018-03-10 23:03:18
181
转载 sql高级--in_exist
希望从上表中选取姓氏为 Adams 和 Carter 的人 SELECT * FROM Persons WHERE LastName IN ('Adams','Carter')优化：可以使用 exist 和not exist代替 in和not in。操作符 BETWEEN ... AND 会选取介于两个值之间的数据范围...
2018-03-10 23:02:59
149
转载 sql高级--having
HAVING 子句在 SQL 中增加 HAVING 子句原因是，WHERE 关键字无法与合计函数一起使用。 我们拥有下面这个 "Orders" 表： O_Id OrderDate OrderPrice Customer 1 2008/12/29 1000 Bush 2 2008/11/23 1600 Carter 3 2008/10/05 700 Bush 4 2008...
2018-03-10 23:02:23
214
转载 sql高级--group by
GROUP BY 语句GROUP BY 语句用于结合合计函数，根据一个或多个列对结果集进行分组。我们拥有下面这个 "Orders" 表：O_Id OrderDate OrderPrice Customer1 2008/12/29 1000 Bush2 2008/11/23 1600 Carter3 2008/10/05 700 Bush4 2008/09/28 300 Bush...
2018-03-10 23:01:57
278
原创 sql高级--date
SQL Date 数据类型 MySQL 使用下列数据类型在数据库中存储日期或日期/时间值： DATE - 格式 YYYY-MM-DD DATETIME - 格式: YYYY-MM-DD HH:MM:SS TIMESTAMP - 格式: YYYY-MM-DD HH:MM:SS YEAR - 格式 YYYY 或 YY SQL Server 使用下列数据类型在数据库中存储日期或日期/时间值：...
2018-03-10 23:01:26
174
原创 sql高级--Auto-increment
AUTO INCREMENT 字段我们通常希望在每次插入新记录时，自动地创建主键字段的值。我们可以在表中创建一个 auto-increment 字段。1.用于 MySQL 的语法下列 SQL 语句把 "Persons" 表中的 "P_Id" 列定义为 auto-increment 主键： CREATE TABLE Persons ( P_Id int NOT NULL AUTO_INCREMENT...
2018-03-10 23:00:50
375
原创 sql高级--alter
在表 "Persons" 中添加一个名为 "Birthday" 的新列。 ALTER TABLE Persons ADD Birthday date 请注意，新列 "Birthday" 的类型是 date，可以存放日期。数据类型规定列中可以存放的数据的类型。改变 "Persons" 表中 "Birthday" 列的数据类型 ALTER TABLE Persons ALTER COLUMN Birt...
2018-03-10 23:00:03
158
原创 centOS下mysql下载安装并授权远程访问
1.下载mysql的repo源$ wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm2.安装mysql-community-release-el7-5.noarch.rpm包$ sudo rpm -ivh mysql-community-release-el7-5.noarch.rpm安装这个包后，会获得两个mys...
2018-03-10 22:58:06
169
原创 解决服务器连接错误Host ‘XXX’ is not allowed to connect to this MySQL server
1、确定服务器上的防火墙没有阻止 3306 端口。 MySQL 默认的端口是 3306 ，需要确定防火墙没有阻止 3306 端口，否则远程是无法通过 3306 端口连接到 MySQL 的。 如果您在安装 MySQL 时指定了其他端口，请在防火墙中开启您指定的 MySQL 使用的端口号。 如果不知道怎样设置您的服务器上的防火墙，请向您的服务器管理员咨询。2、增加允许远程连接 MySQL 用户并授权。...
2018-03-10 22:56:59
320
原创 linux登陆mysql
1.输入命令 **********2.输入密码 **********3.显示库中的数据表：use mysql； ／／打开库4.建库：create database 库名;5.建表：use 库名； create table 表名(字段设定列表)； 例如：create table6.删库和删表： drop database 库名; drop...
2018-03-10 22:56:13
835
转载 在Centos中yum安装和卸载软件的使用方法
在Centos中yum安装和卸载软件的使用方法安装方法安装一个软件时yum -y install httpd安装多个相类似的软件时yum -y install httpd*安装多个非类似软件时yum -y install httpd php php-gd mysql卸载一个软件时yum -y remove httpd卸载多个相类似的软件时yum -y remove httpd*卸载多个非类似软件时...
2018-03-10 22:54:30
226
原创 ubuntu中vi编辑模式下按退格键不能删除内容，按方向键不能上下左右移动
1. 在vi里非编辑模式下按冒号进入到末行命令模式，然后输入set nocompatible，回车，然后在进入vi编辑模式，看退格键是否生效，如果生效，你可以把set nocompatible这个设置放到~/.vimrc里让它永久生效。或2. 安装vim full版本，ubuntu默认安装的是vim tiny版本：$sudo apt-get remove vim-common$sudo apt-g...
2018-03-10 22:54:06
5384
原创 linux释放内存与查看内存情况
Linux释放内存的命令：syncecho 1 > /proc/sys/vm/drop_cachesdrop_caches的值可以是0-3之间的数字，代表不同的含义：0：不释放（系统默认值）1：释放页缓存2：释放dentries和inodes3：释放所有缓存 free -m 查看内存使用情况 注意：用free查看到的是整个系统的,用top看到的是所有的程序. top -d 1 然后sh...
2018-03-10 22:53:42
1703
转载 linux删除历史操作命令
在linux系统里一旦操作了任何命令，都会被记录下来，可以通过history命令来查看历史命令， 查看手册可知history -c 便是清除历史命令，但是重新进入系统查看历史命令时，历史信息依然会存在， 那么history -c 只是清除当前shell的历史纪录，因为系统一般会把信息保存在一个文件中，只要文件中 内容没有改变，那么信息也不会变。linux中存放历史命令的文件是.b...
2018-03-10 22:53:19
17850
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人