- 博客(28)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 MySql避免重复插入记录(根据主键判重)
今天用python抓取数据入库需要避免重复数据插入,在网上找了一些方法:方案一：使用ignore关键字如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用：insert ignore into table_name(email,phone,user_id) values('[email protected]','99999','9999')
2015-07-27 23:13:58
9557
转载 MySQL 语句级避免重复插入—— Insert Select Not Exist
想要插入一条数据，要避免重复插入，又不想折腾两回数据库连接操作，可以参考如下办法。 Sql代码 INSERT INTO table(column1,column2,column3 ...columnN) SELECT value1,value2,value3 ...valueN FROM dual WHERE NOT EXISTS(
2015-07-27 23:08:49
4963
1
转载 SELECT INTO 和 INSERT INTO SELECT 两种表复制语句
Insert是T-sql中常用语句，Insert INTO table(field1,field2,...) values(value1,value2,...)这种形式的在应用程序开发中必不可少。但我们在开发、测试过程中，经常会遇到需要表复制的情况，如将一个table1的数据的部分字段复制到table2中，或者将整个table1复制到table2中，这时候我们就要使用SELECT INTO 和 I
2015-07-27 23:07:35
333
转载 正确处理浏览器在下载文件时HTTP头的编码问题（Content-Disposition）
最近在做项目时遇到了一个 case ：需要实现一个强制在浏览器中的下载功能（即强制让浏览器弹出下载对话框），并且文件名必须保持和用户之前上传时相同（可能包含非 ASCII 字符）。前一个需求很容易实现：使用 HTTP Header 的 Content-Disposition: attachment 即可，还可以配合 Content-Type: application/octet-strea
2015-07-26 23:24:50
1748
转载 Content-disposition
Content-disposition 是 MIME 协议的扩展，MIME 协议指示 MIME 用户代理如何显示附加的文件。当 Internet Explorer 接收到头时，它会激活文件下载对话框，它的文件名框自动填充了头中指定的文件名。（请注意，这是设计导致的；无法使用此功能将文档保存到用户的计算机上，而不向用户询问保存位置。） 服务端向客户端游览器发送文件时，如果是
2015-07-26 23:14:06
722
转载 Spring 之AOP AspectJ切入点语法详解（最全了，不需要再去其他地找了）
6.5 AspectJ切入点语法详解6.5.1 Spring AOP支持的AspectJ切入点指示符 切入点指示符用来指示切入点表达式目的，，在Spring AOP中目前只有执行方法这一个连接点，Spring AOP支持的AspectJ切入点指示符如下： execution：用于匹配方法执行的连接点； within：用
2015-07-26 16:36:39
647
转载 Java程序员从笨鸟到菜鸟之（七十四）细谈Spring（六）spring之AOP基本概念和配置详解
首先我们来看一下官方文档所给我们的关于AOP的一些概念性词语的解释：切面（Aspect）：一个关注点的模块化，这个关注点可能会横切多个对象。事务管理是J2EE应用中一个关于横切关注点的很好的例子。在Spring AOP中，切面可以使用基于模式）或者基于Aspect注解方式来实现。通俗点说就是我们加入的切面类（比如log类），可以这么理解。连接点（Joinpoint）：在程序执行过程
2015-07-26 16:06:12
433
转载 Fiddler 教程
阅读目录Fiddler的基本介绍Fiddler的工作原理同类的其它工具Fiddler如何捕获Firefox的会话Fiddler如何捕获HTTPS会话Fiddler的基本界面Fiddler的统计视图QuickExec命令行的使用Fiddler中设置断点修改RequestFiddler中设置断点修改ResponseFiddler中创建AutoResponder规则Fiddler中如何过滤会话F
2015-07-26 15:08:31
623
转载 eclipse集成tomcat日志文件输入配置
Where can I view Tomcat log files in Eclipse?I'm not sure if you were after catalina.out or one of the other logs produced by Tomcat.But, if you're after the catalina.out log file then f
2015-07-21 00:13:58
5669
1
转载 XSD命名空间说明
如 maven 的 pom.xml 开头是下面这样的谁能解释下，这东西有社么用，不写这东西又会怎么样的，官方拷贝来的说明文档就算了，我想要简明扼要的说明。不胜感激---------xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/
2015-07-19 23:55:49
2846
转载 在Windows 2003中安装UDDI服务器及其使用
以下是windows中安装uddi服务，其实感觉就类似于eclipse 的web service explorer。1.什么是UDDI服务通用描述发现和集成 (UDDI) 是用于发布和查找有关 Web 服务的信息的工业规范。Windows Server 2003 家族产品包含 UDDI 服务，这是可提供 UDDI 功能以便在企业内或商业伙伴之间使用的一个可选组件。UDD
2015-07-19 21:34:29
1488
转载 java开发webservice的几种方式
webservice的应用已经越来越广泛了，下面介绍几种在Java体系中开发webservice的方式，相当于做个记录。 1.Axis2 Axis是apache下一个开源的webservice开发组件，出现的算是比较早了，也比较成熟。这里主要介绍Axis+eclipse开发webservice，当然不用eclipse也可以开发和发布webservice，只是用ecl
2015-07-19 18:05:52
547
转载 eclipse+webservice开发实例
1.参考文献：1.利用Java编写简单的WebService实例 http://nopainnogain.iteye.com/blog/7915252.Axis2与Eclipse整合开发Web Service http://tech.ddvip.com/2009-05/1242968642120461.html3.http://blog.csdn.net/lightao
2015-07-19 18:03:50
671
转载 用eclipse创建WebService Step by Step
用eclipse创建一个WebService应用非常方便，步骤如下：1.安装WebService插件。www.eclipse.org网站上有下载，我下载的是wtp-all-in-one-sdk-R-1.5.4-win32，里面就包括了。2.安装一个web服务器。我这里用的是Tomcat。3.创建一个Webservice服务。在eclipse中创建一个动态的web工程。New－>Proj
2015-07-19 18:02:42
6722
转载 SEO方法大全
这是本人做SEO很长时间以来总结的方法，以及参加各类培训学到的SEO方法。现在总结如下，供各位站长参考：1.从博客来的反链对google排名影响大。从论坛来的反链对百度排名影响大。制作反接方法是：前面是带链接的文本描述，后面再加上网址。2.外部的反响链接不要一下增加很多，要定时定量的增加。3.网站内部SEO的主要操作重点地方：标题，链接命名，链接深度，文章内容，文章标题，文
2015-07-19 14:31:13
665
转载 反爬虫策略
因为搜索引擎的流行，网络爬虫已经成了很普及网络技术，除了专门做搜索的Google，Yahoo，微软，百度以外，几乎每个大型门户网站都有自己的搜索引擎，大大小小叫得出来名字得就几十种，还有各种不知名的几千几万种，对于一个内容型驱动的网站来说，受到网络爬虫的光顾是不可避免的。一些智能的搜索引擎爬虫的爬取频率比较合理，对网站资源消耗比较少，但是很多糟糕的网络爬虫，对网页爬取能力很差，经常并发几十
2015-07-19 14:28:36
2578
转载 网络爬虫基本原理
网络爬虫是捜索引擎抓取系统的重要组成部分。爬虫的主要目的是将互联网上的网页下载到本地形成一个或联网内容的镜像备份。这篇博客主要对爬虫以及抓取系统进行一个简单的概述。一、网络爬虫的基本结构及工作流程 一个通用的网络爬虫的框架如图所示： 网络爬虫的基本工作流程如下： 1.首先选取一部分精心挑选的种子URL； 2.将这些URL放入待
2015-07-18 17:32:10
828
转载 搜索引擎技术
2智能技术编辑网络机器人(Robot)又被称作Spider、Worm或Random，核心目的是为获取Internet上的信息。一般定义为“一个在网络上检索文件且自动跟踪该文件的超文本结构并循环检索被参照的所有文件的软件”。机器人利用主页中的超文本链接遍历WWW，通过URL引用从一个HTML文档爬行到另一个HTML文档。网上机器人收集到的信息可有多种用途，如建立索引、HIML文件合法性的验证
2015-07-18 17:27:59
630
转载 搜索引擎技术原理
一、Web搜索引擎技术综述二、Google技术三、百度技术四、结束语 搜索引擎(search engine)是指根据一定的策略、运用特定的计算机程序搜集互联网上的信息，在对信息进行组织和处理后，为用户提供检索服务的系统。一、 Web搜索引擎技术综述(一) 、引子随着网络技术的应用与发展，互连网已经成为信息的
2015-07-18 17:26:29
1678
转载 JSP页面实现自动跳转
1.function out(obj){var i = obj ;if(i==0)document.location.href="t.html";document.body.innerHTML = i;i--;setTimeout("out("+i+")",1000);}2.3. HTTP-EQUIV
2015-07-18 09:50:28
3677
转载 jQuery提取元数据Metadata插件
jQuery.metadata是用来从dom对象提取元数据，即取到一个元素对象的相关属性This plugin is capable of extracting metadata from classes, random attributes, child elements and HTML5 data-* attributes.官方网址： API网址：http:/
2015-07-15 22:41:01
2011
转载 jQuery.validate 中文API
（HappyCZX） 名称返回类型描述validate(options)返回:Validator验证所选的FORMvalid()返回:Boolean检查是否验证通过rules()返回:Options返回元素的
2015-07-14 23:01:10
525
转载 jquery.validate使用攻略
主要分几部分jquery.validate 基本用法jquery.validate API说明jquery.validate 自定义jquery.validate 常见类型的验证代码下载地址jquery.validate插件的文档地址http://docs.jquery.com/Plugins/Validationjquery.validate插件的主页
2015-07-14 22:48:09
593
转载 jQuery Validate验证框架详解
jQuery校验官网地址：http://bassistance.de/jquery-plugins/jquery-plugin-validation一、导入js库/validate/jquery-1.6.2.min.js">/validate/jquery.validate.min.js">注：返回web项目的根路径。二、默认校验规则(1)、req
2015-07-14 22:47:38
514
转载 jsonp详解
json相信大家都用的多，jsonp我就一直没有机会用到，但也经常看到，只知道是“用来跨域的”，一直不知道具体是个什么东西。今天总算搞明白了。下面一步步来搞清楚jsonp是个什么玩意。同源策略首先基于安全的原因，浏览器是存在同源策略这个机制的，同源策略阻止从一个源加载的文档或脚本获取或设置另一个源加载的文档的属性。看起来不知道什么意思，实践一下就知道了。1.随便建两个网页
2015-07-13 22:43:30
7442
2
转载 跨域访问实现依据
首先要弄清楚域是含义。这里引用百度知道里的域的一个概念说明：域(Domain)是Windows网络中独立运行的单位，域之间相互访问则需要建立信任关系(即Trust Relation)。信任关系是连接在域与域之间的桥梁。当一个域与其他域建立了信任关系后，2个域之间不但可以按需要相互进行管理，还可以跨网分配文件和打印机等设备资源，使不同的域之间实现网络资源的共享与管理。有一种简明的说法来解释广
2015-07-13 22:32:41
835
转载 什么是跨域问题
让窗口或框架在不同域页面之间跳转，是件很寻常的事情，所以跳转操作总是被允许的。只有试图读写页面内容时，才会受到 domain 限制。例如：window.location 可以用来设置地址间的跳转，但是不能用它来读取在不同域下的地址。因为，这会使一个页面知道浏览者去过哪些地方，而这会暴露浏览者的隐私。 在不同域间的页面制约包括 window.location 可以设置，但不能读取。其
2015-07-13 22:22:39
2145
转载 java字符编码转换研究（转）
1. 概述本文主要包括以下几个方面：编码基本知识，java，系统软件，url，工具软件等。在下面的描述中，将以"中文"两个字为例，经查表可以知道其GB2312编码是"d6d0 cec4"，Unicode编码为"4e2d 6587"，UTF编码就是"e4b8ad e69687"。注意，这两个字没有iso8859-1编码，但可以用iso8859-1编码来"表示"。2. 编码
2015-07-01 00:18:40
505
C++编程思想(中文)
2009-11-11
vc文件拷贝程序（显示拷贝进度）
2009-05-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人