2013年07月_hewy0526

转载安全领域知识

1、脚本攻击2、钓鱼攻击 - 解决方案：SimpleAnti，通过对链接的判断给出提示3、SQL注入 - 4、Dos攻击(攻击手段多样) - 解决方案：Hummock,对DDOS攻击暂无好的办法5、XSS过滤 - 解决方案：FastText(通过转义、扫描等方式，去掉激活script的事件，例如： onclick、onmourse等)6、CSRF攻击

2013-07-31 11:14:43 655

转载程序员技术练级攻略

月光博客6月12日发表了《写给新手程序员的一封信》，翻译自《An open letter to those who want to start programming》，我的朋友（他在本站的id是Mailper）告诉我，他希望在酷壳上看到一篇更具操作性的文章。因为他也是喜欢编程和技术的家伙，于是，我让他把他的一些学习Python和Web编程的一些点滴总结一下。于是他给我发来了一些他的心得和经历

2013-07-28 16:01:23 651

转载数据库一体机介绍

目录1 概述... 31.1 什么是一体机... 31.2 SQL Server 一体机... 31.2.1 戴尔并行数据仓库一体机... 41.2.2 惠普商业数据仓库一体机... 51.2.3 惠普企业数据仓库一体机... 61.2.4

2013-07-26 17:26:42 8161

转载 2012中国云实践之企业总评榜

1. 阿里云代表云产品：阿里云云计算平台（2011年7月发布）点评：自主研发，体系完整。同时提供基础层、平台层和应用层各项功能，包括安全、搜索、地图、广告等。有云市场。实际落地案例：万网、管易软件、安存网络、欢乐逛、淘满意、囧记单词、刷机精灵、嘉兴第九区、八咏网、评论啦主页：http://www.aliyun.com/2. 新浪代表云产品：Sina

2013-07-26 17:07:09 9874

原创 tornado.gen.Task post

post_data = {'weiboId': weiboId,'loginName': sessionid,'password': randomid,'content': content } #A dictionary of your post data body = urllib.urlencode(post_data) #Make it into a post re

2013-07-23 16:40:06 2215

原创 tornado io 阻塞线程

from time import sleepfrom tornado.httpserver import HTTPServerfrom tornado.ioloop import IOLoopfrom tornado.web import Application, asynchronous, RequestHandlerfrom multiprocessing.pool impor

2013-07-23 10:50:52 961

转载 Tornado Non-blocking Process

分享一个tornado的non-blocking process方法。从 tornado-async-process-mixin.py 升级而来，解决了产生僵尸进程的问题，并增加了错误输出的抓取。使用方法见代码中的示例即可：class BaseRequestHandler(tornado.web.RequestHandler): '''An non-blockin

2013-07-22 16:55:52 1196

原创 nginx+tornado 504 gateway timeout

增加 proxy_read_timeout 900;

2013-07-22 14:11:35 2153 1

原创 mysql-replication

Pure Python Implementation of MySQL replication protocol build on top of PyMYSQL. This allow you to receive event like insert, update, delete with their datas and raw SQL queries.Use casesMy

2013-07-18 10:55:07 2594

转载 Pinterest谈实战经验：如何在两年内实现零到数百亿的月访问

Pinterest一直保持着指数增长，每一个半月都会翻一翻。在两年内，他们实现了从0到数百亿的月PV；从开始的两个创始人加一个工程师增长到现在超过40个工程师，从一个小型的MySQL服务器增长到180个Web Enigne、240个API Enigne、88个MySQL DB（cc2.8xlarge，每个DB都会配置一个从属节点）、110个Redis Instance以及200个Memcache

2013-07-11 10:55:06 642

转载 2012大数据盘点

从2012年3月29日美国政府投资2亿美元启动“大数据研究和发展计划”到11月份被视为大数据时代的总统选举，大数据处理技术有一种“旧时王谢堂前燕，飞入寻常百姓家”的迹象。已有的技术逐渐落地承接核心业务，新的技术则独辟蹊径，在特定领域一展所长，同时，大数据处理技术的平台化、商业化开始兴起。本文将从数据的传输、存储、计算、挖掘、展现、开发者平台和应用市场七个方面来阐释2012年大数据领域的发展和变化

2013-07-10 21:10:53 828

转载网站架构资料收集整理

1.系统概况图图1.1 系统架构概况图图1.2 较为完整的系统架构图2.系统使用的主要技术下列排名不分先后2.1前端JavaScript，html，css，silverlight，flashJqueryJavascript类库，用来简化html的操作，事件处理，动画，异步访问，用于web的快速开发。最新版本是1.7.1，分为开

2013-07-10 15:45:02 1074

转载世界知名网站的架构技术

WikiPedia 技术架构学习分享YouTube 的架构扩展Internet Archive 的海量存储浅析LinkedIn 架构笔记Tailrank 网站架构Twitter 的架构扩展: 100 倍性能提升财帮子（caibangzi.com）网站架构Yupoo! 的网站技术架构37Signals 架构Flickr 的访问统

2013-07-10 15:43:37 944

转载 2012年国内外IT会议盘点：32场近千演讲PPT免费下载

http://www.iter168.com/2013/02/22/484推荐理由：该内容由IT168文库收集整理，并按时间轴进行排序，涵盖了2012年国内外大部分的IT会议，总计32场，近千演讲PPT免费下载，没有参加会议的或关注新技术新趋势的朋友有福。2012年百度开发者大会PPT下载专辑2012年3月23日在北京国际会议中心召开了百度开发者大会，本

2013-07-06 18:35:22 2535

转载 tcp短连接TIME_WAIT问题解决方法大全（3）——tcp_tw_recycle

【tcp_tw_recycle和tcp_timestamps】参考官方文档（http://www.kernel.org/doc/Documentation/networking/ip-sysctl.txt），tcp_tw_recycle解释如下：tcp_tw_recycle选项作用为：Enable fast recycling TIME-WAIT sockets. Default valu

2013-07-05 15:03:24 786

转载推荐系统算法总结

最近看推荐系统方面的东西也有段日子了，有书，博客，唯独没有看论文。总感觉论文对于工业界来说用处真的不如学校做课题、论文那么大，只要知道某个算法好不好用以及怎么用就可以了，也不必知道太多的细节和数学推导。但根据一个好的算法，产品部门可以设计出很多很酷的产品，让用户倍感web应用的人性化。1、Item based collective filtering这个算法是c

2013-07-05 15:02:48 784

转载 Nginx 限制IP并发数及速度

估计不少站长遇到了与我相同的问题，同时访问人数过多，或者同一个人在不停的刷新页面，请求服务器资源，或者用户使用下载工具（IDM或迅雷等）下载资源时，网站扛不住并发压力，而导致网站瘫痪，出现502错误，这样的问题解决起来并不复杂，我们只需在服务器上进行一些常规设置，来限制其并发数及会话空间等。nginx限制ip并发数，也是说限制同一个ip同时连接服务器的数量1.添加limit_zon

2013-07-05 09:31:24 2028

转载 mapreduce shuffle过程问答

通过hadoop权威指南学习hadoop，对shuffle过程一直很疑惑，经过查看网上多个帖子，最终完成此篇问答总结。1.什么叫shuffle从map任务输出到reducer任务输入之间的过程就叫做shuffle 2.每个map任务都有对应的缓存吗？默认是多少，怎么配置这个值的大小？每个map任务都有一个缓存支持输出，默认大小是100m，可以通

2013-07-01 15:29:08 870