davidsu33的专栏

1,fread是带缓冲的,read不带缓冲.2,fopen是标准c里定义的,open是POSIX中定义的.3,fread可以读一个结构.read在linux/unix中读二进制与普通文件没有区别.4,fopen不能指定要创建文件的权限.open可以指定权限.5,fopen返回指针,open返回文件描述符(整数).6,linux/unix中任何设备都是文件,都可以用open,read.如果文件的大小...

使用apt-get出现问题，错误信息大概如下The package <package-name> needs to be reinstalled, but I can't find an archive for it.用 apt-get install -f 无法修复．考虑一下报错信息，应该是apt对之前失败的某次安装A念念不忘，并且在安装其他东西之前会重新安装这个程序A．（这个和正常...

提到构造函数和析构函数，想必大家肯定是非常了解，但是能否在构造函数或是析构函数中调用虚函数呢？答案是千万不要这么做，这么做不会得到大家想要的结果。首先提一下构造函数，构造函数的顺序是从基类开始构造->子类，如果在基类中调用虚函数，由于构造函数基类中仅存在自身（或其父类，如果存在），不会根据虚函数表的规则去调用。看如下例子class Base {public:   Base(

Makefile文件的处理格式目标: 依赖项（可以是多个，可以写成多行，但是要以\作为续航符）[tab符]执行命令执行的Shell命令在用到变量引用的时候需要对"$"符号进行转义，需要写两个"$$"符号来转义成"$"符号例如如下for循环的例子中，就连awk中的变量引用也需要使用两个"$"符号来进行转义#自动循环c文件生成目标CC = gccSRCS =

Lex和Yacc学习过程中遇到的几个问题1.在Lex中表述空格，空格的表述得使用[ ] 或者 " " ，不可以直接写空格，否则是匹配不了的。2.在同时使用Lex和Yacc的时候，如果我们不想编写main函数或者相关的配套函数，   例如Lex的yywrap，Yacc的yyerror等，我们可以直接使用Lex或者Yacc提供的链接库   -ll 和-ly ,但是特别要注意的是，此处特

Qmake的用法 1.变量的使用 Qmake提供了很多的内置变量，主要包含了项目构建相关的变量以及Qt自身相关变量，详细可以参见qmake Variable Reference,Qt也提供供了一些内置工具变量，这些变量可以在qmake生成的Makefile中看到,例如拷贝和 删除命令 QMAKE_COPY QMAKE_DEL等。 Qmake也提供了一些Qt自身环境的变量，这些变量可以通过qm

Qmake递归Qmake的对象可支持任意深度，Qmake的函数调用可以支持递归（不能超过深度100次调用)超过一百次认为是死循环会报错a.lib = alib_1 alib_2 SINGLE_MODULE = b c d e f g h i j for(i, SINGLE_MODULE){ #变量符合一个”.”的字符串，请使用$$quote eval($${i}$$quote(.lib

/*! * Java中的枚举类型也是类， * Java中的类都隐含从Object * 派生，Java中的枚举类型都 * 隐含从Enum类派生 * Java的枚举类型一般都是全部大写 * * SMALL,MEDIUM,LARGE.. * 都可以看成是其中一个枚举类型的 * 实例 * * Java Class反射类型，得到类型对象Class * 1..c

pageEncoding="utf-8"    %>  <%!中可以定义方法、静态方法和静态属性以及  属性等，但是<%中不可以，而且%中的out指的  并不是System.out而是PrintWriter写到页面的out  实例对象-->      JSP 实例的生命周期                    pri

/*! * 继承 * Java和C++继承的区别在于 * 1.Java继承的关键字是extends,C++是: * 2.Java继承只能是公有继承，java没有private,protected继承 * 3.Java继承只能是单继承，多继承采用的方法类似接口实现 */import static java.lang.System.*;/*! * 上课 

#include #include #include #include /*! *延迟转移:CPU在执行条件判断的时候为了保证管线的流水，会 * 对指定进行预判执行，如果判断成功则流程继续，否则判断失败 * 会从条件判断正确的地方加载代码到流水管线中执行 * (从数据可见，有时候我们在for循环中使用判断逻辑的时候，如果 * 能增加判断概率是可以提高性能的，

QEvent主要的借口包含事件类型，事件的来源（可能来源于窗口系统，或者QCoreAplication的sendEvent或postEvent)，type() 事件类型spontaneous() 事件的来源accept() 该对象接受处理该事件，ignore() 改对象不接受该事件，会传递给该事件的父类对象来进行处理。QWidget中对于鼠标事件的处理，默认是不接受，所以会出现传递

Glibc安装的库中有一个名为ld-Linux.so.X其中X为一个数字（版本），在不同的平台上可以通过ldd查看$ldd /bin/catlinux-vdso.so.1 =>  (0x00007fff9176f000)libc.so.6 => /lib/x86_64-linux-gnu/libc.so.6 (0x00007f16424d4000)/lib64/ld-linux

1.下载svn，ubuntu下直接 apt-get install subversion2.创建svn的仓库，新建一个目录例如/home/user/svn_repository，3.在该目录下执行svnadmin create svnwork， 创建一个svn的版本仓库，创建完成之后，svnwork会被创建，svnwork下的目录结构如下  svnwork      |    

使用QMake构建多个定制目标，如下是我写的测试程序，环境Linux (ubuntu) gcc5.4  1 #使用qmake来生成多个目标，也可以将目标直接集成到现有的make对象中  2 #（在生成直接对象的时候，生成其他目标对象)  3   4 TEMPLATE = app  5 CONFIG -= qt app_bundle  6 CONFIG += c++11

因为不小心 apt-get install -f ，导致ubutnu的大量库和组件直接被删除掉，但是发现我安装的ubuntu 16总是安装不了一些库，例如libgl1-mesa-dev libglu1-mesa-dev等等，各种找原因，发现原来是需要更新Ubuntu的源，然后更新apt-get，我现在的源配置如下：# deb-src http://security.ubuntu.com/u

#include #include #include #include #include #include using namespace std;templatestruct LinkNode{ LinkNode() = default; LinkNode(const T& t):m_data(t){} T m_data{0}; LinkNode*

Sort好好复习了一下,不容易啊...#include #include #include #include #include #include #include #include #include #include #include #include #include /*made by davidsu33 2017-6-14*/#define MAX

如下图是我需要获取下载地址的链接,使用scrapy的response来截取的代码如下:r = response.xpath('//a[contains(text(), ".mkv")]/@href').extract()

/*!  二叉树的学习以及使用  1.使用字符串构造二叉树  2.二叉树的遍历  made by davidsu33*/#include #include #include #include #include #include using namespace std;struct BNode{    int m_data {-1}

在Ubuntu环境下用了两天Qt，今天突然发现在Qt 5的代码编辑器里面居然无法输入中文！生成的输入框也同样无法输入中文！在其他软件里面把中文复制过去，调试也没发现有任何显示问题，搜索了一下，原来是输入法框架的问题。再看一下解决办法，各种各样：装软件、复制中文支持文件、写脚本、改系统配置，甚至还有重新编译一个程序来实现的，真是八仙过海，各显牛逼。软件出现漏洞很正常，但是这么有名的产品，我是

要知道有的时候，直接下载是不行的，需要定制http头信息才可以，所以这里，使用httpie的shell脚本来下载文件#!/bin/bash#采用httpie来下载图片，因为需要处理referer头#made by davidsu33#2017-5-17DOWNLOAD_DIR=~/images/lynGALLERY_LYN=18071INDEX_LYN=2267

这几天重新安装系统，在安装过程中出现了各种问题，在则里逐一进行记录并说明1.双系统的安装顺序，必须先安装windows，然后在安装linux。2.windows的磁盘分区不能是动态分区，必须是基本分区，否在在linux安装的时候是看不到独立的分区的。（被我碰到了）3.windows的主分区不要超过三个，因为最多目前只能识别4个主分区。（除了windows的c盘之外就不要再分配主分区了）

我把原来的sogou拼音卸载之后就全部出问题了,系统设置的文本输入也显示不了解决方案: 首先强制更新,把依赖文件全部安装sudo apt-get install -f这之后仍然是不管用,于是,继续度娘,发现原来是搜狗默认的配置出了问题,见如下操作即可完成问题（1）Ubuntu下，搜狗拼音输入法能启动（系统托盘处有图标），但是打不出汉字，打字时选框不正常。

#!/bin/bashLINKFORMAT="http://img1.mm131.com/pic/%d/%d.jpg"MAX_COUONT=100#download mm gallery,to stop if can't downloadfunction download_gallery(){    if [ ! -d "$1" ];then        #if

、基本概念  a、I/O重定向通常与 FD有关，shell的FD通常为10个，即 0～9；  b、常用FD有3个，为0（stdin，标准输入）、1（stdout，标准输出）、2（stderr，标准错误输出），默认与keyboard、monitor、monitor有关；  c、用   d、用 > 来改变送出的数据信道(stdout, stderr)，使之输出到指定的档案；  e、

bash下有很多像{}、[]等一些符号命令，下面是我对一些常用的符号命令的学习笔记，若有错误或纰漏望各位兄弟指正。一、.(source).（点）与source命令一样，从文件中读取并执行命令，无论该文件是否都有可执行权限都能够正确的执行。且是在当前shell下执行，而不是产生一个子shell来执行（我们通常使用“./filename.sh”去执行一个文件是在当前shell下产生一个子s

#!/bin/bash#bash函数以及返回值的注意事项function showgrade(){    if [ ! -z "$1" ];then        echo "Your grade is $1"    else        echo "Invalid call $FUNCNAME"    fi}#学生成绩分类echo "Pl

#!/bin/bashARGCOUNT=1if [ ! $# -eq $ARGCOUNT ];then    echo "请输入Fibnacci的项数，并自动求和.用法$0 N"fifunction fib(){    one=1    two=1    #bash的循环支持continue语句和break语句    for i in `

#!/usr/bin/awk -f#例子程序，针对用户名，从/et/passwd中来自动进行查找，并输出相关的信息#awk甚至可以直接定义全局变量g_counter=0;function finduser(name){    posname=5;    posdir=7;    split($0, s, ":");    for(i in s){

终于开始学习epoll了，虽然不明白的地方还是很多，但从理论到实践，相信自己动手去写一个具体的框架后，一切会清晰很多。1、首先需要一个内存池，目的在于：·减少频繁的分配和释放，提高性能的同时，还能避免内存碎片的问题；·能够存储变长的数据，不要很傻瓜地只能预分配一个最大长度；·基于SLAB算法实现内存池是一个好的思路：分配不同大小的多个块，请求时返回大于请求长度的最小块即可，对于

使用linux的select函数作为定时器，发现调用clock进行计时，每次得到的结果都是0，原因是因为clock的函数定义是指从程序启动到cpu所占用的时间，这个很重要，如果调用的函数并未占用cpu的时间，这个是不计时的，包括调用sleep之类的，也是不会计入cpu的耗时的，所以在select的循环中直接调用clock是没有意义的，如果需要计量时间，只能是调用time了。

1.将字体文件(*.ttf)文件拷贝至 /usr/share/fonts/ 目录下2.将当前终端用户切换为超级用户3.在终端下切换至字体文件的所在目录位置4.执行如下命令   mkfontscale   mkfontdir   fc-cache -fv

当服务器close一个连接时，若client端接着发数据。根据TCP协议的规定，会收到一个RST响应，client再往这个服务器发送数据时，系统会发出一个SIGPIPE信号给进程，告诉进程这个连接已经断开了，不要再写了。我写了一个服务器程序,在Linux下测试，然后用C++写了客户端用千万级别数量的短链接进行压力测试.  但是服务器总是莫名退出，没有core文件.最后问题确

Ctags递归生成C++标签的命令ctags -R --sort=yes --c++-kinds=+p --fields=+iaS --extra=+q --language-force=C++CTags递归生成C标签的命令(Linux /usr/include)ctags -R --sort=yes --c-kinds=+l+x+p --fields=+ls -I __T

有一个test.c的源文件，需要编译和运行，可以使用如下的Makefile和脚本来进行操作//test.c#include int main(int argc, char *argv[]){  printf("test ....
");  return 0;}#Makefile#Makefile脚本#Makefile脚本的规范，依赖关系，执行命令

=====常用Linux网络编程头文件====sys/types.h：数据类型定义   sys/socket.h：提供socket函数及数据结构   netinet/in.h：定义数据结构sockaddr_in   arpa/inet.h：提供IP地址转换函数   netdb.h：提供设置及获取域名的函数   sys/ioctl.h：提供对I/O控制的函数   sys/

修改脚本时，想直接用10进制转换为16进制的方法，在网上搜了搜，结果是找到了，可惜所用系统中没有对应的指令，还是用不成，最后就用了一个比较笨一点的方法。既然有需要，就把搜到感觉有用的进制转换函数或指令都贴在这里，便于以后应用。shell可以在不调用第3方命令，表示不同进制数据。这里总结以下表示方法。shell 脚本默认数值是由10 进制数处理,除非这个数字某种特殊的标记法或前缀开头

IP数据包格式版本Version：4位，表示IP地址的版本 1111=32bits首部长度Header Length：4位，表示IP数据报头的长度，最小20字节，最大69字节。那么这个bit是怎么表示的呢。0001 = 1X4=4字节　　0101 = 5　　5X4=20字节　　1111 = 15　　15X4=60字节

我们在学习TCP/IP协议时都知道，TCP报文段如果很长的话，会在发送时发生分段，在接受时进行重组，同样IP数据报在长度超过一定值时也会发生分片，在接收端再将分片重组。    我们先来看两个与TCP报文段分段和IP数据报分片密切相关的概念。    MTU（最大传输单元）    MTU前面已经说过了，是链路层中的网络对数据帧的一个限制，依然以以太网为例，MTU为1500个字节

一、  msl、ttl及rtt的区别   1、 MSL 是Maximum Segment Lifetime英文的缩写，中文可以译为“报文最大生存时间”，他是任何报文在网络上存在的最长时间，超过这个时间报文将被丢弃。因为tcp报文 （segment）是ip数据报（datagram）的数据部分，具体称谓请参见《数据在网络各层中的称呼》一文；   2、ip头中有一个TTL域，TTL是

关于TCP输出：     每个TCP套接口有一个发送缓冲区，当应用程序调用write时，内核将应用程序的缓冲区的数据拷贝到TCP的发送缓冲区，(如果write成功返回，仅仅表示应用程序的缓冲区已经全部拷贝到TCP的发送缓冲区，说明此时应用程序的缓冲区中的数据可以丢弃，并不表示TCP的数据已经成功发送)TCP以对方MSS(maximum segment size)大小或者更小发送数据块给IP，并

/*数据结构类：any (变体数据)bimap (双向map)tuple(元祖)tribool (三态)variant (有限类型的变体数据 boost::variant，更类似union)heap (优先级数据结构，跟STL的heap一样)multi_index (多维索引)特定领域类：date_time (时间日期)crc (冗余计算码)

在c++Template中很多地方都用到了typename与class这两个关键字，而且好像可以替换，是不是这两个关键字完全一样呢?相信学习C++的人对class这个关键字都非常明白，class用于定义类，在模板引入c++后，最初定义模板的方法为： template...... 在这里class关键字表明T是一个类型，后来为了避免class在这两个地方的使用可能给人带来混淆，所以引入了typ

1.使用xml.Name的第一个名称作为整个XML文档的根节点。2.凡是需要解析的XML内容，需要使用结构体的tag属性，反射出xml的特性，包含xml的名称，是否是属性、注释等。3.凡是需要解析的节点，结构体的成员名称，首字母必须要大些4.可以直接跳跃解析的父节点（该父节点只存在逻辑结构，并不存储任何数据或者属性），可以使用>来表征。golang的文档上的例子ty

//Golang中encoding的用法package mainimport ( "encoding/binary" "bytes" "fmt" "encoding/hex")func main() { pi := 3.1415926 buf := bytes.Buffer{} //使用

需要读取windows上所有的硬件信息，本来打算直接使用python的wmi实现，但是发现wmi是无法直接读取显卡的，所以使用了最简单的方案，直接用dxdiag来读取例子:dxdiag /t d:\tmp.txt注意事项：1.生成的txt必须是全路径2.生成的过程有延时，需要等待生成硬件统计信息之后，直接解析文件即可

今天没事用python的AES测试的时候，重复调用AES的encrypt发现每次结果都不一样，原来原因就是因为AES构建的对象只能使用一次，不允许重复使用见如下代码：#coding=utf-8'''加密'''from Crypto.Cipher import AESfrom Crypto import Randomdef testAES(): bloc

1.首先将user_fonts下面的字体拷贝到Windows/Fonts下面2.修改_vimrc配置文件，set guifont=YaHei_Consolas_Hybrid:h10                 "设置字体:字号（字体名称空格用下划线代替）

golang windows程序获取管理员权限（UAC ）在windows上执行有关系统设置命令的时候需要管理员权限才能操作，比如修改网卡的禁用、启用状态。双击执行是不能正确执行命令的，只有右键以管理员身份运行才能成功。为解决此问题，花了很长时间找了各种方法，最终找到一个简单的方法，双击也能执行成功了。过程如下：1> Go get github.com/akavel/rsrc2

一.CSRF是什么？　　CSRF（Cross-site request forgery），中文名称：跨站请求伪造，也被称为：one click attack/session riding，缩写为：CSRF/XSRF。二.CSRF可以做什么？　　你这可以这么理解CSRF攻击：攻击者盗用了你的身份，以你的名义发送恶意请求。CSRF能够做的事情包括：以你名义发送邮件，发消息，盗取

一、首先要在Win7下安装好IIS细节访问http://wenku.baidu.com/view/148ab53567ec102de2bd89d2.htmlPython学习简明教程：http://sebug.NET/paper/python/index.html#userconsent#具体步骤如下：1、确保你的操作系统里

首先，我们先要去官网下载 原生的 Python 2.7。为什么用 2.7，不用3.X。原因是 2.7 比较大众。而且，好多开发程序都是在此基础上进行的。而且，2.7 与 3.X 差不多。呵呵……其实，我想用它编译 QT。。。我们先上官网来下载，网址：https://www.python.org/。这里，我们下载 2.7.8。

#coding=utf-8'''百度翻译工具，使用百度翻译接口进行翻译，免得每次打开网页，这样直接解析更省力'''import requestsimport sysimport jsondef utf82u(s): return s.decode("utf-8")def main(): reload(sys) sys.setdefaultencodi

package mainimport ( "encoding/json" "errors" "fmt" "net/http" "io" "os" "path" "io/ioutil" "sync")//翻唱FM的URL：http://www.qingting.fm/#/vchannels/136962/programs/5659080//翻唱FM的ajax地址:htt

一般我们直接使用pip来安装网络上的包文件，如果机器没有联网，但是已经有了现成的包，应该如何呢，这个时候，可以直接使用离线包来进行安装，安装方法pip install --help中有这么几个参数--no-index和--find-links--no-index 是忽略包索引（仅仅从--find-links的链接地址中去查找包)--find-links 如果指定某个机器的连接地址

最近开发了工具，带界面的，需要定时执行的，为了方便直接用Windows计划任务做定时了。跑了一段时间发现，进程中也有，就是看不到程序的界面，进程的执行貌似也阻塞了。从网上查了下，发现时启动方式的问题，原来选择的不管是否登录都要运行，导致窗口类的应用启动出现问题，设置为只在登录时启动就好了。当然服务器上的用户不能注销。

例子爬取蜻蜓fm上的翻唱歌曲：代码不长，可以看看/** * Created by ds on 2016/10/30. */const http = require('http')const request = require('request')const async = require('async')const util = require('util')const _ =

1.从官网下载WebStorm2016.1安装。https://download.jetbrains.com/webstorm/WebStorm-2016.1.exe2.下载破解补丁并解压，记住路径 补丁下载3.编辑WebStorm安装目录下 bin 文件夹中的 WebStorm.exe.vmoptions 与 WebStorm64.exe.vmoptions 文件

简单地说 Interface是一组Method的组合，可以通过Interface来定义对象的一组行为。 如果某个对象实现了某个接口的所有方法，就表示它实现了该借口，无需显式地在该类型上添加接口说明。Interface是一个方法的集合，它里面没有其他类型变量，而且Method只用定义原型 不用实现①接口定义1.命名时习惯以"er"结尾，如Printer Reader Wr

/*go语言中给接口赋值的时候，对象如果是值（对于引用的接受者处理不了）如果是指针，则可以自动实现值的处理 */package mainimport "fmt"//定义Integer类型type Integer inttype LessAddInf interface{ Less(n Integer) bool Add(n Integer) Integer}fun

Go语言中的字符在Go语言中，没有字符类型，字符类型是rune类型，rune是int32的别称。下面用一个简单的程序来演示字符类型：package mainimport ( "fmt" "reflect")func main() { r := '我' fmt.Printf("%q的类型为：%t 二进制为：%b
", r, r, r) rType := refl

package mainimport ( "io" "os" "strings")type rot13Reader struct { r io.Reader}//rot13将数字+13转化为字母，对该数字减13即可//通过这方方法，将其做成一个包封器(wrapper)func (this * rot13Reader)Read(bytes []byte) (n int,

/*下载工具*/package mainimport ( "fmt" //go语言版本的jquery "github.com/PuerkitoBio/goquery" "os" "sync" "strings" //go语言版本的request "github.com/levigross/grequests" "time" "strconv")var wg sync

//使用golang中sync.WaitGroup来实现协程同步package mainimport ( "fmt" "net/http" "io/ioutil" "time" "os" "sync")var waitGroup = new(sync.WaitGroup)func download(i int ){ url := fmt.Sprintf("http:

//defer用来推出前延迟操作，一个函数中可以有多个//defer的执行顺序和栈的行为是一样的package mainimport "fmt"func deferTest(x int) int{ if(x==0){ return 0 } defer fmt.Printf("x=%d
", x) //说明一个函数中可以有多个defer，defer的执行顺序跟栈的行为一

//关于go语言协程通道的使用//1.通道可以带缓存，也可以不带//2.不带缓存的，不管是读还是写都会阻塞//3.带缓存的，如果缓存溢出，就会阻塞//4.make(chan int,1)和make(chan int)是不一样的，第一种通道内写入两个数据会阻塞，第二种写入就会阻塞//5.如果协程在阻塞，但是主程已经退出执行，则认为程序死锁//6.如果程序除了主程之外（没有一个协程），处于

https://tour.go-zh.org/welcome/1

package main//Go语言组合的思想很重，数据之间如果要传承//需要将数组组合进来//Go有指针的概念，但是并没有指针运算符import ( "fmt")const ( ANIMAL_CAT = 0 ANIMAL_MOUSE = 1 ANIMAL_DOG = 2)//go语言的接口type Animal interface { name() (strin

package main//Go语言组合的思想很重，数据之间如果要传承//需要将数组组合进来//Go有指针的概念，但是并没有指针运算符import ( "fmt")const ( ANIMAL_CAT = 0 ANIMAL_MOUSE = 1 ANIMAL_DOG = 2)//go语言的接口type Animal interface { name() (strin

go中的struct可以实现oop中的类、方法。go语言中的struct成员可以是任何类型，如普通类型、复合类型、函数、struct、interface等。入门 //定义 type User struct { name string email string password string } //声明

type Rect struct {    x, y float64    width, height float64}初始化方法：rect1 := new(Rect)rect2 := &Rect{}rect3 := &Rect{0, 0, 100, 200}rect4 := &Rect{width:100,

模运算，用得算是比较多，但是负数的模运算还是用的比较少-1 % 8 =  71 % -8 = -7-1 % -8 = -11 % 8 = 1从上述的例子可以看出，如果模运算的算术符符号相同，则直接等于取绝对值以后，再做模运算（负数则是负），如果符号不相同其结果等于 a % b = c(a-c) %b == 0 满足这个规律

#coding=utf-8import hashlibfrom Crypto.Cipher import AESimport base64class AesCrypter(object): def __init__(self, key): # self.key = hashlib.sha256(key).digest() # self.iv =

在js中，各种回调，各种代码嵌套，导致代码风格很不好看，所以出现了流式风格的promise，promise和twisted的defer以及QT中并行库的future是一个概念，都是说明以后做什么，都是异步操作，不过QT的是多线程异步，而twisted和js都是单线程的，使用promise这样就不用把代码都写到各种回调中了，直接一个then就可以搞定了。例如一下代码风格。/* 在nodej

/* 从5442网站上把所有的热门推荐下载下来 async+cheerio+request */const util = require('util');const request = require('request');const http = require('http');const fs = require('fs');const cheerio = require('ch

/*async的流程控制*/const async = require('async');const fs = require('fs');const util = require('util');//测试用例函数function showName(person, callback) { if ('name' in person) { //等待5秒以后开始执行操

/*async的流程控制*/const async = require('async');const fs = require('fs');const util = require('util');//异步流程控制测试类function AsyncControlFlowTest() {}AsyncControlFlowTest.prototype = { //根据列出的

/* 使用request + cheerio来爬取zngirls网站上的数据 */const request = require('request');const http = require('http');const fs = require('fs');const cheerio = require('cheerio');const url = require('url');

原来的爬取方式，会导致很多个连接同时访问服务器，而导致连接错误，修改为使用async的queue，保持始终只有两个处于激活的状态就不会出现这种问题了未使用async前的代码：/* 使用request + cheerio来爬取zngirls网站上的数据 */const request = require('request');const http = require('http');

/* 对于nodejs中由于几乎大部分的操作都是异步的，所以我们都是通过一层层的函数来实现。 而异步也会带来一些问题，那就是同时并发过度的request，就会导致链接失败（或则连接被关闭） 如何做到既能异步操作，又能控制并发数目，asyn库应该是可以满足需要 */const url = require('url');const request = require('request');

Nodejs大批量下载图片入坑指南(使用async和bagpipe处理大并发量请求)时间 2016-08-04 17:37:16  令狐葱原文  http://jiji262.github.io/2016/08/06/nodejs-batch-download-images-with-async-and-bagpipe/主题 Node.js 并发故事还得从头说起

链接:http://sharenjoy.net/?p=245

//从zngirls的网站上爬取一张图片，并进行异步存储//http://t1.zngirls.com/gallery/18071/18812/047.jpg (Paste Shift+Insert)//测试结果异步下载的效率还是相当不错的，感觉比scrapy不差//jquery使用$符号来进行包封//var $ = require('jQuery');//var jsdom = re

request.post({url:url,proxy:'http://username:password@url:port',oauth:oauth} var options = {        host: url,        port: port,        path: requestPath,headers: {   'Proxy-Authenticat

1.C/C++ -> 常规 -> 调试信息格式， 修改为程序数据库(/Zi)2.C/C++ ->优化 -> 优化，修改为已禁用(/Od)3.链接器 -> 调试 -> 生成调试信息，修改为是(/DEBUG)

12down votefavorite2I've got two branches (children of trunk) that need to be merged into one branch for testing, but they can't go into trunk. Both branches are up-to-date with trun

var http = require('http');var cheerio = require('cheerio');var url = require('url');var zlib = require('zlib');var fs = require('fs');//www.imooc.com和www.zngirls.com网站都支持gzip格式//所以导致认为接收的数据是错误

查看npm root，路径始终指向/Users/*****/node_modules，以前都是指向执行npm install的路径的，换句话说不论在哪个目录执行npm install，最后都是安装到/Users/*****/node_modules这个路径下了，是什么原因导致的，有什么办法能够改回来，求助。ps：osx系统一如既往的没人搭理 ∪︿∪不过今天在公司

1、apache 对php的支持很好，iis对php的支持也不错。但是apache对asp支持（除非装一个低效率的asp插件）几乎很烂。 2、iis对虽然能同时支持asp/php,但对于现在流行的urlrewrite 也就是静态网址就不如apache 的url重写效率高。虽然iis能装个rewrite插件（也是低效率），但不支持iis上的虚拟主机的url重写，只能对根网站、或者默认网站支持。a

http_post.js代码：var process = require('process');var listen_port = 3000;//服务器接收请求，将相应数据写回//客户端发出请求，接收响应http.createServer( function(req, res){ var buf = new Buffer(0); //接收请

//三种方法来保存网络资源文件http.get(options, function(res) { //直接使用Buffer的concat来进行连接，合并Buffer之后一次性写入 var buffer = new Buffer(0); //使用字符串来进行读写，这里特别要注意的事情就是编码，特别需要注意的是 //如果数据是二进制流的话，请一定使用ascii来统一B

直接调用psutil.Process的kill函数，可以强制性结束进程，但是对于在任务栏有图标的这种情况却解决不了，在windows上我尝试了os.kill也没有成功，任务栏上的小图标仍然存在，所以我尝试使用系统的进程管理器，发现TM居然可以，微软果然保护自己的啊！！！，所以我将关闭进程的方案修改为使用windows的批处理命令，在python中调用os.system("taskkill /P

//从zngirls的网站上爬取一张图片，并进行异步存储//http://t1.zngirls.com/gallery/18071/18812/047.jpg (Paste Shift+Insert)//测试结果异步下载的效率还是相当不错的，感觉比scrapy不差//jquery使用$符号来进行包封//var $ = require('jQuery');//var jsdom = re

webstorm中默认只是打开ecmascript的智能提示，如果需要使用nodejs作为js的引擎，请打开nodejs的智能提示功能，File -> Settings... -> Languages&Frameworks -> Node.js and NPM 页Code Assistatant启用Node.js库的代码提示即可，如下图

javascript和python函数中变量作用域的区别1.js中的函数变量必须使用关键字var进行声明，否则默认就归属到全局作用域中，而python的函数变量默认就是函数域内的作用域。2.在python的函数中如果要使用全局变量是需要使用关键字global来进行声明的，js不需要。3.python和js解析变量的方式不太一样，如下例子代码scope.js===========

#coding=utf-8__doc__ = '''使用requests来简单的爬取图片，请求使用Referer，否则爬取不到正确的结果'''CHUNK = 1024import requestsimport reimport osdef download_images(x, y): URL_SEGMENT = '{0}/{1}'.format(x,y) U

public static void Delay(int milliSecond){    int start = Environment.TickCount;    while (Math.Abs(Environment.TickCount - start)     {        Application.DoEvents();    }}也可以手动调用

python的PE库是用来专门解析PE文件的，可静态分析PE文件。PE文件现在有两个大版本https://pypi.python.org/pypi/pefile/2016.3.28 这个是2015年以后作者出的版本，但是解析速度不知道为啥，很慢。还有一个是我一直用的版本 https://pypi.python.org/pypi/pefile2/1.2.11 ，这个解析速度挺快的。（推荐使用

执行python manage makemigrations OnlineUpgrade时，报如下错误：D:\KLServer\pycode\KLServer>python manage.py makemigrations OnlineUpgradeSystemCheckError: System check identified some issues:ERRORS:OnlineU