【Network】
encoderlee
十年码龄,专注于Web爬虫、区块链、逆向工程、游戏脚本、自动化、后端开发。如需联系我,关注公众号【挨踢老李】获取联系方式
展开
-
记一次WEB数据采集程序开发经历——对付简单的动态加载
自从学做网站账号批量注册机、图片批量下载器,开始接触HTTP协议,了解了基本的GET/POST请求等知识,于是便开始着手开发一些小东西了。WEB数据采集,很多人都在搞。据说搞WEB数据采集用JAVA会更方便,有很多现成的类库可用。可以说WEB数据采集这块,是C++的短板。我目前能想到的方法就是利用WinInet,这是一组关于Intelnet三大协议HTTP、FTP、Gopher的windows原创 2013-03-20 08:58:53 · 6049 阅读 · 1 评论 -
开发WEB机器人的三种常用方法
我们在windows平台上写一些WEB机器人程序的时候,通常有三种方法。1.webbrowser一种是使用webbrowser控件加载网页,用MSHTML来操控整个网页,进行模拟填表、提交、点击、采集数据。这种方式开发起来比较简单。但由于需要加载整个页面,缺点是速度慢、效率不高,内存占用大,难以做成多线程并发。2.Winhttp一种是直接基于HTTP协议来做,分析出每一个填表、提交原创 2013-06-02 16:28:05 · 4624 阅读 · 0 评论 -
Wininet、WebBrowser编程中如何管理Cookie
用VC++访问网页,一般都是用微软提供的Wininet、WinHTTP(基于HTTP协议)或WebBrowser(加载整个网页)。当然还有libcurl之类的第三方类库,因为暂时没接触过,就不说了。在使用上述三种方式访问网页的编程过程中,默认情况下是由它来管理Cookie,但有时候程序员想手工干预,比如清除Cookie、修改Cookie、添加Cookie。在网上搜索了一下,大概有这么三种方法:原创 2013-12-19 12:34:22 · 12439 阅读 · 1 评论