网络技术
文章平均质量分 53
UP-GIS
这个作者很懒,什么都没留下…
展开
-
20170208大量Http请求close_wait的问题
解决大量http请求close_wait的问题1.问题描述通过代理执行爬取任务,过段时间就会警告打开文件数目太多,首先排查是不是打开了太多hdfs文件连接没有关闭,查看代码确定所有hdfs连接在访问后都正常close了。 我们知道在Linux环境中,任何事物都以文件的形式存在,通过文件不仅可以访问常规数据,还可以访问网络连接和硬件。如TCP和UDP等,系统在后台都会为该应用程序分配一个文件描原创 2017-02-08 17:50:07 · 1571 阅读 · 0 评论 -
端到端与点到点的区别
点到点是物理拓扑,如光纤,就必须是点到点连接,DDN专线也是,即两头各一个机器中间不能有机器。 点到点是网络层的,你传输层只认为我的数据是从a直接到e的,但实际不是这样的,打个比方,传输层好象领导,他发布命令:要干什么什么事,但真正干的不是他,真正干的是员工,也许领导认为很简单一句话就可以干好的事,在员工眼里却是难于登天,手续极其烦琐,所以传输层是发布命令的领导,他说的是命令,也就是最终的目的原创 2016-01-21 16:21:40 · 6926 阅读 · 4 评论 -
20170208大量Http请求close_wait的问题
解决大量http请求close_wait的问题1.问题描述通过代理执行爬取任务,过段时间就会警告打开文件数目太多,首先排查是不是打开了太多hdfs文件连接没有关闭,查看代码确定所有hdfs连接在访问后都正常close了。 我们知道在Linux环境中,任何事物都以文件的形式存在,通过文件不仅可以访问常规数据,还可以访问网络连接和硬件。如TCP和UDP等,系统在后台都会为该应用程序分配一个文件描原创 2017-02-08 17:54:38 · 4435 阅读 · 0 评论