nodejs使用superagent写爬虫dns超时

nnodejs使用superagent写爬虫,在执行一段时间之后全部抛出异常 EAI_AGAIN,查询错误代码 DNS lookup time out,主要是因为nodejs不缓存DNS信息,每发出一个请求都要先去DNS服务器磨叽一段时间,既浪费时间,并且短时间到高并发访问DNS服务器就会悲剧了,解决方法:

const res = await superagent.get('https://abc.com').connect({
   'abc.com':'123.123.123.123'     //该域名的IP地址
})

 

转载于:https://www.cnblogs.com/convincee/p/11416366.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值