节流

其实很简单:我们可以设计一种类似控制阀门一样定期开放的函数,也就是让函数执行一次后,在某个时间段内暂时失效, //过了这段时间后再重新激活(类似于技能冷却时间)。 // 效果:如果短时间内大量触发同一事件,那么在函数执行一次之后,该函数在指定的时间期限内不再工作,直至过了这段时间才重新生效。 // 实现 :这里借助setTimeout来做一个简单的实现,加上一个状态位valid来表示当前函数是否处于工作状态:

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <meta name="viewport" content="width=device-width, initial-scale=1.0">
    <title>Document</title>
    <style>
        body{
            height: 2000px;
            background-color: aqua;
        }
    </style>
</head>
<body>
    
</body>
</html>
<script>

function throttle(showTop,delay){
    let valid = true   //valid:有效
    return function() {
       if(!valid){
           //休息时间 暂不接带
           return false 
       }
       // 工作时间,执行函数并且在间隔期内把状态位设为无效
        valid = false
        setTimeout(() => {
            showTop()
            valid = true;
        }, delay)
    }
}
/* 请注意,节流函数并不止上面这种实现方案,
   例如可以完全不借助setTimeout,可以把状态位换成时间戳,然后利用时间戳差值是否大于指定间隔时间来做判定。
   也可以直接将setTimeout的返回的标记当做判断条件-判断当前定时器是否存在,如果存在表示还在冷却,并且在执行fn之后消除定时器表示激活,原理都一样
    */
function showTop  () {
    var scrollTop = document.body.scrollTop || document.documentElement.scrollTop;
  console.log('滚动条位置:' + scrollTop);
}
window.onscroll = throttle(showTop,1000) 
</script>
Selenium节流是一种控制Selenium操作频率的技术,用于模拟人类的操作行为,以避免被网站识别为机器人或被封禁。节流可以通过以下几种方式实现: 1. 设置随机等待时间:在每个操作之前,通过设置随机的等待时间来模拟人类的操作间隔。可以使用`time.sleep()`函数来实现等待。 2. 设置固定等待时间:在每个操作之前,设置固定的等待时间来模拟人类的操作间隔。可以使用`time.sleep()`函数来实现等待。 3. 随机点击位置:在进行鼠标点击操作时,可以通过随机生成点击位置的坐标来模拟人类的不规律点击行为。 4. 随机滚动页面:在进行页面滚动操作时,可以通过随机生成滚动的距离和速度来模拟人类的滚动行为。 5. 使用代理IP:通过使用代理IP来隐藏真实的请求来源,增加请求的多样性,从而降低被封禁的风险。 6. 使用多个浏览器窗口或标签页:可以在多个浏览器窗口或标签页之间切换,模拟多个用户同时进行操作。 7. 避免频繁操作相同元素:在进行元素定位和操作时,尽量避免频繁地对同一个元素进行操作,可以通过缓存元素对象或使用其他方式来减少对元素的操作次数。 8. 使用隐式等待:在使用Selenium时,可以设置隐式等待时间,让Selenium等待一段时间再进行下一步操作,以避免过快的操作。 这些节流技术可以结合使用,根据具体情况选择适合的方式来控制Selenium操作的频率,以提高爬取数据的成功率和稳定性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值