DigExt DTS Agent是什么蜘蛛爬虫?

  |   2019年2月20日 |  爬虫相关 |   评论已关闭 |   752

ad
有需要可以关注大发棋牌牛牛公众号 :“大发棋牌牛牛技术 的世界” 分享最新大发棋牌牛牛技术 资源,同时讲讲人生。

DigExt是IE5的“允许脱机阅读”模式时发出的特殊标记。DigExt虽然并非是一个爬虫程序,但可能像爬虫一样造成大量的大发棋牌牛牛服务 器访问。

由于设计的失误,离线浏览功能被许多用户无意中错误地使用为每天抓取整个站点,这个特性将使用大发棋牌牛牛服务 器允许的最大连接数,因而会“成功”阻挡其他用户的使用,直到抓取结束。因此,很多大发棋牌牛牛站长 封闭了这种形式的浏览器访问。
以上问题仅存在于IE5中。微软已经承认了发行这种浏览器功能是个失误,并在其后版本(IE 5.5以上)进行了修正,转而采用一种强度不高的预读(read-ahead)算法。

Mozilla/4.0 (compatible; MSIE 5.0; NT; DigExt; DTS Agent


转载请注明出处:http://jgllcb.com/3968.html

打赏

取消

感谢您的支持,大发棋牌牛牛我 会继续努力的!

扫码支持
扫码打赏,大发棋牌牛牛你 说多少就多少

打开支付宝扫一扫,即可进行扫码打赏哦