温馨提示:这篇文章已超过968天没有更新,请注意相关的内容是否还可用!
抓取频次功能说明
抓取频次是搜索引擎在单位时间内(天级)对一个网站服务器访问的频率和总次数,Bytespider会根据网站内容更新频率和服务器压力自动调整抓取频次。站长可以通过抓取频次监控工具查看头条爬虫对站点最近的抓取情况,也可以修改抓取频次返回给Bytespider。
生效周期
抓取频次修改提交后最快次日生效。
工具使用
抓取频率查询
选择需要查询抓取情况的站点,即可得到近期头条对该站点抓取情况图示。
抓取频次怎么调整
您可以通过抓取压力反馈工具向头条爬虫反馈对站点抓取情况设置,Bytespider会根据您的反馈并结合站点情况进行调整。
建议您仅在网站抓取异常时使用此工具进行压力调整反馈,请慎重限制抓取上限,以避免网站抓取异常。
抓取频次相关QA
为什么我设置主站压力后,子站压力控制不生效呢?
因为抓取频次功能只针对单个站点生效,无主站概念。设置主站压力无法决定和影响子站压力,如果想针对子站做压力控制,需要逐一设置子站的压力才会生效。
免责声明:本文来自头条站长平台,不代表0oD三一o0的观点和立场,如有侵权请联系本平台处理。
还没有评论,来说两句吧...