广告投放

百度蜘蛛IP权重,蜘蛛的抓取行为参照表

目录

    百度蜘蛛IP权重,蜘蛛的抓取行为参照表

    网传搜索引擎蜘蛛的IP对应的相关权重,按照网上的说法通常220.181.108.*为权重IP的抓取。至于到底有没有这个说法,有待考证。一下为百度的一些常见IP

    大家可以用 Ctrl+F ,在进行对应的搜索。

    百度蜘蛛功能说明
    60.172.229.61蜘蛛来访,准备抓取网页内容
    61.129.45.72蜘蛛来访,准备抓取网页内容
    61.135.162.*蜘蛛来访,准备抓取网页内容
    61.135.165.134百度竞价蜘蛛
    117.34.74.66百度竞价蜘蛛
    118.122.188.194百度竞价蜘蛛
    119.63.196.9百度竞价蜘蛛
    125.39.78.185百度竞价蜘蛛
    61.135.186.*百度联盟蜘蛛、百度统计蜘蛛
    61.147.98.146站长工具模拟百度蜘蛛
    61.188.39.16站长工具模拟百度蜘蛛
    113.98.254.245站长工具模拟百度蜘蛛
    117.21.220.245站长工具模拟百度蜘蛛
    117.28.255.42站长工具模拟百度蜘蛛
    124.248.34.52站长工具模拟百度蜘蛛
    125.90.88.*站长工具模拟百度蜘蛛
    119.147.114.213站长工具模拟百度蜘蛛
    121.10.141.*站长工具模拟百度蜘蛛
    123.15.***.***百度图片蜘蛛
    123.125.71.*抓取网站内页收录,质量不高,暂时不会放出来
    159.226.50.*考察蜘蛛(很大可能是降权蜘蛛)
    180.76.5.*考察蜘蛛(很大可能是降权蜘蛛)
    180.76.5.87考察蜘蛛(很大可能是降权蜘蛛)
    220.181.158.107考察蜘蛛(很大可能是降权蜘蛛)
    183.91.40.144新站不正常情况下的蜘蛛
    203.208.60.*新站不正常情况下的蜘蛛
    210.72.225.*打酱油的百度蜘蛛
    123.125.68.*如果发现下面这几个ip段每天只增不减的话,那就很危险了,很有可能会进入沙盒或者有被K站的现象。
    218.30.118.102如果发现下面这几个ip段每天只增不减的话,那就很危险了,很有可能会进入沙盒或者有被K站的现象。
    220.181.68.*如果发现下面这几个ip段每天只增不减的话,那就很危险了,很有可能会进入沙盒或者有被K站的现象。
    123.125.66.* 220.181.7.*代表百度蜘蛛IP来过了,准备抓取你网站上的东西!
    121.14.89.*百度蜘蛛作为度过新站考察期的一个ip段
    220.181.108.95此ip段爬过的文章或首页正常情况下基本在24小时都会放出来
    220.181.108.92此ip段爬过的文章或首页正常情况下基本在25小时都会放出来
    220.181.108.91此ip段爬过的文章或首页正常情况下基本在26小时都会放出来
    220.181.108.75此ip段爬过的文章或首页正常情况下基本在27小时都会放出来
    123.125.71.95抓取内页收录的,权重相对比较低,爬过此段的内页文章不会很快被放出来,因它怀疑不是原创文章或者怀疑是采集来的文章。
    123.125.71.97抓取内页收录的,权重相对比较低,爬过此段的内页文章不会很快被放出来,因它怀疑不是原创文章或者怀疑是采集来的文章。
    123.181.108.77抓取内页收录的,权重相对比较低,爬过此段的内页文章不会很快被放出来,因它怀疑不是原创文章或者怀疑是采集来的文章。
    123.125.71.106抓取内页收录的,权重相对比较低,爬过此段的内页文章不会很快被放出来,因它怀疑不是原创文章或者怀疑是采集来的文章。
    220.181.108.*专用抓取网站首页的,也属于权重段,一般返回代码304 0 0就代表网站未更新
    220.181.108.94专用抓取网站首页的,也属于权重段,一般返回代码304 0 1就代表网站未更新
    220.181.108.97专用抓取网站首页的,也属于权重段,一般返回代码304 0 2就代表网站未更新
    220.181.108.80专用抓取网站首页的,也属于权重段,一般返回代码304 0 3就代表网站未更新
    220.181.108.77专用抓取网站首页的,也属于权重段,一般返回代码304 0 4就代表网站未更新
    220.181.108.83专用抓取网站首页的,也属于权重段,一般返回代码304 0 5就代表网站未更新
    220.181.108.86专用抓取网站首页的,也属于权重段,一般返回代码304 0 6就代表网站未更新
    116.179.32.165 返回状态200     抓取页面资讯页面
    116.179.32.158 返回状态200     抓取页面资讯页面
    116.179.32.98返回状态200       抓取栏目页面
    116.179.32.97返回状态200        抓取内页栏目
    116.179.32.238 返回状态200       抓取内页栏目
    116.179.32.35 返回状态200    抓取内页栏目
    116.179.32.75 返回状态200    抓取内页栏目
    116.179.32.95返回状态301
    116.179.32.157返回状态301
    220.181.108.181 返回状态200   抓取页面资讯页面
    220.181.108.82返回状态200     抓取页面资讯页面
    220.181.108.141 返回状态200    抓取内页栏目
    220.181.108.94 返回状态200    抓取内页栏目
    220.181.108.110 返回状态200    抓取内页栏目
    220.181.108.166返回状态200   抓取页面资讯页面
    220.181.108.111 返回状态301       抓取网站图片
    220.181.108.170 返回状态200    抓取内页栏目
    220.181.108.114 返回状态200    抓取内页栏目
    220.181.108.153 返回状态301       抓取网站图片
    220.181.108.86 返回状态301
    220.181.108.96返回状态301
    67.149.113.177该IP只抓首页,不知道有什么用
    IP抓取参照表

    其他IP等待更新

    声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。

    给TA打赏
    共{{data.count}}人
    人已打赏
    广告位招租919838898
    0 条回复 A文章作者 M管理员
      暂无讨论,说说你的看法吧
    个人中心
    购物车
    优惠劵
    今日签到
    有新私信 私信列表
    搜索