无障碍 关怀版

蜘蛛常识-百度蜘蛛IP段详解

原标题:蜘蛛常识-百度蜘蛛IP段详解

大家进行日志分析的时候,常见到很多不同IP段的百度蜘蛛,为了方便大家更好的进行日志分析,下面列举了百度不同IP段常见蜘蛛的一些详情情况,及所谓的降权蜘蛛,沙盒蜘蛛,高权重蜘蛛等等

以下内容全凭事实总结得出,没有任何官方依据,但是事实是最有用的

采菊新闻网收录

上面这个站上线5天,收录4340个页面,下面是蜘蛛情况

蜘蛛记录

多的话不说了,开始说说蜘蛛分类!

下面的百度蜘蛛IP造访,准备抓取你东西,抓取网页的百度蜘蛛。

60.172.229.61

61.129.45.72

61.135.162.*

百度竞价蜘蛛

61.135.165.134

117.34.74.66

118.122.188.194

119.63.196.9

125.39.78.185

(百度联盟爬虫),说白了就是百度统计。

61.135.186.*

站长工具模仿的百度蜘蛛。

61.147.98.146

61.188.39.16

113.98.254.245

117.21.220.245

117.28.255.42

114站长工具箱(这个是你的网站不稳定时常来的)

119.147.114.213

121.10.141.*

百度图片爬虫

123.15.**.**

这个蜘蛛经常来,别的来的少,表示网站可能要进入沙盒了,或被者降权。

123.125.68.*

抓取内页收录的,权重较低,爬过此段的内页文章暂时被收录但不放出来(意思也就是说待定),因不是原创或采集文章。(百度网页爬虫(百度图片爬虫)

123.125.71.*

搜外站长工具蜘蛛。

124.248.34.52

也属于百度蜘蛛IP 主要造成成分,是新上线站较多,还有使用过站长工具,或综合检测造成的,没有多大用。

125.90.88.*

百度蜘蛛

159.226.50.*

180.76.5.*

180.76.5.87

220.181.158.107

伪装百度蜘蛛IP

180.149.130.*

这个ip段出现在新站及站点有不正常现象后。

183.91.40.144

203.208.60.*

这个ip段不间断巡逻各站,就是路过一下。

210.72.225.*

降权蜘蛛

每天这个IP 段只增不减很有可能进沙盒或K站

218.30.118.102

220.181.68.*

123.125.68.*

220.181.68.*

主要是抓取首页占80%,内页占30%,这此爬过的文章或首页,绝对24小时内放出来和隔夜快照的!一般成功抓取返回代码都是 200 0 0返回304 0 0代表网站没更新,蜘蛛来过,如果是 200 0 64别担心这不是K站,可能是是动态的,所以返回就是这个代码。

220.181.108.*

代表百度蜘蛛IP来访准备抓取你东西

220.181.7.*

123.125.66.*

这个ip段作为度过新站考察期

121.14.89.*

这个ip段出现在新站或站点有不正常现象后

203.208..60.*

这个ip段不间断巡逻各站

210.72.225.*

这个是百度抓取首页的专用IP如是220.181.108段的ip来的话基本来说网站会天天隔夜快照,绝对错不了的

220.181.108.95

98%抓取首页可能还会抓取其他「不是指内页)属于权重IP段此段爬过的文章或首页基本24小时放出来.

220.181.108.92

抓取内页收录的 权重较低 爬过此段的内页文章不会很快放出来,因不是原创或采集文章

123.125.71.106

属于综合的。主要抓取首页和内页或者其它页面。属于权重IP段, 抓过的文章或首页基本24小时放出来

220.181.108.91

重点抓取更新文章的内页达到90%,8%的抓取首页,2%其他权重ip段,抓过的文章或首页基本24小时放出来

220.181.108.75

专用抓取首页ip 权重段,一般返回代码304 0 0代表未更新

220.181.108.86

抓取内页收录的,权重较低,爬过此段的内页文章不会很快放出来,因不是原创

123.125.71.95

123.125.71.97

专用抓取首页ip 权重段,一般返回代码304 0 0代表未更新

220.181.108.89

220.181.108.94

220.181.108.97

220.181.108.80

220.181.108.77

抓取内页收录的, 权重较低,爬过此段的内页文章不会很快放出来,因不是原创

123.181.108.77

专用抓取首页ip 权重段,一般返回代码304 0 0代表未更新

220.181.108.83 返回搜狐,查看更多

责任编辑:

平台声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
阅读 ()
推荐阅读

天下网标王爱联建设网站价格漯河百度标王公司文山外贸网站建设果洛seo网站推广价格大丰网站开发公司布吉关键词排名价格忻州网站开发报价长葛seo排名多少钱兰州网站排名优化哪家好辽源优化大庆优秀网站设计大鹏关键词排名包年推广多少钱漳州网站优化多少钱丽水企业网站改版多少钱固原模板推广哪家好观澜百度关键词包年推广报价西宁外贸网站制作价格永新网站建设多少钱菏泽英文网站建设多少钱十堰seo排名多少钱滁州网站关键词优化哪家好沙井网络广告推广多少钱大运关键词按天计费多少钱昌吉百度竞价包年推广公司白银网站搜索优化哪家好保山网页制作哪家好铁岭企业网站建设公司鸡西网站定制价格洛阳网站seo优化哪家好林芝网页设计多少钱香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声卫健委通报少年有偿捐血浆16次猝死汪小菲曝离婚始末何赛飞追着代拍打雅江山火三名扑火人员牺牲系谣言男子被猫抓伤后确诊“猫抓病”周杰伦一审败诉网易中国拥有亿元资产的家庭达13.3万户315晚会后胖东来又人满为患了高校汽车撞人致3死16伤 司机系学生张家界的山上“长”满了韩国人?张立群任西安交通大学校长手机成瘾是影响睡眠质量重要因素网友洛杉矶偶遇贾玲“重生之我在北大当嫡校长”单亲妈妈陷入热恋 14岁儿子报警倪萍分享减重40斤方法杨倩无缘巴黎奥运考生莫言也上北大硕士复试名单了许家印被限制高消费奥巴马现身唐宁街 黑色着装引猜测专访95后高颜值猪保姆男孩8年未见母亲被告知被遗忘七年后宇文玥被薅头发捞上岸郑州一火锅店爆改成麻辣烫店西双版纳热带植物园回应蜉蝣大爆发沉迷短剧的人就像掉进了杀猪盘当地回应沈阳致3死车祸车主疑毒驾开除党籍5年后 原水城县长再被查凯特王妃现身!外出购物视频曝光初中生遭15人围殴自卫刺伤3人判无罪事业单位女子向同事水杯投不明物质男子被流浪猫绊倒 投喂者赔24万外国人感慨凌晨的中国很安全路边卖淀粉肠阿姨主动出示声明书胖东来员工每周单休无小长假王树国卸任西安交大校长 师生送别小米汽车超级工厂正式揭幕黑马情侣提车了妈妈回应孩子在校撞护栏坠楼校方回应护栏损坏小学生课间坠楼房客欠租失踪 房东直发愁专家建议不必谈骨泥色变老人退休金被冒领16年 金额超20万西藏招商引资投资者子女可当地高考特朗普无法缴纳4.54亿美元罚金浙江一高校内汽车冲撞行人 多人受伤

天下网标王 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化