再次尝试放出被屏蔽的百度蜘蛛网段

昨天发布的博文蜘蛛的依旧疯狂与园子的新畅想:尝试放出被屏蔽的百度蜘蛛网段引起了百度的关注,晚上联系了我们,经过商量达成一个解决方法------百度会限制一下蜘蛛抓取时的最高QPS。

今天晚上 18:16:13,我们再次尝试放出被屏蔽的百度蜘蛛网段 116.179.37.0/24,一看 CPU 波动情况,就知道应该是被百度限制住了。

观察了一段时间,pod 的 cpu 占用基本都在 3000m 以内,而且很平稳。

19:00-20:00 期间这个网段的蜘蛛一个产生了 601395 个请求,平均下来 QPS 在 160 左右,疯狂的蜘蛛终于温和了下来,让人都觉得有点不习惯。

还需要继续观察一段时间,看蜘蛛是否真的痛改前"疯",持续地保持温和。

接下来最关键的问题是搜索排名是否能逐步恢复,以及需要多长时间才能恢复。

相关推荐
兰亭妙微UI设计公司1 天前
兰亭妙微UIUE设计公司:海量股票数据如何清晰呈现?百度金融从搜索页到官网的系统化 UI 升级复盘
ui·百度·金融
龙虾PRO2 天前
把握人工智能时代机遇,夯实科技强国建设根基
人工智能·科技·百度
Ztt6666666662 天前
金泉方壶四面端正,月白釉却把棱角放柔了
经验分享·笔记·其他·百度·微信公众平台
Lemomate-AI3 天前
LemoScience:科研智能新范式
百度·微信公众平台·facebook·twitter·新浪微博
user-猴子3 天前
2026国产AI智能体七强横评:WorkBuddy、AiPy、悟空、Kimi Work、TRAE Work、QoderWork、百度搭子怎么选?
人工智能·百度·dubbo
Lemomate-AI4 天前
LemoChat:觉醒之眼,无界之语——重新定义实时多模态AI的自由边界
百度·微信公众平台·facebook·twitter·新浪微博
LaughingZhu4 天前
Product Hunt 每日热榜 | 2026-08-09
人工智能·深度学习·神经网络·搜索引擎·百度
Ztt6666666665 天前
荷口花瓶从瓶口开出一朵花
笔记·其他·百度·微信公众平台·微信开放平台
Lemomate-AI6 天前
LemoChat vs 顶级模型全景对比
百度·微信公众平台·facebook·twitter·新浪微博
Lemomate-AI6 天前
LemoChat如何超越顶级闭源方案
百度·微信公众平台·facebook·twitter·新浪微博