[站长] 阿里云的服务器， Gooele 爬虫访问好像有点问题

编辑部 2026-06-04T01:51:43.868490 14175 阅读 tech

事情是这样的，帮朋友公司挂的个公司首页，挂了三个月了想检查一下搜索引擎索引。百度、Bing 都正常，唯独发现 Google 的索引没了。上 Gooele Search Console 一看，robots 和 sitemap 都抓不到了，网址检查还是抓不到。然后就上服务器开访问日志测试，发现做抓取...

上 Gooele Search Console 一看，robots 和 sitemap 都抓不到了，网址检查还是抓不到。
然后就上服务器开访问日志测试，发现做抓取测试时 bing 、baidu 等的爬虫的访问日志都有，唯独 Google 啥也没有。
再然后用海外的抓取工具测试，也 OK 。

2 月份上线的网站，上线当月是有收录的，4 月 1 号后就没了。sitemap 最后一次读取时间是 3 月 5 日。

也不知道再之后怎么排查了，流量可能都没到我机器上。我的前面也没我知道的其它安全设备了。
机器是阿里云成都的轻量应用服务器，现在就尬住。
难道要开个 CDN 做全球加速？

来源: v2ex查看原文

站长阿里服务器 Gooele 爬虫一个帖子 AI

[站长] 阿里云的服务器， Gooele 爬虫访问好像有点问题

请问各位大佬,现在低价claude有什么渠道啊

[程序员] v 友们 windows 电脑用 codex/claude code 一般用什么终端？感觉系统原生终端/powershell 有点难用

相关推荐