V2EX › moonlightpics 的所有回复 › 第 1 页 / 共 1 页

首页注册登录

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

3 天前

回复了 moonlightpics 创建的主题 › 搜索引擎优化 › 请问大佬们， google 是不能抓取国内的网页了吗？我用的阿里云 DNS， google 一直说无法访问 robots.txt

而且挺搞笑的，他显示我带 www 的域名可以访问 robots ，不带 www 的却不行，，关键我带 www 的是 301 定向到不带 www 的，纳闷.

3 天前

回复了 moonlightpics 创建的主题 › 搜索引擎优化 › 请问大佬们， google 是不能抓取国内的网页了吗？我用的阿里云 DNS， google 一直说无法访问 robots.txt

@Kwnthink 就是 google 没法 ping 通我的 robots 。。别的搜索都可以，所以我怀疑是不是 google 不能访问大陆 IP ？但是别的网站收录都挺好的啊，，，奇怪。

6 天前

回复了 moonlightpics 创建的主题 › 搜索引擎优化 › 请问大佬们， google 是不能抓取国内的网页了吗？我用的阿里云 DNS， google 一直说无法访问 robots.txt

@Jesmora 不是，我现在把 robots.txt 删了，所以访问 robots.txt 是 404,但是即使删除了 robots.txt ，google 还是没法抓取我的网页。

关于 · 帮助文档 · 自助推广系统 · 博客 · API · FAQ · Solana · 2857 人在线 最高记录 6679 ·

Select Language

创意工作者们的社区

World is powered by solitude

VERSION: 3.9.8.5 · 14ms · UTC 05:10 · PVG 13:10 · LAX 21:10 · JFK 00:10
♥ Do have faith in what you're doing.