关于百度无法爬取GitHub内容解决方案

fly-03 / Sky03-Blog-Background

Sky03博客评论

0 stars 0 forks source link

Open ListenV opened 4 years ago

ListenV commented 4 years ago

关于百度无法爬取GitHub内容解决方案既然百度无法爬取GitHub，那么我们只需要找个可以被百度爬取到的代码托管平台即可（并且还提供pages服务），基本只有国内的平台了：Gitee和Coding！Gitee自定义域名要花钱（九十多，都可

feichaoyu commented 4 years ago

需要用dnspod吗？

这个测试出现首页，博客被抓取到需要等多久

feichaoyu commented 4 years ago

域名解析完，出现重定向了？

ListenV commented 4 years ago

@FeiChaoyu 需要用dnspod吗？

这个测试出现首页，博客被抓取到需要等多久

这个需要设置域名解析，你的域名提供商是谁，你就到哪谁那设置，如果你是腾讯的，你就到腾讯的控制台设置测试后的文件如果打开是你的首页，说明百度的蜘蛛爬虫爬取到了你的首页，百度是可以爬你的网站的至于多久收录，少则一个星期，多则一个月不等。把推送做好，剩下的，等就行了！

ListenV commented 4 years ago

@FeiChaoyu 域名解析完，出现重定向了？

如果你设置了强制https，那么测试命令最后你的域名前要加上https://

feichaoyu commented 4 years ago

不知道为啥，我加上了也不行，单独访问coding和github都可以

feichaoyu commented 4 years ago

ListenV commented 4 years ago

@FeiChaoyu

你的 https://www.feichaoyu.com/ 会301跳转到 https://feichaoyu.com/ 所以你用测试代码也可能出现301 www的两个解析去掉即可，只保留@就行了，百度那边有可能会把 https://feichaoyu.com/ 和 https://www.feichaoyu.com/ 当成两个域名来对待，甚至造成权重的分散

feichaoyu commented 4 years ago

我改成和博主您这样了。

这是我的证书，不知道为啥不起作用

然后还是重定向

ListenV commented 4 years ago

@FeiChaoyu 我改成和博主您这样了。

这是我的证书，不知道为啥不起作用

然后还是重定向

我刚用刚用命令爬你网站，显示你的域名解析是指向github的，百度的DNS可能有缓存，反应会慢一点，如果你不常用github做仓库，你可以用coding做仓库，直接把coding改成默认，github删掉就行了，这样百度也只能爬coding，加QQ聊946523579