近期在折腾下hexo博客
发现百度搜索网址都搜索不到自己的站点
我只把hexo传到github上,然而去百度站长工具提交网址几条后也没有反应
我就测试了一下百度站长工具 - 抓取诊断
结果是抓取失败:Github把百度的爬虫给干掉了!所以。。。
具体内容如下:
1 | 提交网址: http://hisen.me/20170214-maven%E7%8E%AF%E5%A2%83%E6%90%AD%E5%BB%BA/ |
返回HTTP头:
1 | HTTP/1.1 403 Forbidden |
近期在折腾下hexo博客
发现百度搜索网址都搜索不到自己的站点
我只把hexo传到github上,然而去百度站长工具提交网址几条后也没有反应
我就测试了一下百度站长工具 - 抓取诊断
结果是抓取失败:Github把百度的爬虫给干掉了!所以。。。
具体内容如下:
1 | 提交网址: http://hisen.me/20170214-maven%E7%8E%AF%E5%A2%83%E6%90%AD%E5%BB%BA/ |
返回HTTP头:
1 | HTTP/1.1 403 Forbidden |