百度抓取诊断失败提示DNS无法解析ip怎么处理?

百度抓取诊断失败提示DNS无法解析ip怎么处理?,第1张

百度抓取诊断失败提示DNS无法解析ip怎么处理?

百度站长这方面真的是让我们这样的站长很头疼。最后,我们做好了一个网站,尽全力写一篇原创文章内容。最后,我们覆盖了网站,并能够上网。但是,我们发现了一系列的问题。更难处理的是百度站长抓取诊断不成功,提醒DNS无法分析IP问题。因为网站可以正常浏览,服务商检查那里一切正常。模拟搜索引擎蜘蛛也能正常抓取一切,只是百度有问题。所以谢蟠龙给了大家一个比较完整的解决这个问题的方法,这是我真正经历过的。

首先,如果一个新的网站即将发布,并添加到百度站长工具中,首先要进行爬取诊断和测试,看爬取能否成功,然后进行HTTPS验证。如果爬行诊断不成功,原因是DNS无法解析IP,那么我们需要从以下几个方面进行检查。

1.域名解析

如果域名解析错误,百度搜索引擎蜘蛛无法打开网站或者web服务器可以抓取网站内容。一般来说,如果网站可以正常浏览,说明域名解析合适。

2.网络服务器不稳定。

某些web服务器或服务器不稳定。如果说web服务器或者服务器不稳定,搜索引擎蜘蛛都打不开,更别说抓取网站了。还有一点就是网络服务器有独立的DNS。如果遇到DNS无法解析IP,可以尝试联系服务商更改DNS进行抓取诊断,一般都会处理。

3.网站编码限制

很多站长喜欢用在线模板来搭建网站。比如通用模板wordpress,会有限制搜索引擎抓取的功能。这也是他们在刚被创造出来的时候,可以自由选择是禁止还是对外开放的情况。所以大家可以查一下自己的网站是否也有限制。

4、Robots.txt限制

Robots已经限制了现阶段网站应用很少,但是也要关注这一块。或许是自己的网站有Robots.txt协议,限制了百度搜索引擎蜘蛛的抓取和浏览。

5.百度本身

百度有句话叫一切正常,关键是大多数情况下都是不正常的。这也是站长们的聊天。其实你说的是对的。2020年,百度站长工具出现了无法添加新网站、无法登录百度站长工具等一系列问题。如果以上工具都没问题,那么毫无疑问是百度自己的问题。毕竟2020年百度站长出现问题后,很多功能至今没有完全恢复。可能是百度自己的缓存文件或者bug还在恢复中。这时候大家可以反馈一下,看看百度的回答。

接下来,我们来展开如何检测的问题。

如果是使用阿里云虚拟主机的朋友,爬虫诊断提醒DNS无法解析IP,阿里服务器厂商表示一切正常。如果没有问题,这个时候就不用手足无措了。您可以将域名解析到另一台服务器以执行爬网诊断。如果抓取成功,可以分析到原服务器,看是否可以。如果抓取还是不成功,问题众所周知,那就是阿里云主机的问题。此时,您可以考虑移除并更换服务器。

1/212下一页的最后一页

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zz/766022.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-05-02
下一篇 2022-05-02

发表评论

登录后才能评论

评论列表(0条)

保存