织梦CMS - 轻松建站从此开始!

红色建站_网站网页制作设计

当前位置: 首页 > SEO技术 >

百度蜘蛛抓取异常的原因?

时间:2021-01-10 09:42来源:xiaoboy.cn 作者:小男孩伪原创 点击:
有一些网页,内容优质,用户也可以正常访问,但是Baiduspider却无法正常访问并抓取,造成搜索结果覆盖率缺失,对百度搜索引擎对站点都是一种损失,百度把这种情况叫“抓取异常”。

有一些高质量内容的网页,用户可以正常访问,但是Baiduspider无法正常访问和抓取,导致搜索结果覆盖面不足,对百度搜索引擎和站点都是一种损失。百度称这种情况为“非正常爬行”。对于大量内容无法正常抓取的网站,百度搜索引擎会认为网站在用户体验上存在缺陷,降低对网站的评价,在抓取、索引、排序上会有一定程度的负面影响,最终影响网站从百度获得的流量。

下面是一些常见的对站长进行异常抓取的原因:

1.异常服务器连接

服务器连接异常有两种情况:一种是站点不稳定,Baiduspider在尝试连接你网站的服务器时暂时无法连接;一个是Baiduspider已经无法连接到你网站的服务器。

服务器连接异常的原因通常是你的网站服务器太大,过载。也有可能是您的网站工作不正常。请检查网站的web服务器(如apache、iis)是否安装运行正常,并使用浏览器检查主页是否可以正常访问。您的网站和主机也可能会阻止Baiduspider的访问,因此您需要检查网站和主机的防火墙。

2.网络运营商异常:网络运营商分为电信和联通,Baiduspider无法通过电信或网通访问您的网站。如果出现这种情况,您需要联系网络服务运营商,或购买空两线服务的房间或购买cdn服务。

3.DNS异常:当Baiduspider无法解析您网站的IP时,会出现DNS异常。可能你的网站IP地址不对,或者域名服务商已经封杀了Baiduspider。请使用WHOIS或主机查询您网站的IP地址是否正确和可解析。如果不正确或未解决,请联系域名注册商更新您的IP地址。

4.IP ban: IP ban的意思是:限制网络的出口IP地址,禁止该IP段的用户访问内容,这里专门禁止BaiduspiderIP。只有当您的网站不想让Baiduspider访问时,才需要此设置。如果您想让Baiduspider访问您的网站,请检查BaiduspiderIP是否是在相关设置中错误添加的。也有可能百度IP已经被你网站所在的空服务商封杀,需要联系服务商更改设置。

5.UA被禁止:UA是一个用户代理,服务器通过UA识别访问者的身份。当网站返回异常页面(如403,500)或跳转到其他页面访问指定的UA时,UA被禁止。只有当您的网站不想让Baiduspider访问时,才需要此设置。如果想让Baiduspider访问你的网站,在与useragent相关的设置中是否有Baiduspider UA,并及时修改。

6、死链:页面无效,不能向用户提供任何有价值信息的页面为死链,包括协议死链和内容死链:

协议死链:页面的TCP协议状态/HTTP协议状态明确指示的死链,如404、403、503状态等。

内容死链:服务器返回的状态正常,但内容已被更改为与原内容无关的信息页面,如不存在、已删除或需要权限等。

至于死链,我们建议站点使用协议死链,通过百度的站长平台死链工具提交给百度,让百度更快找到死链,减少死链对用户和搜索引擎的负面影响。 (责任编辑:admin)

织梦二维码生成器
顶一下
(0)
0%
踩一下
(0)
0%
------分隔线----------------------------
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
表情:
用户名: 验证码:点击我更换图片
发布者资料
天涯 查看详细资料 发送留言 加为好友 用户等级:注册会员 注册时间:2010-04-07 14:04 最后登录:2010-04-07 14:04
栏目列表
推荐内容