为什么百度蜘蛛总抓取奇奇怪怪的东西?

Դhttp://www.6cu.com/wailian/

ߣ外链发布

16

2021-03-26 15:32:08

https://www.qingtingxy.com/wp-content/uploads/2021/03/[?]

https://www.qingtingxy.com/wp-json/wp/v2/posts/3198[?]

https://www.qingtingxy.com/wp-json/b2/v1/getCurrentUserCircleData[?]

https://www.qingtingxy.com/wp-json/b2/v1/checkFollowing[?]?



类似这种抓了很多 正常吗?

1、百度蜘蛛抓取站点存在的文件也都是正常的;
2、蜘蛛抓取频次可以判断来访蜘蛛是否真实蜘蛛;
3、百度站长抓取异常无异常就没有关系,正常持续站内外SEO优化即可。

老铁小编回答:

奇怪代表少见

老铁小编回答:

感觉 一直都 是这们

老铁小编回答:

百度会在你服务器里啥都抓得,

老铁小编回答:

抓取的是正常的

老铁小编回答:

百度最近幅度有点大

老铁小编回答:

限制一下蜘蛛抓取的路径就行。

老铁小编回答:

百度最近幅度有点大

老铁小编回答:

我的也是,天天抓取JS

老铁小编回答:

不需要爬取的可以屏蔽掉

老铁小编回答:

那不是什么奇怪的东西,那是网页上的内容!

老铁小编回答:

百度什么时候正常过

老铁小编回答:

正常吗?

佭ϴý Ѷ Media8ý

在线客服

外链咨询

扫码加我微信

微信:juxia_com

返回顶部