每天的抓取量在4500~10000+,大部分96%都是抓取图片去,有一万的抓取就有九千多抓取图片去
我网站的图片也不是很多,没有新增的图片,图片都是重复利用,文章的图片是从图片库调取随机插入。
网站的收录率也只有60%这样,有什么整才能让它抓取文章去。
有一点不解,图片是放在文章内容里,要抓取图片,那也要先抓取文章呀才能提取图片呀。
难道是它第一抓取图片时,就保存图片地址,第二次....第三次。。。就直接通过图片地址来,而不是通过文章里提取图片地址。
如果没有造成网站的障碍就不用管,以网站排名与收录为重点这些都是数据很好的话就不用理
老铁网友解答:这个频率会不会影响网站正常访问啊
老铁网友解答:有的厉害呀!
老铁网友解答:有点厉害啊。。
老铁网友解答:是不是有人盗用你的图片链接 要注意啊
老铁网友解答:你这个是怎么看到他只抓取图片的呢?这个是要怎么操作呢?
老铁网友解答:这么神奇的操作?,进来学习学习
老铁网友解答:去看下网站日志分析下
老铁网友解答:确定是蜘蛛吗?不希望抓取的话就直接rootxt禁止一下吧
老铁网友解答:去看下网站日志分析下
老铁网友解答:推推娃 说的很对啊~!~!~
老铁网友解答:把文章里插入图片
老铁网友解答:假的蜘蛛吧!
老铁网友解答:多做引导蜘蛛
老铁网友解答:1、百度站长抓取频次看下是否有这么高频次;
2、日志分析,蜘蛛只抓图片,是否是真蜘蛛;

2021-03-10 19:34:03