MJ12bot是什么爬虫?能不能屏蔽? 对于MJ12bot爬虫蜘蛛要看抓取次数是否很多,如果抓取次数很多,而且网站访问速度有所降低的话,就屏蔽掉,另外这种还有可能是其他采集软件伪装的搜索引擎制作,通过nslookup反查一下IP地址,如果是采集软件伪装的蜘蛛,立马封掉。 MJ12… 赞 参与讨论{{item.data.meta.comment}}条讨论
MJ12bot是什么爬虫?能不能屏蔽? 对于MJ12bot爬虫蜘蛛要看抓取次数是否很多,如果抓取次数很多,而且网站访问速度有所降低的话,就屏蔽掉,另外这种还有可能是其他采集软件伪装的搜索引擎制作,通过nslookup反查一下IP地址,如果是采集软件伪装的蜘蛛,立马封掉。 MJ12… 赞 参与讨论{{item.data.meta.comment}}条讨论
作者: MJ12bot是什么爬虫?能不能屏蔽? 对于MJ12bot爬虫蜘蛛要看抓取次数是否很多,如果抓取次数很多,而且网站访问速度有所降低的话,就屏蔽掉,另外这种还有可能是其他采集软件伪装的搜索引擎制作,通过nslookup反查一下IP地址,如果是采集软件伪装的蜘蛛,立马封掉。 MJ12… 赞 参与讨论{{item.data.meta.comment}}条讨论
MJ12bot是什么爬虫?能不能屏蔽? 对于MJ12bot爬虫蜘蛛要看抓取次数是否很多,如果抓取次数很多,而且网站访问速度有所降低的话,就屏蔽掉,另外这种还有可能是其他采集软件伪装的搜索引擎制作,通过nslookup反查一下IP地址,如果是采集软件伪装的蜘蛛,立马封掉。 MJ12… 赞 参与讨论{{item.data.meta.comment}}条讨论