MJ12bot是什么蜘蛛爬虫?是否需要禁止mj12bot蜘蛛的访问?

MJ12bot是英国的一家老牌的搜索引擎营销网站Majestic的爬虫,他有专门的中文站,对外链查询等很多SEO数据查询提供数据支撑,做过外链的都知道,获取外链资源是一项基本能力,这个网站可以查询网站 … Continue reading MJ12bot是什么蜘蛛爬虫?是否需要禁止mj12bot蜘蛛的访问?