当前位置:长春SEO > SEO教程 >
SEO教程

神马搜索蜘蛛YisouSpider 详细及 User Agent 判断



  随着移动互联网的兴起,神马搜索也渐渐浮现在我们眼前,以其专注于移动搜索,服务移动客户的一个专门搜索引擎得到很多站长的喜爱,但是关于神马搜索蜘蛛 YisouSpider 在互联网前几年可谓是怨声载道,许多的网站被过于频繁的抓取而导致服务器瘫痪等情况不在少数,其实看 YisouSpider 这个蜘蛛的名称就应该知道,神马搜索的前身就是“宜搜”,如果长春网站优化小编没记错的话这曾经是一个小说搜索引擎,后来被阿里拿下就正式定位于手机搜索引擎。

神马搜索蜘蛛

 

  今天长春网站优化小编之所以和大家说说神马搜索蜘蛛,并不是因为神马带来了非常客观的流量,只是因为神马最近开始支持 MIP 规范,而由于长春网站优化小编公司的一些网站接入 MIP 是用 User Agent 判断来做的代码适配,也就是说之前只是针对百度移动搜索蜘蛛和 mip 的 User Agent,而现在需要将网站的 MIP 端对神马搜索的开发,故而才有了今天的这篇文章。

  先来看长春网站优化网从网站日志中扒下来关于 YisouSpider 的几个记录:

 

 

  42.156.136.21 - "Mozilla/5.0 (iPhone; CPU iPhone OS 10_3 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) CriOS/56.0.2924.75 Mobile/14E5239e YisouSpider/5.0 Safari/602.1"

 

  42.156.137.44 - "Mozilla/5.0 (iPhone; CPU iPhone OS 10_3 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) CriOS/56.0.2924.75 Mobile/14E5239e YisouSpider/5.0 Safari/602.1"

  42.156.138.31 - "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36"

  42.156.137.14 - "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36"

  42.156.137.33 - "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36"

  106.11.156.57 - "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36"

  在神马站长平台官网虽然看到了关于 YisouSpider 的一些介绍,却也描述得模棱两可,基本没有任何参考而言,网络上搜索了一些也全是 YisouSpider 几年前的东西了,所以无奈还是只能自己动手来看看了。

  通过上面长春网站优化扒下来的,通过通过 IP 段加上完整的 User Agent,通过 IP 观察可以发现这是同一个 IP 段,应该也就是服务器集群的一组 IP 池,基本可以判断为是神马搜索蜘蛛无疑,通过 User Agent 的内容则可以判断,一种为移动端的 User Agent,一种则为 PC 端的 User Agent。

User Agent 的使用和判断方面

  关于 User Agent 的使用和判断方面的代码大家可以参考长春SEO学习网以前的文章,更多精彩内容,请继续关注长春SEO学习网。


神马搜索蜘蛛YisouSpider 详细及 User Agent 判断 http://www.121seo.cn/jiaocheng/1031.html
以上文章出自长春SEO自学网未经作者许可,不得转载。2019-03-14

分享到:
相关推荐:


推荐文章
最新文章
热搜词汇
优化技巧 网站优化 长春网站优化 关键词排名 网站优化技巧 百度人工智能 织梦后台无法输入中文 高权重外链 稳定关键词排名 优化方案 标题不能为空 360搜索升级 学校 如何做好seo 优化做好电商 五要五不要 织梦手机模板 网站日志 流量如何增加 网站优化重点 站长心得 网站如何收录 网站排名 搜索引擎命令 网站被黑 网站问题 关键词快速排名 转载文章的技巧 快照处理 首页优化 目标关键词 织梦cms技巧 网站优化关注点 织梦插件 营销 如何做伪原创 识别链接作弊 织梦标签 关键词布局 页面优化 蜘蛛抓取 首页布局 关键词挖掘方法 关键词快速上排名 灰色行业优化排名