白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码

SEO优化评论38

点击蓝字关注,每周学习SEO精准营销实战干货

白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码-图片1

原创:白杨SEO 全文1815字预计阅读3分钟

前言:这是白杨SEO公众号原创第179篇。在白杨SEO实战培训课里有一堂基础课,布置作业即认识各种搜索引擎蜘蛛与网站HTTP状态码,今天就来分享一下,给SEO新人看一看。

白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码

缘由:

不知不觉,本公众号更新原创近200篇了。我的实战培训也举行完三期了,第四期因个人原因有事暂停。关于SEO基础也写了几十篇公众号,一个朋友介绍我可以把基础实战整理出书,在考虑中。

关于SEO基础文章,白杨SEO公众号菜单栏点【SEO入门教程】即可查看,今天再补一篇。正如前言所写,这是很基础的,但这个基础并不是人人都很清楚,所以写下哈。

搜索引擎及搜索引擎蜘蛛是什么?

我在实战培训第一课讲搜索引擎基本工作原理时,都会给新人讲搜索引擎是什么,然后再来讲,搜索引擎蜘蛛是什么。那么,在这里再讲一下。主要分类如下:

1、按国内与国外分

国内:百度、搜狗、360、神马(UC)、头条等;国外:google、bing、yahoo、yandex(俄罗)等。

2、按PC与移动端分

PC:google、bing、yahoo、百度、搜狗、360

移动:神马、头条

PC+移动都有:google、bing、yahoo、百度、搜狗

当然除了上面介绍的通用搜索引擎,其实还有一些垂直的搜索引擎。比如像搜文库的豆丁网,搜索工作的职友集等等。

各个搜索引擎蜘蛛是什么?

这里的【蜘蛛】非生活现实中的蜘蛛,我们只是把搜索引擎去爬取各网页内容那个代码我们形象的称它为蜘蛛。各个搜索引擎蜘蛛写法如下:

白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码

白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码

如何识别百度搜索引擎蜘蛛呢?

其实,很多新人SEO同学很少接触到搜索引擎蜘蛛,即使百度蜘蛛也未必能接触到。即使接触到了,也不知道它是不是。为什么呢?因为很多SEO新人没有分析网站日志,所以没看到。

如果你有分析过网站日志的话,就应该见过百度蜘蛛了(baiduspider)。

目前百度UA(useragent简称,即用户)分为移动、PC、和小程序三个应用场景来访,这三个渠道UA分别如下:

移动UA:
Mozilla/5.0(Linux;u;Android4.2.2;zh-cn;)AppleWebKit/534.46 (KHTML,likeGecko)Version/5.1MobileSafari/10600.6.3
(compatible;Baiduspider/2.0;
+http://www.baidu.com/search/spider.html)
Mozilla/5.0 (iPhone;CPUiPhoneOS9_1likeMacOSX) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html)
PC UA:
Mozilla/5.0(compatible;Baiduspider/2.0;
+http://www.baidu.com/search/spider.html)
Mozilla/5.0(compatible;Baiduspider-render/2.0;
+http://www.baidu.com/search/spider.html)
小程序UA:
Mozilla/5.0(iPhone;CPUiPhoneOS9_1likeMacOS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible;Baiduspider-render/2.0;Smartapp; +http://www.baidu.com/search/spider.html)
如果UA信息不对,可以直接判断为非百度搜索的蜘蛛。关于日志分析,可以看文尾相关推荐文章。
网站HTTP状态码是什么意思?有哪些?
网站的HTTP状态码是用以表示网页服务器超文本传输协议响应状态的3位数字代码。
对于我们做SEO来说,HTTP状态码的最大意义就是,通过它们可以查看搜索引擎在你网站的爬取情况,从而进行优化。
1、网站状态码的分类:
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
如上截图,从1-3开头代表正常,4-5开头可能有问题。
2、网站状态码详细列表及含义:
如下截图里的。重点看白杨SEO圈红的地方。像什么200、301、302、404、502、503这几个是做SEO必须要了解的。
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
比如,如果一个网站有大量的404页面的话,其实对搜索引擎也不友好,一般建议是制作成txt或者xml提交到百度站长平台后台。
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码
再比如,打开网站显示502或者503的话,就要赶紧联系你的技术了。很多人以为网站偶尔打不开很正常,殊不知,这在做SEO里是大忌!
真实案例,我以前前前公司一个同事来问我,说自己网站连续更新了两个月了,为什么百度还没收录?我让他把网址发我看一看。我试了各个浏览器很久打不开,问他说那边服务器问题,让我第二天再看看。
其实做为SEO新人的你可能不知道,但假想一下,你是那个潜在用户,去访问一个网站打不开的话是不是马上就关掉走了呢。而百度从关键词相关到外链再到现在用户体验为核心,所以懂了吧。
OK,今天就分享这些基础跟你,希望你可以了解得更多一点。如果有SEO问题,可以加我的付费微信群或者知识星球进来交流提问。
相关推荐:
白杨SEO:大白话告诉你理解搜索引擎工作原理的意义和运用【原创】
白杨SEO:不是技术的技术文,关于网站性能优化与网站日志分析
SEO入门教程一:SEO必看的基础名词
白杨SEO简介:
白杨SEO,专注SEO研究十年,SEO实战派。个人微信:baiyang2047对互联网精准引流有深入研究。前杰恩西运营总监(COO),现自由职业。
白杨SEO付费群199元/年。如需加好友,验证:公众号;如需进群,验证:进群。如果想加入白杨SEO付费星球学习提问,回复关键词“优惠券”即可。
白杨SEO:SEO入门学习之搜索引擎(百度)蜘蛛与网站HTTP状态码-图片2

 
陈年烂谷子事,赶集和58同城历史SEO流量情况 SEO优化

陈年烂谷子事,赶集和58同城历史SEO流量情况

这篇文章谈谈赶集和58同城的历史SEO情况。未必有什么干货,可能感兴趣的人看看,不感兴趣略过吧。以下是艾瑞这个第三方数据机构采样统计的数据,分类信息三家网站PC端的百度来源流量情况:(图为百度指数,招...
浅谈网站SEO三要素之结构、内容、链接 SEO优化

浅谈网站SEO三要素之结构、内容、链接

一直以来,关于网站SEO的话题经久不衰,归根到底,无非脱离不了网站的结构、内容、链接这最基本的三元素。将这三元素无限拓展开,确实有说不完的话题。简单的事情复杂化、复杂的事情简单化。如果将结构、内容、链...
得劲!引爆流量——SEO搜索优化秘籍来袭! SEO优化

得劲!引爆流量——SEO搜索优化秘籍来袭!

4月12日,2015电商搜索研究中心成立大会在杭州成功落下圆满帷幕,掌声与欢呼现在仿佛仍在耳畔作响,你以为这就完结了?不,精彩还在继续!4月29日,引爆流量——SEO搜索优化秘籍暨电商搜索研究中心河南...
匿名

发表评论

匿名网友
:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: