首页 › 分类存档 › 一半教程

3.1.2、抓取原理

热度:

一、搜索引擎是怎么抓取的网页?

“搜索引擎”获取网页需要“搜索引擎蜘蛛代码程序”,通常我们称之为“搜索引擎蜘蛛”。

蜘蛛抓取网页首先需要获取网址的链接,然后搜索引擎会将链接纳入数据库,按一定的规则排列。而后定期去抓取这些网页。

 

 

二、蜘蛛获取网址需要通过哪些途径?

搜索引擎获取网址的途径主要有以下几种:

 

【通过老网页】:例如A网站已经被收录了,这个时候搜索引擎蜘蛛在“A网站”的页面上发现“B网页”,就会将“B网页”的网址带回,并进行存储,方便下次进行抓取。

【通过网址提交】:我们知道像百度有“搜索引擎网址提交入口”,我们只需要在这里提交网址,我们的网址就会被抓取到。这也是搜索引擎获取目标网址的途径之一。

【通过推送】:如今“百度站长平台”中已经开放“网址推送功能”。通过“主动推送”与“自动推送”,可以将网址提交给搜索引擎。这样搜索引擎就会定期来抓取了。

 

 

三、网站要被抓取需要做哪些工作?

【做外链】:在已经收录的网站上做链接指向我们自己的网站。这样的链接我们称之为外链。这样定期抓取站外网页的蜘蛛,就会通过站外页面发现我们的页面网址。

【推送】:通过“搜索引擎提交入口”“推送功能”,我们可以轻松的将自己的网址提交给搜索引擎。

 

 

四、如何可以让搜索引擎蜘蛛迅速抓取?如何让蜘蛛喜欢页面?

【扩大反链】:一个页面的反链越多,也就越容易被发现。但是前提是反链所在的页面已经被收录。(例如:从首页指向文章页,文章页就会被收录。)

【提升网页权重】:一般网页越被搜索引擎重视,就会被越多次的抓取。(权重可形象化理解为:用户体验权重、链接权重、关键词权重。)

 

A、用户体验权重:是指用户对网页的关注程度。浏览量高、用户在网页停留时间长、点击多、互动多。

B、链接权重:主要从反链的数量、相关性理解。当然导出链接也会有一定的相关权重计算。

C、关键词权重:页面内容与当前页面主题相呼应。(例如:标题中写减肥,内容写瘦身。这样不呼应。)

 

【增加更新频率】:搜索引擎蜘蛛更喜欢经常更新的页面。更新快的页面,网站页面快照也更新快。(例如:网站首页)

 

 

五、如何检测百度对网页的抓取频率?

要检测蜘蛛抓取网页的情况,我们可以通过“网站日志”来进行查看。

通过网站日志,我们可以轻松知道蜘蛛什么时间来的?抓了哪些页面?大概多长时间抓这个页面一次?同时我们可以判断出,蜘蛛对一个网页的重视程度。一般越是靠近首页或导航的页面,会越被重视。

同时,蜘蛛会更加重视URL短的页面。URL短的页面会给予比较高的基础权重。

 

 

写作:一半SEO(邓继国)

日期:2017.3.28

如何选择合适的空间、VPS或云服务器

热度:

如何选择合适的空间、VPS或云服务器

一个网站上线首先要考率的问题就是如何选择购买一款合适的空间或VPS或服务器,很多人在面对众多名词的时候不知道他们的区别和特点,往往花了冤枉钱后也没有达到运行目的;本文就来说明一下目前常见的各种空间服务器的优缺点。

什么是空间、虚拟主机?

空间,就是虚拟主机;一个产品的两种叫法。空间通常以固定大小为基础,比如1G,2G等不同的大小标以不同的价格,通常空间容量越大价格越贵。

目前WEB开发主流的程序是asp、.net、php、jsp等;空间环境不同决定着可以运行不同的程序语言;比如.net的就必须选择windows系统环境的空间,PHP一般选择Linux的系统环境;

我不会linux操作,能用linux空间吗?

不少人这点有迷惑,自己是PHP的程序,看到Linux空间以为要掌握Linux的操作方法;实际上是不用的;空间的特点就是环境现成,空间商都为您准备好了,您只需将程序上传至空间中,一切就可以运行了。

买空间还要买数据库吗?

几乎所有的空间都送的有的不同大小的数据库,所以不用额外购买;除非你的数据库特别大或有特殊的要求;如果确实情况特殊,可以在购买前咨询空间商。

买空间还要备案吗?

国内空间确实要备案,要求域名有备案号,港台境外空间则不用备案,即开即用。备案时长也是很多人关心的问题,现在大多数省份备案时间为7个工作日左右,所以备案也不会很耽误时间的;

一个空间只能放一个站吗?

基本上可以说,是的。一个空间一个网站;

 

如何选购服务器?

如果你的网站特别大,或者你想自己配置环境自己部署网站,那么空间就不能满足你的需求了,这时服务器才是你的首选。 我们说的服务器通常指3种:独立物理服务器、VPS服务器、云服务器。

独立物理服务器: 这种通常是将购买的服务器拖管至机房中运行的一种方式;这种方式运维要求高,成本高;通常大型企业可能会选择这种方式。个人或中小企业基于成本考虑选择的很少;

VPS服务器:这种是比较旧的产品,现在主流空间商已经不怎么提供这种产品了,选购的人也相对较少;

云服务器:又叫云主机,是当今最为流行的服务器产品,他的特别是拥有独立的硬件资源和操作系统,可以远程进行配置,管理灵活;

一句话来总结空间与服务器的区别

有钱买服务器,没钱买空间;站大买服务器,站小买空间;站多买服务器,站少买空间;

广告时间

一粟网络提供专业的互联网服务,包括域名注册,空间及云服务器产品;支持ASP/.NET/PHP各种版本,性价比高;促销空间:1G空间/150元/年,2G空间/239元/年,云服务器低至500元/年;

http://www.yiisu.cn

 

 

 

计划、执行、总结

热度:

不少的朋友网站做的没效果还是自己的方法有问题。一半vip所有学员都用了这套方法。通过这套方法,能够让网站排名更快产生效果。

我在内蒙古带过一群新人,通过此套方法,在很短的时间内获得了不错的效果。其实非常简单,只有三个步骤:
1、定目标、做计划

2、执行,并记录问题。

3、总结问题,找出新的方向及解决方法。

为什么要做这三步?
1、明确方向。

2、操作留下痕迹,方便审查。

3、总结问题,解决致命问题。
当然,这中间需要一些表格。相信不少听过一半课程的朋友都有了解。后续将开放下载,欢迎朋友们持续关注。

3.1.1、搜索引擎基础原理

热度:

要学会排名,就必须了解搜索引擎的基础原理,先让我们一起看看下图:


搜索引擎主要执行的工作有3个步骤:

1、抓取:蜘蛛通过索引区出发抓取信息并带回。

2、预处理:对抓取的内容进行处理,不合格的清除。

3、排名:根据用户需求进行处理,利用一定规则展现排名。

在哪里查看百度索引量?

热度:

一、百度统计工具

在百度统计工具后台可以看到“百度索引量”,但前提是需要你首先安装百度统计代码并验证通过。

 

二、百度站长平台

登陆百度站长平台,并验证站点。然后通过百度站长平台就可以看到“百度索引量”。

2.2.19、百度快照

热度:

一、什么是百度快照?

搜索引擎每次来到我们页面抓取后就回带回处理并存起来,就相当于拿着照相机来到我们网站,拍了一张然后带回去存着。

而百度快照,我们可以形象化的理解为“网页照片”。

 

二、如何查看百度快照?

在我们搜索以后我们能看到很多结果,除了标题、描述、网址以外就是百度快照。

我们点击“百度快照”这四个字,就能看到百度快照的详细信息。

2.2.18、降权、K站

热度:

一、什么是降权?

前面章节说过“权重”,即搜索引擎对网站的印象。

当搜索引擎对网站印象极差时,就会降权。

 

降权后的现象:

1、排名大量下滑。

2、排名大幅度下滑。

3、site网站,网站首页沉底。

 

二、什么是K站?

K站是降权现象的一种,也就是重度降权。俗称拔毛。

 

K站后的现象:

1、site网站,没有一条收录结果。

2、排名全部不见。

2.2.17、网站地图

热度:

一、什么是网站地图?

网站地图是针对搜索引擎所做的地图。

 

二、为什么要做网站地图?

将网站所有网址集中到网站地图中,搜索引擎蜘蛛可以更加便捷、快速的抓取所有网址。

 

三、用什么工具可以做网站地图?

通过各类网站地图制作工具可以制作。(例如:“老虎地图制作工具”)

2.2.16、robots.txt

热度:

一、什么是robots.txt?

robots.txt是一个协议文件。搜索引擎访问网站的时候,会首先访问robots.txt,了解哪些能抓取,哪些不能抓取。

 

二、robots有什么作用?

robots.txt可以告诉搜索引擎,哪些内容可以抓取,哪些不能抓取。

当我们有信息不想让搜索引擎抓取到的时候,我们就可以用robots.txt禁止。

 

一般以下几种情况,我们会写robots.txt。

1、重要文件,不想让蜘蛛抓。

2、不重要的页面,不让蜘蛛抓。

3、机密文件,不想让蜘蛛抓。

4、和百度有仇,不想让百度发现网站的所有内容。

 

2.2.15、nofollow

热度:

一、什么是nofollow指令?

nofollow是A标签中的一个属性,主要是告诉搜索引擎此链接不要传递权重。

 

二、在代码中如何加入nofollow指令?

nofollow标签在代码中的写法如下:

<a href=”http://www.xxx.com/yibanseo.php” rel=”nofollow”>yibanseo</a>

 

三、使用nofollow标签有什么好处?

一般网站都会有出站链接,出站链接过多会分散网站权重,这个时候加入nofollow标签,则可以防止权重流失。

 

>>如果你观看关于nofollow相关信息,还想看其它百度SEO相关知识,欢迎返回【一半SEO教程网】。