文档章节

如何让你的网站符合搜索抓取习惯

王尘宇
 王尘宇
发布于 2017/09/07 00:08
字数 854
阅读 2
收藏 0
前面给大家介绍了搜索抓取系统工作原理,根据该工作原理今天简要介绍一下如何建立网站是符合搜索引擎抓取系统习惯的。要有简单明了的网站结构、简洁美观的url规则和其他一些注意事项。
  编者按:前面给大家介绍了搜索抓取系统工作原理,根据该工作原理今天简要介绍一下如何建立网站是符合搜索引擎抓取系统习惯的。 建立符合搜索抓取习惯的网站 1、简单明了的网站结构 Spider抓取相当于对web这个有向图进行遍历,那么一个简单明了结构层次分明的网站肯定是它所喜欢的,并尽量保证spider的可读性。 (1)树型结构最优的结构即“首页—频道—详情页”; (2)扁平首页到详情页的层次尽量少,既对抓取友好又可以很好的传递权重。 (3)网状保证每个页面都至少有一个文本链接指向,可以使网站尽可能全面的被抓取收录,内链建设同样对排序能够产生积极作用。 (4)导航为每个页面加一个导航方便用户知晓所在路径。 (5)子域与目录的选择相信有大批的站长对此有疑问,在我们看来,当内容较少并且内容相关度较高时建议以目录形式来实现,有利于权重的继承与收敛;当内容量较多并且与主站相关度略差时建议再以子域的形式来实现。 2、简洁美观的 url 规则 (1)唯一性网站中同一内容页只与唯一一个url相对应,过多形式的url将分散该页面的权重,并且目标url在系统中有被滤重的风险; (2)简洁性动态参数尽量少,保证url尽量短; (3)美观性使得用户及机器能够通过url即可判断出页面内容的主旨; 我们推荐如下形式的url:url尽量短且易读使得用户能够快速理解,例如使用拼音作为目录名称;同一内容在系统中只产生唯一的url与之对应,去掉无意义的参数;如果无法保证url的唯一性,尽量使不同形式的url301到目标url;防止用户输错的备用域名301至主域名。 3、其他注意事项 (1)不要忽略倒霉的robots文件,默认情况下部分系统robots是封禁搜索引擎抓取的,当网站建立后及时查看并书写合适的robots文件,网站日常维护过程中也要注意定期检查; (2)建立网站sitemap文件、死链文件,并及时通过百度站长平台进行提交; (3)部分电商网站存在地域跳转问题,有货无货建议统一做成一个页面,在页面中标识有无货即可,不要此地区无货即返回一个无效页面,由于spider出口的有限性将造成正常页面无法收录。 (4)合理利用站长平台提供的robots、sitemap、索引量、抓取压力、死链提交、网站改版等工具。

© 著作权归作者所有

共有 人打赏支持
王尘宇
粉丝 1
博文 450
码字总数 469557
作品 0
西安
私信 提问
网站要怎样为越来越流行的语音交互而优化

网站要怎样为越来越流行的语音交互而优化 优设-UISDC2017-12-281 阅读 网页设计教程 仔细审视最近几年的趋势变化,你会发现Alexa、Siri 这样的语音助理服务已经润物细无声地影响着我们日常的...

优设-UISDC
2017/12/28
0
0
8招教你将内容营销与SEO完美合一

三四年前,就有不少分析师预见SEO会被内容营销这一新兴营销方式取代。的确,许多搜索机构已经重塑品牌,增加了自身拥有的专业知识内容权重。但这并不是说内容营销与SEO是背道而驰的。事实上,...

Cashcow
2016/11/24
0
0
在网站建设过程中主要在哪几个方面为后期的网站优打好根基?

虽然说网站的搭建和网站优化是前后关系,但是我们企业要在网站搭建的过程中,就要把后期网站优化的工作全部在一起规划。 有些企业网站建设上线,可是搜索引擎几个月都没有收录,而就算收录了...

desingse
2017/12/11
0
0
爬虫抓取效率:让百度蜘蛛更容易抓取

爬虫抓取效率:让百度蜘蛛更容易抓取 搜索引擎抓取您的网站以将内容放入其索引中。您的网站越大,抓取时间越长。抓取您网站所花费的时间非常重要。如果您的网站有1,000页或更少,那么这不是您...

优惠码领取
10/17
0
0
你的网站受到搜索引擎青睐了吗?

如果你是一位从事SEO工作的人员,相信很多人都会去深思一个问题,什么样的网站会受到搜索引擎的青睐?也是很多网站建设推广者绞尽脑汁的一个问题。现在笔者就为大家分析一下,到底什么样的网站...

laishaohe
03/01
0
0

没有更多内容

加载失败,请刷新页面

加载更多

程序中设置MySQL的默认值

import com.alibaba.fastjson.JSON;import java.beans.PropertyDescriptor;import java.lang.annotation.*;import java.lang.reflect.Field;import java.lang.reflect.Method;impo......

laolin23
10分钟前
0
0
WordPress没有上级目录的写权限

sudo chmod -R 777 wordpress/wp-content

临江仙卜算子
17分钟前
0
0
大数据学习之大数据技术笔记—spring入门

篇一 spring介绍 spring.io 官网 快速开始 Aop 面向切面编程,可以任何位置,并且可以细致到方法上 连接框架与框架 Spring 就是 IOC AOP 思想 有效的组织中间层对象一般都是切入 service 层 ...

董黎明
19分钟前
4
0
ASP.NET Core MVC 静态文件配置

在启动文件中添加以下配置 public class Startup{ public IServiceProvider ConfigureServices(IServiceCollection services) { services.AddDirectoryBrowser(); ......

whltian
47分钟前
1
0
linux之自定义命令

本人使用的是ubuntu系统,不喜欢建各种桌面快捷链接,但是每次启动个软件,去查找又麻烦,所以自定义了命令,来快捷的启动应用: 1、修改/etc/bash.bashrc,在文件末尾,加上如下List-1中的内...

克虏伯
54分钟前
8
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部