首页- 百度SEO资源- SEO基本网络技术

SEO基本网络技术

来源:seo优化 发布时间:2022-06-01 17:00:00

1.使用文本浏览器检查网页,查看文本浏览器是否可以抓取网页中的重要URL链接

常用的文本浏览器是lynx。您可以在Linux环境中安装它。在浏览网页时,它几乎与搜索引擎蜘蛛看到的内容相同,因此您经常使用它来测试网页的可访问性。如果页面中的重要链接使用了js、Ajax和其他技术,lynx浏览器就看不到这些链接,同一个搜索引擎也无法获取这些链接。因此,在网站上线之前,你可以先用文本浏览器查看主网页,看看是否使用了对搜索引擎不友好的技术。

2.允许搜索引擎爬行器在不使用跟踪其网站访问路径的会话ID或参数的情况下对网站进行爬网

一些sessionid对于跟踪用户的访问行为非常有效,但对于搜索引擎来说,这不是一个好的做法。如果使用这些技术,您的网页可能不会被完全索引,因为搜索引擎程序无法排除那些看起来与URL不同的网页,但网页内容完全相同。这对藏品不友好。

3.确保您的web服务器支持自HTTP头修改后的if

如果您的服务器支持If modified since HTTP头,当搜索引擎蜘蛛程序抓取您的网页时,它将首先检查If modified since HTTP头的值。通过这个值,搜索引擎蜘蛛程序可以判断你的网页自上次检索以来是否发生了变化。如果没有变化,它可以在不下载相同页面内容的情况下节省爬行器资源,还可以节省服务器带宽,以便爬行器可以抓取更多其他页面。

较好为每个网站设置一个robots文件。如果你的网站没有你不想被搜索引擎索引的内容,你可以创建一个名为robots的空文件,并将其上传到网站的根目录。通过robots文件,我们可以让搜索引擎抓取一些目录,而不是一些目录,例如一些模板文件,这可以禁止搜索引擎抓取和一些后台登录文件,robots文件也可以用来禁止收录。设置robots文件时,我们必须小心避免禁止某些重要文件。我们可以使用谷歌网站管理员工具进行测试。

4.对网站进行兼容性测试,确保其在每个浏览器中都能正确显示

在网站上线之前,我们较好做大量的浏览测试,以确保网页内容可以在所有浏览器上正确显示。例如,IE中有一个IE工具测试,可以测试各种IE版本的显示效果。谷歌浏览器也有类似的插件来测试浏览器的兼容性,然后在测试后可以正常显示时上线。在正常维护中,还可以经常测试页面显示的兼容性。

文章标签:西安SEO资源

Copyright © 2015-2020. 未经许可,不可拷贝或镜像 xiequ.net