-
小鸟的话
学习人生-学习生活
-
写作时间
-
订阅
-
最新文章
- [08/28]论网络营销与电子商务的关系
- [08/28]网络营销顾问:怎么才能让企业的钱不打水漂?
- [07/21]网络优化的目标和益处什么是搜索引擎优化?
- [07/21]电子商务,中国落后西方十年!
- [07/08]网络营销:模仿比创新更重要
- [06/26]SEO:金玉其外,败絮其中?
- [06/02]网站优化中的关键词分词技术
- [05/03]爱情占线 剧情介绍(20-23集)
- [05/03]爱情占线 剧情介绍(14-19集)
- [05/03]爱情占线--剧情介绍(7~13集)
- [05/03]爱情占线--剧情介绍(1~6集)
- [05/03]爱情占线 剧情简介
- [05/03]男列车员艳照图片下载
- [04/13]www.bag-top.cn---上线3天,谷歌收录2天第三天不见了!
- [04/09]百奥谷(SEO大赛)
-
最新评论
-
文章归档
-
网站信息
- 文章总数:83
- 评论总数:6
- 引用总数:0
- 浏览总数:146116
- 留言总数:1
- 当前主题:4u-hk
- 当前样式:4u-hk
-
友情链接
-
网址收藏
-
反向链接
Serp 、Spider And Robots.txt
Serp
是search engine result page缩写。意思是搜索引擎结果页。当用户在搜索引擎输入一个词(关键词)查询,搜索引擎将给你一个由很多条目组成的列表,一个网页的标题 ,简介和网址组成一个条目,一般10个条目组成一个搜索引擎返回页面。这样一系列的页面就叫做serp。一般热门词返回结果很多。出于性 能和实用考虑 搜索引擎一般返回的页面不会超过100个,也就是说返回条目(网站)不超过1000个。
Spider
搜索引擎蜘蛛(搜索引擎机器人-robot)
一个web客户端程序。类似IE 和 Firefox这样的浏览器,它不断的收集链接,向web服务器发出请求获取网站内容。就好比人不断点击链接,浏览网页一样。也就是说
一个web客户端程序。类似IE 和 Firefox这样的浏览器,它不断的收集链接,向web服务器发出请求获取网站内容。就好比人不断点击链接,浏览网页一样。也就是说
搜索引擎蜘蛛实际上就是一个程序,好像人一样“浏览网站”。所以搜索引擎蜘蛛也叫搜索引擎机器人-robot。了解它对了解seo关系密切。
Robots.txt
robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。Robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。
当一个搜索蜘蛛访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围;如果该文件不存在,所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。
robots.txt必须放置在一个站点的根目录下,而且文件名必须全部小写。
语法:最简单的 robots.txt 文件使用两条规则:
• User-Agent: 适用下列规则的漫游器
• Disallow: 要拦截的网页

0 Comments , 0 Trackbacks
Jump to comment form | comments rss | Get trackback uri