专业SEO，SEM，SMM营销研究博客 - SEO工具http://www.seosou.com/外贸b2c网站优化，facekook，twitter的社区营销。 - RainbowSoft Studio Z-Blog 1.8 Spirit Build 80722zh-CN版权所有深圳市点击时代科技有限公司 粤ICP备08125054 联系电话：0755-82047778 传真号码：0755-82427797 手机：13602593938 13826549050 地址：深圳市罗湖区梨园路东104号金华丰大厦三楼西座Tue, 07 Sep 2010 12:49:25 +0800Robots是什么，robots写法怎么写garygood@sina.com (admin)http://www.seosou.com/post/33.htmlMon, 30 Aug 2010 08:08:39 +0800http://www.seosou.com/post/33.html 

  • 核心提示: 先介绍robots.txt基础知识 什么是robots.txt ? 其实就是一个纯文本文件，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定 搜索引擎 只收录指定的内容。 当一个搜索机器人AI（有的叫搜索蜘蛛）访问一个站点时，它会首先检查该站点根目录下是否

 

先介绍robots.txt基础知识
        什么是robots.txt ? 其实就是一个纯文本文件，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定搜索引擎只收录指定的内容。

       当一个搜索机器人AI（有的叫搜索蜘蛛）访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，那么搜索机器人就沿着链接抓取。

另外，robots.txt必须放置在一个站点的根目录下，而且文件名必须全部小写。

一般一个网站的robots.txt的内容格式为：

# Robots.txt file from

# All robots will spider the domain

User-agent: *
Disallow:

上面的写法中则是接受所有的搜索引擎。

具体语法分析：其中#后面文字为说明信息；User-agent:后面为搜索机器人的名称，后面如果是*，则泛指所有的搜索机器人；Disallow:后面为不允许访问的文件目录。

举例如下：

允许所有的robot访问

User-agent: *
Disallow:

或者也可以建一个空文件 “/robots.txt” file

禁止所有搜索引擎访问网站的任何部分

User-agent: *
Disallow: /

禁止所有搜索引擎访问网站的几个部分（下例中的01、02、03目录）

User-agent: *
Disallow: /01/
Disallow: /02/
Disallow: /03/

禁止某个搜索引擎的访问（下例中的BadBot）

User-agent: BadBot
Disallow: /

只允许某个搜索引擎的访问（下例中的Crawler）

User-agent: Crawler
Disallow:

User-agent: *
Disallow: /

同时robots.txt中也可以带meta标签。

name=”Robots”表示所有的搜索引擎，可以针对某个具体搜索引擎写为name=”BaiduSpider”。 content部分有四个指令选项：index、noindex、follow、nofollow，指令间以“,”分隔。

介绍下常用搜索引擎的蜘蛛机器人的写法：

常见搜索引擎机器人Robots名字


名称 搜索引擎

Baiduspider http://www.baidu.com

Scooter http://www.altavista.com

ia_archiver http://www.alexa.com

Googlebot http://www.google.com

FAST-WebCrawler http://www.alltheweb.com

Slurp http://www.inktomi.com

MSNBOT http://search.msn.com

Robots Meta标签的缺省值是INDEX和FOLLOW，只有inktomi除外，对于它，缺省值是INDEX,NOFOLLOW。

NOINDEX -不索引当前页面
NOFOLLOW -不跟踪当前页面中所有的链接
NOARCHIVE -在搜索结果中不保存当前页面的快照
NOSNIPPET - 在搜索结果中不采用当前页面的头部描述信息，且不保存当前页面的快照
NOODP -搜索结果中不使用DMOZ 中的描述信息，Yahoo!、MSN也支持此类标签。
NONE -不索引当前页面以及其中的所有链接，跟“NOINDEX, NOFOLLOW” 含义相同

一共有四种组合：

＜META NAME=”ROBOTS” CONTENT=”INDEX,FOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”NOINDEX,FOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”INDEX,NOFOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”NOINDEX,NOFOLLOW”＞

绝大多数的搜索引擎机器人都遵守robots.txt的规则，而对于Robots META标签，目前支持的并不多，但是正在逐渐增加，如著名搜索引擎GOOGLE就完全支持，而且GOOGLE还增加了一个指令“archive”，可以限制GOOGLE是否保留网页快照。例如：

＜META NAME=”googlebot” CONTENT=”index,follow,noarchive”＞

表示抓取该站点中页面并沿着页面中链接抓取，但是不在GOOLGE上保留该页面的网页快照。

下面再介绍下常见robots.txt错误


l 颠倒了顺序：
错误写成
User-agent: *
Disallow: GoogleBot

正确的应该是：
User-agent: GoogleBot
Disallow: *

l 把多个禁止命令放在一行中：
例如，错误地写成
Disallow: /css/ /cgi-bin/ /images/

正确的应该是
Disallow: /css/ 
Disallow: /cgi-bin/ 
Disallow: /images/

l 行前有大量空格
例如写成
Disallow: /cgi-bin/
尽管在标准没有谈到这个，但是这种方式很容易出问题。

l 404重定向到另外一个页面：
当Robot访问很多没有设置robots.txt文件的站点时，会被自动404重定向到另外一个Html页面。这时Robot常常会以处理 robots.txt文件的方式处理这个Html页面文件。虽然一般这样没有什么问题，但是最好能放一个空白的robots.txt文件在站点根目录下。

l 采用大写。例如
USER-AGENT: EXCITE
DISALLOW: 
虽然标准是没有大小写的，但是目录和文件名应该小写：
user-agent:GoogleBot
disallow:

l 语法中只有Disallow，没有Allow！
错误的写法是：
User-agent: Baiduspider 
Disallow: /john/
allow: /jane/

l 忘记了斜杠/
错误的写做：
User-agent: Baiduspider 
Disallow: css

正确的应该是
User-agent: Baiduspider 
Disallow: /css/

转载注明：http://www.seosou.com 吴杰坤的网络营销博客

]]>SEO工具http://www.seosou.com/post/33.html#commenthttp://www.seosou.com/http://www.seosou.com/feed.asp?cmt=33http://www.seosou.com/cmd.asp?act=tb&id=33&key=b853d890专家手把手教你做好SEO链接建设garygood@sina.com (admin)http://www.seosou.com/post/30.htmlMon, 26 Apr 2010 10:01:52 +0800http://www.seosou.com/post/30.html

互惠链接作为搜索引擎优化策略已经过时了，这真正是一个吃力不讨好的工作。但是别把互惠链接与链接流行度混淆了。链接还是取得搜索引擎优化成功的一 个最重要的方面之一，但是它所饰演的角度正在慢慢转变。

　　直到现在为止，很多管理员SEO搜索引擎优化还在拼命地寻找交换链接站点，企图以此来帮助提高他们网站的排名。但是一旦找到了链接伙伴，他们就 将他们原来的链接伙伴隐藏，目的就是为了让新的链接站点可以把他的网站放在更重要的地方。

　　一个高质量的网站会得到一个高的PR值。这是Google给管理员灌输的一个基本的思想。但是一点是肯定是，一个与你站点相链接的网站无论它的 PR值有多高，但如果他的主题与你网站所描述的主题不一致的话，那么这对你是毫无好处的。所以，google将PR值与文本匹配技术去寻找那些既重要又与 你站点主题相关的网站。Google通过对页面内容是否与所查询的关键词的匹配程度来决定。SEO搜索引擎优化一定要了解这点。

　　很多人都忘记了高质量链接还可以为他们的带来意外的业务。我的意思是可以从那些高质量的相关站点中获得目标访问者。其实这也你追求SEO搜索引 擎优化的目的。

　　个人认为，是时间停止那些免费链接SEO搜索引擎优化策略了。是时候去寻找能发表链接的高质量网站，而且准备付费在其网站上做广告。

　　1、因为，在今天这个时代里，与小量相关的重要的网站链接比起有成百上千个无关、低质量的网站链接更有利于你所开展的业务。为什么呢?因为在高 质量的相关网站上做广告不但会被Google认为是重要的网站而提高排名而且还可以为你带来不少的目标流量，增加销售额。

　　2、另一个优势:你不需要与人交换链接。所有的链接都是你说了算。(当然这个代价是要付费的)

　　为了把性价比调到最高，你需要考虑到以下的几点因素:

　　1、目标站点是否被Google认为是重要的站点;

　　2、是否与你站点具有相关性;

　　3、它是否可以为你带来可观的目标流量;

　　4、它是否接受链接广告;

　　做一些调查研究，做一个符合以上的要求的站点列表。然后重新申查列表，找到条件最佳者。

　　个人看法:由于Google算法的更新，对链接提出了更高的要求。老的法子走不通。但互联网站资源丰富，找合适的链接伙伴也不是难的事情，不过 要付出更多的时间与精力。“天下没有免费的午餐”，要想SEO搜索引擎优化有收获就得付出代价，这也是必然的事情。

]]>SEO工具http://www.seosou.com/post/30.html#commenthttp://www.seosou.com/http://www.seosou.com/feed.asp?cmt=30http://www.seosou.com/cmd.asp?act=tb&id=30&key=cf3f017f企业网站设计优化技巧garygood@sina.com (admin)http://www.seosou.com/post/16.htmlMon, 08 Jun 2009 18:08:37 +0800http://www.seosou.com/post/16.html        一般说来，URL中包含关键词对网站优化确实会有所帮助。 不过从品牌效果考虑， 用品牌名称做域名应该是比较合适的。 不要走急功近利误区。独立域名更能获得搜索引擎的认可。调查显示：大多数搜索引擎排名时对那些不具备独立域名的网站赋予较小的“重要性”。   
      网站优化的目的是用合理的手段（不是作弊），对网站源代码进行优化，使之对搜索引擎更友好，更符合排名规则 一个站点的排名70%是靠网站优化做到的   
      网站优化内容着力点 ：网站结构分析／优化;关键词分析;客户竞争对手分析;   
网站优化效果四项指标衡量：在搜索引擎中关键词排名； 在Alexa全球排名； PR值或外部连接数量； 目标人群的到达率；（注意不是泛泛的PV）   
       网站优化基础工作是网页的优化，网页的优化内容涵盖：  
  第一：标题(title)，你所选择用的关键词(一般最好是3个关键词)。  
  第二：meta标签，这里包括，keyword、description、generator、robots、Progid等。  
  第三：图片alt标签，尽量少用flash和图片(个人认为，不过位了美观度可适当)。   
  第四：要有合理的web设计结构，少用JV脚本语言，别用层。  
  第五：外部链接(文字链接)，别去链接工厂。   
        网站优化不要天天盯着排名，这样很累，做好网站的内容(内容是最重要的).网站优化过程不是排名直线上升，现实情况表现其实更多的是排名的起伏，但这是很正常的。因为是过程。网站优化不是作弊,也不是简单的对关键词堆彻。为什么某些SEO高手能快速地让关键词优化好呢？  
       是因为他们手头上有很多的网站的FTP帐号和密码(这些是很重要的因素)，而且他们手头上有很多PR值高的网站，在这么多的网站上挂个链接，简单的做下网站优化效果就出来了。稍留意下，我们会惊奇于有些网站：网站做的不成“网”形，PR值却同时高的要死，这些都是SEO的“幕后杰作”。网站优化需要一个过程，比如说你时间长了，手上的FTP帐号多了，认识的朋友也多了，那么你链接就会有质量了。Google 每年进行的 10 次常规更新和不时出现的算法升级有很大一部分是由于受到了SEO 行业研究的启发。   
      SEO 的真正含义应该是 “ 对网页进行优化，以使其对搜索引擎更加友好 ” 。   
现在所有的搜索引擎，包括 Google 在内，都有一个难以消化的问题 —— 对动态网站的接受能力不够。   
知道了什么是对 Google“ 不友好 ” 的，就可以大致找到对 Google“ 友好 ” 的办法： 通过甚重选择关键字、外部链接、锚文本以及合理安排页面元素的搭配，优化网站的底层结构，尽量多采用静态页面技术，少用甚至不用动态页面技术，减少不必要的脚本程序等，就可以从技术层面初步达到对搜索引擎 “ 友好 ” 的目的。   
        要想达到SEO 的终极目标 —— 排在相关关键词查询结果的首位，最重要的还需要网站内容的配合。短期内提高排名对一个内容很差的网站是没有任何意义的，因为 Google 的算法现在更新的频率非常快.Google 的目的就是要 “ 找到人们最需要的东西 ” ，所以网站优化的最根本办法就是，让你的网站确实成为人们最需要的网站。   
     所有搜索引擎 的目的都是一样的，都是帮用户找到最合适的网站，所以丰富网站内容的重要性无论如何强调都不为过。   
     Google 目前的算法公式已经升级过无数次，其中涉及的变量甚至会有 300 多个， PageRank 只是其中最著名的一个而已。说道底，对于网站优化而言。真正重点还是把内容做好，把你的用户粘在你的网站，你的用户将不断的积累，流量大了，对GOOGLE排名最有用。   
     点击越多越好吗？不尽然。要考虑谁在看你的网页。这是至关重要的问题。必须是你的目标访问者才有用。 吸引目标访问者，需要选择好登录搜索引擎的关键词、加入分类目录时选择好目录及子目录。过多的_JavaScript代码统一放到一个.js文件中。搜索引擎不会读_JavaScript代码。使用简单的表格，不要过度使用表格，或表格中嵌套表格，这样最容易出现HTML错误。 使用CSS样式表统一字体，而不要过多使用HTML字体标签。
     企业网站的外部链接获得比较困难，所有友情链接是很重要的。

出处：seowhy论坛

]]>SEO工具http://www.seosou.com/post/16.html#commenthttp://www.seosou.com/http://www.seosou.com/feed.asp?cmt=16http://www.seosou.com/cmd.asp?act=tb&id=16&key=88957c76让网站排名靠前的办法garygood@sina.com (admin)http://www.seosou.com/post/12.htmlFri, 29 May 2009 13:27:29 +0800http://www.seosou.com/post/12.html让网站排名靠前的办法
做网站的目的就是能让别人很方便找到你，这样才能实现一个网站的目的。
　　但在亿万网页中，一个网站在搜索引擎里的排名排到第三页以后去了的话，基本就没什么效果可言了，那如何才能靠前呢，本人虽然做网站时间不长，也谈点自己的心得，供大家参考。

　　1.首先要定位好自己的网站，清楚自己的网站提供什么，提供给什么样的人群的。这里讲的是关键词的选择，是排名之第一要素。选错关键词可能导致事倍功半。如：seowhy，选择关键词是seo

　　2.要编排网站的内容、目录和文件结构。一个结构清楚的网站在GOOGLE里收录效果很好。这里讲的是网站结构，良好的网站结构可以让搜索引擎对你的站点喜爱有加。

　　3.每个文件都要有一个和内容相关的标题。这里讲网站内容，毕竟网站内容是排名的基础。

　　4.在做一个页面时考虑好用什么关键词。长尾关键词，听说www.seowhy.com 80%的流量来自长尾。

　　5.网页间能互联互通。站内链接。

　　6.尽量使用静态页面。搜索引擎喜欢静态页面。

　　7.多做推广，这里并不是指收费的推广（本人做的公司网站总共才花300元），可以多交换链接，增加外部的链接。建议使用SEOWHY提供的SEO族交流平台交换链接，保证互相交换的双方都不会因作弊而被K。

　　8.网站要有实际的内容，真正做到用心做网，能让浏览的人感觉网站确实有用，这个搜索引擎也会知道你的网有用。必竟搜索引擎的技术发展是以人为本的。

　　9.不要试图用作弊的手段欺骗搜索引擎，这样也许得不偿失。

　　10.使用好在页头中的标签，这个挺有效果。也是最重要的。
 
出处：SEO论坛
]]>SEO工具http://www.seosou.com/post/12.html#commenthttp://www.seosou.com/http://www.seosou.com/feed.asp?cmt=12http://www.seosou.com/cmd.asp?act=tb&id=12&key=499ffeeaSEO技术介绍garygood@sina.com (admin)http://www.seosou.com/post/6.htmlSun, 19 Oct 2008 16:42:55 +0800http://www.seosou.com/post/6.html　　SEO是Search Engine Optimization的缩写，用英文描述是to use some technics to make your website in the top places in Search Engine when somebody is using Search Engine to find something，翻译成中文就是“搜索引擎优化”，一般可简称为搜索优化。与之相关的搜索知识还有Search Engine Positioning（搜索引擎定位）、Search Engine Ranking（搜索引擎排名）。

　　SEO的主要工作是通过了解各类搜索引擎如何抓取互联网页面、如何进行索引以及如何确定其对某一特定关键词的搜索结果排名等技术，来对网页进行相关的优化，使其提高搜索引擎排名，从而提高网站访问量，最终提升网站的销售能力或宣传能力的技术。

　　搜索是除了电子邮件以外被用得最多的网络行为方式。通过搜索引擎查找信息是当今网民们寻找网上信息和资源的主要手段。

]]>SEO工具http://www.seosou.com/post/6.html#commenthttp://www.seosou.com/http://www.seosou.com/feed.asp?cmt=6http://www.seosou.com/cmd.asp?act=tb&id=6&key=33e8dcb6