搜索引擎优化要领：8条辅助技巧（二）
四、检查你的robots.txt文件
与谷歌的蜘蛛通信的常用方法是使用robots.txt文件。
这是一个文本文件，允许你告诉搜索引擎，你的网站的网页上抓取想要，哪些不要索引。如果你的网站已经有这个文件，它通常在yoursite.com / robots.txt的发现
这是一个什么样的机器人文件可能会说一个例子：
的user-agent：*
不允许：/
在“不允许：/”行告诉蜘蛛不要抓取网站。在实践中，这意味着你指示谷歌不包含任何你的网页在搜索结果中被索引的。
五、找出重复的内容
重复的内容是一个非常普遍的SEO问题：
谷歌可能不会显示在结果网页，如果发现多个版本的页面。这意味着你的网站很可能会受到影响。
1.体系结构
重复的内容一个常见的例子是像这样：
www.yoursite.com www.YOURSITE.com
你可能认为这些都是同样一个，但这不是必然的情况。谷歌可以看到每个版本作为一个单独的页面。这可能会导致你的排名有问题。
其他常见的重复的例子如下：
重复的内容是关于电子商务网站普遍。当网站上的产品被放置到多个类别的网站的架构没有正确设置，以适应这种正确通常会发生此问题。
下面是关于yourgiftsite.com被结合到多个类别一个'威士忌品酒试剂盒“的一个例子。这使得可以通过一些通过网站路径访问的产品是：
虽然这可能是有意义的用户，从搜索引擎的角度来看它被归类为重复。
2.HTTP与HTTPS进行
HTTPS会话也可能导致重复的内容。https网页是安全的，往往是登录，购物篮和付款交易 – 他们提供了一个加密连接，使它们比一个HTTP页面更安全。
下面是如何告诉当你是一个安全的页面上的例子：
如果一个页面是通过访问HTTP和HTTPS可能会导致重复的问题。
3.分页
另一个错误是，当内容被分散在多个页面。这是电子商务网站，提??供大量的产品普遍。你可能遇到与导航菜单象下面这样的页面：
类似于这些URL：
这可能是谷歌将浏览这些长的博客文章为重复。
4.资本化的URL
在资本化的网址字母的重复问题的另一个原因。实例如下：
api.mefanw.com / ABC
api.mefanw.com / ABC
api.mefanw.com / ABC
这个问题很容易解决。
诉点击和会话跟踪
有些网站建立的会话的原因，如跟踪客户行为。这种情况下，包括在电子商务网站创建一个会话当用户将产品加入购物车中。本次会议允许用户继续购物和浏览网站的同时保持他们的产品在购物车中。
当一个新的会话已经建立，以允许网站跟踪用户的活动一个新的URL往往会被创建。这使得一个重复的问题。
米饭工作室整理翻译，未完待续，转载请注明出处，原文作者：佐伊-李·斯凯尔顿。