现在的大型网站，其实都有很厉害的seo建设团队，但是，据q猪所知，还没有哪一个有名的大型的网站，可以很好的解决网站的结构问题，搜索引擎对网站页面的收录，都会有一个限制，要突破这个限制，要么建设庞大的外链体系，比如从收录一千万页面，提到到收录三千万页面等，另一个改善页面收录的方法，就是网站结构的优化。
网站结构如何优化涉及以下六个部分：
1、栏目设计
分析：网站栏目的设计，在前面市场调查和竞争对手分析时，就已经讲到，栏目的设计，是关键词调查的结果。q猪以前在案例分析robin老师的广场舞的时候，有看到，当时robin对广场舞的关键词研究以后，确定的栏目包括，广场舞曲、广场舞队及广场咨询等。
2、导航设计
分析：在网站上，一个页面，在整个网站上的位置，是依靠导航系统去体现的。网站导航，对用户和搜索引擎同样重要，从搜索引擎来的一个访问，直接进入网站的内页，这个时候，只有通过导航系统，才能让搜索引擎或者用户知道，现在访问的是什么页面，处于网站的什么位置，是目录页，还是内容页，上级页面是什么，下级页面是什么。
网站的导航设计清晰与否，对访问的用户来说，是非常重要的，对于百度理清网站的结构，网站权重的走向，都具有决定性的影响。
这里有一点需要注意的是，在整个导航中，不要堆积关键词，比如很多站长，喜欢在面包屑导航中，指向首页的锚文本，写成网站的核心关键词，比如q猪文学站的面包屑导航，首页就喜欢写成好看的言情小说，其实对于搜索引擎来说，导航最主要的作用，就是使搜索引擎明白页面在网站中所处的位置，而不是向搜索引擎传递网站的关键词。
所以，q猪的建议是，无论是网站导航，还是栏目导航，首页的锚文本就直接写成“首页”最好。对于很多站长喜欢，在网站底部，制作和顶部导航类似的锚文本链接，q猪也是建议，底部尽量不要堆积关键词，甚至底部的导航，可以撤销。
3、蜘蛛陷阱
分析：所谓的蜘蛛陷阱就是，会阻碍搜索引擎蜘蛛程序爬行网站的网页显示技术，比如使用javescript、flash、iframe、frame和session id等做网站链接，或者有些程序会使网站爬行的蜘蛛陷入死循环，比如万年历。
其实，对于这些网页显示技术，完全都是使用div+css来表现，比如很多站长喜欢使用图片作为网站的导航，这个使用css样式表完全可以代替，而且css对搜索引擎将更加友好。
4、禁止收录
分析：网站结构中，有一些页面，比如关于我们、联系我们，由于用户的需求，必须出现在网站中，但是对于网站权重来说，这些页面根本不会以偶任何帮助，在某种程度上，可以将这些页面禁止收录。
禁止收录的方法，主要是，使用robots.txt文件、noindex标签
这里有一点需要注意的是，robots文件的最主要作用是，禁止搜索蜘蛛抓取页面上的内容，而不是禁止搜索引擎索引，如果某网站a在robots.txt中，禁止了所有搜索引擎来爬取网站，但是在另一个已经被搜索引擎收录和抓取的网站b上，有链接或者锚文本指向网站a，如果搜索引擎抓取并收录该链接，那么搜索引擎的索引库中，就会出现a网站的索引，内容就是网站b链接a时，使用的锚文本，a网站本身的内容，不会存入搜索引擎的数据库。
而另一个noindex标签，是添加在之间，主要的作用，和robots.txt正好相反，是允许搜索引擎抓取网站的内容，但是不要索引。noindex标签的作用有两方面，一个是不给链接投票，增加此链接的权重，二是使添加noindex的部分内容不参与网站排名，便于集中网站权重。
另一个比较有名的标签是，nofollow标签，对于网站来说，nofollow标签最大的作用就是，节省搜索蜘蛛的爬行时间，如果网站中有大量的不必要的页面，那么，使用nofollow可以使蜘蛛有更多的时间，去爬行其他有重要内容的页面。
而对于搜索引擎来说，由于google的蜘蛛，页面爬行能力非常强，所以，就算不使用nofollow标签，网站中，大量的页面，都是可以被爬行到的，但是对于百度而言，使用nofollow的好处，就比较明显。
5、内部链接
分析：内部链接是指同一网站域名下的内容页面之间互相链接，对于网站而言，主要有以下两个作用，一个是提供网站页面收录的通路，比如页面正文中的链接，对于网站而言，这些链接，可以更好的辅助网站页面的收录，当然除了正文中出现的链接，正文下方的相关推荐，是一个很好的内部链接位置，由于内部链接的主要作用就是，增加网站的收录，所以相关推荐的内容，一个是选择哪些没有被收录的文章，另一个就是尽量随机；
另一个作用是，传递锚文本，在导航设计时，q猪建议大家不要堆积关键词，尤其是首页，但是，在内部链接时，可以在文章的内容适当的加入一些锚文本，这些锚文本虽然就重要性上，可能没有外部链接的锚文本重要，毕竟这只是网站自己说的，但是，至少是对搜索引擎的一种提示。比如在q猪的博客的文章正文中，如果提到q猪的时候，选择对某一些加上链接，搜索引擎就可能会意识到，这个博客的博主叫q猪。
6、网址规范化
其实，对于搜索引擎来说，这四个地址，所代表的意义是完全不同的，多条url却出现同样的内容，会对搜索引擎的抓取造成困扰。对于网址规范化的问题，一般的建议主要有两条：
1）你的网站内部在链接到其他网页，尤其是主页时，只使用一种url。不管是包含www或不包含www，你要由始至终只使用一个版本。这样搜索引擎也就明白哪一个是规范化的主页网址。
2）但是你没办法控制别的网站用哪一个网址连向你的主页。所以你应该在你的主机服务器上，把所有有可能成为主页网址的url，做301重定向到你所选择的主页网址版本。
其实，网址规范化，最靠谱的一种方式，就是，从始至终都坚持一条url，无论是动态地址、静态url，必要的时候，都可以使用伪静态的方式，将网站中所有的url都进行统一，比如q猪文学站的地址一样。
关于网址规范化，还涉及到一个问题，就是内容去重，维持文章的原创性，有兴趣的朋友，可以看看q猪的另一篇文章：如何保证网站文章的原创性。网站结构的优化，最核心的要点主要是两点，一是如何让访问网站的用户或者搜索引擎，很清楚的理解网站的结构；另一点是，如何突出网站重点推荐的内容。
