引导百度蜘蛛抓取页面应该先规划好网站导航目录结构

来源：超达科技 发布时间：2021-12-10浏览：1089次

在进行网站结构相关的SEO工作时，我们应该考虑以下三个问题：  

1、Baiduspider能找到所有的页面吗？  

2、Baiduspider知道哪些页面很重要吗？  

3、baiduspider能否成功提取Web内容  

4、Baiduspider能从网页中提取有用的信息吗？  

以下是为了解决前几个问题：  

，友好的网站结构  

1、平面或树：当涉及到网站结构时，人们会把平面结构和树结构称为“结构扁平化”。这些是指物理结构，即由基于内容聚合的目录和文件位置决定的结构。事实上，对于百度搜索引擎来说，只要结构合理，逻辑合理，内容可以定期跟踪，都是友好的。  

2、链接结构：与物理结构相比，我们必须讨论逻辑结构：即由内部链接形成的链接结构，这是搜索引擎关心的问题。对于一个网站来说，一个网页一层一层地浏览主页-目录1-目录2是不够的。一个优秀的链接结构应该是网格。  

1）主页链接应链接到重要的频道页面，频道页面应链接到下面的节点页面或普通页面。同时，频道页面、节点页面和普通页面应能链接回主页。  

2）无论哪个页面相互链接，都需要适当的锚文本来描述它们。  

3）对于JS、Flash和其他搜索引擎，链接的位置不应该是不可见的。使用图片作为链接条目应该可以改进alt标记。  百度搜索引擎目前只支持解析部分JS和Flash，放置在JS和Flash中的大部分链接都不可用。  

4）为重要页面留下更多条目。百度搜索引擎认为，获得更多的内部投票页面相对更重要。  

5）离主页越近，百度越容易重视。这个“near”是指页面和主页之间的点击距离。即使URL的目录级别更高，只要主页上有条目，百度也认为它是一个非常重要的页面。  

6）不要创建糟糕的孤岛页面。虽然百度在提交条目和社会挖掘方面做了很多工作，但抓取链接仍然是百度获取新页面的重要渠道。 

第二，通过导航，百度可以更好地了解站点  

对于用户来说，导航必须解决以下问题：我在网站上的位置，我想在下一个级别看到更多内容的入口，甚至在下一个级别；对于蜘蛛来说，导航必须解决这个问题：这个页面属于哪个字段，要表达什么主题。因此，清晰的导航系统不仅有助于提高用户体验，而且对SEO有着重要的意义。所有在搜索引擎优化方面做得很好的网站基本上都有清晰清晰的导航。  

1、导航内容搜索引擎可以看到：一个网站的导航对用户来说是美丽和友好的，但是百度看不到。目前百度还不能处理所有的JS和Flash。对于保险，使用HTML。虽然图片很漂亮，但它们对搜索引擎的导航也不友好。  

2、导航稳定性：导航内容应该相对固定，不要让导航变成“滚动条”。  

3、重要的网页可以尽可能的跟随导航：百度认为主导航中出现的链接仅次于网站首页，所以我们应该尽量在主导航中安排页面。当然，主导航不能放太多内容，哪些链接可以放在主导航上也需要SEO人员平衡。  

4、熟练地使用面包屑导航：如上所述，导航为用户解决了“希望在下一个级别或甚至在下一个级别看到更多内容”的问题。此导航指的是面包屑导航。面包屑导航可以使大中型网站结构复杂、清晰轻便。当spider解析页面时，它将关注breadcrumb导航的内容，这是强烈推荐的。  

第三、合理的领域结构  

除了网站建设，网站管理员还将考虑是否使用辅助域名或子目录。在网站运行过程中，他还将考虑是否将子目录的内容拆分为辅助域名。因为很多SEO工作人员认为二级域名相对独立，他们的主页会得到百度的关注和更好的排名——事实上，这是一个片面的误解，百度会用很多指标来判断二级域名和子目录在同一个域名下的重要性，而不是任意的想谁。生来就比谁强。  

当SEO认为网站内部结构阻碍了网站的快速发展时，将考虑修改。常见的修改是从主站点中删除子目录，并单独形成一个辅助域名。但大家都知道，修改肯定会影响网站的排名和流量，我们必须谨慎。那么，在什么情况下，它真的需要将子目录更改为辅助域名呢？实际上，只有一点：子目录的内容足够丰富，而主域的主题没有很强的关联性！