1、百度蜘蛛采用深度优先和权重优先两种策略深度优先策略旨在抓取高质量的网页，而权重优先策略则优先抓取反向链接较多的页面抓取策略由调度程序计算和分配，百度蜘蛛只负责抓取任务一般来说，网页抓取量达到40%是正常的，60%可以算作很好，但100%几乎是不可能的当然，抓取的越多越好百度目前的收录机制。
2、因素一，百度已经索引了但还未放出来排名百度对文章的收录需要审核时间，推一把蜘蛛抓取成功索引内容录入数据库，需要经过二次审查是否为SPAM然后才放出参与排名，放出的时间与网站权重高低有着直接的关系，百度周期更新才放出收录是新站最为常见的现象对策，个人认为我们要做的就是保证定期定量的更新。
3、点击百度一下，获得如下相应，如果没有出现如下相应，换个更奇葩的网址试试就行了，总会出来的，然后点击“提交网址”进入提交界面 ？45 如下图，点击提交按钮即可 ？55 弹出如下提示表示百度已经收到你提交的网址，等待2到3天去百度搜索你的网址，如果关键词匹配准确的话就能显示你的网址了。
4、网络蜘蛛是通过网页的链接地址来寻找网页，从网站某一个页面通常是首页开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网。
5、第一标题关键词设置不当 百度不收录你站的首页，可能是因为你在标题中设置关键词不当，可能堆积了一些与正文无关的关键词这样可能导致被百度删除所以大家在做编辑网站内 容得时候要注意与标题中的关键词相关性内容一个网站的标题与内容的相关性，影响很大就如这次博百优比赛，有个网站是个生活。
6、5这个是百度抓取首页的专用IP，如是220181108段的话，基本来说你的网站会天天隔夜快照，绝对错不了的，我保证2 同上98%抓取首页，可能还会抓取其他 不是指内页220181段属于权重IP段此段爬过的文章或首页基本24小时放出来06 抓取内页收录的。
7、22018110895这个是百度抓取首页的专用IP，如是220181108段的话，基本来说你的网站会天天隔夜快照，绝对错不了的，我保证22018110892 同上98%抓取首页，可能还会抓取其他 不是指内页220#160#160181段属于权重IP段此段爬过的文章或首页基本24小时放出来12312571。
8、百度的常见爬行蜘蛛IP包括21072225*持续巡逻各个网站5专用于抓取首页，网站可能会得到天天隔夜快照，确认更新很容易06 和 7抓取内页，权重较低，收录速度较慢5 和 7主要抓取更新文章，首页和内页通常24。
9、百度不收录网站的首页，可能是因为在标题中设置关键词不当，可能堆积了一些与正文无关的关键词这样可能导致被百度删除所以在做编辑网站内容得时候要注意与标题中的关键词相关性内容一个网站的标题与内容的相关性，影响很大第二优化过度引起网站首页沉底这个问题，就是所谓的站点降权了或被K。
10、一直是我们非常重视的问题，经常有人问我“为什么百度没有收录我的网站”或者“为什么百度只收录了网站首页”其实这个不难理解网站首页通常是网站的权重页面当你的网站没有好的文章内容或者百度权重不高的时候，收录首页是非常好的可能有人会问，明明是原创文章，百度还是不能有效收录不用说。
11、也是很多站点今天给k了明天又放出来的原因百度蜘蛛抓取页面有两种方式，深度优先和广度优先，广度优先抓取是为了抓取更多的网址，深度优先抓去的目的是为了抓去高质量的网页，这个策略是由调度来计算和分配的，百度蜘蛛只负责抓取，权重优先是指反向连接较多的页面的优先抓取，这也是调度的一种策略，乐你。
12、1属于综合的，主要抓取首页和内页或其他，属于权重IP 段，爬过的文章或首页基本24小时放出来2 同上98%抓取首页，可能还会抓取其他 不是指内页属于权重IP段此段爬过的文章或首页基本24小时放出来 5这个是百度抓取首页的专用IP，如是220181108段的。
13、7内页权重过低 这很可能是在优化过程中，外链多次指向首页，加之内页质量不怎么的，然后百度只收录首页了梓琳SEO建议，在做外链或内链时适当地将链接分别指向首页和内页，把权重平衡一下，让百度尽快收录首页的同时，也加快对内页的访问和抓取频率8网站标题频繁修改 网站标题，可以说是网站内容。
14、但是内页不收录原因\x0d\x0a 1主页因为权重高所以收录快，内页已经索引只是没有放出来，属于与百度建立信任期\x0d\x0a 2网站结构不友好，过多的js代码和flash以及iframe框架等会导致收录困难\x0d\x0a 3robotstxt规则是否写错，比如Useragent * Disallow ，这样就是不允许抓取\x0d\x。
15、使用站长工具进行测试是很常见的做法排名工具通常会显示权重情况，但排名下降时，权重可能会随之减少对于新网站而言，权重并不是最重要的考量因素，只要被收录就表明搜索引擎对其内容的认可权重的提升需要时间，网站运营者需要耐心等待搜索引擎逐渐给予其更高的权重这通常依赖于网站内容的质量更新频率。
16、这种情况，建议在网站robotstxt文件中把这些404页面屏蔽掉看楼上有说用nofollow的，但是这些页面已经不存在了，只是URL还在百度库里面那么使用nofollow的话也不能解决了，也没地方放了另外，nofollow的意思是不传输这个链接或者页面的权重，对于这种404URL应该没有太大作用。