其实每一个网站在建设的时候都会设置一个robottxt，当搜索引擎进入网站爬行的时候，首先会查看这个文件，如果设置了禁止搜索引擎抓取的话，搜索引擎就会离开网站那么就不会对网站进行收录了凡科建站自助建站的使用极简单，3000+模板任你选点击这里获取简单快捷的网站制作工具凡科建站。
2 Bing Webmaster Tools 微软必应网站管理员工具，获取到必应的搜索查询索引和搜索流量的数据，Yahoo Site Explorer关闭之后，很多功能也整合进了Bing Webmaster Tools里3 百度站长平台百度站长工具，提供了用户提交Sitemap的功能，Ping服务，并给出了一些URL优化建议网站安全检测工具4 360。
你可以直接在浏览器端口看到关键词搜索量和CPC，以及衍生的同类关键词然后你就可以判断这个关键词值不值得做谷歌广告，比如说月搜索量20以下，就不太建议投放广告了这种搜索量很小的关键词，适合写博客，然后把长尾关键词做到谷歌首页，慢慢带动网站权重如何判断值不值得做SEO优化比如说月搜索量。
例如，百度资源平台可以查看PC搜索和移动搜索的流量与关键词数据，而Google Search Console则能够直接告诉站长哪些页面已编入索引，哪些未编入索引，并提供详细的未编入索引页面的解决方法Bing Webmaster提供了强大的站点管理器功能，并支持主动提交，对于WordPress网站而言，使用Bing Webmaster URL Submission。
