很早以前一直觉得站点地图可有可无，反正搜索引擎爬虫都会自己去爬站内各种连接。但是对于一个新站或经常更新的站点来说，站点地图很重要性，是快速告诉搜索引擎站内有哪些内容或更新了哪些内容。并且还能针对不同以页面配置优先级等。

我们都知道给网站增加外链能提升网站在搜索引擎中的排名。为了增加搜索引擎中的排名，你是否做过这样的事，通过在一些互联网平台发表软文或评论方式在各做外链？

在 Google Search Console (GSC) 中，“已发现 - 尚未编入索引”(Discovered - currently not indexed) 和 “已抓取 - 尚未编入索引”(Crawled - currently not indexed) 是两种不同的状态

在一些网站中，通过robots.txt可以控制哪些站点资源或目录能被搜索引擎索引，但是随着站点页面增加，之前允许的索引页面常常不希望被索引，如果直接修改 robots.txt，影响会比较大，所以页面级的控制就很有必要。

建站后千万别忘记配置 robots.txt 爬虫规则，对于搜索引擎发现你的站点非常重要，除了主动到搜索引擎平台提交网站之外，也要主动告诉搜索引擎网站里都有哪些网页？哪些希望被抓取？哪些不希望被抓取？