SEO

robots.txt 文件可以告诉搜索引擎哪些网页不可以抓取，哪些网页可以抓取，但首页的设置稍显繁琐。