控制Google爬行和索引你的网站

通过三种方式控制Google爬行和索引你的网站,robots.txt,robots meta tag,x-robots-tag。robots.txt文件的写法,构成以及各元素的优先级介绍。