判断题 纯文本链接是指从一个页面通过链接指向另外一个页面的链接关系。

判断题 Html版本的网站地图只适合搜索引擎蜘蛛抓取，不利于用户体验。

判断题 使用了meta robots标签的页面在任何情况下都会被抓取。