robots 文件中 disallow /*#* 是什么意思?

日期:2018-01-25 13:43:27 人气:1

robots 文件中 disallow /*#* 是什么意思?

屏闭蜘蛛的代码 一般用在robots文件中,提示蜘蛛,网站哪些需些抓取,哪些禁止蜘蛛抓取。 意思是禁止任何蜘蛛抓取该网站的任何目录
    A+
热门评论