随笔点滴

robots.txt怎么写?网上很多地方都是错的,官方网上的说明又不清不楚!这里是最详robots.txt写法教程大全!

前言:因为老了多健忘,每次建个站,每次都去查robots.txt的写法,却每次搜索到不同的“标准”!于是,干脆自己记下来,以后只看自己的博文就行了!====正文教材=================一、初识robots.txtrobots....