robots.txt共2篇

网站地图是什么?该如何生成

网站地图是什么?该如何生成-柠檬小栈
一些初入SEO行业的小白可能听过网站地图这个名词,但是对于网站地图的具体作用可能不是很清楚。今天义信科技麒麟老师特意查了一下这个关键词的百度指数,发现100多,就立马写了这篇文章,关于网...
柠檬的头像-柠檬小栈柠檬2个月前
05211

robots.txt概念和10条注意事项

robots.txt概念和10条注意事项-柠檬小栈
robots.txt概念 如果我们网站内有某些特殊的文件不让搜索引擎收录,那怎么办? 答案是:使用一个叫做robots.txt的文件。 robots.txt文件告诉搜索引擎本网站哪些文件是允许搜索引擎蜘蛛抓取,哪...
柠檬的头像-柠檬小栈柠檬10个月前
05413