梁延淼（梁延淼）

大家好，精选小编来为大家解答以上问题。梁延淼，梁延淼很多人还不知道，现在让我们一起来看看吧！

1、 对于网站(如梁延淼博客：http://liangyanmiao.com/)，http://liangyanmiao.com/可以说是搜索引擎的一个“司令部”。网站用Robots.txt告诉搜索引擎你能看到什么，不能看到什么。

2、 所以Robots.txt写的正确与否，直接影响网站被搜索引擎收录。下面是一些个人技巧，希望对你有帮助。

3、 以网站根目录下的mulu文件夹为例，我们来说说搜索引擎：

4、 用户代理： *

5、 不允许：

6、 :不允许： /mulu

7、 匹配：

8、 1 、/mulu url

9、 2 、/mulu*网址

10、 3./穆鲁。*任何文件名为mulu的文件

11、 4./mulu*。*文件名以mulu开头的任何文件

12、 5./mulu/以mulu作为目录名的目录

13、 6./mulu/* mulu下的任何文件和目录

14、 7./mulu*/以mulu作为目录名开头的任何目录

15、 8./mulu*/* mulu*下的任何文件和目录

16、 :不允许： /mulu/

17、 匹配：

18、 1./mulu/以mulu作为目录名的目录

19、 2./mulu/* mulu下的任何文件和目录

20、 :不允许：/mulu *匹配：

21、 1 、/mulu url

22、 2 、/mulu*网址

23、 3./穆鲁。*任何文件名为mulu的文件

24、 4./mulu*。*文件名以mulu开头的任何文件

25、 5./mulu/以mulu作为目录名的目录

26、 6./mulu/* mulu下的任何文件和目录

27、 7./mulu*/以mulu作为目录名开头的任何目录

28、 8./mulu*/* mulu*下的任何文件和目录

本文到此结束，希望对大家有所帮助。