梁延淼（梁延淼）

大家好，精選小編來為大家解答以上問題。梁延淼，梁延淼很多人還不知道，現在讓我們一起來看看吧！

1、 對于網站(如梁延淼博客：http://liangyanmiao.com/)，http://liangyanmiao.com/可以說是搜索引擎的一個“司令部”。網站用Robots.txt告訴搜索引擎你能看到什么，不能看到什么。

2、 所以Robots.txt寫的正確與否，直接影響網站被搜索引擎收錄。下面是一些個人技巧，希望對你有幫助。

3、 以網站根目錄下的mulu文件夾為例，我們來說說搜索引擎：

4、 用戶代理： *

5、 不允許：

6、 :不允許： /mulu

7、 匹配：

8、 1 、/mulu url

9、 2 、/mulu*網址

10、 3./穆魯。*任何文件名為mulu的文件

11、 4./mulu*。*文件名以mulu開頭的任何文件

12、 5./mulu/以mulu作為目錄名的目錄

13、 6./mulu/* mulu下的任何文件和目錄

14、 7./mulu*/以mulu作為目錄名開頭的任何目錄

15、 8./mulu*/* mulu*下的任何文件和目錄

16、 :不允許： /mulu/

17、 匹配：

18、 1./mulu/以mulu作為目錄名的目錄

19、 2./mulu/* mulu下的任何文件和目錄

20、 :不允許：/mulu *匹配：

21、 1 、/mulu url

22、 2 、/mulu*網址

23、 3./穆魯。*任何文件名為mulu的文件

24、 4./mulu*。*文件名以mulu開頭的任何文件

25、 5./mulu/以mulu作為目錄名的目錄

26、 6./mulu/* mulu下的任何文件和目錄

27、 7./mulu*/以mulu作為目錄名開頭的任何目錄

28、 8./mulu*/* mulu*下的任何文件和目錄

本文到此結束，希望對大家有所幫助。