mcxixi317技术博客

[tr][td]对于WordPressrobots.txt写法，中意wordpress程序的朋友们或多或少对robots.txt写法不会感到陌生吧。下面诸葛诺介绍一个很不错的robots的写法，一起过来瞧瞧吧！robots.txt就是告诉搜索引擎哪些网页被爬行，它允许蜘蛛“看”哪...