1
justyy 2016-11-21 07:34:42 +08:00 1
不要用 robots.txt!!!!
不要用 robots.txt!!!! 不要用 robots.txt!!!! 在 header.php 里 判断 是否是首页 <?php if (!is_home()) {// 除了首页 ?> <meta name=robots content='noindex, follow'> <?php } ?? |
2
Chalice OP 谢谢,顺便请问下不用 robots.txt 的原因是因为对搜索引擎不如 meta 友好吗?
|
3
justyy 2016-11-21 17:39:25 +08:00 1
@Chalice
如果 你有一个页面 , 已经在搜索引擎里了, 后来你决定不让搜索引擎 索引该页面, 如果你用 robots.txt 禁止,那么搜索引擎是无法访问该页面的,也就是说它并不知道你是否让它索引,即使你在该 页面里加入 noindex 也是没用的。 https://moz.com/learn/seo/robotstxt Block with Robots.txt This tells the engines not to crawl the given URL, but that they may keep the page in the index and display it in in results. (See image of Google results page below.) Block with Meta NoIndex This tells engines they can visit, but are not allowed to display the URL in results. This is the recommended method. |
4
hqfzone 2016-11-22 16:00:15 +08:00 1
User-agent: *
Disallow: / Allow: /$ 亲测百度等可以,你写的那个收录的是 index.php ,好丑。 |