如何让你的网站网页不被收录
大家都想着如何让自己的网站尽快或是更多被搜索引擎收录，但有时候这也并不是好事。你登陆后台或是一些在网上D下的免费资源，本身就存在着漏洞有时候这些东西都被收录了我想就不是太好了吧。今天我们就看下如何不被搜索引擎收录的办法。 搜索引擎通过一种程序robot（又称spider），自动访问互联网上的网页并获取网页信息。
您可以在您的网站中创建一个纯文本文件robots.txt，在这个文件中声明该网站中不想被robot访问的部分，这样，该网站的部分或全部内容就可以不被搜索引擎收录了，或者指定搜索引擎只收录指定的内容。
robots.txt文件应该放在网站根目录下。这样就可以了！
代码如下：
———————————————–
User-agent: Baiduspider
Disallow: /
User-agent: baiduspider
Disallow: /
———————————————–
