网站的Robots文件的使用！

标签：robots文件 搜索引擎 收录 禁止

我们做优化的人，很多看的就是看的是别人网站的收录情况，从来不关心别人网站的禁止情况！但有时我们要考虑网站的Robots文件的使用！详情 >>

网站的Robots文件的使用！

标签：robots文件 搜索引擎 收录 禁止

我们做优化的人，很多看的就是看的是别人网站的收录情况，从来不关心别人网站的禁止情况！但我们还是要考虑网站的Robots文件的使用！详情 >>

详谈robots.txt 的语法格式！

标签：robots

每当搜索蜘蛛来寻找并不存在的 robots.txt 文件时，服务器也将在日志中记录一 条 404 错误，所以你应该在网站中添加一个 robots.txt。详情 >>