当网站不想在手机端查看,同时又不想屏蔽蜘蛛,不影响搜索引擎收录时,可以使用下方方式进行操作
进行服务器层面配置
Apache 服务器
- 原理:通过
.htaccess文件配置规则,根据User-Agent进行请求过滤。 - 在网站根目录下找到或创建
.htaccess文件。
Nginx 服务器
在 Nginx 配置文件中添加规则,根据 User-Agent 来决定是否允许访问。
打开 Nginx 配置文件,通常为config 文件
搜索引擎蜘蛛的 User - Agent 可能会更新,需要定期检查并更新代码中的蜘蛛列表,以确保蜘蛛能够正常访问。
还没有评论,来说两句吧...