微信公众号 讲师中心
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机/移动开发 手机游戏
最近更新
搜索
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程
自媒体 新闻
首页 > 后端开发 > php教程 > 正文

php代码禁止搜索引擎蜘蛛解决方案

php中文网
发布： 2016-06-13 13:53:12
原创
2588人浏览过

php代码禁止搜索引擎蜘蛛
其实robots.txt也不是百分之百的可以阻止蜘蛛爬行你的网站，我自己结合某些资料写了一小段代码，貌似可以彻底解决这个问题，不对的地方请大家多多指教：

PHP code
<!--

Code highlighting produced by Actipro CodeHighlighter (freeware)
http://www.CodeHighlighter.com/

-->
if(preg_match("/(Googlebot|Msnbot|YodaoBot|Sosospider|baiduspider|google|baidu|yahoo|sogou|bing|coodir|soso|youdao|zhongsou|slurp|ia_archiver|scooter|spider|webcrawler|OutfoxBot)/i", $_SERVER['HTTP_USER_AGENT']))
{

    header('HTTP/1.1 403 Forbidden');
    exit;
}
登录后复制


------解决方案--------------------
LZ的思路我懂了 但是每个文件都包含这段文字还是主页包含就好了？
------解决方案--------------------
这招绝
------解决方案--------------------
领教了，灭绝师太
------解决方案--------------------
不错!!!
不过为什么要阻止那?蜘蛛们多爬行不是更利于搜索引擎收录你的站点,更利于推广?
------解决方案--------------------
探讨

不错!!!
不过为什么要阻止那?蜘蛛们多爬行不是更利于搜索引擎收录你的站点,更利于推广?

------解决方案--------------------
探讨


有些东西是不希望被搜索引擎收录的，比如涉及到邮件地址、电话号码、姓名等信息

------解决方案--------------------
这种方式能阻止的都是“友好的蜘蛛”，当然也许这些“友好的蜘蛛”并没有完全尊重 robots.txt 的指示，但它至少告诉了你“我是××蜘蛛”。

如果是不友好的蜘蛛，这种判断也就失效了。

大家都在看：

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习？PHP怎么入门？PHP在哪学？PHP怎么学才快？不用担心，这里为大家提供了PHP速学教程(入门到精通)，有需要的小伙伴保存下载就能学习啦！

下载
来源：php中文网
收藏 点赞
上一篇： 排序有关问题 下一篇： 熟悉网站合并的进来出出主意,该怎么处理
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
php代码代码单元测试怎么优化_php代码代码质量保障与性能优化测试方法 使用PHPUnit规范测试结构，2.提高核心逻辑覆盖率，3.模拟外部依赖确保独立性，4.集成PHPStan等静态分析工具，5.优化测试性能并持续维护，系统化保障PHP代码质量。
2025-11-22 21:48:31
153
php网站代码单元测试怎么优化保障_php网站代码质量保障与性能优化测试方法 引入PHPUnit进行单元测试，结合Xdebug生成覆盖率报告，使用PHPStan静态分析代码，配置SQLite内存数据库隔离测试环境，通过性能基准测试监控耗时与内存，最后将测试自动化集成至CI/CD流程，全面提升PHP网站代码质量与性能。
2025-11-22 21:46:02
532
php网站代码性能监测怎么进行优化_php网站性能监测工具使用与优化方法指南 使用Xdebug、Blackfire.io、NewRelic监测性能，启用OPcache减少编译开销，优化数据库查询与连接管理以提升PHP应用效率。
2025-11-22 21:40:02
513
PHP框架多语言怎么实现_PHP框架多语言切换及国际化实现方案 多语言支持通过分离文本、动态加载和统一调用实现，Laravel使用资源文件与中间件，Symfony依赖Translator组件，轻量框架可自定义Lang类管理语言包。
2025-11-22 21:39:34
864
PHP如何实现动态图表_PHP动态图表生成的方法与代码实例 PHP通过结合前端图表库实现动态图表生成，常用方法包括：1.使用Chart.js与Ajax获取PHP输出的JSON数据绘制柱状图；2.利用GoogleCharts在前端嵌入PHP生成的JSON数据展示折线图；3.通过ECharts调用PHP接口返回的数据渲染交互式饼图。核心是PHP处理数据并以JSON格式输出，前端库负责可视化，需确保Content-Type正确及数据结构一致。
2025-11-22 21:36:07
185
手机怎么用php_手机端PHP开发（响应式/H5）与调试方法 首先检查并正确搭建手机端PHP环境，使用KSWEB或Termux安装PHP并启动本地服务器，将文件存入指定目录后通过localhost访问；若需高级配置，则在Termux中手动安装PHP并运行服务；结合响应式H5页面时，嵌入HTML5结构、引入CSS框架并通过JavaScript与PHP交互；最后启用错误报告，查看日志定位问题，确保代码正常执行。
2025-11-22 21:35:58
618
PHP属性默认值怎么设置_PHP类属性默认值设置方法与注意事项 PHP类属性默认值需用常量表达式，支持基础类型初始化；2.不可使用变量或函数调用，复杂结构应于构造函数中初始化；3.静态属性同理，数组和对象需延迟至构造方法处理以避免共享问题。
2025-11-22 21:33:31
701
PHP接口中的方法有何特点_PHP接口方法定义规范与实现要求解析 PHP接口通过interface定义，方法必须为public且无实现，支持类型提示和默认参数；类实现接口需用implements关键字，严格实现所有方法，访问控制为public，参数与返回类型需兼容，支持协变与逆变；PHP类可实现多个接口以组合行为，提升代码解耦与扩展性。
2025-11-22 21:33:05
989
php网站模板加载慢怎么解决_php网站模板渲染性能优化与加速技巧 优化PHP网站模板加载需启用模板缓存、减少文件包含、优化代码结构并配置OPcache与CDN。具体：1.启用Smarty等引擎的编译缓存，设置合理过期时间，关闭调试模式；2.减少模板嵌套与include，合并碎片模板，避免模板内数据库查询；3.开启OPcache并调优内存与校验频率；4.对静态页面生成HTML文件并结合CDN加速资源加载，提升整体渲染效率。
2025-11-22 21:30:48
564
php项目怎么部署到zendframework_php项目zendframework框架部署与运行配置教程 部署ZendFramework项目需先配置服务器环境，再安装依赖并设置重写规则。1.确保PHP、Web服务器、Composer和数据库就绪，上传项目至根目录；2.执行composerinstall--no-dev生成自动加载文件；3.配置Apache或Nginx重写规则，使请求导向index.php；4.将Web根目录设为public/，并调整文件权限；5.设置数据库等应用配置，敏感信息放入local.php；6.生产环境关闭错误显示，启用日志记录。正确配置后项目即可稳定运行。
2025-11-22 21:30:07
141
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部