微信公众号 讲师中心
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机/移动开发 手机游戏
最近更新
搜索
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程
自媒体 新闻
首页 > 后端开发 > php教程 > 正文

php判断来访者是否是搜索引擎的爬虫

php中文网
发布： 2016-07-25 08:44:24
原创
1468人浏览过

我们可以通过http_user_agent来判断是否是蜘蛛，搜索引擎的蜘蛛都有自己的独特标志，下面列取了一部分。

Media.io AI Image Upscaler
Media.io AI Image Upscaler

Media.io推出的AI图片放大工具

Media.io AI Image Upscaler 62
查看详情 Media.io AI Image Upscaler
  1. function is_crawler() {
  2. $userAgent = strtolower($_SERVER['HTTP_USER_AGENT']);
  3. $spiders = array(
  4. 'Googlebot', // Google 爬虫
  5. 'Baiduspider', // 百度爬虫
  6. 'Yahoo! Slurp', // 雅虎爬虫
  7. 'YodaoBot', // 有道爬虫
  8. 'msnbot' // Bing爬虫
  9. // 更多爬虫关键字
  10. );
  11. foreach ($spiders as $spider) {
  12. $spider = strtolower($spider);
  13. if (strpos($userAgent, $spider) !== false) {
  14. return true;
  15. }
  16. }
  17. return false;
  18. }
复制代码

下面的php代码附带了更多的蜘蛛标识
  1. function isCrawler() {
  2. echo $agent= strtolower($_SERVER['HTTP_USER_AGENT']);
  3. if (!empty($agent)) {
  4. $spiderSite= array(
  5. "TencentTraveler",
  6. "Baiduspider+",
  7. "BaiduGame",
  8. "Googlebot",
  9. "msnbot",
  10. "Sosospider+",
  11. "Sogou web spider",
  12. "ia_archiver",
  13. "Yahoo! Slurp",
  14. "YoudaoBot",
  15. "Yahoo Slurp",
  16. "MSNBot",
  17. "Java (Often spam bot)",
  18. "BaiDuSpider",
  19. "Voila",
  20. "Yandex bot",
  21. "BSpider",
  22. "twiceler",
  23. "Sogou Spider",
  24. "Speedy Spider",
  25. "Google AdSense",
  26. "Heritrix",
  27. "Python-urllib",
  28. "Alexa (IA Archiver)",
  29. "Ask",
  30. "Exabot",
  31. "Custo",
  32. "OutfoxBot/YodaoBot",
  33. "yacy",
  34. "SurveyBot",
  35. "legs",
  36. "lwp-trivial",
  37. "Nutch",
  38. "StackRambler",
  39. "The web archive (IA Archiver)",
  40. "Perl tool",
  41. "MJ12bot",
  42. "Netcraft",
  43. "MSIECrawler",
  44. "WGet tools",
  45. "larbin",
  46. "Fish search",
  47. );
  48. foreach($spiderSite as $val) {
  49. $str = strtolower($val);
  50. if (strpos($agent, $str) !== false) {
  51. return true;
  52. }
  53. }
  54. } else {
  55. return false;
  56. }
  57. }
  58. if (isCrawler()){
  59. echo "你好蜘蛛精！";
  60. }
  61. else{
  62. echo "你不是蜘蛛精啊！";
  63. }
复制代码

php


大家都在看：

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习？PHP怎么入门？PHP在哪学？PHP怎么学才快？不用担心，这里为大家提供了PHP速学教程(入门到精通)，有需要的小伙伴保存下载就能学习啦！

下载
来源：php中文网
收藏 点赞
上一篇：PHP实现将网站访问保存成快捷桌面方式 下一篇：php按照指定长度截取字符串的代码
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
php程序怎么运行性能优化_php程序运行性能分析与优化方法 首先启用OPcache以提升脚本执行效率，配置zend_extension并设置opcache.enable=1及内存参数后重启服务器；接着使用Xdebug开启profile模式生成性能分析文件，通过KCacheGrind等工具定位耗时函数；针对数据库优化，应在关键字段建立索引，避免循环查询，利用EXPLAIN分析执行计划，并采用PDO预处理；减少文件I/O方面，应使用自动加载、集中配置管理，并结合Memcached或Redis缓存静态内容；通过zlib.output_compression=O
2025-11-19 18:07:02
834
php代码图片格式使用不当怎么优化_php代码图片格式选择与加载性能优化方法 根据场景选择合适图片格式可显著提升网页性能，JPG适用于照片，PNG适合透明图标，WebP和AVIF在支持的环境中优先使用以减小体积。通过PHP结合GD库或Imagick动态生成适配图片，并添加缓存机制避免重复处理。前端采用懒加载、srcset响应式属性及picture标签实现格式降级，确保兼容性。后端输出优化后应保存为静态文件，配合CDN分发、压缩传输和长期缓存策略，整体降低资源消耗，提升加载速度与用户体验。
2025-11-19 18:04:02
127
如何解决Windows上PHP服务启动失败的处理方法？ 首先检查PHP配置文件语法错误，使用命令php-cphp.ini-m验证；其次确认已安装VisualC++运行库；接着通过命令行php-S127.0.0.1:8000手动启动服务并查看错误输出；然后用netstat检查端口占用情况；最后确保PHP安装路径已添加至系统环境变量Path中。
2025-11-19 18:02:02
733
如何用PHP调用微信支付接口_PHP微信支付接口调用与安全实现教程 首先完成微信支付商户账号配置并获取APIv3密钥与证书，接着通过官方SDK或CURL实现PHP对接；然后调用统一下单API生成prepay_id，前端据此拉起支付；支付后通过异步通知和订单查询确认结果，确保交易安全。
2025-11-19 18:00:54
323
PHP字符串转JSON有什么用_PHP字符串转JSON的应用场景与优势 答案：PHP中通过json_decode()将JSON字符串转为数组或对象，用于前后端交互、API数据处理、配置存储、调试日志及跨语言交换。需确保格式规范，可结合cURL获取数据，用json_last_error()检查错误，并设置Content-Type头为application/json输出。
2025-11-19 17:59:30
212
PHP地址怎么传递_PHP地址参数传递的多种方式与技巧 答案：PHP中可通过GET、POST、SESSION、COOKIE和URL重写传递数据。GET用于URL传参，POST通过表单提交，SESSION跨页存储用户数据，COOKIE在客户端保存信息，URL重写提升可读性，各方法需注意安全过滤与验证。
2025-11-19 17:55:02
528
Symfony表单怎么构建_Symfony表单组件使用与数据绑定方法 首先安装Symfony表单组件并配置依赖，接着创建继承AbstractType的表单类定义字段结构，然后在控制器中绑定数据对象并处理请求，再通过Twig模板渲染表单，最后可手动提交数据实现灵活绑定。
2025-11-19 17:53:02
152
如何设置php网站内容个性化推送_基于用户画像的推送配置方法 答案：通过PHP实现用户画像与内容匹配的个性化推送，首先采集用户注册、浏览及交互行为数据，建立基础画像；其次为内容打标签并累计用户标签得分，构建可计算的标签体系；然后基于用户兴趣标签进行内容匹配，采用混合推荐策略避免信息茧房；最后通过站内展示、邮件或消息通知等方式推送，并持续优化标签权重。整个过程依托PHP+MySQL即可实现，无需复杂框架。
2025-11-19 17:52:02
489
PHPSession怎么生命周期_PHPSession生命周期管理方法及超时设置。 调整PHP会话超时需修改php.ini中session.gc_maxlifetime和cookie_lifetime并重启服务，或在脚本中用ini_set动态设置；还可通过$_SESSION记录last_activity时间戳实现手动过期，或自定义SessionHandlerInterface将会话存储至外部系统以精确控制生命周期。
2025-11-19 17:49:00
270
PHP如何实现图片处理_PHP图片处理功能的实现方法与代码实例 答案：PHP通过GD库实现图片处理，如创建缩略图。使用imagecreatefromjpeg()读取原图，获取尺寸后按比例计算新尺寸，用imagecopyresampled()重采样生成缩略图并保存。
2025-11-19 17:48:06
419
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部