微信公众号 讲师中心
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机/移动开发 手机游戏
最近更新
搜索
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程
自媒体 新闻
首页 > php教程 > PHP源码 > 正文

php file_get_contents 设置代理抓取页面示例

php中文网
发布： 2016-06-08 17:23:27
原创
1567人浏览过

file_get_contents函数在php中可以直接打开本地文件也可以直接抓取远程服务器文件，如果简单的采集我们可以使用file_get_contents直接来操作，如果有防采集我们可能需要代理来操作，下面我来介绍file_get_contents抓取页面示例。

<script>ec(2);</script>


例1，普通页面获取

例如，访问54master论坛，想抓取首页里 所有h3标记内的元素。

 代码如下 复制代码


$url=http://www.111cn.net;
$contents=@file_get_contents($url);
//preg_match_all("/

(.*?)

/is",$contents,$content);
preg_match_all("/

(.*?)

/is",$contents,$content);
print_r($content[0]);

例2，设置代码IP去采集数据

使用file_get_contents 和 stream_context_create 即可。

代码如下:

AssemblyAI
AssemblyAI

转录和理解语音的AI模型

AssemblyAI 65
查看详情 AssemblyAI
 代码如下 复制代码

$aContext = array(
    'http' => array(
        'proxy' => 'tcp://192.168.0.2:3128',  //这里设置你要使用的代理ip及端口号
        'request_fulluri' => true,
    ),
);
$cxContext = stream_context_create($aContext);
$sFile = file_get_contents("http://www.111cn.net", False, $cxContext);
echo $sFile;

以上代码适用于正常情况，但是如果目标页面需要登录或需要认证信息才能访问的话，可以加多一句代码。

立即学习“PHP免费学习笔记（深入）”；

 代码如下 复制代码

$auth = base64_encode('LOGIN:PASSWORD');   //LOGIN:PASSWORD 这里是你的账户名及密码
$aContext = array(
    'http' => array(
        'proxy' => 'tcp://192.168.0.2:3128',  //这里设置你要使用的代理ip及端口号
        'request_fulluri' => true,
        'header' => "Proxy-Authorization: Basic $auth",
    ),
);
$cxContext = stream_context_create($aContext);
$sFile = file_get_contents(http://www.111cn.net, False, $cxContext);
echo $sFile;

这样就可以使用代理来抓取页面或文件了

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习？PHP怎么入门？PHP在哪学？PHP怎么学才快？不用担心，这里为大家提供了PHP速学教程(入门到精通)，有需要的小伙伴保存下载就能学习啦！

下载
来源：php中文网
收藏 点赞
上一篇：PHP中上传多个文件到服务器实例 下一篇：php ZipArchive类创建和解压zip文件实例
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
phpmystudy2016版程序包下载-让天下没有难配的php环境 对学习PHP的新手来说，WINDOWS下环境配置是一件很困难的事；对老手来说也是一件烦琐的事。因此无论你是新手还是老手，该phpmystudy2016程序包都是一个不错的选择。
2017-01-06 16:08:31
6312
多城市选择器实现代码 多城市选择器实现代码，需求 : 热门城市、列表中的城市都需要在数据库中查询出来后构建列表，并按a-z排列，输入字母可以实现查询。
2016-12-28 13:40:59
5206
微信接口php版本sdk的WxApi.class.php 微信最新公布接口 php版本的sdk，包括分组、获取用户信息、获取关注列表、创建带参数的二维码等等。
2016-11-25 14:05:54
3547
php图片加水印类，支持文字水印、透明度设置、自定义水印类 * 图片加水印类，支持文字水印、透明度设置、自定义水印位置等。 * 使用示例： * $obj = new WaterMask($imgFileName); //实例化对象 * $obj->$waterType = 1; //类型：0为文字水印、1为图片水印
2016-11-23 14:49:44
3373
php命名空间和动态语言特征 PHP 命名空间的实现受到其语言自身的动态特征的影响。因此，如果要将下面的代码转换到命名空间中：
2016-11-23 10:55:37
3142
PHP弱类型安全问题总结 PHP弱类型安全问题总结
2016-11-12 11:01:54
2944
如何读懂并写出装逼的函数式代码 如何读懂并写出装逼的函数式代码
2016-11-12 10:17:18
3738
用 PHP 爬虫做旅游数据分析 用 PHP 爬虫做旅游数据分析
2016-11-11 15:15:55
4734
C++从文件中按照单词读取内容 C++从文件中按照单词读取内容
2016-11-11 13:38:00
2122
你所不知道的 PHP - 自动加载 你所不知道的 PHP - 自动加载
2016-11-11 11:18:34
2068
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部