在上篇 基于PHP的简单采集数据入库程序 中提到采集新闻信息页的列表数据,接下来讲讲关于采集新闻具体内容
在上篇文章中,我们已经采集新闻信息页的列表数据,接下来要做的操作就是从数据库中读取所需要采集的url,,进行页面抓取就行
新建一个content表
不过需要注意的一点是,不能再采用采集URL这种id递增的方法去采集,因为数据表中可能出现id断续,比如id=9,id=11,当采集到id=10的时候,URL是空白的,这样可能会导致采集到了空字段。
这里用到的一个技巧是数据库的查询语句,在我们采集完第一条数据的时候,判断数据库里是否还有大于此id的id编号,若有,读取一条,查询信息重复上面的工作。
具体代码如下:
网站程序说明: 1.本程序是基于asp 上的. 2.本程序功能齐全,后台添加简单易懂,只要看着文字就可以操作网站的功能! 3.本程序兼容多个浏览器。 4.本程序模板可以导入,导出,便于快速更新模板。 5.本程序支持access和sql两种数据库。 6:本程序有 系统管理,新闻专区,楼盘展示, 房产信息,黄页信息,其它业务 ,广告管理,其他管理 等多个功能!完全符合网站上的需求!
3
立即学习“PHP免费学习笔记(深入)”;
php include_once("conn.php"); $id=(int)$_GET['id']; $sql="select * from list where id=$id"; $result=mysql_query($sql); $row=mysql_fetch_array($result);//取得对应的url地址 $content=file_get_contents($row['url']); $pattern="/

这样子我们所要的新闻内容就采集入库了,接下来只需要对数据的一些样式进行整理就行了。
PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号