python爬虫火车票实例源码

爱谁谁
发布: 2024-09-07 10:48:50
原创
951人浏览过
Python 爬虫可用于自动获取火车票信息,包括火车号、出发/到达时间、票价等。代码结构包括导入库、设置请求头、获取车站代码、构建查询 URL、发送请求、解析响应和提取信息。步骤依次是:导入库、设置请求头、获取车站代码、构建查询 URL、发送请求、解析响应、提取信息。

python爬虫火车票实例源码

Python 爬虫火车票实例源码

入门

爬取火车票信息对于自动抢票或旅行规划非常有用。Python 提供了丰富的库和工具来实现这一目的。

代码结构

立即学习Python免费学习笔记(深入)”;

一个基本的 Python 爬虫火车票实例源码可能包含以下部分:

  • 导入库:导入必要的库,如 requests、BeautifulSoup 和 re。
  • 设置请求头:设置 User-Agent 和其他标头,冒充浏览器发送请求。
  • 获取车站代码:从火车票售票网站获取各个车站的代码。
  • 构建查询 URL:使用车站代码、出发和到达日期构建查询 URL。
  • 发送请求:使用 requests 库向火车票售票网站发送 GET 请求。
  • 解析响应:使用 BeautifulSoup 解析 HTML 响应并提取火车票信息。
  • 提取信息:使用正则表达式或 XPath 从 HTML 中提取火车号、出发/到达时间、票价等信息。
  • 存储数据:将提取到的信息存储在数据库、CSV 文件或其他数据结构中。

步骤详解

1. 导入库

火龙果写作
火龙果写作

用火龙果,轻松写作,通过校对、改写、扩展等功能实现高质量内容生产。

火龙果写作 106
查看详情 火龙果写作
<code class="python">import requests
from bs4 import BeautifulSoup
import re</code>
登录后复制

2. 设置请求头

<code class="python">headers = {
    "User-Agent": "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4896.75 Safari/537.36"
}</code>
登录后复制

3. 获取车站代码

<code class="python">response = requests.get("https://www.12306.cn/index/", headers=headers)
soup = BeautifulSoup(response.text, "html.parser")
stations = soup.find_all("a", {"href": re.compile("/otn/resources/js/framework/station_name.js")})
station_codes = {}
for station in stations:
    station_codes[station.text] = station["href"].split("/")[-1][:-3]</code>
登录后复制

4. 构建查询 URL

<code class="python">from_station = "上海"
to_station = "北京"
date = "2023-05-01"
url = "https://kyfw.12306.cn/otn/leftTicket/query?leftTicketDTO.train_date={}&leftTicketDTO.from_station={}&leftTicketDTO.to_station={}&purpose_codes=ADULT".format(date, station_codes[from_station], station_codes[to_station])</code>
登录后复制

5. 发送请求

<code class="python">response = requests.get(url, headers=headers)</code>
登录后复制

6. 解析响应

<code class="python">soup = BeautifulSoup(response.text, "html.parser")</code>
登录后复制

7. 提取信息

<code class="python">trains = soup.find_all("tr", {"class": "result-item"})
for train in trains:
    train_number = train.find("a", {"class": "number"}).text
    start_time = train.find("td", {"class": "start-time"}).text
    arrive_time = train.find("td", {"class": "arrive-time"}).text
    duration = train.find("td", {"class": "duration"}).text
    prices = train.find("td", {"class": "price"}).text.split("|")
    print(train_number, start_time, arrive_time, duration, prices)</code>
登录后复制

以上就是python爬虫火车票实例源码的详细内容,更多请关注php中文网其它相关文章!

python速学教程(入门到精通)
python速学教程(入门到精通)

python怎么学习?python怎么入门?python在哪学?python怎么学才快?不用担心,这里为大家提供了python速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号