
在pandas中处理日期数据时,确保日期列的数据类型为datetime至关重要。如果日期以字符串(object)形式存储,直接进行日期比较或范围筛选可能会导致非预期的结果或错误,例如keyerror或typeerror。datetime类型允许pandas理解日期的先后顺序,从而支持标准的比较运算符(<, >, <=, >=)和逻辑组合。
在进行日期筛选之前,第一步是将包含日期的列从字符串或其他类型转换为Pandas的datetime类型。这通常通过pd.to_datetime()函数完成。
示例代码:
假设我们有一个DataFrame data,其中包含一个名为'todays_date'的日期列,其格式为"MM-DD-YY"。
import pandas as pd
# 示例DataFrame
df = pd.DataFrame({
'todays_date': ['04-20-20', '04-20-21', '03-23-23', '03-24-23', '11-12-23'],
'other_data' : ['A', 'B', 'C', 'D', 'E']
})
print("原始DataFrame:")
print(df)
print("\n原始todays_date列类型:", df['todays_date'].dtype)
# 将'todays_date'列转换为datetime类型
# 必须指定正确的日期格式,这里是'%m-%d-%y'
df['todays_date'] = pd.to_datetime(df['todays_date'], format='%m-%d-%y')
print("\n转换后的DataFrame:")
print(df)
print("\n转换后todays_date列类型:", df['todays_date'].dtype)输出:
原始DataFrame: todays_date other_data 0 04-20-20 A 1 04-20-21 B 2 03-23-23 C 3 03-24-23 D 4 11-12-23 E 原始todays_date列类型: object 转换后的DataFrame: todays_date other_data 0 2020-04-20 A 1 2021-04-20 B 2 2023-03-23 C 3 2023-03-24 D 4 2023-11-12 E 转换后todays_date列类型: datetime64[ns]
注意事项:
一旦日期列被正确转换为datetime类型,就可以像操作其他数值列一样进行比较筛选。
示例代码:筛选早于特定日期的数据
# 筛选所有发生在 '03-24-23' 之前(不包括该日)的实例
# Pandas可以自动将字符串日期与datetime列进行比较,但明确转换更安全
early_instances_mask = (df['todays_date'] < '03-24-23')
early_instances = df[early_instances_mask]
print("\n早于 '03-24-23' 的实例:")
print(early_instances)
# 或者,更明确地将比较日期也转换为datetime对象
# day_limit = pd.to_datetime('03-24-23', format='%m-%d-%y')
# early_instances = df[df['todays_date'] < day_limit]
# print(early_instances)输出:
早于 '03-24-23' 的实例: todays_date other_data 0 2020-04-20 A 1 2021-04-20 B 2 2023-03-23 C
要筛选特定日期范围内的数据,可以使用逻辑运算符&(AND)来组合多个条件。
示例代码:筛选介于两个日期之间的数据
# 筛选所有发生在 '03-24-21' 之后且 '03-24-23' 之前(不包括两端)的实例
# 注意:使用括号确保逻辑运算的优先级
later_instances_mask = (df['todays_date'] > '03-24-21') & \
(df['todays_date'] < '03-24-23')
later_instances = df[later_instances_mask]
print("\n介于 '03-24-21' 和 '03-24-23' 之间的实例:")
print(later_instances)输出:
介于 '03-24-21' 和 '03-24-23' 之间的实例: todays_date other_data 1 2021-04-20 B 2 2023-03-23 C
注意事项:
以下是一个完整的示例,展示了从DataFrame创建到日期筛选的整个过程,并强调了使用pd.to_datetime明确处理日期。
import pandas as pd
# 1. 创建示例DataFrame
df = pd.DataFrame({
'todays_date': ['04-20-20', '04-20-21', '03-23-23', '03-24-23', '11-12-23', '01-01-22'],
'event' : ['Start', 'Mid-Term', 'Milestone1', 'Milestone2', 'End', 'Review']
})
print("--- 原始DataFrame ---")
print(df)
# 2. 转换日期列为 datetime 类型
df['todays_date'] = pd.to_datetime(df['todays_date'], format='%m-%d-%y')
print("\n--- 转换日期类型后的DataFrame ---")
print(df)
print("日期列类型:", df['todays_date'].dtype)
# 3. 筛选早于特定日期的数据
# 明确将比较日期也转换为 datetime 对象,提高代码健壮性
cutoff_date_early = pd.to_datetime('03-24-23', format='%m-%d-%y')
early_events = df[df['todays_date'] < cutoff_date_early]
print("\n--- 发生在 {} 之前的事件 ---".format(cutoff_date_early.strftime('%Y-%m-%d')))
print(early_events)
# 4. 筛选特定日期范围内的数据
start_date = pd.to_datetime('01-01-22', format='%m-%d-%y')
end_date = pd.to_datetime('11-12-23', format='%m-%d-%y')
# 包含起始日期,不包含结束日期
mid_range_events = df[(df['todays_date'] >= start_date) & (df['todays_date'] < end_date)]
print("\n--- 发生在 {} 到 {} 之间(不含后者)的事件 ---".format(
start_date.strftime('%Y-%m-%d'), end_date.strftime('%Y-%m-%d')))
print(mid_range_events)在Pandas DataFrame中根据日期范围筛选数据是一个常见且重要的操作。其核心在于:
遵循这些步骤,可以高效且准确地在Pandas DataFrame中处理和筛选日期数据。
以上就是Pandas DataFrame按日期范围筛选数据的实用指南的详细内容,更多请关注php中文网其它相关文章!
每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号