【问题标题】:python pandas extract year from datetime: df['year'] = df['date'].year is not workingpython pandas 从日期时间中提取年份:df['year'] = df['date'].year 不起作用
【发布时间】:2015-08-04 23:46:54
【问题描述】:

我通过read_csv 导入数据框,但由于某种原因无法从系列df['date'] 中提取年份或月份,尝试给出AttributeError: 'Series' object has no attribute 'year'

date    Count
6/30/2010   525
7/30/2010   136
8/31/2010   125
9/30/2010   84
10/29/2010  4469

df = pd.read_csv('sample_data.csv', parse_dates=True)

df['date'] = pd.to_datetime(df['date'])

df['year'] = df['date'].year
df['month'] = df['date'].month

更新: 当我在我的熊猫版本 0.14.1 上尝试使用 df['date'].dt 的解决方案时,我得到“AttributeError: 'Series' object has no attribute 'dt'”:

df = pd.read_csv('sample_data.csv',parse_dates=True)

df['date'] = pd.to_datetime(df['date'])

df['year'] = df['date'].dt.year
df['month'] = df['date'].dt.month

对于这个看似重复的问题,我感到很抱歉 - 我希望这个答案会让我觉得自己像个傻瓜......但我没有运气使用 SO 上类似问题的答案。


跟进:我似乎无法在我的 Anaconda 环境中将我的 pandas 0.14.1 更新到较新的版本,以下每次尝试都会产生无效的语法错误。我正在使用 Python 3.4.1 64 位。

conda update pandas

conda install pandas==0.15.2

conda install -f pandas

有什么想法吗?

【问题讨论】:

  • 年份从何而来?您是否尝试访问一行(df["date"][0].year
  • 我有一个包含日期和其他列的 csv 文件,这些列都来自 SQL 作为字符串数据。尝试创建新的年份和月份列以用于分组。 csv 有 ~5000 行。
  • 是的,但是 df["date"] 是一个 'pandas.core.series.Series' 对象。 df['date'].year 应该是什么?
  • 我只想再创建 2 列...一列表示年份,一列表示月份为整数。
  • 也试过 df['date'].dt.year,EdChum。

标签: python datetime pandas extract dataframe


【解决方案1】:

这行得通:

df['date'].dt.year

现在:

df['year'] = df['date'].dt.year
df['month'] = df['date'].dt.month

给出这个数据框:

        date  Count  year  month
0 2010-06-30    525  2010      6
1 2010-07-30    136  2010      7
2 2010-08-31    125  2010      8
3 2010-09-30     84  2010      9
4 2010-10-29   4469  2010     10

【讨论】:

    【解决方案2】:

    如果您运行的是最新版本的 pandas,那么您可以使用 datetime 属性 dt 来访问 datetime 组件:

    In [6]:
    
    df['date'] = pd.to_datetime(df['date'])
    df['year'], df['month'] = df['date'].dt.year, df['date'].dt.month
    df
    Out[6]:
            date  Count  year  month
    0 2010-06-30    525  2010      6
    1 2010-07-30    136  2010      7
    2 2010-08-31    125  2010      8
    3 2010-09-30     84  2010      9
    4 2010-10-29   4469  2010     10
    

    编辑

    看起来您正在运行旧版本的 pandas,在这种情况下,以下方法可以工作:

    In [18]:
    
    df['date'] = pd.to_datetime(df['date'])
    df['year'], df['month'] = df['date'].apply(lambda x: x.year), df['date'].apply(lambda x: x.month)
    df
    Out[18]:
            date  Count  year  month
    0 2010-06-30    525  2010      6
    1 2010-07-30    136  2010      7
    2 2010-08-31    125  2010      8
    3 2010-09-30     84  2010      9
    4 2010-10-29   4469  2010     10
    

    关于为什么它没有将其解析为 read_csv 中的日期时间,您需要传递列的序号位置 ([0]),因为当 True 它尝试解析列 [1,2,3] 时,请参阅 @987654322 @

    In [20]:
    
    t="""date   Count
    6/30/2010   525
    7/30/2010   136
    8/31/2010   125
    9/30/2010   84
    10/29/2010  4469"""
    df = pd.read_csv(io.StringIO(t), sep='\s+', parse_dates=[0])
    df.info()
    <class 'pandas.core.frame.DataFrame'>
    Int64Index: 5 entries, 0 to 4
    Data columns (total 2 columns):
    date     5 non-null datetime64[ns]
    Count    5 non-null int64
    dtypes: datetime64[ns](1), int64(1)
    memory usage: 120.0 bytes
    

    因此,如果您将参数parse_dates=[0] 传递给read_csv,则加载后无需在“日期”列上调用to_datetime

    【讨论】:

      【解决方案3】:

      对我有用的是将熊猫升级到最新版本:

      从命令行执行:

      conda update pandas
      

      【讨论】:

        【解决方案4】:

        何时使用dt 访问器

        一个常见的混淆来源围绕着何时使用 .year 以及何时使用 .dt.year

        前者是pd.DatetimeIndex对象的属性;后者用于pd.Series 对象。考虑这个数据框:

        df = pd.DataFrame({'Dates': pd.to_datetime(['2018-01-01', '2018-10-20', '2018-12-25'])},
                          index=pd.to_datetime(['2000-01-01', '2000-01-02', '2000-01-03']))
        

        系列和索引的定义看起来很相似,但是pd.DataFrame 构造函数将它们转换为不同的类型:

        type(df.index)     # pandas.tseries.index.DatetimeIndex
        type(df['Dates'])  # pandas.core.series.Series
        

        DatetimeIndex 对象有一个直接的year 属性,而Series 对象必须使用dt 访问器。 month 也是如此:

        df.index.month               # array([1, 1, 1])
        df['Dates'].dt.month.values  # array([ 1, 10, 12], dtype=int64)
        

        值得注意的一个微妙但重要的区别是df.index.month 提供了一个 NumPy 数组,而df['Dates'].dt.month 提供了一个 Pandas 系列。上面,我们使用pd.Series.values 来提取 NumPy 数组表示。

        【讨论】:

          【解决方案5】:

          可能已经来不及回答了,但是由于您已经在加载数据时解析了日期,因此您可以这样做来获取日期

          df['date'] = pd.DatetimeIndex(df['date']).year
          

          【讨论】:

            猜你喜欢
            • 1970-01-01
            • 2013-01-19
            • 2012-02-29
            • 1970-01-01
            • 2019-05-02
            • 1970-01-01
            • 1970-01-01
            • 2018-10-19
            • 2019-01-15
            相关资源
            最近更新 更多