【问题标题】:Explode the list values in dataframe columns展开数据框列中的列表值
【发布时间】:2021-02-22 17:25:12
【问题描述】:

我有一个具有以下值的数据框:

sentence_id  words                    labels
3822445      ['a', 'b', 'c', '']      ['B-PER', 'I-PER', 'I-PER', 'I-PER']
3822446      ['d', 'e', '']           ['B-PER', 'I-PER', 'I-PER']
3822447      ['f', 'g', 'h']          ['B-PER', 'I-PER', 'I-PER']

期望输出为:

sentence_id  words    labels    
3822445       'a'     'B-PER'
3822445       'b'     'I-PER'
3822445       'c'     'I-PER'
3822445       ''      'I-PER'
3822446       'd'     'B-PER'
3822446       'e'     'I-PER'
3822446       ''      'I-PER'
3822447       'f'     'B-PER'
3822447       'g'     'I-PER'
3822447       'h'     'I-PER'

我试过了:

dataframe.set_index(['sentence_id']).apply(pd.Series.explode).reset_index()

但输出与输入相同。不知道怎么回事。

【问题讨论】:

标签: python pandas dataframe


【解决方案1】:

如果你想要一个简单的单行,你可以使用explode 和pandas>=0.25.0

df.explode('words').assign(labels=df['labels'].explode())

【讨论】:

  • 实际上这是一个愚蠢的错误,当我阅读 csv 时,它会将单词列表作为字符串列表
【解决方案2】:

熊猫 1.3.0 更新

pandas.DataFrame.explode 现在接受列标题列表

df.explode(['words','labels'], ignore_index=True)

输出:

   sentence_id words labels
0      3822445     a  B-PER
1      3822445     b  I-PER
2      3822445     c  I-PER
3      3822445        I-PER
4      3822446     d  B-PER
5      3822446     e  I-PER
6      3822446        I-PER
7      3822447     f  B-PER
8      3822447     g  I-PER
9      3822447     h  I-PER

这对我来说很好。你有什么意想不到的结果?

df  = pd.DataFrame({'sentence_id':[3822445, 3822446, 3822447],
                    'words':[['a', 'b', 'c', ''],
                            ['d', 'e', ''],
                            ['f', 'g','h']],
                   'labels':[['B-PER', 'I-PER', 'I-PER', 'I-PER'],
                            ['B-PER','I-PER', 'I-PER'],
                            ['B-PER', 'I-PER','I-PER']]})

df.set_index('sentence_id').apply(pd.Series.explode).reset_index()

输出:

   sentence_id words labels
0      3822445     a  B-PER
1      3822445     b  I-PER
2      3822445     c  I-PER
3      3822445        I-PER
4      3822446     d  B-PER
5      3822446     e  I-PER
6      3822446        I-PER
7      3822447     f  B-PER
8      3822447     g  I-PER
9      3822447     h  I-PER

【讨论】:

  • 实际上这是一个愚蠢的错误,当我阅读 csv 时,它会将单词列表作为字符串列表。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2019-07-03
  • 2019-06-30
  • 2020-05-31
  • 1970-01-01
  • 2015-07-26
  • 2019-03-08
  • 2020-10-28
相关资源
最近更新 更多