【问题标题】:Python: Create dataframe from a list where each new row starts at a specific list indexPython:从每个新行从特定列表索引开始的列表创建数据框
【发布时间】:2020-11-03 14:55:47
【问题描述】:

我有一个列表,其中“SUMMARY”元素和下一个元素之间的项目数不固定

list = ['SUMMARY - Dec 2013', 'Person1', 'None', 'None', '10', 'SUMMARY - Dec 2013', 'Person2', '20', 'SUMMARY - Jan 2014', 'Person3', 'None']

我想要实现的是将列表转换为数据框,其中每一行都以“SUMMARY”元素开头

我用过

match = []
match.append([n for n, l in enumerate(list) if l.startswith('SUMMARY')])

使用输出[[0, 5, 8]] 来获取包含“SUMMARY”的项目的索引,并且我希望我的数据框的每一行都从其索引包含在match 中的相应项目开始。在这种情况下,匹配有 3 个元素,所以我希望我的数据框有 3 行和以下结构:

'SUMMARY - Dec 2013', 'Person1', 'None', 'None', '10'
'SUMMARY - Dec 2013', 'Person2', '20',   NA,    NA
'SUMMARY - Jan 2014', 'Person3', 'None', NA,    NA

基本上,当特定行的项目数小于最大列数时,其余的将被 NA/NaN 填充。

【问题讨论】:

    标签: python python-3.x pandas list numpy


    【解决方案1】:

    感谢您提供示例数据。如果您从单个系列开始,则更容易解决此问题。您可以根据是否存在“摘要”对数据行进行分组,然后使用它来聚合和重新展开跨列的数据。

    s = pd.Series(your_list)
    pd.DataFrame(s.groupby(s.str.contains('summary', case=False).cumsum())
                  .agg(list)
                  .tolist())                                                   
    
                        0        1     2     3     4
    0  SUMMARY - Dec 2013  Person1  None  None    10
    1  SUMMARY - Dec 2013  Person2    20  None  None
    2  SUMMARY - Jan 2014  Person3  None  None  None
    

    感谢@Shubham Sharma 关于迭代组的建议:

    pd.DataFrame([g.tolist() for k, g in s.groupby(
        s.str.contains('summary', case=False).cumsum())])
    
                        0        1     2     3     4
    0  SUMMARY - Dec 2013  Person1  None  None    10
    1  SUMMARY - Dec 2013  Person2    20  None  None
    2  SUMMARY - Jan 2014  Person3  None  None  None
    

    【讨论】:

    • pd.DataFrame([grp.tolist() for k, grp in s.groupby(s.str.contains('summary', case=False).cumsum()) 可能会更快,你觉得呢?
    • @ShubhamSharma 也可以,为什么不发布答案?
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2017-11-13
    • 1970-01-01
    • 2016-11-05
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2021-06-10
    相关资源
    最近更新 更多