【问题标题】:Create a new column in Pandas dataframe based on different conditions根据不同的条件在 Pandas 数据框中创建一个新列
【发布时间】:2020-06-04 09:40:25
【问题描述】:

这是我庞大数据框的一小部分:

data = {'index':  ['001', '001', '002', '002', '003', '003', '003', '004', '004', '004', '004', '005'],
        'vehicle': ['none', 'car', 'car', 'car', 'none', 'car', 'car', 'car', 'bus', 'bus', 'bus', 'motorcycle'],
        'cas_class': ['pedestrian', 'driver', 'driver', 'passenger', 'pedestrian', 'driver', 'driver', 'driver', 'driver', 'passenger', 'passenger', 'driver']}

df = pd.DataFrame (data, columns = ['index', 'vehicle', 'cas_class']) 
df     

输出:

    index   vehicle     cas_class
0   001     none        pedestrian
1   001     car         driver
2   002     car         driver
3   002     car         passenger
4   003     none        pedestrian
5   003     car         driver
6   003     car         driver
7   004     car         driver
8   004     bus         driver
9   004     bus         passenger
10  004     bus         passenger
11  005     motorcycle  driver
  1. 我要做的是计算每个索引涉及多少车辆(索引表示事故)。按条件计数的最简单和最快的方法是什么? 例如,我可以计算每次事故的司机人数,这样我就可以知道每次事故中我有多少辆车。

使用这段代码我设法做到了:

n_of_veh = df[df["cas_class"]=='driver'].groupby(['index']).size().reset_index()\
           .rename(columns= {0: 'n_of_veh'})
df = df.merge(n_of_veh, on='index')

这部分仍然是我想弄清楚的:

  1. 我还想添加另一个名为“reference”的列,我可以在其中引用哪一辆车造成的伤亡,或者如果是行人,哪辆车撞到了行人。

有人可以帮忙吗?我还在学习熊猫。 :/

期望的输出:

    index   vehicle     class        n_of_veh   reference
0   001     none        pedestrian   1          1  
1   001     car         driver       1          1
2   002     car         driver       1          1
3   002     car         passenger    1          1
4   003     none        pedestrian   2          1
5   003     car         driver       2          1
6   003     car         driver       2          2
7   004     car         driver       2          1 
8   004     bus         driver       2          2
9   004     bus         passenger    2          2
10  004     bus         passenger    2          2
11  005     motorcycle  driver       1          1

编辑

the original data的翻译:

# columns translation
df = df.rename({'FECHA': 'Date', 'RANGO HORARIO': 'Hour', 'DIA SEMANA': 'Day_of_Week', 'DISTRITO': 'District', 'LUGAR ACCIDENTE': 'Street_Address', 'Nº': 'Street_Number', 'Nº PARTE': 'Accident_Index', 'CPFA Granizo': 'WC_Hail', 'CPFA Hielo': 'WC_Ice', 'CPFA Lluvia': 'WC_Rainy', 'CPFA Niebla': 'WC_Foggy', 'CPFA Seco': 'WC_Dry', 'CPFA Nieve': 'WC_Snowy', 'CPSV Mojada': 'RC_Wet', 'CPSV Aceite': 'RC_Oil', 'CPSV Barro': 'RC_Mud', 'CPSV Grava Suelta': 'RC_Gravel_Loose', 'CPSV Hielo': 'RC_Ice', 'CPSV Seca Y Limpia': 'RC_Dry_and_Clean', '* Nº VICTIMAS': 'Number_of_Casualties', 'TIPO ACCIDENTE': 'Collision_Type', 'Tipo Vehiculo': 'Vehicle_Type', 'TIPO PERSONA': 'Casualty_Class', 'SEXO': 'Sex_of_Casualty', 'LESIVIDAD': 'Casualty_Severity', 'Tramo Edad': 'Age_Band_of_Casualty'}, axis=1)

# removing columns that are not needed
df = df.drop(columns= ['Date', 'Hour', 'Day_of_Week', 'District', 'Street_Address', 'Street_Number', 'WC_Hail', 'WC_Ice', 'WC_Rainy', 'WC_Foggy', 'WC_Dry', 'WC_Snowy', 'RC_Wet', 'RC_Oil', 'RC_Mud', 'RC_Gravel_Loose', 'RC_Ice', 'RC_Dry_and_Clean', 'Sex_of_Casualty', 'Age_Band_of_Casualty'])

# other translations
collision_dict = {'COLISION DOBLE': 'Double_Collision', 'ATROPELLO': 'Pedestrian_Hit', 'COLISION MULTIPLE': 'Multiple_Collision', 'CAIDA MOTOCICLETA': 'Motorcycle_Fall', 'CHOQUE CON OBJETO FIJO': 'Accident_with_a_Fixed_Object', 'CAIDA VIAJERO BUS': 'Bus_Passenger_Fall', 'CAIDA BICICLETA': 'Bicycle_Fall', 'CAIDA CICLOMOTOR': 'Moped_Fall', 'OTRAS CAUSAS': 'Other_Types', 'VUELCO': 'Ended_on_the_Roof', 'CAIDA VEHICULO 3 RUEDAS': '3-Wheel_Vehicle_Fall'}
vehtype_dict = {'TURISMO': 'OtherVehicles', 'NO ASIGNADO': 'Not_Assigned', 'MOTOCICLETA': 'Motorcycle', 'FURGONETA': 'GoodsVehicle', 'AUTOBUS-AUTOCAR': 'BusCoach', 'AUTO-TAXI': 'CarTaxi', 'BICICLETA': 'Bicycle', 'CICLOMOTOR': 'Motorcycle', 'CAMION': 'GoodsVehicle', 'VARIOS': 'OtherVehicles', 'AMBULANCIA': 'OtherVehicles', 'VEH.3 RUEDAS': 'OtherVehicles'}
cclass_dict = {'CONDUCTOR': 'Driver', 'VIAJERO': 'Passenger', 'TESTIGO': 'Witness', 'PEATON': 'Pedestrian'}
csev_dict = {'HL' : 'Slight', 'HG': 'Serious', 'MT': 'Fatal', 'NO ASIGNADA': 'Not_Assigned', 'IL': 'Not_Injured'}

df.replace({'Collision_Type': collision_dict}, regex=True, inplace=True)
df.replace({'Vehicle_Type': vehtype_dict}, regex=True, inplace=True)
df.replace({'Casualty_Class': cclass_dict}, regex=True, inplace=True)
df.replace({'Casualty_Severity': csev_dict}, regex=True, inplace=True)

【问题讨论】:

    标签: python pandas dataframe count data-manipulation


    【解决方案1】:

    编辑

    此解决方案回答了 OP 在连续编辑中发布的原始数据集。变量名将由原始数据而不是问题开头的样本数据选择。


    1) 我们首先创建一个查找数据框,在其中我们有每个事件的车辆数量,然后我们使用与原始数据框df 的左连接来

    df_n_of_veh = df.groupby(['Accident_Index']).apply(lambda x: sum(x['Casualty_Class'] == 'Driver')).to_frame(name='n_of_veh').reset_index()
    df = df.merge(df_n_of_veh, how='left', on='Accident_Index') 
    

    2) 该解决方案假定每个驾驶员下方都有其乘客。基本上,每次我们在每个事件中的Casualty_Class 中有'Driver' 时,我们都会增加 1。之后,由于乘客或证人仍将有 0,我们将它们替换为 1。这次我们使用行索引进行合并,因为它们在 df_ref 中的排序不同

    df_ref = df.groupby('Accident_Index').apply(lambda x: (x['Casualty_Class'] == 'Driver').astype(int).cumsum()).to_frame(name='reference').reset_index(level='Accident_Index').drop(['Accident_Index'], axis=1)
    df_ref.loc[df_ref['reference'] == 0, 'reference'] = 1
    df = df.merge(df_ref, left_index=True, right_index=True) 
    

    输出
    (对不起图片,但我相信这是展示它的最短方式)

    【讨论】:

    • 感谢您提出的解决方案。第 2 点不适用于我有 3 名司机、3 辆车(没有乘客)发生事故的情况。它没有为每个驱动程序提供参考:1、2、3,而是给出了 1、1、2。:/
    • 真的吗?我尝试了一个案例,其中我有三个司机和三辆车,reference 给了我 1、2、3... 你能分享一下具体事故的样本数据吗?
    • 我现在检查了一下,是的,这个示例数据集适用于所有情况,但在我的真实数据集中,它没有。我认为这与字符串的存储方式有关。我已经不得不使用正则表达式通过字典更改一些字符串。我检查了 dtypes,它与这里的示例数据集相同。 ://
    • @mrn 我明白问题出在哪里。基本上,pandas 对行的排序与原始数据框中的行不同,因此在连接步骤中,行的分配不正确。我们必须通过行索引指定连接(这是在 merge 函数中使用 left_index=True, right_index=True 完成的。我已经上传了我的答案并在您发布的原始数据上对其进行了测试,我相信它现在可以工作了。
    • 是的宾果游戏!非常感谢您的帮助,我不知道我是如何跳过索引这一步的。
    猜你喜欢
    • 1970-01-01
    • 2017-08-26
    • 2021-11-04
    • 1970-01-01
    • 2020-11-25
    • 1970-01-01
    • 2020-06-02
    • 2017-01-17
    • 1970-01-01
    相关资源
    最近更新 更多