【问题标题】:Merging by columns for different values of those columns按列合并这些列的不同值
【发布时间】:2019-11-25 10:10:13
【问题描述】:

我有两个 data.tables。如果dfA 中的year 对应于year 一年前dfB .

例如,dfB 的第一行将与 dfA 的第一行合并,因为 dfB 的年份 2009 比 dfA 的年份 2010 早一年。

  library(data.table)
  dfA <- fread("
  A   B   C   D   E   F   G   Z   iso   year   matchcode
  1   0   1   1   1   0   1   0   NLD   2010   NLD2010
  2   1   0   0   0   1   0   1   NLD   2014   NLD2014
  3   0   0   0   1   1   0   0   AUS   2010   AUS2010
  4   1   0   1   0   0   1   0   AUS   2006   AUS2006
  5   0   1   0   1   0   1   1   USA   2008   USA2008
  6   0   0   1   0   0   0   1   USA   2010   USA2010
  7   0   1   0   1   0   0   0   USA   2012   USA2012
  8   1   0   1   0   0   1   0   BLG   2008   BLG2008
  9   0   1   0   1   1   0   1   BEL   2008   BEL2008
  10  1   0   1   0   0   1   0   BEL   2010   BEL2010
  11  0   1   1   1   0   1   0   NLD   2010   NLD2010
  12  1   0   0   0   1   0   1   NLD   2014   NLD2014
  13  0   0   0   1   1   0   0   AUS   2010   AUS2010
  14  1   0   1   0   0   1   0   AUS   2006   AUS2006
  15  0   1   0   1   0   1   1   USA   2008   USA2008
  16  0   0   1   0   0   0   1   USA   2010   USA2010
  17  0   1   0   1   0   0   0   USA   2012   USA2012
  18  1   0   1   0   0   1   0   BLG   2008   BLG2008
  19  0   1   0   1   1   0   1   BEL   2008   BEL2008
  20  1   0   1   0   0   1   0   BEL   2010   BEL2010",
  header = TRUE)

  dfB <- fread("
  A   B   C   D   H   I   J   K   iso   year   matchcode
  1   0   1   1   1   0   1   0   NLD   2009   NLD2009
  2   1   0   0   0   1   0   1   NLD   2014   NLD2014
  3   0   0   0   1   1   0   0   AUS   2011   AUS2011
  4   1   0   1   0   0   1   0   AUS   2007   AUS2007
  5   0   1   0   1   0   1   1   USA   2007   USA2007
  6   0   0   1   0   0   0   1   USA   2010   USA2010
  7   0   1   0   1   0   0   0   USA   2013   USA2013
  8   1   0   1   0   0   1   0   BLG   2007   BLG2007
  9   0   1   0   1   1   0   1   BEL   2009   BEL2009
  10   1   0   1   0   0   1   0  BEL   2012   BEL2012",
  header = TRUE)

我想过尝试:

dfA <- merge(dfA , dfB, on =.(iso, year == year-1), all.x = TRUE, allow.cartesian=FALSE)

但这会在年份上产生匹配,这不是我想要的。

我相信roll 也会尝试找到最接近的匹配项。

我应该如何编写这个合并?

期望的输出:

library(data.table)
      dfA <- fread("
      A   B   C   D   E   F   G   Z  H   I   J   K  year_from_B iso  year   matchcode
      1   0   1   1   1   0   1   0  1   0   1   0 2009  NLD   2010   NLD2010
      2   1   0   0   0   1   0   1  NA  NA  NA  NA  NA  NLD   2014   NLD2014
      3   0   0   0   1   1   0   0  NA  NA  NA  NA  NA  AUS   2010   AUS2010
      4   1   0   1   0   0   1   0  NA  NA  NA  NA  NA  AUS   2006   AUS2006
      5   0   1   0   1   0   1   1  NA  NA  NA  NA  NA  USA   2008   USA2008
      6   0   0   1   0   0   0   1  NA  NA  NA  NA  NA  USA   2010   USA2010
      7   0   1   0   1   0   0   0  NA  NA  NA  NA  NA  USA   2012   USA2012
      8   1   0   1   0   0   1   0  0   0   1   0 2007  BLG   2008   BLG2008
      9   0   1   0   1   1   0   1  NA  NA  NA  NA  NA  BEL   2008   BEL2008
      10  1   0   1   0   0   1   0  1   1   0   1   2009 BEL  2010   BEL2010
      11  0   1   1   1   0   1   0  1   0   1   0 2009  NLD   2010   NLD2010
      12  1   0   0   0   1   0   1  NA  NA  NA  NA  NA  NLD   2014   NLD2014
      13  0   0   0   1   1   0   0  NA  NA  NA  NA  NA  AUS   2010   AUS2010
      14  1   0   1   0   0   1   0  NA  NA  NA  NA  NA  AUS   2006   AUS2006
      15  0   1   0   1   0   1   1  NA  NA  NA  NA  NA  USA   2008   USA2008
      16  0   0   1   0   0   0   1  NA  NA  NA  NA  NA  USA   2010   USA2010
      17  0   1   0   1   0   0   0  NA  NA  NA  NA  NA  USA   2012   USA2012
      18  1   0   1   0   0   1   0  0   0   1   0 2007  BLG   2008   BLG2008
      19  0   1   0   1   1   0   1  NA  NA  NA  NA  NA  BEL   2008   BEL2008
      20  1   0   1   0   0   1   0  1   1   0   1   2009 BEL  2010   BEL2010",
      header = TRUE)

【问题讨论】:

  • @sindri_baldur 谢谢,但这不是我的意思。我不想添加行。我想为“match-1year”的行添加列。我将添加所需的输出。我

标签: r merge data.table


【解决方案1】:

有点乱,但是试试:

dfB[dfA[,c(.SD,.(year1=year-1))],
    on=.(A,B,C,D,iso,year == year1)]
     A B C D  H  I  J  K iso year matchcode E F G Z i.year i.matchcode
 1:  1 0 1 1  1  0  1  0 NLD 2009   NLD2009 1 0 1 0   2010     NLD2010
 2:  2 1 0 0 NA NA NA NA NLD 2013      <NA> 0 1 0 1   2014     NLD2014
 3:  3 0 0 0 NA NA NA NA AUS 2009      <NA> 1 1 0 0   2010     AUS2010
 4:  4 1 0 1 NA NA NA NA AUS 2005      <NA> 0 0 1 0   2006     AUS2006
 5:  5 0 1 0  1  0  1  1 USA 2007   USA2007 1 0 1 1   2008     USA2008
 6:  6 0 0 1 NA NA NA NA USA 2009      <NA> 0 0 0 1   2010     USA2010
 7:  7 0 1 0 NA NA NA NA USA 2011      <NA> 1 0 0 0   2012     USA2012
 8:  8 1 0 1  0  0  1  0 BLG 2007   BLG2007 0 0 1 0   2008     BLG2008
 9:  9 0 1 0 NA NA NA NA BEL 2007      <NA> 1 1 0 1   2008     BEL2008
10: 10 1 0 1 NA NA NA NA BEL 2009      <NA> 0 0 1 0   2010     BEL2010
11: 11 0 1 1 NA NA NA NA NLD 2009      <NA> 1 0 1 0   2010     NLD2010
12: 12 1 0 0 NA NA NA NA NLD 2013      <NA> 0 1 0 1   2014     NLD2014
13: 13 0 0 0 NA NA NA NA AUS 2009      <NA> 1 1 0 0   2010     AUS2010
14: 14 1 0 1 NA NA NA NA AUS 2005      <NA> 0 0 1 0   2006     AUS2006
15: 15 0 1 0 NA NA NA NA USA 2007      <NA> 1 0 1 1   2008     USA2008
16: 16 0 0 1 NA NA NA NA USA 2009      <NA> 0 0 0 1   2010     USA2010
17: 17 0 1 0 NA NA NA NA USA 2011      <NA> 1 0 0 0   2012     USA2012
18: 18 1 0 1 NA NA NA NA BLG 2007      <NA> 0 0 1 0   2008     BLG2008
19: 19 0 1 0 NA NA NA NA BEL 2007      <NA> 1 1 0 1   2008     BEL2008
20: 20 1 0 1 NA NA NA NA BEL 2009      <NA> 0 0 1 0   2010     BEL2010

【讨论】:

  • 谢谢,我把它变成了:dfB[dfA[,c(.SD,.(year1=year-1))], on=.(iso,year == year1)]'
【解决方案2】:

我不知道这是否是你想要的,但我希望它对你有所帮助。有点复杂

df<-numeric()
for(i in 1:nrow(dfA)){
  d<-numeric()
  d<-which(dfA$iso[i]==dfB$iso & (dfA$year[i]-1)==dfB$year)
  if(length(d)>0){
    df<-rbind(df,c(dfA[i,1:8],dfB[d,5:8],dfB$year[d],dfA$iso[i],dfA$year[i],dfA$matchcode[i],dfB$matchcode[d]))
  }else{
    df<-rbind(df,c(dfA[i,1:8],rep(NA,5),dfA$iso[i],dfA$year[i],dfA$matchcode[i],NA))
  }
}
colnames(df)[13:17]<-c("year_from_B", "iso",  "year"  , "matchcode1", "matchcode2")
df

这是输出

      A  B C D E F G Z H  I  J  K  year_from_B iso   year matchcode1 matchcode2
 [1,] 1  0 1 1 1 0 1 0 1  0  1  0  2009        "NLD" 2010 "NLD2010"  "NLD2009" 
 [2,] 2  1 0 0 0 1 0 1 NA NA NA NA NA          "NLD" 2014 "NLD2014"  NA        
 [3,] 3  0 0 0 1 1 0 0 NA NA NA NA NA          "AUS" 2010 "AUS2010"  NA        
 [4,] 4  1 0 1 0 0 1 0 NA NA NA NA NA          "AUS" 2006 "AUS2006"  NA        
 [5,] 5  0 1 0 1 0 1 1 1  0  1  1  2007        "USA" 2008 "USA2008"  "USA2007" 
 [6,] 6  0 0 1 0 0 0 1 NA NA NA NA NA          "USA" 2010 "USA2010"  NA        
 [7,] 7  0 1 0 1 0 0 0 NA NA NA NA NA          "USA" 2012 "USA2012"  NA        
 [8,] 8  1 0 1 0 0 1 0 0  0  1  0  2007        "BLG" 2008 "BLG2008"  "BLG2007" 
 [9,] 9  0 1 0 1 1 0 1 NA NA NA NA NA          "BEL" 2008 "BEL2008"  NA        
[10,] 10 1 0 1 0 0 1 0 1  1  0  1  2009        "BEL" 2010 "BEL2010"  "BEL2009" 
[11,] 11 0 1 1 1 0 1 0 1  0  1  0  2009        "NLD" 2010 "NLD2010"  "NLD2009" 
[12,] 12 1 0 0 0 1 0 1 NA NA NA NA NA          "NLD" 2014 "NLD2014"  NA        
[13,] 13 0 0 0 1 1 0 0 NA NA NA NA NA          "AUS" 2010 "AUS2010"  NA        
[14,] 14 1 0 1 0 0 1 0 NA NA NA NA NA          "AUS" 2006 "AUS2006"  NA        
[15,] 15 0 1 0 1 0 1 1 1  0  1  1  2007        "USA" 2008 "USA2008"  "USA2007" 
[16,] 16 0 0 1 0 0 0 1 NA NA NA NA NA          "USA" 2010 "USA2010"  NA        
[17,] 17 0 1 0 1 0 0 0 NA NA NA NA NA          "USA" 2012 "USA2012"  NA        
[18,] 18 1 0 1 0 0 1 0 0  0  1  0  2007        "BLG" 2008 "BLG2008"  "BLG2007" 
[19,] 19 0 1 0 1 1 0 1 NA NA NA NA NA          "BEL" 2008 "BEL2008"  NA        
[20,] 20 1 0 1 0 0 1 0 1  1  0  1  2009        "BEL" 2010 "BEL2010"  "BEL2009"

【讨论】:

  • 谢谢!我显然不太清楚我真正想要什么。我添加了所需的输出。
  • 谢谢,这在技术上就是我想要的。唯一的问题是,在我的实际数据集上,您的代码现在已经运行了大约 15 分钟,哈哈。我可能需要一个 data.table 解决方案(因为我的 dfA 是 100.000 x 1.000)。
猜你喜欢
  • 2021-11-01
  • 2023-03-15
  • 2019-01-03
  • 1970-01-01
  • 2017-09-18
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多