在R中重塑ffdf数据帧

Question

我正在使用dcast函数在R rshape datframe，但同时使用大数据框。 我将其转换为无法使用dcast功能的ffdf dataframe ，如果有其他选择，请帮助我。 查找下面的示例，该示例用于小型数据ffdf dataframe以及我想对ffdf dataframe执行的ffdf dataframe ：

- hdsample <- read.csv("C:/Users/PK5016573/Desktop/hdsample.csv")
- View(hdsample)


hd<-dcast(hhpsample,MemberID~Year+Specialty+ProcedureGroup+Vendor+PlaceSvc+PCP+PrimaryConditionGroup+CharlsonIndex)

这是可行的，但是：

hhp<-read.ffdf("C:/Users/PK5016573/Desktop/hdsample.csv")

hd<-dcast(hhpsample,MemberID~Year+Specialty+ProcedureGroup+Vendor+PlaceSvc+PCP+PrimaryConditionGroup+CharlsonIndex)

这给我错误请帮助

在此先感谢Pavan kancharala

Answer 1

我得到了这个问题的答案，但它可能无法在很大程度上分解数据

# Reshape_function to process on data
   # Reshaping data as per year and Primary condition group
    library(reshape2)
    library(ffbase)
    reshapefunction<-function(x){
    df=dcast(x,MemberID~ Year+PrimaryConditionGroup,
    value.var= "rep.x..each...2668990.",              
    fun.aggregate = sum)
    }
    # Reshaping data using reshape_function 
    # Specifying size of chunks to process the data
    PrimaryConditionGroup<-ffdfdply(x=hhp,split=hhp$MemberID
    ,FUN = function(x) reshapefunction(x),BATCHBYTES = 100000000,trace=TRUE)

View(PrimaryConditionGroup)

所有数据均来自kaggle竞赛，又增加了一列“ rep.x..each ... 2668990”。 每行包含1个用于聚合目的