在 R 中的多个文件上应用相同的函数

Question

我是 R 程序的新手，目前正在研究一组财务数据。 现在我的工作目录下有大约 10 个 csv 文件，我想分析其中一个并将相同的命令应用于其余的 csv 文件。

以下是这些文件的所有名称：（“US%10y.csv”、“UK%10y.csv”、“GER%10y.csv”、“JAP%10y.csv”、“CHI%10y.csv”、 "SWI%10y.csv"、"SOA%10y.csv"、"BRA%10y.csv"、"CAN%10y.csv"、"AUS%10y.csv")

例如，因为 CSV 文件中的 Date 列是 Factor 所以我需要将它们更改为 Date 格式：

CAN <- read.csv("CAN%10y.csv", header = T, sep = ",")
CAN$Date <- as.character(CAN$Date)
CAN$Date <- as.Date(CAN$Date, format ="%m/%d/%y")
CAN_merge <- merge(all.dates.frame, CAN, all = T)
CAN_merge$Bid.Yield.To.Maturity <- NULL

all.dates.frame 是连续 731 天的数据框。 我想合并它们，以便每个文件都具有相同的行数，这使我以后可以将 10 个文件组合在一起以获得 731 X 11 的主数据框。

我当然可以复制并粘贴此代码并更改文件名，但是有没有简单的方法可以使用 apply 或 for 循环来做到这一点？？？

非常感谢您的帮助。

Answer 1

这应该可以解决问题。 如果某个部分不起作用，请发表评论。 没有测试就写了这个盲文。

获取当前目录中以.csv结尾的文件列表

L = list.files(".", ".csv")

循环遍历每个名​​称并读取每个文件，执行您想要执行的操作，返回 data.frame DF_Merge并将它们存储在列表中。

O = lapply(L, function(x) {
           DF <- read.csv(x, header = T, sep = ",")
           DF$Date <- as.character(CAN$Date)
           DF$Date <- as.Date(CAN$Date, format ="%m/%d/%y")
           DF_Merge <- merge(all.dates.frame, CAN, all = T)
           DF_Merge$Bid.Yield.To.Maturity <- NULL
           return(DF_Merge)})

将所有的DF_Merge data.frames 绑定到一个 big data.frames

do.call(rbind, O)

我猜你需要某种指标，所以这可能很有用。 根据文件名rep(substring(L, 1, 3), each = 731)的前 3 个字符创建一个指标列

Answer 2

一个dplyr解决方案（虽然未经测试，因为没有给出可重复的例子）：

library(dplyr)

file_list <- c("US%10y.csv", "UK%10y.csv", "GER%10y.csv","JAP%10y.csv", "CHI%10y.csv", "SWI%10y.csv","SOA%10y.csv", "BRA%10y.csv", "CAN%10y.csv", "AUS%10y.csv")

can_l <- lapply(
  file_list
  , read.csv
)

can_l <- lapply(
  can_l
  , function(df) {
    df %>% mutate(Date = as.Date(as.character(Date), format ="%m/%d/%y"))
  }
)

# Rows do need to match when column-binding
can_merge <- left_join(
  all.dates.frame
  , bind_cols(can_l)
)

can_merge <- can_merge %>% 
  select(-Bid.Yield.To.Maturity)

Answer 3

一种可能的解决方案是以列表的形式将所有文件读入 R，然后使用lapply to 将函数应用于所有数据文件。 例如：

# Create vector of file names in working direcotry
files <- list.files() 
files <- files[grep("csv", files)]  

#create empty list
lst <- vector("list", length(files))

#Read files in to list
for(i in 1:length(files)) {
    lst[[i]] <- read.csv(files[i])
}

#Apply a function to the list
l <- lapply(lst, function(x) {
    x$Date <- as.Date(as.character(x$Date), format = "%m/%d/%y")
return(x)
}) 

希望它有帮助。