如何解析带有特定文本的大文件

Question

我有这个大文件，并且其中有很多条目。 我只想读取包含某些值的条目，例如“ db_call”。

我已经试过了：

df<-read.table(text=readLines("H:/ap.log")[grepl("db_call")])

我收到此错误：

参数“ x”丢失，没有默认值

有任何想法吗？

Answer 1

创建一个测试文件：

writeLines(c("aaa 11","aaa 22","bbb 33"),con="test.txt")

蛮力方法（本质上是您上面尝试过的方法）是将整个内容都读入，然后仅获取所需的内容：

xx <- readLines("test.txt")
xx <- xx[grepl("aaa",xx,fixed=TRUE)]
##  (fixed=TRUE is slightly faster if you don't need regular expressions)
read.table(text=xx)

如果文件很大，我建议在系统级别使用grep （如果需要，请安装Cygwin，因为您似乎正在使用Windows）并使用pipe ，例如

测试-查看包含目标字符串的行数：

system('grep "aaa" <text.txt | wc')

只读包含aaa行：

read.table(pipe('grep "aaa" <test.txt'))

这比将整个内容读入R然后选择所需的部分要有效得多。