2015-03-08 84 views
1

这个问题涉及R,但本质上并不是语言特定的。我有一堆这种通用格式的csv文件“sitename_03082015.csv”。该文件有5列和各行正则表达式和文件处理

Host MaximumIn MaximumOut AverageIn AverageOut 
device1 30.63 Kbps 0 bps  24.60 Kbps 0 bps 
device2 1.13 Mbps 24.89 Kbps 21.76 Kbps 461 bps 
device5 698.44 Kbps 37.71 Kbps 17.49 Kbps 3.37 Kbps 

我最终要在所有文件的读取和合并,我可以做的,但在合并过程中我想读的站点名称和日期,并把它添加到每个相关的行因此输出看起来像这样

Host  MaximumIn  MaximumOut AverageIn AverageOut Site Name Date 
device1 30.63 Kbps 0 bps  24.60 Kbps 0 bps  SiteA  3/7/15 
device12 1.13 Mbps  24.89 Kbps 21.76 Kbps 461 bps  SiteA  3/8/15 
device1 698.44 Kbps 37.71 Kbps 17.49 Kbps 3.37 Kbps SiteB  3/7/15 
device2 39.08 Kbps 1.14 Mbps 10.88 Kbps 27.06 Kbps SiteB  3/8/15 
device3 123.43 Kbps 176.86 Kbps 8.62 Kbps 3.78 Kbps SiteB  3/9/15 

随着我的R代码里面,我可以做到以下几点:

#Get list of file names 
filenames<- list.files(pattern = ".csv$") 

#This extracts everything up to the underscore to get site name 
siteName <- str_extract(string = filenames, "[^_]*") 

# Extract date from file names use 
date <- str_extract(string = filenames, "\\d{8}") 

随着下面R代码里面我可以合并所有的文件,但是,这将是没有增加我想要的网站名称和日期列。

myDF<-do.call("rbind", lapply(filenames, read.table, header=TRUE, sep=",")) 

我只是不能让我围绕着如何做网站和日期添加和填充列创建我的理想数据框也就是上面第二个表中提取头。

我最努力的溶液下面贴:)

回答

2

立即在我脑海中是做cbind在阅读额外的Infor的信息,并做rbind事后的方式。类似的东西:

myDF<-do.call("rbind", 
      lapply(filenames, 
       function(x) cbind(read.table(x, header=TRUE, sep=","), 
               "Site Name" = str_extract(string = x, "[^_]*"), 
               "Date" = as.Date(str_extract(string = x, "\\d{8}"), "%m%d%Y")))) 
+0

有趣我会玩这个有很多在一行感谢答复。 – JohnP 2015-03-08 18:55:09

+0

我试着运行你给我的示例代码,它只是挂起,但它肯定是在他的正确轨道 – JohnP 2015-03-08 19:38:20

+0

感谢您的帮助我得到它的工作你的代码是正确的,只需要在最后添加一个父母。 – JohnP 2015-03-08 21:19:46

1

我做了类似的事情,可以在这里应用。您可以添加更多以逗号分隔的文件名。同样可以提取网站。让我知道你是否需要更多的帮助。

##Assuming your csv files are saved in location C:/" 
    library(stringr) 

    ##List all filenames 
    fileNames <- c("hist_03082015.csv","hist_03092015.csv") 

    ##Create a empty dataframe to save all output to 
    final_df <- NULL 

    for (i in fileNames) { 
    ##Read CSV 
    df <- read.csv(paste("C:/",i,sep=""),header = TRUE, 
       sep = ",",colClasses='character') 
    ##Extract date from filename into a column 
    df$Date <- gsub("\\D","",i) 
    ##Convert string to date 
    df$Date <-as.Date(paste(str_sub(df$Date, 1, 2), 
       str_sub(df$Date, 3,-5), 
       str_sub(df$Date, 5,-1),sep="-"),"%d-%m-%Y") 
    ##save all data into 1 dataframe 
    final_df <- rbind(final_df,df) 
    print(summary(final_df)) 
    }