熊猫：将数据帧附加到另一个df

我遇到了附加数据帧的问题。我尝试执行此代码熊猫：将数据帧附加到另一个df

df_all = pd.read_csv('data.csv', error_bad_lines=False, chunksize=1000000) 
urls = pd.read_excel('url_june.xlsx') 
substr = urls.url.values.tolist() 
df_res = pd.DataFrame() 
for df in df_all: 
    for i in substr: 
     res = df[df['url'].str.contains(i)] 
     df_res.append(res)

当我尝试保存df_res我得到空的数据帧。 df_all看起来像

ID,"url","used_at","active_seconds" 
b20f9412f914ad83b6611d69dbe3b2b4,"mobiguru.ru/phones/apple/comp/32gb/apple_iphone_5s.html",2015-10-01 00:00:25,1 
b20f9412f914ad83b6611d69dbe3b2b4,"mobiguru.ru/phones/apple/comp/32gb/apple_iphone_5s.html",2015-10-01 00:00:31,30 
f85ce4b2f8787d48edc8612b2ccaca83,"4pda.ru/forum/index.php?showtopic=634566&view=getnewpost",2015-10-01 00:01:49,2 
d3b0ef7d85dbb4dbb75e8a5950bad225,"shop.mts.ru/smartfony/mts/smartfon-smart-sprint-4g-sim-lock-white.html?utm_source=admitad&utm_medium=cpa&utm_content=300&utm_campaign=gde_cpa&uid=3",2015-10-01 00:03:19,34 
078d388438ebf1d4142808f58fb66c87,"market.yandex.ru/product/12675734/spec?hid=91491&track=char",2015-10-01 00:03:48,2 
d3b0ef7d85dbb4dbb75e8a5950bad225,"avito.ru/yoshkar-ola/telefony/mts",2015-10-01 00:04:21,4 
d3b0ef7d85dbb4dbb75e8a5950bad225,"shoppingcart.aliexpress.com/order/confirm_order",2015-10-01 00:04:25,1 
d3b0ef7d85dbb4dbb75e8a5950bad225,"shoppingcart.aliexpress.com/order/confirm_order",2015-10-01 00:04:26,9

和urls看起来像

url 
shoppingcart.aliexpress.com/order/confirm_order 
ozon.ru/?context=order_done&number= 
lk.wildberries.ru/basket/orderconfirmed 
lamoda.ru/checkout/onepage/success/quick 
mvideo.ru/confirmation?_requestid= 
eldorado.ru/personal/order.php?step=confirm

当我在一个循环中它不是空的打印res。但是当我尝试在追加后的循环df_res中打印时，它返回空数据帧。我找不到我的错误。我该如何解决它？

来源

2016-10-02 Petr Petrov

如果你看看其他the documentation for pd.DataFrame.append

追加行到该帧的结束，返回一个新的对象。不在此框中的列将作为新列添加。

（强调我的）。

尝试

df_res = df_res.append(res)

顺便说明，大熊猫是不是为了创建通过连续级联一个数据帧是有效的。你可以试试这个，而是：

all_res = [] 
for df in df_all: 
    for i in substr: 
     res = df[df['url'].str.contains(i)] 
     all_res.append(res) 

df_res = pd.concat(all_res)

这首先创建的所有部件的列表，那么一旦在年底创建从所有这些的数据帧。

来源

2016-10-02 09:36:14

谢谢你的解释。有时'df_res.append（res）'有效，但有时只有'df_res = df_res.append（res）'有效。但我不知道它为什么会发生 –

@PetrPetrov你在互动环境中工作吗？ –

熊猫：将数据帧附加到另一个df

回答

相关问题