python-提高从熊猫列中提取信息的速度

python-提高从熊猫列中提取信息的速度,第1张

概述我有一个包含约200,000个数据点的数据框和一个看起来像这样的列(1个数据点的示例):'{'id':342,'name':'Web','slug':'technology/web','position':15,'parent_id':16,'color':6526716,'urls':{'web':{'discover':'http://www.kicks

我有一个包含约200,000个数据点的数据框和一个看起来像这样的列(1个数据点的示例):

'{"ID":342,"name":"Web","slug":"technology/web","position":15,"parent_ID":16,"color":6526716,"urls":{"web":{"discover":"http://www.kickstarter.com/discover/categorIEs/technology/web"}}}'

我想提取有关名称和子d的信息.我做了以下工作:

df["cat"],df["slug"] = np.nan,np.nanfor i in range(0,len(df.category)):    df["cat"][i] = df.category.iloc[i].split('"name":"')[1].split('"')[0]    df["slug"][i] = df.category.iloc[i].split('"name":"')[1].split('"')[4]

效果很好,但是大约需要4个小时.有什么办法可以使速度更快?最佳答案与其直接 *** 作DataFrame,不如尝试使用简单的数据类型并一次性创建一个Dataframe.除jezrael之外的另一种解决方案:

import Jsoncat,slug = [],[]for row in df.category:    d = Json.loads(row)    cat.append(d['cat'])    slug.append(d['slug'])df = pd.DataFrame({'cat': cat,'slug': slug})
总结

以上是内存溢出为你收集整理的python-提高从熊猫列中提取信息的速度 全部内容,希望文章能够帮你解决python-提高从熊猫列中提取信息的速度 所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/langs/1199628.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-06-04
下一篇 2022-06-04

发表评论

登录后才能评论

评论列表(0条)

保存