代码之家 › 专栏 › 技术社区 › Alessandro Benedetti

模型pandas数据框架列作为类别列表

pandas-datareader sklearn-pandas pandas python

Alessandro Benedetti · 技术社区 · 7 年前

我想减少 Pandas dataframe 是的。我正在分析一个json,其中一些列是类别的多值列表,例如:

querySelectedBrands":["b1","b2","b3"]

这将自动推断为“object”列,但理想情况下是一个类别列表。每当我有一个列是单值分类的时,转换非常简单:

interactions[col] = interactions[col].astype('category')

但我想将type设置为category列表的列呢? 稍后,我将对这个列进行编码,将其转换为一系列布尔列,因此我不确定在“category”列表中转换的初始内存效益是否会有好处。谢谢!

1 回复 | 直到 7 年前

jpp 7 年前

使用pandas系列保存列表是不可取的,因为它始终是dtype object 并表示指向任意类型的指针。因此,对这样一个序列的操作将不可矢量化,并且将附加内存开销。

如果每个列表中都有一组项,则可以将列表系列拆分为多个系列,请参见 Pandas split column of lists into multiple columns 是的。然后将每个系列分类:

for col in ['col1', 'col2', 'col3']:
    df[col] = df[col].astype('category')

推荐文章

Google User · Django管理员在`list_display中未显示`creation_date`字段`

8 月前

user29747013 · 如何创建一个新的数据框架,其中包含原始数据框架中列的聚合列?

8 月前

ÎÎÎ½Î· ÎÎ®Î¹Î½Î¿Ï · Python lxml.html语法错误:使用lxml find时XPATH的谓词无效

8 月前

user29715306 · from_users=和chats=电视节目中的差异

8 月前

Redshoe · 当执行numpy.genfromtxt()时,python是否会读取文件的所有行?

8 月前

RASEL MAHMUD · 为什么以及如何在is_even()函数内的IF条件中递归X变量在满足0后递增?[副本]

8 月前

prayner · 更新嵌套字典包含列表中的项

8 月前

Bringo Jr · 我可以在O(n)中解决这个问题吗?

8 月前

Dave · 如何在for循环中修改列表值

8 月前

Shukurullox Komiljonov · 从记录中获得相互和解。使用SQL

8 月前