首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何在dask中编写unstack和reindex?

问如何在dask中编写unstack和reindex?
EN

Stack Overflow用户
提问于 2020-06-18 18:14:06
回答 1查看 308关注 0票数 0

我用pandas编写脚本,但为了提高效率,我需要切换到dask,但我不确定如何在dask中实现unstack和reindex?

这是我的pandas脚本的样子:

代码语言:javascript
复制
df_new = df.groupby(['Cars', 'Date'])['Durations'].mean().unstack(fill_value=0).reindex(columns=list_days,index=list_cars,fill_value=0).\
    round().reset_index().fillna(0).round()
EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2020-06-18 22:03:15

通常,.groupby()聚合的结果会很小,并且适合内存。如https://docs.dask.org/en/latest/dataframe-best-practices.html#reduce-and-then-use-pandas所示,您可以使用Dask进行大型聚合,然后使用pandas进行小型内存后处理。

代码语言:javascript
复制
df_new = (
    df.groupby(['Cars', 'Date'])['Durations'].mean()
      .compute()  # turn the Dask DataFrame into a pandas dataframe
      .unstack(fill_value=0).reindex(columns=list_days,index=list_cars,fill_value=0).
      .round().reset_index().fillna(0).round()
)
票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/62447662

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档