首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何根据Python列表中的列号过滤数据帧中的行?

问如何根据Python列表中的列号过滤数据帧中的行?
EN

Stack Overflow用户
提问于 2020-02-01 08:29:28
回答 1查看 115关注 0票数 2

我有一个Pandas数据帧,它有两列,x和y,分别对应于一个大信号。它的大小约为300万行。

Wavelength from dataframe

我在试着从信号中分离出峰值。在使用scipy之后,我得到了一个1D Python列表,对应于峰值的索引。但是,它们不是信号的实际x值,而只是其对应行的索引:

代码语言:javascript
复制
from scipy.signal import find_peaks
peaks, _ = find_peaks(y, height=(None, peakline))

因此,我决定通过将y列中的所有值设置为NaN来过滤原始数据帧,除非它们位于峰值列表中的索引上。我迭代地做了这件事,但是,因为它有3000000行,所以速度非常慢:

代码语言:javascript
复制
peak_index = 0
for data_index in list(data.index):
    if data_index != peaks[peak_index]:
        data[data_index, 1] = float('NaN')
    else:
        peak_index += 1

有人知道过滤Pandas数据帧的更快方法是什么吗?

EN

回答 1

Stack Overflow用户

发布于 2020-02-02 20:59:51

在大多数情况下,当涉及到熊猫时,循环是非常低效的。假设您只需要在y为峰值时同时包含x和y列的值的已过滤DataFrame,则可以使用以下代码:

代码语言:javascript
复制
df.iloc[peaks]

或者,如果您希望检索包含y列的原始DataFrame,并保留其峰值,并使用NaN,则请使用:

代码语言:javascript
复制
df.y = df.y.where(df.y.iloc[peaks] == df.y.iloc[peaks])

最后,由于您似乎只关心峰值的x值,因此可以按以下方式重新编写第一部分:

代码语言:javascript
复制
df.iloc[peaks].x
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/60012951

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档