Я хотел бы знать, есть ли способ заменить все отрицательные числа DataFrame на нули?
Как заменить отрицательные числа в Pandas Кадром данных на ноль
Ответ 1
Если все ваши столбцы являются числовыми, вы можете использовать булевское индексирование:
In [1]: import pandas as pd
In [2]: df = pd.DataFrame({'a': [0, -1, 2], 'b': [-3, 2, 1]})
In [3]: df
Out[3]:
a b
0 0 -3
1 -1 2
2 2 1
In [4]: df[df < 0] = 0
In [5]: df
Out[5]:
a b
0 0 0
1 0 2
2 2 1
В более общем случае этот ответ показывает частный метод _get_numeric_data
:
In [1]: import pandas as pd
In [2]: df = pd.DataFrame({'a': [0, -1, 2], 'b': [-3, 2, 1],
'c': ['foo', 'goo', 'bar']})
In [3]: df
Out[3]:
a b c
0 0 -3 foo
1 -1 2 goo
2 2 1 bar
In [4]: num = df._get_numeric_data()
In [5]: num[num < 0] = 0
In [6]: df
Out[6]:
a b c
0 0 0 foo
1 0 2 goo
2 2 1 bar
С типом timedelta
булевское индексирование, похоже, работает с отдельными столбцами, но не на всем фрейме данных. Итак, вы можете сделать:
In [1]: import pandas as pd
In [2]: df = pd.DataFrame({'a': pd.to_timedelta([0, -1, 2], 'd'),
...: 'b': pd.to_timedelta([-3, 2, 1], 'd')})
In [3]: df
Out[3]:
a b
0 0 days -3 days
1 -1 days 2 days
2 2 days 1 days
In [4]: for k, v in df.iteritems():
...: v[v < 0] = 0
...:
In [5]: df
Out[5]:
a b
0 0 days 0 days
1 0 days 2 days
2 2 days 1 days
Обновление: сравнение с pd.Timedelta
работает во всем DataFrame:
In [1]: import pandas as pd
In [2]: df = pd.DataFrame({'a': pd.to_timedelta([0, -1, 2], 'd'),
...: 'b': pd.to_timedelta([-3, 2, 1], 'd')})
In [3]: df[df < pd.Timedelta(0)] = 0
In [4]: df
Out[4]:
a b
0 0 days 0 days
1 0 days 2 days
2 2 days 1 days
Ответ 2
Другой краткий способ сделать это - pandas.DataFrame.clip.
Например:
import pandas as pd
In [20]: df = pd.DataFrame({'a': [-1, 100, -2]})
In [21]: df
Out[21]:
a
0 -1
1 100
2 -2
In [22]: df.clip(lower=0)
Out[22]:
a
0 0
1 100
2 0
Там тоже df.clip_lower(0)
.
Ответ 3
Возможно, вы могли бы использовать pandas.where(args)
следующим образом:
data_frame = data_frame.where(data_frame < 0, 0)
Ответ 4
Если вы имеете дело с большим df (40м x 700 в моем случае), он работает намного быстрее и экономит память благодаря итерации столбцов с чем-то вроде.
for col in df.columns:
df[col][df[col] < 0] = 0
Ответ 5
Еще одна полезная опция, которую я нашел полезной, - это pandas.DataFrame.mask, которая "заменит значения, если условие выполнено".
Создайте фрейм данных:
In [2]: import pandas as pd
In [3]: df = pd.DataFrame({'a': [0, -1, 2], 'b': [-3, 2, 1]})
In [4]: df
Out[4]:
a b
0 0 -3
1 -1 2
2 2 1
Замените отрицательные числа на 0:
In [5]: df.mask(df < 0, 0)
Out[5]:
a b
0 0 0
1 0 2
2 2 1
Или замените отрицательные числа на NaN, что мне часто нужно:
In [7]: df.mask(df < 0)
Out[7]:
a b
0 0.0 NaN
1 NaN 2.0
2 2.0 1.0