Я использую библиотеку Pandas для анализа временных рядов дистанционного зондирования. В конце концов я хотел бы сохранить свой DataFrame в csv, используя размеры чанков, но я столкнулся с небольшой проблемой. Мой код генерирует 6 массивов NumPy, которые я конвертирую в серию Pandas. Каждая из этих серий содержит много предметов
>>> prcpSeries.shape
(12626172,)
Я хотел бы добавить Серии в DataFrame (df) Pandas, чтобы я мог сохранить их по частям в файл CSV.
d = {'prcp': pd.Series(prcpSeries),
'tmax': pd.Series(tmaxSeries),
'tmin': pd.Series(tminSeries),
'ndvi': pd.Series(ndviSeries),
'lstm': pd.Series(lstmSeries),
'evtm': pd.Series(evtmSeries)}
df = pd.DataFrame(d)
outFile ='F:/data/output/run1/_'+str(i)+'.out'
df.to_csv(outFile, header = False, chunksize = 1000)
d = None
df = None
Но мой код застрял в следующей строке, давая ошибку памяти
df = pd.DataFrame(d)
Какие-либо предложения? Можно ли заполнить блок данных Pandas DataFrame фрагментом?