Когда я начал изучать scrapy, я пришел к требованию динамически строить атрибуты Item. Я просто очищаю веб-страницу, которая имеет структуру таблицы, и я хотел создать атрибуты элемента и поля во время обхода. Я просмотрел этот пример Скребковые данные без явного определения каждого поля, которое нужно очистить, но он не мог сделать многое из этого.
Должен ли я писать элемент pipleline для записи информации динамически. Я также посмотрел на функцию загрузчика элемента, но если кто-то может объяснить подробно, это будет очень полезно.