scrapy 爬取小说保存的txt内容章节乱序,Pipeline中如何排序保存

newuserpy newuserpy 墨衍会员 · AI 创作全网分发 墨衍智能分发 通过墨衍一键同步至各平台 可同步平台 CSDN微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年,写一次发全网 我也要 + 加入社区
如题,items中已经设置了num进行章节计数用,各章节按顺序绑定了num。

import scrapy
class MyItem(scrapy.Item):
# define the fields for your item here like:
# name = scrapy.Field()
num = scrapy.Field()
desc = scrapy.Field()
dname = scrapy.Field()
pass


piprlin如下,

import codecs
import os
import pdb

class MyPipeline(object):
def process_item(self, item, spider):
base_dir = os.getcwd()
fiename = base_dir + '/小说.txt'
with open(fiename, "a",encoding='utf-8') as f:
f.write(item['dname'] + "\n")
f.write(item['desc'] +"\n\n")
return item


请问应该如何对item进行排序保存。
...全文
评论 1
收藏 已收藏
分享
返回顶部
newuserpy
脚本语言 37,737 成员 34,208 内容