在用scrapy抓数据,用shelve保存时出现了这个Error,目标是储存一串unicode字符串组成的列表,exception代码是tempbase['joke']=joke_list,测试只要joke_list中的元素个数超过两个就会报错。
最后解决方法就是简单新开一个文件存储。貌似是tempbase.dat文件太大造成的bug。
2024-02-02 19:36:40
在用scrapy抓数据,用shelve保存时出现了这个Error,目标是储存一串unicode字符串组成的列表,exception代码是tempbase['joke']=joke_list,测试只要joke_list中的元素个数超过两个就会报错。
最后解决方法就是简单新开一个文件存储。貌似是tempbase.dat文件太大造成的bug。