搞爬虫的时候,结果是通过file.write(strs)写入文件的。
带来的问题是,进程如果是被杀死的时候,最后一条结果总是缺损的,因为缓存的部分还未写入文件。
解决办法是每次写入文件时,都刷新缓存,直接将缓存数据全部写入文件:
fi = open('file', 'wb') fi.write('strs') fi.flush()
...
2023-09-27 17:56:46
搞爬虫的时候,结果是通过file.write(strs)写入文件的。
带来的问题是,进程如果是被杀死的时候,最后一条结果总是缺损的,因为缓存的部分还未写入文件。
解决办法是每次写入文件时,都刷新缓存,直接将缓存数据全部写入文件:
fi = open('file', 'wb') fi.write('strs') fi.flush()
...