装载记录是任务运行时,爬虫加载的采集任务记录,存储了已采集的历史日志和待采集的任务。因此不仅仅可以通过日志查看采集历史,还可以通过控制爬虫装载的任务类型,为采集的运行提供多样化的采集策略。
当采集策略选择了“不重采数据页面”、“更新数据页面”、“继续上次采集”时,如果需要重新采集当前任务,就需要删除当前的日志记录。
当采集策略选择了“全部重采”、“只扫描入口页”时,系统会自动清除日志记录。
【历史装载记录】
1.导入/导出
可以导入本地上的日志,或将当前的日志列表导出到本地(log格式)。
2.刷新
点击刷新,将日志列表刷新至最新状态。
3.删除
点击删除当前日志列表,删除后不可恢复。可以结合运行设置-加载日志宏进行筛选删除。