failture record recover

server/plugin/SystemInit/SpiderInit.go

@@ -81,7 +81,7 @@ func CollectCrontabInit() {
 		/*
 			如果系统中不存在任何定时任务信息, 则添加默认的定时任务
 			1. 添加一条默认任务, 定时更新所有已启用站点的影片信息
-			2.  添加一条默认任务, 定时处理采集失败的记录
+			2. 添加一条默认任务, 定时处理采集失败的记录
 			3.生成任务信息
 		*/
 		task := system.FilmCollectTask{Id: util.GenerateSalt(), Time: config.DefaultUpdateTime, Spec: config.DefaultUpdateSpec,

server/plugin/db/mysql.go

@@ -3,7 +3,6 @@ package db
 import (
 	"gorm.io/driver/mysql"
 	"gorm.io/gorm"
-	"gorm.io/gorm/logger"
 	"gorm.io/gorm/schema"
 	"server/config"
 )
@@ -25,7 +24,7 @@ func InitMysql() (err error) {
 			SingularTable: true, //是否使用 结构体名称作为表名 (关闭自动变复数)
 			//NameReplacer:  strings.NewReplacer("spider_", ""), // 替表名和字段中的 Me 为 空
 		},
-		Logger: logger.Default.LogMode(logger.Info), //设置日志级别为Info
+		//Logger: logger.Default.LogMode(logger.Info), //设置日志级别为Info
 	})
 	return
 }

server/plugin/spider/Spider.go

@@ -326,7 +326,7 @@ func FullRecoverSpider() {
 	/*
 		获取待处理的记录数据
 		1. 采集时长 > 168h (一周,7天)  状态-1 待处理, | 只获取满足条件的最早的待处理记录
-		2. 采集时长 > 4320h (半年,180天)  状态-1 待处理, | 获取满足条件的所有数据
+		2. 采集时长 > 4320h (半年,180天)  状态-1 待处理,   | 获取满足条件的所有数据
 	*/
 	list := system.PendingRecord()
 
@@ -336,7 +336,7 @@ func FullRecoverSpider() {
 		case fr.Hour > 0 && fr.Hour < 4320:
 			// 将此记录之后的所有同类采集记录变更为已重试
 			system.ChangeRecord(&fr, 0)
-			// 如果采集的内容是 7~15 天之内更新的内容,则采集此记录之后的所有更新内容
+			// 如果采集的内容是 0~180 天之内更新的内容,则采集此记录之后的所有更新内容
 			// 获取采集参数h, 采集时长变更为 原采集时长 + 采集记录距现在的时长
 			h := fr.Hour + int(math.Ceil(time.Since(fr.CreatedAt).Hours()))
 			// 对当前所有已启用的站点 更新最新 h 小时的内容
@@ -344,7 +344,7 @@ func FullRecoverSpider() {
 		case fr.Hour < 0, fr.Hour > 4320:
 			// 将此记录状态修改为已重试
 			system.ChangeRecord(&fr, 0)
-			// 如果采集的是 最近180天内更新的内容 或全部内容, 则只对当前一条记录进行二次采集
+			// 如果采集的是 180天之前更新的内容 或全部内容, 则只对当前一条记录进行二次采集
 			s := system.FindCollectSourceById(fr.OriginId)
 			collectFilm(s, fr.Hour, fr.PageNumber)
 		default:

server/plugin/spider/SpiderCron.go

@@ -18,7 +18,7 @@ func CreateCron() *cron.Cron {
 	return cron.New(cron.WithSeconds())
 }
 
-// AddFilmUpdateCron 添加影片更新定时任务
+// AddFilmUpdateCron 添加 指定站点的影片更新定时任务
 func AddFilmUpdateCron(id, spec string) (cron.EntryID, error) {
 	// 校验 spec 表达式的有效性
 	if err := ValidSpec(spec); err != nil {
@@ -40,7 +40,7 @@ func AddFilmUpdateCron(id, spec string) (cron.EntryID, error) {
 	})
 }
 
-// AddAutoUpdateCron 自动更新定时任务
+// AddAutoUpdateCron 添加 所有已启用站点的影片更新定时任务
 func AddAutoUpdateCron(id, spec string) (cron.EntryID, error) {
 	// 校验 spec 表达式的有效性
 	if err := ValidSpec(spec); err != nil {