目标网站三天两头换域名,导致小说章节重复采集好几次

ddoser   ·   发表于 2021-6-28   ·   BUG建议

目标网站三天两头换域名,导致小说章节重复采集好几次,本来有100章,换一次域名增加100章。。。。这都换了5次了,有的小说甚至章节都2.5W章了.....


自己更改列表规则后出现如上所述,更改列表规则无法彻底解决章节的问题,需要修改数据库小说nevel的相关信息,比如:字数、reurl来源以及小说章节chapter的相关信息:章节内容、reurl来源字段等


如何彻底解决此问题???

2 条回复   |  直到 2021-7-2 | 593 次浏览

ddoser
发表于 2021-7-2

一到关键时刻,作者他就消失了

评论列表

  • 加载数据中...

编写评论内容

singo
发表于 2021-7-2

因为php语音本身的一些限制,大数据任务处理不是强项,这个问题依照目前的数据结构,没有办法很优雅的通过版本更新解决,你找作者也没用

评论列表

  • 加载数据中...

编写评论内容
登录后才可发表内容