小说更新是手动2个小说更新必须前端点击吗？还是有蜘蛛访问链接也会更新呢。如果是蜘蛛抓取更新的话就一直会和源站保持一致。
只有用户点击的话，这样蜘蛛抓取的页面好多都是 没有最新章节的。
wuqing 发表于 2022-11-15
用户观看会更新，爬虫不会更新
加载数据中...
lzcaijie 发表于 2022-11-16
wuqing
2022-11-15
建议修改为爬虫更新，或者增加爬虫更新和前端观看更新选项。这样内容就能保持正常更新了，后台已经设置了20分钟才会抓取新的章节页，对于源站也没有什么压力。
这样采集完的章节只要有爬虫就会更新了，能在搜索引擎也就会有排名，不然别人的都100章了，咱们的还一直是80章，这样搜索引擎慢慢就不会给排名了。
尤其做网站初期更加没有用户，这样网站采集完就一直不会更新，就形成恶性循环了。
除非再就是自己用刷流量软件点击。
还有后台重复采集的话除非替换，不然重复数据处理不处理的话应该也是没有用的。
还有老大 麻烦问下 修改为爬虫更新的话怎么修改呢
技术交流
BUG建议
wuqing
发表于 2022-11-15
用户观看会更新，爬虫不会更新
评论列表
加载数据中...
lzcaijie
发表于 2022-11-16
wuqing
2022-11-15
用户观看会更新，爬虫不会更新
建议修改为爬虫更新，或者增加爬虫更新和前端观看更新选项。这样内容就能保持正常更新了，后台已经设置了20分钟才会抓取新的章节页，对于源站也没有什么压力。
这样采集完的章节只要有爬虫就会更新了，能在搜索引擎也就会有排名，不然别人的都100章了，咱们的还一直是80章，这样搜索引擎慢慢就不会给排名了。
尤其做网站初期更加没有用户，这样网站采集完就一直不会更新，就形成恶性循环了。
除非再就是自己用刷流量软件点击。
还有后台重复采集的话除非替换，不然重复数据处理不处理的话应该也是没有用的。
评论列表
加载数据中...
lzcaijie
发表于 2022-11-16
wuqing
2022-11-15
用户观看会更新，爬虫不会更新
还有老大 麻烦问下 修改为爬虫更新的话怎么修改呢
评论列表
加载数据中...