流量变现70%分成 全国楼凤小姐姐 吉祥坊招商50%分成 招商联系客服 招商联系客服 招商联系客服

采集多个资源网重复采集重名视频解决方法

[复制链接]
查看830 | 回复8 | 2024-8-21 21:07:14 | 显示全部楼层 |阅读模式
本帖最后由 wujin 于 2024-8-21 21:09 编辑

当我们苹果CMS爬取很多数据时,会发现有名字相同的视频,那我们如何处理,才会避免掉重名视频呢?
首先我们进入我们苹果CMS管理后台:进入【系统】-【采集参数配置】
入库重复规则:勾选"标题"和"分类"(意思同一个视频名称,同一分类的视频,采集时只保留一条数据)
二次更新规则:勾选“播放地址”“下载地址”和“备注”(意思是同一个视频名称,只更新播放地址和下载地址,“备注”是对连续剧的集数更新。其他未勾选的就不更新)

【温馨提示】资源网数据不规范会导致此类事情的发生,请尽量避免采集资料不规范的资源网,避免此类问题
回复

使用道具 举报

ixcb | 2024-10-8 15:22:31 | 显示全部楼层
学习一下
回复

使用道具 举报

fxdj | 2024-10-13 22:33:07 | 显示全部楼层
学习一下
回复

使用道具 举报

xgvod | 2024-10-15 21:58:46 | 显示全部楼层
学习一下
回复

使用道具 举报

damon | 2024-10-21 12:11:10 | 显示全部楼层
关于  功夫。    功夫(国语)。       功夫(粤语)。      这种重复呢?
回复

使用道具 举报

金金金 | 2024-10-27 12:20:56 | 显示全部楼层
damon 发表于 2024-10-21 12:11
关于  功夫。    功夫(国语)。       功夫(粤语)。      这种重复呢?

用合并数据可以解决
回复

使用道具 举报

as2024 | 2024-11-9 19:31:15 | 显示全部楼层
受教了,感谢
回复

使用道具 举报

mm5588 | 2024-12-18 13:53:36 | 显示全部楼层
好好学习天天向上
回复

使用道具 举报

asdfghjkl | 前天 10:43 来自手机 | 显示全部楼层
来学习学习
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则