试用 购买
留言论坛
当前页面:熊猫智能采集软件> 留言论坛
发新贴

重复采集

作者: 阿里哇 | 阅读: 10703/1   2015/6/15 9:38:16
 
重复数据选的是断点续采,前面都好好的,昨天开始发布出来的老是重复数据,这是怎么回事的。


2 楼: 管理员 2015/6/16 10:56:53
 
重复的判断,是依据项目所属数据库表内的pandaWebUrl字段中记录的网址url进行判断。

如果你全部或部分清空了数据库,则下次运行的时候,就可能会产生重复。因此项目一旦正式运行,就不能轻易选择“清空数据库表”,或者“重置项目”等命令。

如果数据库表累计很大的时候,可以尝试从后面删除一部分,而不宜全部删除。


回复
 
 
 
验证码:
 

电话:171 9219 7361

建议/合作: 139 1618 6547

邮箱:123jlxie@ 163.com

友情链接: 建筑结构软件 中国制造业博览 飞翔下载 好特下载 当下软件园 内容采集软件 六度软件下载 ZOL应用下载

Copyright @ 2011 www.CaiJiRuanJian.com All Rights Reserved 上海齐索信息科技有限公司 沪ICP备16048952号-4