destoon采集论坛

 找回密码
 立即注册
查看: 35|回复: 0

数据采 集问题:采 集内容失败,如何解决?

[复制链接]

2

主题

0

回帖

10

积分

新手上路

Rank: 1

积分
10
发表于 2013-3-20 13:08:53 | 显示全部楼层 |阅读模式
我采 集数据的时候,出现:采 集 内容失败。我已经把“内容 采 集线程数”改成了1,时间也由400ms改成800了,但最多只能采 集到4~8条内容。然后数据库4以下都是空值。试过换了Http代理,但问题还是一样。不知道这是网站本身的设置问题,还是我规则没有设置好?
我用该规则采 集其他网站,如alibaba的时候,可以采 集到几百到一千条数据,就让我输入验证码。但至少可以采 集到上百条数据。
请问各位,这是怎么回事,如何解决一次采 集1000条以上的数据?怎么可以不用输验证码就能采 集呢?
先谢谢了!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|小黑屋|手机版|Archiver|destoon采集论坛

GMT+8, 2025-11-25 16:10 , Processed in 0.016250 second(s), 20 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表