这是一个创建于 3634 天前的主题，其中的信息可能已经有所发展或是发生改变。
有个客户联系我，要抓淘宝的数据，其实我就想问一下大家，你们最近抓过淘宝的数据么？
如果抓取量较大会被封IP吗？
要先确保这个问题，才敢回复对方是否能接这个活呢，所以来v2ex问问，以免答应了客户最后发现抓不了。
作为回报，前十位有效回答者均发送感谢，确定答案后我会主动下沉帖子。
回答时请多一些说明，说说你的案例。 类似“可以”、“不可以”、“不会”这种非常简单的回复一律视为无效回复。
如果抓取量较大会被封IP吗？
要先确保这个问题，才敢回复对方是否能接这个活呢，所以来v2ex问问，以免答应了客户最后发现抓不了。
作为回报，前十位有效回答者均发送感谢，确定答案后我会主动下沉帖子。
回答时请多一些说明，说说你的案例。 类似“可以”、“不可以”、“不会”这种非常简单的回复一律视为无效回复。
 |
1
laozhao0 2014-12-31 17:54:33 +08:00  1
可以。我们用来抓取淘宝、天猫的商品类目、标题、价格(最难)等数据，用阿里云。完全没问题，因为相当于内网。
|
 |
2
BlueFly 2014-12-31 17:58:27 +08:00
那些比价APP都有抓取淘宝的价钱，肯定是有法子的
|
 |
3
flynaj 2014-12-31 17:58:40 +08:00 via Android 1
看你的频率跟量了，频率调慢点就没有事
|
 |
4
crab 2014-12-31 18:05:08 +08:00 1
有限制的，会出现验证码让你输入。
|
 |
5
Dannytmp 2014-12-31 18:05:21 +08:00 1
不要没完没了就没事，现在做淘客用的代码还不是靠抓，人工的话早累死了
|
 |
6
dreamcog 2014-12-31 18:07:39 +08:00 1
求感谢！不知道！
|
 |
7
CDuXZMAPgHp1q9ew 2014-12-31 18:24:46 +08:00
直接抓比价网的.....哈哈
|
 |
8
alay9999 2014-12-31 18:25:55 +08:00
会，记得以前有个帖子就是研究如何范屏蔽的
|
 |
9
imn1 2014-12-31 18:28:06 +08:00 1
要说清楚淘宝什么数据，淘女郎的图片我抓了300+G，然后删了280+G
价格没兴趣抓 |
 |
10
allen3921 2014-12-31 18:42:06 +08:00 1
一般没啥事，但是有些需要登录抓取的，抓太频繁了会被封禁。
|
 |
11
zzNucker 2014-12-31 18:44:09 +08:00 1
会，有防爬策略限制你。
|
 |
12
blakefan 2014-12-31 18:55:37 +08:00 via Android 1
会，限制你，看你的频率和量了
|
 |
13
humiaozuzu 2014-12-31 19:36:21 +08:00 1
我们抓的很厉害，没封。
抓 html 解析出数据这样，频率在 1w+/h |
 |
14
Linxing 2014-12-31 21:07:16 +08:00
之前爬豆瓣都被封，淘宝也会吧
|
 |
15
s2555 2014-12-31 22:31:35 +08:00 1
我也在抓，每天也就几千，中间会有一两次连接不了
|
Select Language