设为首页收藏本站English Version

 找回密码
 立即注册

QQ登录

只需一步，快速开始

PropellerAds
AdvertCN - 广告中国»社区 › Affiliate Marketing： 联属网络营销交流 › 综合讨论区: General Discussion › 楼下哥们儿说"采集必死",我只想说“呵呵” ...
Google-Bing-Mediago-Criteo开户
⚡️按条S5代理⚡️静态⚡️独享⚡️5G广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程（持续更新、欢迎交流）FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户（优势）IPCola原生住宅IP⚡️$1.8/条双ISPFB资源，账单户，分享户，国内一手TK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审FB企业户海外户,授信户,TK加白户联盟收款/海外资金下发/服贸结汇
✔Taboola海外户源头广告位出租虚拟卡返佣1%，国内持牌机构 
123下一页
返回列表 发新帖
楼主: weiai789

楼下哥们儿说"采集必死",我只想说“呵呵”

 火 [复制链接]
zaishanfeng

11

主题

16

广告币

72

积分

初级会员

积分
72
发表于 2016-1-21 14:52:42 来自手机 | 显示全部楼层
AdvertCN官方群组 | 发帖或者回复被审核? | 广告中国能给我什么？ | 论坛广告币独家攻略 ( 2022-09-08 更新)
Binom_AdvertCN
楼主目前有多少个站  流量有多少
回复 支持 反对

使用道具 举报

weiai789

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人
 楼主| 发表于 2016-1-21 14:53:34 | 显示全部楼层
真正物美价廉的Tracker | 7200W全球动态不重复住宅IP代理
白龙君 发表于 2016-1-21 14:514 c( v( A# B3 a8 Z5 [! R+ H; Y
除了火车头还能用啥采集啊。。。。。。。。
9 L) j0 d& J2 ~' A# r
真要做全自动，一定要学python6 T1 t% d* Q  ?3 j9 S2 c8 S

! `( ~. d2 D) g$ i$ K还有一些，比如验证码和代理。这2个可以用钱解决。
Binom专属AdvertCN会员优惠 - 60%
回复 支持 反对

使用道具 举报

ads419

26

主题

836

广告币

1784

积分

高级会员

积分
1784
发表于 2016-1-21 14:54:29 | 显示全部楼层
本帖最后由 ads419 于 2016-1-21 14:56 编辑 - u7 S& v" w) X, @1 i
weiai789 发表于 2016-1-21 14:49* _+ ^: a, N. N! w- q# y! h+ g4 L: {0 `
BeautifulSoup用来解析 html4 D1 t4 v$ s3 e" Z, N3 d
3 N  A# ?: r; t4 r* }8 _9 D
selenium用来做自动登录，有些内容是动态js调用的，比如QQ空间这种，你用c++ ...

! t0 j3 j% F8 J# a0 z# W+ W4 M  r刚才了解了一下，这个是自动化工具，我以为是爬虫，用爬虫也有专门的JS渲染插件。

点评

aabbccli
爬虫的JS渲染插件也是用的WEBKIT内核，比如pyspider就是用的phantomjs来渲染JS，和selenium调用phantomjs渲染效果一样。不过好像pyspider是把phantomjs运行起来当作服务器调用的(可以通过ip调用),而selenium是通过子  详情 回复 发表于 2016-1-21 15:20
ADPLEXITY + ADVERTCN = ???
回复 支持 反对

使用道具 举报

kaylin0212

13

主题

766

广告币

1068

积分

中级会员

积分
1068

社区QQ达人
发表于 2016-1-21 15:13:44 | 显示全部楼层
别人说有多好或不好，还不如自己去实践一遍
牛年大吉
回复 支持 反对

使用道具 举报

aabbccli

16

主题

1817

广告币

2222

积分

高级会员

积分
2222

社区QQ达人
发表于 2016-1-21 15:20:10 | 显示全部楼层
ads419 发表于 2016-1-21 14:54
: z4 q) e' K5 ?; P4 m) t$ Q/ a( S刚才了解了一下，这个是自动化工具，我以为是爬虫，用爬虫也有专门的JS渲染插件。 ...
$ I2 t* K0 P6 O9 H4 s' y3 D8 L
爬虫的JS渲染插件也是用的WEBKIT内核，比如pyspider就是用的phantomjs来渲染JS，和selenium调用phantomjs渲染效果一样。不过好像pyspider是把phantomjs运行起来当作服务器调用的(可以通过ip调用),而selenium是通过子进程调用来实现的，应该是pyspider性能要好一点吧。

点评

weiai789
什么顺手用什么，解决人工方面的烦恼  发表于 2016-1-21 15:28

评分

参与人数 1广告币 +1 收起 理由
leeker + 1

查看全部评分

回复 支持 1 反对 0

使用道具 举报

阿百川

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
发表于 2016-1-21 16:19:26 | 显示全部楼层
本帖最后由 阿百川 于 2016-1-21 16:23 编辑
) D: j9 c- n8 r- c' E; d8 T0 y8 y' Y9 g; T% U( Q4 R4 S! {4 ~
大把大把的采集站大把大把的拿流量
1 U" b( F( E$ W) B8 i, ~4 m2 p& L5 }( X: z" Z, a! g5 l9 X
jb51.net都N年了，百度、谷歌排名都很好/ J; v) O( d+ J% @5 S3 \

  c) F2 O4 K: O  w) m+ ^7 A; C补几个卡饭seo：
8 v* M% m& W6 l$ C9 b2 I5 Phttps://www.v2ex.com/t/232328/ y8 |" |3 X$ V) k# l% X- M" ^6 V* ~
https://www.zhihu.com/question/33195862( z8 k7 [+ o+ r4 k, y2 g9 L) e- j
https://www.zhihu.com/question/35467213" |8 v" p, t9 Y/ A, g
http://bbs.kafan.cn/thread-1858326-1-1.html7 P/ I: M# [" P7 F1 [
http://koubei.baidu.com/s/kafan.cn?fr=search8 q# c  t/ n/ C4 P  K# V
回复 支持 反对

使用道具 举报

tufei

45

主题

620

广告币

928

积分

中级会员

积分
928

社区QQ达人
发表于 2016-1-21 17:30:59 | 显示全部楼层
楼主有推荐的python教程吗

点评

weiai789
python核心编程 教程看一下就行了，都是那些东西，一通百通，函数，类。 会用模块就行。  详情 回复 发表于 2016-1-22 12:38
1
回复 支持 反对

使用道具 举报

一米

14

主题

183

广告币

359

积分

初级会员

积分
359

社区QQ达人
发表于 2016-1-21 17:49:01 来自手机 | 显示全部楼层
太专业不懂
回复 支持 反对

使用道具 举报

laihappy

4

主题

114

广告币

234

积分

初级会员

积分
234

社区QQ达人
发表于 2016-1-21 18:38:24 | 显示全部楼层
你们太骚了，哈哈 我学不来
回复 支持 反对

使用道具 举报

moneybooks

25

主题

308

广告币

628

积分

中级会员

积分
628

社区QQ达人
发表于 2016-1-21 21:56:11 | 显示全部楼层
都是技术流。。。
天下本无事，庸人自扰之。
回复 支持 反对

使用道具 举报

k_king

12

主题

469

广告币

1001

积分

中级会员

积分
1001

社区QQ达人
发表于 2016-1-22 00:48:25 | 显示全部楼层
都是技术流，看不懂，擦
回复 支持 反对

使用道具 举报

weiai789

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人
 楼主| 发表于 2016-1-22 12:38:20 | 显示全部楼层
tufei 发表于 2016-1-21 17:307 b+ J$ \0 U7 M' x" m1 X! q, V& ^
楼主有推荐的python教程吗
( g) g/ x8 W: |
python核心编程- y6 i) w9 [' O$ `/ J6 G% S
教程看一下就行了，都是那些东西，一通百通，函数，类。9 Z  h7 q4 E- D4 K- S, a% M% G

3 Q- E$ L# a. e  Z* Q1 C会用模块就行。
回复 支持 反对

使用道具 举报

上帝的假牙

4

主题

81

广告币

256

积分

初级会员

积分
256
发表于 2016-1-22 15:56:13 | 显示全部楼层
那文章我主要是说采集和搜索引擎之间的关系好吧？！
. |: `2 _5 j, B, t不处理采集问题，搜索引擎会被采集网站“淹”死，而机器无法很好的识别采集网站，只有人工干预才能处理好采集问题，但是人工干预成本又会降低搜索引擎公司的利润，甚至拖垮搜索引擎公司。。。对搜索引擎公司来说这是一个两难的问题。" W( R" k  |% s
) b7 x: U6 ~: Q+ C2 I. B" M  \! Z
那文章写于2013年，正是谷歌人工干预最厉害的时候。

点评

weiai789
兄弟，没别的意思，表达一下做这行的感受而已。  详情 回复 发表于 2016-1-22 17:01
回复 支持 反对

使用道具 举报

weiai789

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人
 楼主| 发表于 2016-1-22 17:01:41 | 显示全部楼层
上帝的假牙 发表于 2016-1-22 15:56
4 m) d' P3 n. [- p# l那文章我主要是说采集和搜索引擎之间的关系好吧？！
6 G6 a5 `. J  P: ~# d) \6 C. P不处理采集问题，搜索引擎会被采集网站“淹”死，而机 ...

; _6 b. T/ L9 c, x, m' s兄弟，没别的意思，表达一下做这行的感受而已。

点评

若水
做的国内的 还是国外的？ 兄弟  详情 回复 发表于 2016-1-22 19:22
回复 支持 反对

使用道具 举报

若水

8

主题

1215

广告币

1527

积分

高级会员

积分
1527
发表于 2016-1-22 19:22:00 | 显示全部楼层
weiai789 发表于 2016-1-22 17:01  N/ Z! O2 H2 ^0 c7 F
兄弟，没别的意思，表达一下做这行的感受而已。
* m6 r2 a4 a3 t' g
做的国内的 还是国外的？ 兄弟
回复 支持 反对

使用道具 举报

下一页 »
123下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-10-3 08:42 , Processed in 0.106619 second(s), 27 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表