找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
楼主: weiai789

楼下哥们儿说"采集必死",我只想说“呵呵”

 火 [复制链接]

11

主题

16

广告币

72

积分

初级会员

积分
72
发表于 2016-1-21 14:52:42 来自手机 | 显示全部楼层
Binom_AdvertCN
回复 支持 反对

使用道具 举报

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人

 楼主| 发表于 2016-1-21 14:53:34 | 显示全部楼层
白龙君 发表于 2016-1-21 14:51) j0 m2 ^  M4 {  R/ w
除了火车头还能用啥采集啊。。。。。。。。

; r- `0 b+ u8 K& y9 _) q- F真要做全自动,一定要学python0 t8 P" _5 Y4 G$ n
; I: D1 `5 W1 R, ~0 c- g" s
还有一些,比如验证码和代理。这2个可以用钱解决。
回复 支持 反对

使用道具 举报

26

主题

836

广告币

1784

积分

高级会员

积分
1784
发表于 2016-1-21 14:54:29 | 显示全部楼层
本帖最后由 ads419 于 2016-1-21 14:56 编辑
0 M& P5 g  p& h6 Q
weiai789 发表于 2016-1-21 14:49$ [) p0 ]8 N; x/ r2 l+ T3 H' I( I
BeautifulSoup用来解析 html
  A/ t0 A% |8 H9 d2 u! t: D0 d' W8 x9 o
# ?  D0 B) E4 W% Vselenium用来做自动登录,有些内容是动态js调用的,比如QQ空间这种,你用c++ ...
# x- B3 I+ W, H- q- T7 |' W
刚才了解了一下,这个是自动化工具,我以为是爬虫,用爬虫也有专门的JS渲染插件。

点评

爬虫的JS渲染插件也是用的WEBKIT内核,比如pyspider就是用的phantomjs来渲染JS,和selenium调用phantomjs渲染效果一样。不过好像pyspider是把phantomjs运行起来当作服务器调用的(可以通过ip调用),而selenium是通过子  详情 回复 发表于 2016-1-21 15:20
回复 支持 反对

使用道具 举报

13

主题

766

广告币

1068

积分

中级会员

积分
1068

社区QQ达人

发表于 2016-1-21 15:13:44 | 显示全部楼层
别人说有多好或不好,还不如自己去实践一遍
牛年大吉
回复 支持 反对

使用道具 举报

16

主题

1817

广告币

2222

积分

高级会员

积分
2222

社区QQ达人

发表于 2016-1-21 15:20:10 | 显示全部楼层
ads419 发表于 2016-1-21 14:545 o# u9 b: n/ ~4 h
刚才了解了一下,这个是自动化工具,我以为是爬虫,用爬虫也有专门的JS渲染插件。 ...

& R  x" f  h. t9 A5 }爬虫的JS渲染插件也是用的WEBKIT内核,比如pyspider就是用的phantomjs来渲染JS,和selenium调用phantomjs渲染效果一样。不过好像pyspider是把phantomjs运行起来当作服务器调用的(可以通过ip调用),而selenium是通过子进程调用来实现的,应该是pyspider性能要好一点吧。

点评

什么顺手用什么,解决人工方面的烦恼  发表于 2016-1-21 15:28

评分

参与人数 1广告币 +1 收起 理由
leeker + 1

查看全部评分

回复 支持 1 反对 0

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
发表于 2016-1-21 16:19:26 | 显示全部楼层
本帖最后由 阿百川 于 2016-1-21 16:23 编辑
" \" x( T2 t. s9 a8 b2 U; I5 D8 r# X; S3 `5 e  _" D' @2 H
大把大把的采集站大把大把的拿流量
' ]; h! b, T' _1 E' m( H: B, ?* e- s& [8 H3 ]  J8 l; T
jb51.net都N年了,百度、谷歌排名都很好
* ]4 n2 B& j- l& T$ Z6 R5 f6 H" p) P" N' q' k; H* X7 B. n
补几个卡饭seo:4 J! F: x8 d6 b2 B% }  ~) E
https://www.v2ex.com/t/232328
+ I+ [- B6 s7 t0 M$ v, _https://www.zhihu.com/question/33195862  G# W/ z; Z* S9 x9 p  ~
https://www.zhihu.com/question/354672139 v+ y7 U2 Z4 P. N0 I( m. g* b
http://bbs.kafan.cn/thread-1858326-1-1.html
" j/ j( ?* c) d; k4 [) Z# uhttp://koubei.baidu.com/s/kafan.cn?fr=search
/ X6 ?0 c  g; N. x
回复 支持 反对

使用道具 举报

45

主题

621

广告币

929

积分

中级会员

积分
929

社区QQ达人

发表于 2016-1-21 17:30:59 | 显示全部楼层
楼主有推荐的python教程吗

点评

python核心编程 教程看一下就行了,都是那些东西,一通百通,函数,类。 会用模块就行。  详情 回复 发表于 2016-1-22 12:38
回复 支持 反对

使用道具 举报

14

主题

183

广告币

359

积分

初级会员

积分
359

社区QQ达人

发表于 2016-1-21 17:49:01 来自手机 | 显示全部楼层
太专业不懂
回复 支持 反对

使用道具 举报

4

主题

122

广告币

241

积分

初级会员

积分
241

社区QQ达人

发表于 2016-1-21 18:38:24 | 显示全部楼层
你们太骚了,哈哈 我学不来
回复 支持 反对

使用道具 举报

25

主题

308

广告币

628

积分

中级会员

积分
628

社区QQ达人

发表于 2016-1-21 21:56:11 | 显示全部楼层
都是技术流。。。
天下本无事,庸人自扰之。
回复 支持 反对

使用道具 举报

12

主题

469

广告币

1001

积分

中级会员

积分
1001

社区QQ达人

发表于 2016-1-22 00:48:25 | 显示全部楼层
都是技术流,看不懂,擦
回复 支持 反对

使用道具 举报

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人

 楼主| 发表于 2016-1-22 12:38:20 | 显示全部楼层
tufei 发表于 2016-1-21 17:305 C& F- @; ^5 Z6 Y" y
楼主有推荐的python教程吗
- U& a0 m" A4 L8 n
python核心编程/ p8 k7 C2 j, l/ t) [% }! P
教程看一下就行了,都是那些东西,一通百通,函数,类。' Q/ A( f- N# ]* h) O

$ Q2 k; I/ ^  n( g; {, H会用模块就行。
回复 支持 反对

使用道具 举报

4

主题

81

广告币

256

积分

初级会员

积分
256
发表于 2016-1-22 15:56:13 | 显示全部楼层
那文章我主要是说采集和搜索引擎之间的关系好吧?!) {+ U9 S! N5 r! g
不处理采集问题,搜索引擎会被采集网站“淹”死,而机器无法很好的识别采集网站,只有人工干预才能处理好采集问题,但是人工干预成本又会降低搜索引擎公司的利润,甚至拖垮搜索引擎公司。。。对搜索引擎公司来说这是一个两难的问题。% D! |. p, x) H

. p, V3 |8 `" ]; O1 J  F那文章写于2013年,正是谷歌人工干预最厉害的时候。

点评

兄弟,没别的意思,表达一下做这行的感受而已。  详情 回复 发表于 2016-1-22 17:01
回复 支持 反对

使用道具 举报

45

主题

462

广告币

601

积分

中级会员

积分
601

社区QQ达人

 楼主| 发表于 2016-1-22 17:01:41 | 显示全部楼层
上帝的假牙 发表于 2016-1-22 15:56
3 B( J' v( H/ S' Z7 s8 l那文章我主要是说采集和搜索引擎之间的关系好吧?!4 y, P  s' S% r1 y# F
不处理采集问题,搜索引擎会被采集网站“淹”死,而机 ...
) p( s( m4 a; |: T" S! R7 i
兄弟,没别的意思,表达一下做这行的感受而已。

点评

做的国内的 还是国外的? 兄弟  详情 回复 发表于 2016-1-22 19:22
回复 支持 反对

使用道具 举报

8

主题

1215

广告币

1527

积分

高级会员

积分
1527
发表于 2016-1-22 19:22:00 | 显示全部楼层
weiai789 发表于 2016-1-22 17:01( a4 J- {. G; E
兄弟,没别的意思,表达一下做这行的感受而已。

& W- Y" z% _# `" B+ n4 P做的国内的 还是国外的? 兄弟
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 16:56 , Processed in 0.078365 second(s), 22 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表