找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
查看: 14316|回复: 11

[讨论] 现在采集用什么软件?

[复制链接]

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

发表于 2016-4-1 11:13:23 | 显示全部楼层 |阅读模式
WordPress博客,想手动采集一部分,文字、图片、链接之类的,采集好之后直接发布,有什么采集软件或者采集脚本吗?
( X. x$ z9 F! L- E& d) kwprobot这个玩意儿好不好用?( g# Q5 B8 @3 O: e; j

3 N$ D' C: x$ n8 |$ L) I
相关帖子
Binom_AdvertCN
回复

使用道具 举报

3

主题

932

广告币

1975

积分

高级会员

积分
1975

社区QQ达人

发表于 2016-4-1 11:33:24 | 显示全部楼层
火车头   

点评

谢谢回复! 火车头是不是必须要买收费版本的? 另外火车头可以直接写到WordPress数据库吗?  详情 回复 发表于 2016-4-1 11:44
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 11:44:12 | 显示全部楼层
yinliang 发表于 2016-4-1 11:33" o6 _) O9 [$ g; b, \9 x5 v5 m( K
火车头
  D9 D$ g2 D, T$ Y5 T$ M3 K  `7 q
谢谢回复!5 x0 \" n$ [2 q9 C* s  W
火车头是不是必须要买收费版本的?
( d! O; m; D  v; ^另外火车头可以直接写到WordPress数据库吗?$ w1 ]) T3 ~) G$ Y; Z8 Q- \! w

点评

有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法  详情 回复 发表于 2016-4-1 11:47
回复 支持 反对

使用道具 举报

3

主题

932

广告币

1975

积分

高级会员

积分
1975

社区QQ达人

发表于 2016-4-1 11:47:14 | 显示全部楼层
gresh 发表于 2016-4-1 11:44
2 M( ~6 Q/ ?- j( @2 S0 |$ h谢谢回复!8 u: z4 e5 E1 z5 ?2 k% `9 ?1 L
火车头是不是必须要买收费版本的?6 i: e1 q! P$ M) k# l* u
另外火车头可以直接写到WordPress数据库吗?
4 Y$ u& f  G4 A8 V: I
有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法

点评

自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考?  详情 回复 发表于 2016-4-1 12:52
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 12:52:26 | 显示全部楼层
yinliang 发表于 2016-4-1 11:47
& \) R3 n: I4 s' Q) R! o0 B) N# l6 w有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法 ...

' D: r: B5 P3 ^$ v& o# D1 `3 G自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考?
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
发表于 2016-4-1 13:16:04 | 显示全部楼层
gresh 发表于 2016-4-1 12:52
/ M, V  k, W1 w5 U" S4 ?自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考? ...
+ G. }! W0 T* v" X+ p6 C
可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高

点评

非常感谢,我去找一下  详情 回复 发表于 2016-4-1 14:32
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 14:32:54 | 显示全部楼层
阿百川 发表于 2016-4-1 13:16" B! ?! o- a, s- ]9 G2 W8 H
可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高

% m& u# W6 R/ }- u非常感谢,我去找一下

点评

淘宝上几块钱就能解决 火车头是无论如何得学会使用的,学会火车头其他任何采集软件基本手到擒拿!  详情 回复 发表于 2016-4-1 17:06
回复 支持 反对

使用道具 举报

103

主题

1830

广告币

2709

积分

高级会员

积分
2709

社区QQ达人

发表于 2016-4-1 17:06:28 | 显示全部楼层
gresh 发表于 2016-4-1 14:32
5 J; I7 n  ~$ _4 x8 ^0 ]2 v非常感谢,我去找一下

0 P( n! D1 P2 Q; Z淘宝上几块钱就能解决
7 P" j& z! U$ q火车头是无论如何得学会使用的,学会火车头其他任何采集软件基本手到擒拿!
回复 支持 反对

使用道具 举报

18

主题

500

广告币

767

积分

中级会员

积分
767

社区QQ达人

发表于 2016-4-1 19:20:38 | 显示全部楼层
wordpress发布模块
3 ~! @0 O/ ^: Y5 Y4 D在網上求的,沒測試能否使用
6 S+ p4 J! Q/ d: Ihttp://pan.baidu.com/s/1ge6Bg8j

点评

非常感谢,我在火车头论坛也看到很多插件,我先试试看!  详情 回复 发表于 2016-4-1 20:58
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 20:58:04 | 显示全部楼层
kc0203 发表于 2016-4-1 19:20* {( e' M- _2 C4 _  I
wordpress发布模块
7 F4 k1 p% e; d在網上求的,沒測試能否使用7 o* _" X, m# t& z& G; |
http://pan.baidu.com/s/1ge6Bg8j

$ x* A) k' F2 S  `非常感谢,我在火车头论坛也看到很多插件,我先试试看!
回复 支持 反对

使用道具 举报

0

主题

7

广告币

17

积分

新手上路

积分
17
发表于 2016-5-3 16:43:52 | 显示全部楼层
看自身需求,火车头有能采集的,也有不能采集的,还需要自己写规则,必然要懂点程序,不会的话,可以试试八爪鱼,话说都是收费的。
回复 支持 反对

使用道具 举报

6

主题

114

广告币

154

积分

初级会员

技术流 / 爬虫党

积分
154
发表于 2016-5-3 17:22:28 | 显示全部楼层
我这边公司主业之一是帮人抓数据,我并不是要在这推广我们公司业务,只是提点小建议:" Y  R. K$ Q4 |1 y, o: a  I8 B0 d5 C
1. 简单网站的话,用火车头八爪鱼之类的,比较好。简单不简单的判断在于,页面数量,是否更新频率非常高,是否需要分布式抓取,是否ajax网站,对方反爬机制是否很强大。比如说,你打算抓点新闻或者一些博客这种量级的需求,那桌面小软件还是可以的。6 Q1 I& P. p! K- l% B
2. 火车头的好处并不是抓取本身,而是有很多的再发布模块可用,这个确实很省事。如果不考虑发布模块,那其实很多免费的软件可用,包括一些是全可视化操作的,非常方便
4 R) N* b7 Z$ p3. 如果你需要抓取的源网站逻辑比较复杂,而且你的时间成本还比较高的话,那你还是上淘宝找个人帮你做好火车头的规则把,如你时间成本高,那性价比还是不错的
- R: n( N; w: `% V/ ?7 B* E4. 对于那些逻辑复杂且极强反爬策略的,那还是考虑换个数据源把,自己做,花大量时间还不见得能成功抓取,如果找别人抓取,那成本也不低
http://www.jiashidata.com/gg/
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 17:20 , Processed in 0.078252 second(s), 28 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表