找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
查看: 14317|回复: 11

[讨论] 现在采集用什么软件?

[复制链接]

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

发表于 2016-4-1 11:13:23 | 显示全部楼层 |阅读模式
Influxtec
WordPress博客,想手动采集一部分,文字、图片、链接之类的,采集好之后直接发布,有什么采集软件或者采集脚本吗?2 M- q& P* F: I
wprobot这个玩意儿好不好用?
' M8 Y% F% p! M8 N) G7 j3 v  y
相关帖子
Binom_AdvertCN
回复

使用道具 举报

3

主题

932

广告币

1975

积分

高级会员

积分
1975

社区QQ达人

发表于 2016-4-1 11:33:24 | 显示全部楼层
火车头   

点评

谢谢回复! 火车头是不是必须要买收费版本的? 另外火车头可以直接写到WordPress数据库吗?  详情 回复 发表于 2016-4-1 11:44
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 11:44:12 | 显示全部楼层
yinliang 发表于 2016-4-1 11:33
) x6 T- P5 X, U' g& X( v& D( t火车头
9 \; D' g5 P7 N( @$ C% [0 @
谢谢回复!
5 |7 I! m4 j  v& |) o0 X1 c火车头是不是必须要买收费版本的?  `6 ]. c- g) w" x& m1 f; L8 E
另外火车头可以直接写到WordPress数据库吗?
( z+ D/ t+ m: l

点评

有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法  详情 回复 发表于 2016-4-1 11:47
回复 支持 反对

使用道具 举报

3

主题

932

广告币

1975

积分

高级会员

积分
1975

社区QQ达人

发表于 2016-4-1 11:47:14 | 显示全部楼层
gresh 发表于 2016-4-1 11:44, y8 G* X4 q6 a
谢谢回复!- U' Z0 `: K2 g3 v2 T4 m' ~) v; ~, T
火车头是不是必须要买收费版本的?
; |% d0 G7 ~, J; ]5 h  M另外火车头可以直接写到WordPress数据库吗?

& U4 E* z" @$ W8 y- A! g有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法

点评

自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考?  详情 回复 发表于 2016-4-1 12:52
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 12:52:26 | 显示全部楼层
yinliang 发表于 2016-4-1 11:47
& @  }: n' I  q有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法 ...
$ I$ d/ Q  j4 P4 I$ J! e
自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考?
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
发表于 2016-4-1 13:16:04 | 显示全部楼层
gresh 发表于 2016-4-1 12:52( c$ R4 ?  A4 |" S4 `
自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考? ...

9 A0 D  k- G  c, c! A* ^可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高

点评

非常感谢,我去找一下  详情 回复 发表于 2016-4-1 14:32
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 14:32:54 | 显示全部楼层
阿百川 发表于 2016-4-1 13:16, _5 Y  @& B" x& X5 z4 r7 N
可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高
! V1 f, @( w+ f2 O; W& K7 m
非常感谢,我去找一下

点评

淘宝上几块钱就能解决 火车头是无论如何得学会使用的,学会火车头其他任何采集软件基本手到擒拿!  详情 回复 发表于 2016-4-1 17:06
回复 支持 反对

使用道具 举报

103

主题

1830

广告币

2709

积分

高级会员

积分
2709

社区QQ达人

发表于 2016-4-1 17:06:28 | 显示全部楼层
gresh 发表于 2016-4-1 14:32$ D# w# p9 y9 M$ a" k7 Z4 w
非常感谢,我去找一下

) j% K$ c2 u+ h+ V淘宝上几块钱就能解决  X  B7 p5 O/ R% J6 \2 C
火车头是无论如何得学会使用的,学会火车头其他任何采集软件基本手到擒拿!
回复 支持 反对

使用道具 举报

18

主题

500

广告币

767

积分

中级会员

积分
767

社区QQ达人

发表于 2016-4-1 19:20:38 | 显示全部楼层
wordpress发布模块( d& ^  |6 _) E: p
在網上求的,沒測試能否使用
- `/ K$ W) S4 Mhttp://pan.baidu.com/s/1ge6Bg8j

点评

非常感谢,我在火车头论坛也看到很多插件,我先试试看!  详情 回复 发表于 2016-4-1 20:58
回复 支持 反对

使用道具 举报

82

主题

654

广告币

1208

积分

高级会员

积分
1208

社区QQ达人

 楼主| 发表于 2016-4-1 20:58:04 | 显示全部楼层
kc0203 发表于 2016-4-1 19:200 F7 r! z/ h) o5 B4 p
wordpress发布模块4 ^# U  N  ^0 R7 A) Q
在網上求的,沒測試能否使用! x, w6 S" K# o5 S
http://pan.baidu.com/s/1ge6Bg8j
; i- a8 z# o1 r/ R% r
非常感谢,我在火车头论坛也看到很多插件,我先试试看!
回复 支持 反对

使用道具 举报

0

主题

7

广告币

17

积分

新手上路

积分
17
发表于 2016-5-3 16:43:52 | 显示全部楼层
看自身需求,火车头有能采集的,也有不能采集的,还需要自己写规则,必然要懂点程序,不会的话,可以试试八爪鱼,话说都是收费的。
回复 支持 反对

使用道具 举报

6

主题

114

广告币

154

积分

初级会员

技术流 / 爬虫党

积分
154
发表于 2016-5-3 17:22:28 | 显示全部楼层
我这边公司主业之一是帮人抓数据,我并不是要在这推广我们公司业务,只是提点小建议:
, A( z+ c1 i# D1. 简单网站的话,用火车头八爪鱼之类的,比较好。简单不简单的判断在于,页面数量,是否更新频率非常高,是否需要分布式抓取,是否ajax网站,对方反爬机制是否很强大。比如说,你打算抓点新闻或者一些博客这种量级的需求,那桌面小软件还是可以的。0 P. |; C; H: Z
2. 火车头的好处并不是抓取本身,而是有很多的再发布模块可用,这个确实很省事。如果不考虑发布模块,那其实很多免费的软件可用,包括一些是全可视化操作的,非常方便! J: n2 p  ^# O9 i8 c2 i2 t3 `" P' M6 o
3. 如果你需要抓取的源网站逻辑比较复杂,而且你的时间成本还比较高的话,那你还是上淘宝找个人帮你做好火车头的规则把,如你时间成本高,那性价比还是不错的
' G1 L' K, M" T! [4. 对于那些逻辑复杂且极强反爬策略的,那还是考虑换个数据源把,自己做,花大量时间还不见得能成功抓取,如果找别人抓取,那成本也不低
http://www.jiashidata.com/gg/
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 17:20 , Processed in 0.074872 second(s), 28 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表