设为首页收藏本站English Version

 找回密码
 立即注册

QQ登录

只需一步，快速开始

PropellerAds
AdvertCN - 广告中国»社区 › Affiliate Marketing： 联属网络营销交流 › 综合讨论区: General Discussion › 如何提取google搜索结果里，目标网页的URL？ ...
Google-Bing-Mediago-Criteo开户
⚡️按条S5代理⚡️静态⚡️独享⚡️5G广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程（持续更新、欢迎交流）FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户（优势）IPCola原生住宅IP⚡️$1.8/条双ISPFB资源，账单户，分享户，国内一手TK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审FB企业户海外户,授信户,TK加白户联盟收款/海外资金下发/服贸结汇
✔Taboola海外户源头广告位出租虚拟卡返佣1%，国内持牌机构 
12下一页
返回列表 发新帖
查看: 21482|回复: 26

如何提取google搜索结果里，目标网页的URL？

[复制链接]
whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
发表于 2013-6-4 13:06:40 | 显示全部楼层 |阅读模式
AdvertCN官方群组 | 发帖或者回复被审核? | 广告中国能给我什么？ | 论坛广告币独家攻略 ( 2022-09-08 更新)
Binom_AdvertCN
用google搜索，想提取目标网页的URL（10w个），有什么工具吗？+ q/ K- V3 Y  w& _& y( B; d

) p: Y, r: i% q, O) c
相关帖子
回复

使用道具 举报

lhelhm

0

主题

0

广告币

38

积分

初级会员

积分
38

社区QQ达人
发表于 2013-6-4 13:10:11 | 显示全部楼层
真正物美价廉的Tracker | 7200W全球动态不重复住宅IP代理
具体需求 没明白,是搜索结果搜集(最多1000条) 还是什么
Binom专属AdvertCN会员优惠 - 60%
回复 支持 反对

使用道具 举报

whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
 楼主| 发表于 2013-6-4 13:21:32 | 显示全部楼层
lhelhm 发表于 2013-6-4 13:10 8 _& l& J6 k# [9 q
具体需求 没明白,是搜索结果搜集(最多1000条) 还是什么
6 X1 Y" u+ t$ ]# z' |( n6 U- X; p
抱歉，可能没说清楚。
* [3 ]! v6 e: d% }% H6 E; g; }# ~' G/ u& a0 \+ n
要搜集结果页那些网站的URL
! J2 d4 s& O: b9 D' G" R, g
& G( @- s9 g  \- ~$ {比如搜索“中国”
% H" a! F; l2 E/ M: I# t# {0 w1 W  b  \0 L8 v6 w6 Q; M
8 H* e3 H  r9 L  `
要搜集的内容就是：* j. u  e) b2 |# x: X
http://zh.wikipedia.org/zh/中国
* q5 N9 A( S- _. O# Mhttp://baike.baidu.com/view/61891.htm
0 |4 N9 M1 o& B7 V; O" d) U; _http://www.baike.com/wiki/中国
; x, b* X% v! `. o9 f* ~0 b& Khttp://china.huanqiu.com/4 C: x- j* _9 {# X) ?: q. \
http://world.people.com.cn/GB/57506/190965/
' D. w1 B$ x1 R/ L……
3 l/ t& K3 I% n7 M1 T! K……
  c; X8 H" b# J5 |……# y$ }" d# [1 B8 P2 h

. w# {6 [3 S' ~5 L; e

本帖子中包含更多资源

您需要 登录 才可以下载或查看，没有账号？立即注册

×
ADPLEXITY + ADVERTCN = ???
回复 支持 反对

使用道具 举报

lhelhm

0

主题

0

广告币

38

积分

初级会员

积分
38

社区QQ达人
发表于 2013-6-4 13:26:54 | 显示全部楼层
Scrape Sonic
. R5 ?3 f5 [9 r+ a/ l( Q. i8 MGetFromGoogle& x# q! x  p' ?- L8 W9 F
这些小软件都可以,下不到你也可以搜索谷歌搜刮工具,火狐有个插件好久不用也忘了

点评

guys
这些小软件现在都下载不到了呢。  详情 回复 发表于 2016-3-4 02:43
回复 支持 反对

使用道具 举报

yoo

34

主题

4685

广告币

4512

积分

超级版主

积分
4512
发表于 2013-6-4 13:30:10 | 显示全部楼层
我以前曾经编过一个程序，从Google的搜索结果里提取网址。
4 \$ O$ T& n3 P8 j4 ]. ^因为GG搜索结果有着一定的规律，这些URL在包含在GG的连接里，分析提取出来并不难。如果要大量提取，难点在于自动搜索时，还没有搜索几次Google就让输入验证码，这时就无法进行下一次搜索了。
回复 支持 反对

使用道具 举报

whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
 楼主| 发表于 2013-6-4 13:32:54 | 显示全部楼层
lhelhm 发表于 2013-6-4 13:26 % N  z& f. K; y" K7 R- T
Scrape Sonic - E( n2 o3 @) }: m
GetFromGoogle
$ Y9 `1 z9 D# o& ^. d这些小软件都可以,下不到你也可以搜索谷歌搜刮工具,火狐有个插件好久不用也忘 ...
6 \) g1 H& `7 `7 ?. O
多谢！                    
" s0 O8 i; t+ P- a9 z) `, S
( R# b$ X! b3 T$ u4 ~
回复 支持 反对

使用道具 举报

whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
 楼主| 发表于 2013-6-4 13:33:27 | 显示全部楼层
yoo 发表于 2013-6-4 13:30
7 O/ h2 K6 Z. }* z1 Q/ F0 W$ N/ p我以前曾经编过一个程序，从Google的搜索结果里提取网址。
$ V. [" i" J5 n0 {# Q因为GG搜索结果有着一定的规律，这些URL在包含在 ...
! u$ _# E. }/ G+ H, H( ~  M* Q
嗯
' M. f9 M5 Z5 {8 s0 X
9 e$ O3 q7 B' R( d数据有10万条，估计翻几页就要输入验证码了
回复 支持 反对

使用道具 举报

qiqinjun

23

主题

1361

广告币

2307

积分

高级会员

积分
2307

社区QQ达人
发表于 2013-6-4 13:37:54 | 显示全部楼层
不知道可不可以，去试试google的搜索API
回复 支持 反对

使用道具 举报

生鱼片

111

主题

558

广告币

1220

积分

高级会员

积分
1220

社区QQ达人
发表于 2013-6-4 13:39:40 | 显示全部楼层
现在不好使 搜索几页后 就会让你输验证码
回复 支持 反对

使用道具 举报

billy

33

主题

3368

广告币

6605

积分

超级版主

酱油党

积分
6605

社区QQ达人
发表于 2013-6-4 13:52:33 | 显示全部楼层
google不行，换其他搜索引擎吧。
4 V; W: |2 a# r以前也有过类似的采集，开始采集的bing，后来采集的有道搜索，基本上不会挂。
+ F3 X! j8 P: ]; R1 m  }* _7 B现在具体情况不清楚了。
回复 支持 反对

使用道具 举报

whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
 楼主| 发表于 2013-6-4 14:00:04 | 显示全部楼层
billy 发表于 2013-6-4 13:52 - L) J+ D! V3 U! o; H) |
google不行，换其他搜索引擎吧。
% e9 A4 L; \% m1 x以前也有过类似的采集，开始采集的bing，后来采集的有道搜索，基本上不会 ...
' K, F$ ^" c! D7 k+ |! a
其它搜索引擎都没有结果0 s0 D# `4 t# N' F, j1 d% O3 `
5 ?" }- o+ c. g% {
某网站10万个会员的邮箱
2 v6 D/ ~2 V$ I& x7 B看来希望渺茫……
回复 支持 反对

使用道具 举报

sdwzzx

20

主题

27

广告币

241

积分

初级会员

积分
241

社区QQ达人
发表于 2013-6-4 14:19:04 | 显示全部楼层
whois360 发表于 2013-6-4 14:00
6 H5 M8 b+ A0 E# o/ l+ M1 W其它搜索引擎都没有结果1 e# H  G& v& A# j7 ]/ p
8 [% }% _! m( v2 F- X5 C7 u
某网站10万个会员的邮箱
4 o/ N% M) d. t6 S$ @( U* A
楼主搜这邮箱做什么
http://developer.huawei.com/ict/cn
回复 支持 反对

使用道具 举报

whois360

6

主题

123

广告币

248

积分

初级会员

积分
248
 楼主| 发表于 2013-6-4 14:23:03 | 显示全部楼层
sdwzzx 发表于 2013-6-4 14:19   o) z& }5 F3 e2 L6 Y
楼主搜这邮箱做什么
7 b( p) u. z8 J5 \
有10万个邮箱 做什么都好
回复 支持 反对

使用道具 举报

hudba

45

主题

781

广告币

1433

积分

高级会员

积分
1433
发表于 2013-6-4 16:05:22 | 显示全部楼层
whois360 发表于 2013-6-4 14:23
7 m! r, t" E7 R有10万个邮箱 做什么都好
7 H) T$ h/ s' e( s
群发搜来的邮箱不会给认为垃圾邮件，封IP吗？
回复 支持 反对

使用道具 举报

alitraffic

19

主题

133

广告币

405

积分

中级会员

积分
405
发表于 2013-6-4 16:22:02 | 显示全部楼层
qiqinjun 发表于 2013-6-4 13:37
3 l) F3 M$ B7 {: n+ ^1 U7 R4 ^' C+ i不知道可不可以，去试试google的搜索API

! N, X5 I6 h7 W& E  K7 iAPI返回的数量非常有限
回复 支持 反对

使用道具 举报

下一页 »
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-10-3 14:56 , Processed in 0.086607 second(s), 28 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表