AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
Google-Bing-Mediago-Criteo开户
⚡️按条S5代理⚡️静态⚡️独享⚡️5G广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
⚡️AdsPower:安全不封号,高效自动化Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️FB BM不限额,短id账单户
BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理
虚拟信用卡+独立站收款全球虚拟卡, 支持U充值各种主页、账单户、BM户(优势)⚡️TikTok企业户,bm户,账单户
IPCola原生住宅IP⚡️$1.8/条双ISP提供TK企业新户老户、谷歌新户老户海外CL企业户源头PTM虚拟卡[全新卡BIN+高返点]
FB虚拟卡⚡️消费越多返现越多最大欧洲Nutra网盟BA找量 FB个号1块一个寻找顶级电商?AdsBranded等你!
TK老户/国内外端口/预审/加白SX.ORG 高质量代理⚡235+ 地区GG,FB,TK, 欧美源头, 欢迎合作广告位出租
8500万高质量住宅IP,助力各种需求虚拟卡返佣1%,国内持牌机构  
查看: 5390|回复: 10

如果一个网站没有地图,我如何查看他所有的文章?

[复制链接]

584

主题

2066

广告币

3823

积分

金牌会员

Rank: 6Rank: 6

积分
3823
发表于 2015-4-14 18:32:19 | 显示全部楼层 |阅读模式
回复

使用道具 举报

16

主题

1111

广告币

2370

积分

高级会员

Rank: 4

积分
2370
发表于 2015-4-14 18:48:44 | 显示全部楼层
蜘蛛                          

点评

请详细说明。  详情 回复 发表于 2015-4-14 21:45
回复 支持 反对

使用道具 举报

33

主题

3363

广告币

6601

积分

超级版主

酱油党

Rank: 8Rank: 8

积分
6601

社区QQ达人

发表于 2015-4-14 20:19:01 来自手机 | 显示全部楼层
site命令

点评

是这个命令? sitemap.xml 我也是用的这个,但有的网站没有,它不起作用。  详情 回复 发表于 2015-4-14 21:43
回复 支持 反对

使用道具 举报

2

主题

1475

广告币

1818

积分

高级会员

Rank: 4

积分
1818

社区QQ达人

发表于 2015-4-14 21:14:02 | 显示全部楼层
我一般采集网的入手的方法:
  @1 H9 n* {! K0 P1 W1.robots.txt 查看是否有sitemap文件或者sitemap索引文件  v( x; J- s1 z) F8 k3 d0 H+ V0 |' H/ K
2.直接获取内容列表后再获取详情页面' c; f* H9 E* ~3 _' J" u
3.直接通过内容id遍例抓取, g" n) x1 h9 @( g
4.通过rss订阅查找一些相对应的Id后再采集相关的内容
: S# t. l+ U+ m' f+ E5.看命,是否幸运从中找到可利用的点

点评

不错  发表于 2015-4-15 08:53

评分

参与人数 1广告币 +2 收起 理由
luck + 2 我不懂你说的方法,但很感谢你!.

查看全部评分

回复 支持 反对

使用道具 举报

584

主题

2066

广告币

3823

积分

金牌会员

Rank: 6Rank: 6

积分
3823
 楼主| 发表于 2015-4-14 21:43:15 | 显示全部楼层
billy 发表于 2015-4-14 20:19
2 W/ u6 s* s& p  A1 Nsite命令

3 A9 D* G% Q2 b# ~. L( {& c是这个命令?+ L. p8 I: @1 s% ~) b& Z' k
sitemap.xml% f& h  s9 g6 [$ x  |* ~+ P, w
我也是用的这个,但有的网站没有,它不起作用。

点评

我想看一个网站的地图,如果他没有,你怎么能看到? 用site:xxx.com 查看所有收录  详情 回复 发表于 2015-4-14 21:46
回复 支持 反对

使用道具 举报

584

主题

2066

广告币

3823

积分

金牌会员

Rank: 6Rank: 6

积分
3823
 楼主| 发表于 2015-4-14 21:45:37 | 显示全部楼层
54clz 发表于 2015-4-14 18:48& X/ F( j. c8 M+ r
蜘蛛

, r+ e3 [4 P, U/ ~# B* E$ M请详细说明。                           
回复 支持 反对

使用道具 举报

33

主题

3363

广告币

6601

积分

超级版主

酱油党

Rank: 8Rank: 8

积分
6601

社区QQ达人

发表于 2015-4-14 21:46:30 | 显示全部楼层
luck 发表于 2015-4-14 21:43% d$ X1 B  u- O7 N( B& j, b/ d
是这个命令?
- G/ o9 L1 r, Z/ @2 @7 w; Fsitemap.xml
) W1 M0 u1 \9 \/ i+ e) P) i7 T我也是用的这个,但有的网站没有,它不起作用。 ...
1 O1 z0 i. U, d) {6 @: O) E9 F# k/ h
我想看一个网站的地图,如果他没有,你怎么能看到?
$ x5 D( _! {& A' D; p( l: t5 Z+ a用site:xxx.com 查看所有收录
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-2-17 12:46 , Processed in 0.052883 second(s), 15 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表