AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️AdsPower:安全不封号,高效自动化广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️Mediabuy⚡️玩家开户首选
【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理
开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放FB BM不限额,短id账单户
E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN
7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值Facebook 批量上广告
尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)
⚡️TikTok企业户,bm户,账单户FB企业户,TT老户,GG老户源头海外CL企业户源头PTM虚拟卡[全新卡BIN+高返点]
PTM虚拟卡[OPENAI+全场景通用]FB虚拟卡⚡️消费越多返现越多最大欧洲Nutra网盟BA找量->Tyver SPY汇聚海量广告创意
高质量代理⚡️住宅⚡️移动广告位出租8500万高质量住宅IP,助力各种需求虚拟卡返佣1%,国内持牌机构
查看: 5291|回复: 10

如果一个网站没有地图,我如何查看他所有的文章?

[复制链接]

584

主题

2019

广告币

3779

积分

金牌会员

Rank: 6Rank: 6

积分
3779
发表于 2015-4-14 18:32:19 | 显示全部楼层 |阅读模式
回复

使用道具 举报

16

主题

1111

广告币

2370

积分

高级会员

Rank: 4

积分
2370
发表于 2015-4-14 18:48:44 | 显示全部楼层
蜘蛛                          

点评

请详细说明。  详情 回复 发表于 2015-4-14 21:45
回复 支持 反对

使用道具 举报

33

主题

3356

广告币

6594

积分

超级版主

酱油党

Rank: 8Rank: 8

积分
6594

社区QQ达人

发表于 2015-4-14 20:19:01 来自手机 | 显示全部楼层
site命令

点评

是这个命令? sitemap.xml 我也是用的这个,但有的网站没有,它不起作用。  详情 回复 发表于 2015-4-14 21:43
回复 支持 反对

使用道具 举报

2

主题

1474

广告币

1817

积分

高级会员

Rank: 4

积分
1817

社区QQ达人

发表于 2015-4-14 21:14:02 | 显示全部楼层
我一般采集网的入手的方法:
  ?3 J& J! e& J0 p, ]  E1.robots.txt 查看是否有sitemap文件或者sitemap索引文件- L7 M7 `, l7 j: q6 L3 ^4 A
2.直接获取内容列表后再获取详情页面6 K9 i& b+ H! I1 p
3.直接通过内容id遍例抓取+ u( O) I+ I. _4 }8 l- S0 ^
4.通过rss订阅查找一些相对应的Id后再采集相关的内容
* g, T' A- R$ b, \0 ]5.看命,是否幸运从中找到可利用的点

点评

不错  发表于 2015-4-15 08:53

评分

参与人数 1广告币 +2 收起 理由
luck + 2 我不懂你说的方法,但很感谢你!.

查看全部评分

回复 支持 反对

使用道具 举报

584

主题

2019

广告币

3779

积分

金牌会员

Rank: 6Rank: 6

积分
3779
 楼主| 发表于 2015-4-14 21:43:15 | 显示全部楼层
billy 发表于 2015-4-14 20:190 G3 H" l- b( `- q8 q
site命令

  _( F5 }$ r" _: K' P1 i是这个命令?2 a9 V4 e0 E" [; z  g9 ?6 S
sitemap.xml
( P  i( q% D4 ]5 r+ h/ i! L6 q/ O8 c+ f我也是用的这个,但有的网站没有,它不起作用。

点评

我想看一个网站的地图,如果他没有,你怎么能看到? 用site:xxx.com 查看所有收录  详情 回复 发表于 2015-4-14 21:46
回复 支持 反对

使用道具 举报

584

主题

2019

广告币

3779

积分

金牌会员

Rank: 6Rank: 6

积分
3779
 楼主| 发表于 2015-4-14 21:45:37 | 显示全部楼层
54clz 发表于 2015-4-14 18:48
* Z% n3 L3 A! u* Z蜘蛛

4 V/ [6 x; i- \! T- @( V$ K请详细说明。                           
回复 支持 反对

使用道具 举报

33

主题

3356

广告币

6594

积分

超级版主

酱油党

Rank: 8Rank: 8

积分
6594

社区QQ达人

发表于 2015-4-14 21:46:30 | 显示全部楼层
luck 发表于 2015-4-14 21:43
- {9 V; T8 C* N" e是这个命令?
' q/ G3 e% Z* T2 V' Psitemap.xml
% k3 u2 M# o0 l我也是用的这个,但有的网站没有,它不起作用。 ...
9 T9 ]2 X- K% X% n& o
我想看一个网站的地图,如果他没有,你怎么能看到?
! G- t0 ~; S6 t用site:xxx.com 查看所有收录
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2025-11-4 14:51 , Processed in 0.048711 second(s), 15 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表