AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
Google-Bing-Mediago-Criteo开户
⚡️按条S5代理⚡️静态⚡️独享⚡️5G广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
⚡️AdsPower:安全不封号,高效自动化⚡️E.PN 虚拟卡⚡️FB BM不限额,短id账单户BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款
全球虚拟卡, 支持U充值Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)⚡️TikTok企业户,bm户,账单户提供TK企业新户老户、谷歌新户老户
FB虚拟卡⚡️消费越多返现越多最大欧洲Nutra网盟BA找量优质住宅/移动代理/高匿名/高性能TK白名单老户|兼职广告可投
⚡比特指纹浏览器+云手机, 4.5折起T3NZU:定义应用网盟新时代FB个人号源头服务商寻找顶级电商?AdsBranded等你!
TK老户/国内外端口/预审/加白广告位出租8500万高质量住宅IP,助力各种需求虚拟卡返佣1%,国内持牌机构
查看: 26548|回复: 23

[吐槽] 网站没有流量,爬虫的到是不少

[复制链接]

6

主题

200

广告币

239

积分

初级会员

Rank: 2

积分
239
发表于 2020-9-28 19:43:03 | 显示全部楼层 |阅读模式
回复

使用道具 举报

79

主题

4016

广告币

5779

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5779

社区QQ达人

发表于 2020-9-28 20:05:36 | 显示全部楼层
你这个是防爬的吧?关注内容,不用关注太多这些东西吧
回复 支持 反对

使用道具 举报

1646

主题

1万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
27441

社区QQ达人

发表于 2020-9-28 21:04:15 | 显示全部楼层
建网站以后,很大一部分资源都给爬虫搞走了
2 i+ C  w, Y8 [! `, C/ K2 e: Y( ^0 ], Q0 _' k/ L, O4 F; p
我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写nginx 规则要简单和省事的多
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

1646

主题

1万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
27441

社区QQ达人

发表于 2020-9-28 21:04:58 | 显示全部楼层
朝阳风雨 发表于 2020-9-28 20:05
4 ^; w4 k7 O  ?9 q: K) f9 ~6 @你这个是防爬的吧?关注内容,不用关注太多这些东西吧
5 h8 y# k5 n) t& e! x
还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。2 q9 }* Z% [) n( }9 }, P
  q7 f( g( z8 C
没事的时候,设置一个access log。。。就能看到了
+ X1 W( i( z" d7 O4 o6 d- E
- \, d/ _3 m" F; y爬虫太狠了
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

79

主题

4016

广告币

5779

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5779

社区QQ达人

发表于 2020-9-28 21:06:38 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
9 Y  N( D! V) N$ {0 Q还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。- j% g) Y5 F& O9 H5 M  T$ ?0 Q! J+ K

( @& |6 o' `5 f! J没事的时候,设置一个access log ...
' M- N9 ]  Q3 Z3 D7 W
偷懒用虚拟主机的我  还是算了 对我访问没有啥影响
回复 支持 反对

使用道具 举报

1646

主题

1万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
27441

社区QQ达人

发表于 2020-9-28 21:09:27 | 显示全部楼层
朝阳风雨 发表于 2020-9-28 21:064 }3 A" U. d6 D8 d
偷懒用虚拟主机的我  还是算了 对我访问没有啥影响
* X: s% @. c( e' L2 }! u
虚拟主机,一般都直接屏蔽了
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

79

主题

4016

广告币

5779

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5779

社区QQ达人

发表于 2020-9-28 21:13:42 | 显示全部楼层
河小马 发表于 2020-9-28 21:09
+ |: b8 w# I5 ~虚拟主机,一般都直接屏蔽了
9 E7 X/ \4 Y5 f9 o* r. o& u- G; _
那就省事快捷了
回复 支持 反对

使用道具 举报

6

主题

200

广告币

239

积分

初级会员

Rank: 2

积分
239
 楼主| 发表于 2020-9-29 08:55:25 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
, o! ?% g, Q2 r建网站以后,很大一部分资源都给爬虫搞走了# f( s1 W& z( j# l% S( v+ k! I
/ d1 Y) }: r) K. K0 e: {
我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...
* [; u- e' Z8 I. L. s; L+ f
谢谢 河马
回复 支持 反对

使用道具 举报

23

主题

72

广告币

162

积分

初级会员

Rank: 2

积分
162
发表于 2020-9-29 08:56:57 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
, Q3 u% ^1 |+ u2 r' s8 b: N1 ]1 P还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。
. w+ z  v1 M/ _1 N
! ^' S9 b/ [6 ~没事的时候,设置一个access log ...

& B7 |: w4 M. N' U这样就没有收录了,更不好
回复 支持 反对

使用道具 举报

94

主题

2244

广告币

3179

积分

高级会员

Rank: 4

积分
3179

社区QQ达人

发表于 2020-9-29 09:05:14 | 显示全部楼层
强迫症表示, ~*  "(php|wget)" 不香么
回复 支持 反对

使用道具 举报

94

主题

2244

广告币

3179

积分

高级会员

Rank: 4

积分
3179

社区QQ达人

发表于 2020-9-29 09:11:36 | 显示全部楼层
河小马 发表于 2020-9-28 21:04" `2 c& p# M# {: K8 I
建网站以后,很大一部分资源都给爬虫搞走了9 U% L" _: y1 U% _8 p: {' I2 ~
. S, o4 H' R) D" n8 b; Q* Y3 G
我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...

- U, @0 X+ y4 ?! R* S% ?; F要是爬内容的用谷歌的蜘蛛身份怎样破?防火墙怎样设置好点

点评

CF的防火墙,自动默认允许世界知名的搜索引擎的蜘蛛  详情 回复 发表于 2020-9-29 16:12
回复 支持 反对

使用道具 举报

23

主题

72

广告币

162

积分

初级会员

Rank: 2

积分
162
发表于 2020-9-29 09:32:01 | 显示全部楼层
我才不搞这些花里胡哨的屏蔽爬虫,一不小心搞降权了就亏大了,配置不够就升级,有投入才有收入
回复 支持 反对

使用道具 举报

584

主题

2046

广告币

3805

积分

金牌会员

Rank: 6Rank: 6

积分
3805
发表于 2020-9-29 11:03:42 | 显示全部楼层
用的是VPS,不懂代码,网站内容也被能去不少,干着急,没办法。
回复 支持 反对

使用道具 举报

15

主题

676

广告币

1027

积分

禁止访问

QQ:1582939837

积分
1027
发表于 2020-9-29 11:52:23 | 显示全部楼层
河小马 发表于 2020-9-28 21:04" d" n& @. g9 J) b+ ?
建网站以后,很大一部分资源都给爬虫搞走了% M1 F; F+ d7 F/ Z+ n; L

; f( _, A* `4 p0 F) \9 X我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...

$ b8 D+ P5 S9 L' O) g7 K; r请问cloudflare 的firewall ,这种功能是免费的还是PRO收费版本?- ], M4 }' B# b9 m- b/ z

+ G3 V) X" |# K  R$ h- r9 _" H9 X如果是免费的,可以知道下具体怎么操作么?

点评

免费的 CF的文档写的很清楚,自己看下文档就好了  详情 回复 发表于 2020-9-29 16:09
代收联盟款(PP或ACH)。物美价廉主机。 ieasyweb.com 着陆页设计。weebly pro版月费仅官网半价。aivoicer.com文字转语音。ufoforest.com低成本网店
回复 支持 反对

使用道具 举报

1646

主题

1万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
27441

社区QQ达人

发表于 2020-9-29 16:09:42 | 显示全部楼层
加拿大华人 发表于 2020-9-29 11:52
# Q8 }$ E4 E$ f4 i# H请问cloudflare 的firewall ,这种功能是免费的还是PRO收费版本?* j. \; Y4 u; Q, u

1 D* A- l" `- D, W# O8 c, F1 m, H如果是免费的,可以知道下具体怎么操 ...

8 ]; f" P9 g* R$ u: y免费的& _8 D' H- V9 \9 i- z) [
7 ]! e3 B1 l3 t, j3 t; N8 {
CF的文档写的很清楚,自己看下文档就好了
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2025-12-16 07:48 , Processed in 0.115957 second(s), 18 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表