找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
楼主: luck

我的网站似乎被人监控了?

[复制链接]

584

主题

2089

广告币

3844

积分

金牌会员

积分
3844
 楼主| 发表于 2021-2-17 19:36:33 | 显示全部楼层
ronse 发表于 2021-2-17 12:37) i+ J# W2 T( E( v
很多爬虫就是不带referer。可以用cloudflare的防火墙,根据ASN过滤掉一些廉价机房的IP,增加竞争对手监控 ...
& j% |2 o, ~; U
谢谢!; n8 m+ D$ m% W! b) ?. s2 [
爬虫就是可以做到直接输入精确网址对吗?在它之前没有其它的网址。对此一无所知,了解一下。

点评

爬虫是所有网址都爬,只不过打开你新的文章时,不带referer而已  详情 回复 发表于 2021-2-17 20:28
Binom_AdvertCN
回复 支持 反对

使用道具 举报

584

主题

2089

广告币

3844

积分

金牌会员

积分
3844
 楼主| 发表于 2021-2-17 20:02:20 | 显示全部楼层
爬虫是蜘蛛吗?3 ?, A9 {( v0 y5 X0 Z
我的网站常来蜘蛛,见下图
9 U* a; i9 R5 L) w# u2 R( z2 E; c: w: ?. R; R/ I+ b, v0 M4 o  Y

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
回复 支持 反对

使用道具 举报

3

主题

19

广告币

112

积分

初级会员

积分
112
发表于 2021-2-17 20:19:23 来自手机 | 显示全部楼层
谷歌爬虫网址是固定的
回复 支持 反对

使用道具 举报

6

主题

549

广告币

3008

积分

高级会员

积分
3008
发表于 2021-2-17 20:28:18 | 显示全部楼层
luck 发表于 2021-2-17 19:36$ x; x: V- {3 B$ ]( u9 G3 t5 ~
谢谢!% W7 y! S8 b5 A
爬虫就是可以做到直接输入精确网址对吗?在它之前没有其它的网址。对此一无所知,了解一下。 ...

3 ^( O8 G+ T' q' u爬虫是所有网址都爬,只不过打开你新的文章时,不带referer而已
回复 支持 反对

使用道具 举报

584

主题

2089

广告币

3844

积分

金牌会员

积分
3844
 楼主| 发表于 2021-2-18 08:07:46 | 显示全部楼层
就在刚刚又了表了一篇文章,记录显示,在不到一分钟的时间内,我在首页所的第二种情况,No referring link,再次精确输入我的不到一分钟的新网址进来了。它的IP还是那个IP.  g4 W+ j! T1 V3 C$ A$ U) c- p
显示器等信息没变,如下是它的信息Linux, Chrome 85.0, 1280x2000
回复 支持 反对

使用道具 举报

7

主题

1161

广告币

1583

积分

高级会员

积分
1583
发表于 2021-2-18 08:29:33 | 显示全部楼层
我不太懂,为什么你这么紧张?你这个站是干嘛的,违法哈?
回复 支持 反对

使用道具 举报

16

主题

376

广告币

533

积分

中级会员

积分
533
发表于 2021-2-22 15:44:26 | 显示全部楼层
反爬吧,一般性策略就是过滤IP和行为,如果要深层次的 可以参考企查查 前端css/js 渲染 变形等处理,可以过滤到很大一部分的爬虫,不过难度也高
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 14:40 , Processed in 0.065264 second(s), 20 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表