我的网站似乎被人监控了？

luck · 发表于 2021-2-17 19:36:33

ronse 发表于 2021-2-17 12:37; c, y7 x% f$ z% r0 O7 N4 j
很多爬虫就是不带referer。可以用cloudflare的防火墙，根据ASN过滤掉一些廉价机房的IP，增加竞争对手监控 ...

谢谢！
爬虫就是可以做到直接输入精确网址对吗？在它之前没有其它的网址。对此一无所知，了解一下。

luck · 发表于 2021-2-17 20:02:20

爬虫是蜘蛛吗？
我的网站常来蜘蛛，见下图

187277752 · 发表于 2021-2-17 20:19:23

谷歌爬虫网址是固定的

ronse · 发表于 2021-2-17 20:28:18

luck 发表于 2021-2-17 19:36# t" q0 Z) ^, F" c* P, ?
谢谢！& x. W4 @" N# \' g i
爬虫就是可以做到直接输入精确网址对吗？在它之前没有其它的网址。对此一无所知，了解一下。 ...

爬虫是所有网址都爬，只不过打开你新的文章时，不带referer而已

luck · 发表于 2021-2-18 08:07:46

就在刚刚又了表了一篇文章，记录显示，在不到一分钟的时间内，我在首页所的第二种情况，No referring link，再次精确输入我的不到一分钟的新网址进来了。它的IP还是那个IP.
显示器等信息没变，如下是它的信息Linux, Chrome 85.0, 1280x2000

pladavz · 发表于 2021-2-18 08:29:33

我不太懂，为什么你这么紧张？你这个站是干嘛的，违法哈？

yang。 · 发表于 2021-2-22 15:44:26

反爬吧，一般性策略就是过滤IP和行为，如果要深层次的可以参考企查查前端css/js 渲染变形等处理，可以过滤到很大一部分的爬虫，不过难度也高

		自动登录	找回密码
密码			立即注册

谷歌+Bing+TT+MSN官方代理	⚡️按条S5代理⚡️静态⚡️独享⚡️5G	⚡️最干净<Wifi住宅+5G移动>IP代理	泰国仓储，本土仓发货2-3元/单
指纹浏览器，就用AdsPower	谷歌/FB/Bing/Yahoo代理商开户	7200W全球动态不重复住宅IP代理	BINOM TRACKER 60% OFF!
出售Facebook,友缘号,FB广告号,ins	FB/TT/KW 加白开户	ADPLEXITY + ADVERTCN	比Adplexity还好用的Spy工具
广	告	开	户
FB/Google/TK	海外多媒体	极速	下户
MediaGo+Taboola+Ob开户	百度国际MediaGo⚡️让产品狂奔全球	百度国际，高点击转化，快速放量	百度国际MediaGo，独家原生流量
虚拟信用卡+独立站收款	行业首创新型指纹Cloak, 谷歌奇效!	Kookeey⚡️100%独享⚡️原生住宅IP	⚡IPFoxy住宅代理全场88折⚡
全球虚拟卡, 支持U充值	免账户投放 FB 广告（送项目）	2024做什么 - Media buy 项目库	免费黑五教程（持续更新、欢迎交流）
Facebook 批量上广告	Bridgeway - 联盟营销网络	IPCola 全新住宅代理 ⚡️ 免费试用	各种主页、账单户、BM户（优势）
⚡️个人户，bm户不限额，账单户	Adsterra 的CPA/CPM/CPC 网站流量	在线注册美国/英国/香港等海外公司	EU KETO/CBD - Jumbleberry
FB二三解1元/个	9Proxy ⚡️ $0.04/IP, 无限带宽	cloak斗篷/ss/nutra/cpa/Dating	E.PN 虚拟卡
Asocks代理服务器$3/GB	高薪诚求实力FB投手（独立站）	《全新虚拟卡+全球收付款》	广告位出租
全球低价纯净住宅/移动IP-免费试用	广告代投, 东南亚物流, 虚拟信用卡	VMLogin指纹浏览器+多账号防关联

我的网站似乎被人监控了？

点评

本帖子中包含更多资源