寻求合作：爬取了大量Google搜索结果

osun

严格来说应该是采集了Google的搜索结果，根据关键词得到搜索页面，把搜索结果保存到数据库。原理很简单，但是研究Google的大牛应该都知道，Google的反爬能力是很厉害的，爬不了几页就会被屏蔽IP，想要大量抓取Google的搜索结果是很困难的，小弟研究Google多年，终于解决了这个问题，现在寻求大牛合作，把这一成果利用起来。另外小弟还破解了文档分享站scribd的加密算法，可以根据文档预览页面地址获取到文档的直接下载地址，欢迎大牛前来指导合作，站内消息或者QQ：26917373

电仔

技术上很牛哦！  但是我想不到google大量结果有啥用？拿来做垃圾站？
' e" G: d% G4 m' ?$ `scribd这个破解掉用处很大的，随便抓取一个细分领域书本做成关键字都是一个专业站了。

abbey0812

仰观楼上各位大牛！

54clz

牛                           

osun

电仔 发表于 2019-2-21 11:23
技术上很牛哦！  但是我想不到google大量结果有啥用？拿来做垃圾站？
scribd这个破解掉用处很大的，随便抓 ...

目前就是采集的google的搜索结果做的垃圾站，按照关键词采集了100万页，但是流量掉的快，一个月流量就掉的差不多了，网站也没有被google干掉，还能搜索到，估计是被降权了

123jj

osun 发表于 2019-2-21 12:13
目前就是采集的google的搜索结果做的垃圾站，按照关键词采集了100万页，但是流量掉的快，一个月流量就掉 ...

这种垃圾站好久以前就有了，现在不好做，我现在也有这样做，没啥流量，收录也没以前快和多了，而且掉得快

电仔

123jj 发表于 2019-2-21 13:37
这种垃圾站好久以前就有了，现在不好做，我现在也有这样做，没啥流量，收录也没以前快和多了，而且掉得快 ...

嗯，之前google搜索会经常搜出垃圾站，现在很难搜索出来， Google改过算法优化过

xkangyi

大量采集的话估计很快就会失效

科学外贸老王

第一个是国外很多seo工具具有的功能
2 Y7 E9 K8 V* f5 `' p" a例如semrush
2 C8 z+ F+ Q" {$ O9 f: v0 E但是semrush的功能多很多
+ i7 Y. @+ \: g7 w2 C6 J
% n/ D$ J$ N5 C( r# h% i3 W第二个可以做内容采集工具 然后出售

bluescharp

如果是用代理采集，那类似的工具太多，而且太吃代理，跟别的工具没什么区别了。
7 o9 S+ h0 t9 h6 G! \3 @! s如果能大规模采集，那简直是金矿了...随便想到的工具类型有rank checker， keyword research,  ad spy， spam。每一类工具都有各种细分的需求，个性化的需求更数不胜数了...

osun

bluescharp 发表于 2019-2-21 17:49
3 R( M0 k9 e0 _  @4 N; V9 N( L! ]' ^如果是用代理采集，那类似的工具太多，而且太吃代理，跟别的工具没什么区别了。
$ `4 Z9 W  z9 S' t" H. T$ O如果能大规模采集，那简直 ...

可以大规模采集，你只管提出需求，其他的就交给我。。。

newcb

这个技术做垃圾站比较好。