用爬虫爬了PopAds的一些站，对应siteID，有用的可以下载

plsd2012

7 L) B! E5 T( y7 p& ~
前几天写了个爬虫爬了PopAds的一些站，然后把对应siteID解析出来了。大概看了一下，大人站居多，可以用来查看这些国家都在投放什么广告，或者根据siteID来查找对应的站，但是站点较少，1000多个。
有没有价值，我也不好说，放出来大家自己判断吧。
, b  e& z  O5 n( }  }还在跑PopAds以及其他各种流量源的朋友可以一起交流，qq群：549694227。


. H$ R# s: n3 l& X4 k0 M! H. `& R
/ C. I" U& Z/ W) t& u

. i9 i4 w/ o& L9 F
4 [, U+ j# Y/ c/ c# K8 J

plsd2012

# K# q4 ^1 ~# {2 j

河小马 发表于 2016-7-29 17:39
+ C+ N2 g. O* K' N2 |% H这个网站确实挺NB 的说。。

感谢河马老大加分。老外有不少做这种数据分析的网站，确实很NB，这个也不错：https://nerdydata.com/，不过没有builtwith全。
5 b1 E- H4 S$ e  ^8 a6 o7 j
  Y1 y7 o# [# y3 ^% ?, {3 j, D. Z8 W0 W/ v
/ L: ^) E- W1 M% ^: g1 R, @6 n
  L  V0 a7 Y# }: A) l) S1 d0 P

河小马

其实我觉得这份数据的最大意义是看看什么站点在获得流量。。然后仿制。。。

willok

不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

simon611

楼主技术流啊

老刘

网站都是隐藏的，请问怎么爬的？

plsd2012

willok 发表于 2016-7-28 12:05
不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

9 @9 Y8 G: [  N2 G) k通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

plsd2012

simon611 发表于 2016-7-28 12:12
楼主技术流啊

半吊子

plsd2012

老刘 发表于 2016-7-28 12:22
' `/ ?3 D9 E: w; y7 i; U网站都是隐藏的，请问怎么爬的？

+ x8 |. j: u4 Z+ T" I通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

Atrus

这都能行。。。如果验证属实 得树个大拇哥

windflower

simon611 发表于 2016-7-28 12:12
楼主技术流啊

( [/ P* N9 M' c: ?好久不见simon兄露脸了

高金铜

有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

比特人

SB就能行，自定义grabber就可以抓任何siteid

清风教父

不错，真心厉害。

wz19_cn

河小马

高金铜 发表于 2016-7-28 20:29
! M% N. e. G, [7 a4 ^有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

/ z) A: j. J( S这个网站确实挺NB 的说。。