用爬虫爬了PopAds的一些站，对应siteID，有用的可以下载

plsd2012

* V8 \7 i; h# Y: X; C  H" P前几天写了个爬虫爬了PopAds的一些站，然后把对应siteID解析出来了。大概看了一下，大人站居多，可以用来查看这些国家都在投放什么广告，或者根据siteID来查找对应的站，但是站点较少，1000多个。
有没有价值，我也不好说，放出来大家自己判断吧。
还在跑PopAds以及其他各种流量源的朋友可以一起交流，qq群：549694227。
7 u7 N4 `, I8 m4 q: N

  d1 ]( L$ l. c/ n$ g
& k' H) n7 K6 V8 F


! o1 h3 D' [+ \$ m

plsd2012

, K( _5 p: r- }/ n! s" X) R, g

河小马 发表于 2016-7-29 17:39
这个网站确实挺NB 的说。。

4 {; o. w+ K2 G$ M& C7 C) y$ q! I$ e感谢河马老大加分。老外有不少做这种数据分析的网站，确实很NB，这个也不错：https://nerdydata.com/，不过没有builtwith全。
  c, Y7 A4 T5 A# S
4 t# ^6 D2 p" R- r1 a' L. U4 ]
2 N7 {! H/ l& ^; L$ h+ ~

河小马

其实我觉得这份数据的最大意义是看看什么站点在获得流量。。然后仿制。。。

willok

不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

simon611

楼主技术流啊

老刘

网站都是隐藏的，请问怎么爬的？

plsd2012

willok 发表于 2016-7-28 12:05
0 ~+ ^% a" B2 J4 L2 ]不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

plsd2012

simon611 发表于 2016-7-28 12:12
! Q- T( N% N% e9 `  g% r3 b5 e楼主技术流啊

半吊子

plsd2012

老刘 发表于 2016-7-28 12:22
6 u9 @' t9 k! K5 w5 N1 y网站都是隐藏的，请问怎么爬的？

9 O) A1 m: s  ?8 K9 a6 N通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

Atrus

这都能行。。。如果验证属实 得树个大拇哥

windflower

simon611 发表于 2016-7-28 12:12
2 M% \/ s7 J1 Q楼主技术流啊

5 l* D8 K+ S0 [/ u  ~好久不见simon兄露脸了

高金铜

有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

比特人

SB就能行，自定义grabber就可以抓任何siteid

清风教父

不错，真心厉害。

wz19_cn

河小马

高金铜 发表于 2016-7-28 20:29
7 d* d! e# Q& R  z8 C5 [* g有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

& Z) H: p; X* B+ Y8 c# v" t% t  ^这个网站确实挺NB 的说。。