大洲的小偷程序非常让人眼馋,无奈本diao丝程序员,一无RMB,二无论坛币,只能望洋兴叹,所幸我有web程序开发的经验,对于这个小偷程序的基本原理能猜到不少,本着自力更生,服务大众的精神,我自己实现了一个简易版,在此开源给大家,希望能赚点论坛币,早日进入email版见见世面。
* v+ _0 C8 \7 W: D
% u) _, ^* q, ]' f: Z一、原理; F i) W+ k4 v
1.用户访问流程:2 i3 E: ~$ ^+ v3 t6 e; h+ G0 N+ [
(1)用户访问我们的冒牌站(A.com)2 r* O8 i, P0 J$ x( H
(2)网站后台程序根据用户的query参数(包括get/post/cookie)构造原始网站B.com的url,用后台程序去访问该url,此时可以拿到原始网站的html和header输出。这里有一点需要注意的是原始网站输出的头也不可以忽略,里面的set-cookie信息也可以转发给用户的,这样就可以实现注册和登陆原网站啦。& S2 X( w8 v( b! c& o5 T" j
(3)对原始网站的html输出和header输出按某些规则做替换,比如把某些广告去掉啦,把B.com的地址替换成A.com啦,其实这一步是最关键的,也是玩法最多最好玩的部分
2 P3 R8 E3 [6 X& X6 R M4 _(4)将替换后的html和header输出给用户。5 O5 `" M |8 L5 S& d
$ e9 G4 F# V* z2.规则替换的几种玩法:2 {8 \$ k0 x, P6 C9 t
(1)最简单的当然是字符串和正则表达式了,这就不多说了
M" W7 A2 k; E5 O$ R(2)用html解析库对html的dom节点做操作,然后重新生成html,比如可以把页面中的text node翻译成另一种语言,或者做文章重写,这样比较容易逃过搜索引擎的法眼。
+ a5 s/ V: c2 n' e* s据我所知每种语言都由若干个html库,比如php的有DOM、phpQuery等,java的有htmlcleaner等* X7 d8 B2 G2 Q, j& x2 b
(3)在原始html代码的后面加入一些javascript代码,用来隐藏一些页面元素,或加入一些广告代码等& f7 f/ F9 Y e9 V
. c3 N+ E. K( [3.关于速度和性能:9 x, t2 ~1 t) e3 H
(1)提到性能第一个想到的当然是缓存啦,我觉得最适合加缓存的地方就是上文1.1.2中提到的生成原始网站url后,这里可以对原始url做md5编码,访问一次改url后就把它的内容和头存到硬盘上,这样就不用每次都去原网站拉取了。做缓存的另一个好处是不用担心被原网站屏蔽。/ [! C) `% n- S7 Y7 z! f9 L
1 y9 E4 w5 l; x# ](2)对于css,图片,js等静态文件,其实不用每个文件都让php访问原网站拉取,可以直接返回个302,让浏览器直接去原网站拉取。
/ e, e- }$ N6 X* c _2 C7 P7 m, Z) y1 a0 E" @2 ^
6 I* y8 X# ?; u2 k
二、实现
; c& Z8 z& `3 G7 s% w& J2 p1.程序语言:
0 D4 W* ?) ~" K" M/ x其实这个东西哪种语言都能搞定,也都不麻烦,我对php比较熟,就选了php。( i/ ~5 y/ `$ Q& K4 N) G
2.一些准备工作:
; t! B9 m7 E7 P: d% U0 E$ M(1)修改apache的rewrite规则,因为我们的程序只有一个文件,我们必须把所有接收到的请求都重定向到这个文件,这里我假设重定向到index.php,在apache的<VirtualHost>中加入这几句,如果是虚拟主机的话就修改.htaccess吧,不过我没试过,所以不知道怎么写re它的write规则5 G) H8 z0 T# z6 E+ k
RewriteEngine on
( o8 S% n8 j/ r- e& r RewriteCond %{DOCUMENT_ROOT}%{SCRIPT_FILENAME} -s [OR]- I/ r9 G9 x' q: {
RewriteCond %{DOCUMENT_ROOT}%{SCRIPT_FILENAME} -l [OR]
6 W* V; q0 N8 _7 C9 D } RewriteCond %{DOCUMENT_ROOT}%{SCRIPT_FILENAME} -d
( ?, N7 x. _4 j Z# P: J7 _& M' h$ H RewriteRule ^.*$ - [NC,L]; z" f$ F; t6 T, D' y; }, W6 }
RewriteRule ^.*$ /index.php [NC,L]
: r1 g7 L& K% _
2 ^! N# Q: e- i( R" {(2)安装php的http模块1 x) z$ V, _9 E: d$ }
php发http请求的函数库找了好几个,发现http模块是用起来最简单的,不过需要你会linux操作哦,安装方法在这里http://php.net/manual/en/http.install.php
7 }! P, H/ B" v) Z0 eps:如果安装不上或没有vps,请把下面程序的http模块的函数换成phpcurl等http lib8 v$ b9 z( V5 D- w
+ \' G- B, `1 k
3.index.php的代码:
) ]/ }) q2 k/ u' {& e. o0 ?; d) K1 p
- ~& D$ [7 w5 V! v$host = $_SERVER['HTTP_HOST'];% ^3 u8 c; N3 J& F6 j8 J
//这里把假站的域名替换成原始网站的,用于生成原始url5 Q% L9 I, N \9 p2 ~- F; s( g8 `
$host = str_ireplace('fake.com', "true.com", $host);: w, A- o( |0 F) M
$toUrl = sprintf("http://%s%s", $host,$_SERVER['REQUEST_URI']);
$ Y$ u* \; k7 X; }( J- L0 ?4 N- h& k4 K0 y3 }+ j2 W r& J$ J
$script_name = $_SERVER['SCRIPT_NAME'];4 _0 G+ [# Y- S% ^ m
$arr = explode(".", $script_name);
2 O, J9 t8 T: v" y' c' [1 E$endName = $arr[count($arr) - 1];
, N4 f$ C$ i7 {" m/ E0 F1 V( V/ ^. z( R
/ ]2 A4 K8 s$ I& L2 R//这些后缀结尾的url直接返回302* ?( {0 n: D0 D" J
$STATIC_END_NAME = array('css','xml','rss','gif','jpg','jpeg','js','axd','atom',9 m4 B% a: i- U
'mml','txt','jad','htc',
9 c& X7 M0 {1 V# j; ?; U$ d 'png','tif','tiff','wbmp','ico','jng','bmp','svg',9 k- T% X% p3 y5 L5 \7 H- x
'jar','war','ear','hqx','doc','pdf','ps','eps','ai',
' M: p V6 ~. O* R2 a1 C 'rtf', 'xls', 'ppt', 'wmlc', 'xhtml', 'cco', 'jardiff',8 I! E- y, p+ M0 ?) C) s" ?
'jnlp', 'run', 'pl', 'pm', 'prc', 'pdb', 'rar', 'rpm',
) J* J% }* l& |: O/ R" B$ _; b 'sea', 'swf', 'sit', 'tcl', 'tk', 'der', 'der', 'crt',
) \" D6 s# Z; v1 n, @ 'xpi', 'zip', 'bin', 'exe', 'dll' ,'deb', 'dmg', 'eot',
9 s$ J% [) K6 o+ n3 T# e* I6 C @ 'iso', 'img', 'msi', 'msp', 'msm' ,'mid', 'midi', 'kar',
& T. Z; z5 n. S3 H8 X 'mp3', 'ra', '3gpp', '3gp', 'mpeg', 'mpg', 'mov', 'flv',
( t# ^! T% A1 c- |! V6 s: T 'mng', 'asx', 'asf', 'wmv', 'avi');
8 Y) y: V9 U; _, T0 {; ]2 V1 t* P( [
if(in_array($endName ,$STATIC_END_NAME))9 g5 h2 U1 ]4 |8 p/ j
{
+ m3 H/ r% @) w3 [ y7 p $headerStr = sprintf("Location: %s", $toUrl);
! @1 @* b! z! x# x4 Q8 {8 V K header( $headerStr, true, 302);
! h* n. J7 _( x$ g% R( x exit;
8 t& n$ W4 h: K: ?2 E+ ?7 J' W3 L}1 R" h& |4 K7 W+ e x9 c
6 {5 _ d* C/ z& y0 q: [
//一个简单的cache
( X" J1 [5 _: yfunction GetFromCache( $url)* z* t0 x6 @3 L" y
{
$ z8 p! `4 H7 G8 A0 T $current_dir = dirname(__FILE__);
- o0 f6 \( c( }5 T $cache_dir = $current_dir . "/cache/";0 C7 D' F6 Y3 y7 ^- n) ]
if( !is_dir( $cache_dir))
* D/ d. T( \4 [" b {- |6 W8 V, l2 y/ _8 h) t6 A
1 k* ^0 ~4 F% r$ g( c mkdir($cache_dir);% y4 A) Y" R- ? u' @
}$ Q. C; ?$ F8 X' m r0 K' S" E* L
3 f- u1 \& r, l' H4 `; Y3 T $cache_file = $cache_dir . md5($url);! P+ {+ X0 q7 ?; k! j- `
if(file_exists( $cache_file))' M6 {: N" d7 O9 _" W, D5 X$ @
{% {* N" @; T5 l5 j; H$ y& s$ _
$html = file_get_contents( $cache_file);
: H$ O) d$ n7 m$ h @! x6 T if($html == false)& w, M* l6 p5 \
{& U y8 B' |# i6 |' O% ~3 l
$html = "";
" ~' o# G- d5 i9 a }
; z1 M. G- b! @( C' A7 I) E& ` }else
0 q9 _& H2 ^7 ^% z {8 T+ g( O# `4 h. b
//访问原始网站( I4 U/ N# z& o
$data = http_get($url ,array('redirect' => 5, 'timeout' => 10), $http_info );
4 F% Y# Y d# W. ?. s4 R) x% r, b+ _ $message = http_parse_message($data);; F5 \; w; W' E- k$ N2 P9 S; }
+ ^% Y* \' P5 r9 J: }# O1 X $html = trim($message->body);
! k+ ]' Z2 D+ U
6 |* w* @" z; \5 y2 O q file_put_contents( $cache_file, $html);
$ v |; o$ s. S5 j. F }
, u( p$ {! v7 @5 g6 Y" ~1 H& K. N
return $html;7 c6 Y, y. W! L9 k* A5 @
}
7 l1 F/ B; ~$ a% e, Y+ v9 o7 X/ _) b9 N
$html = GetFromCache( $toUrl );
" o+ x( M3 L x* p9 X# b. ]" b: L) D
0 U6 D+ `8 Q. d {" T! A* G$html = str_replace("circleid.com", "circleid.us", $html);% A9 a( d, H8 J' R* o
( L1 W O, u( C# V$html = preg_replace('/<meta name=.*>/', "", $html);! h6 M7 X* ^; p l! w5 I
2 G( r. U& B7 ~5 X& {- s" @* ]
) ]2 Y, ^1 f9 f2 S* y3 A1 t. H
//注释的这两句是用phpquery操作
4 R/ |% Q( U) K5 i) ]( `) X4 ]//$body = htmlqp($body)->find('#header')->remove()->html();' h% h0 X1 A7 s
//$html = htmlqp($html)->find('#header')->remove()->document->saveHTML();/ N9 |6 k7 U3 J+ H8 C+ o
4 J" M0 b- x) p8 K$ D$script = <<<EOD) b# f, |6 n6 z4 a% |! E
<script>9 m* O: G# t; R
$(document).ready(function() {
9 G X* {4 d, N* A% [' h $("#footer").remove();( C0 {' i! O4 L
( t% s8 k. ~' l8 `/ p `+ r! ]});: B' B0 B0 e- @/ [3 A8 t A4 Z9 E
7 d" A9 \- y$ V5 Q9 N' X( h1 P
</script>
8 p" L5 r0 P( @7 o: ~: E
. {% j4 J$ G' M kEOD;
7 E" ^2 e$ Z* ~0 K0 Y% c, B6 o
. ?1 |2 X# A! g! r+ o5 ^+ ~echo($html . $script);$ o4 ~4 D8 _- G; }) m- n
4 p$ q: \. C. {! [' Y' p2 s9 e& ]3 P. ^( U) R3 r
三、最后7 ]. L$ w. ]& a$ r" u
1.总之,这个程序还很简陋,没有处理post和cookie参数,也没有配置管理模块,距离大洲的程序差距有一个大洲那么大,仅适合稍微懂点程序又有点好奇心的新手玩玩. P8 C* e( f Z6 ^; s v+ V
2.最后当然是希望大家不令赐分啦,您的论坛币是我继续分享的动力,哈哈5 h1 I G/ R: u
7 F' n% S( ~- P2 |5 T& b |