Allow access to Privoxy's CGI pages, don't call trusted
[privoxy.git] / default.filter
1 # ********************************************************************
2
3 #  File        :  $Source: /cvsroot/ijbswa/current/default.filter,v $
4
5 #  $Id: default.filter,v 1.35 2006/12/21 12:28:12 fabiankeil Exp $
6 #
7 #  Purpose     :  Rules to process the content of web pages
8
9 #  Copyright   :  Written by and Copyright (C) 2001 - 2007 the
10 #                 Privoxy team. http://www.privoxy.org/
11 #
12 # We value your feedback. However, to provide you with the best support,
13 # please note:
14 #  
15 #  * Use the support forum to get help:
16 #    http://sourceforge.net/tracker/?group_id=11118&atid=211118
17 #  * Submit bugs only thru our bug forum:
18 #    http://sourceforge.net/tracker/?group_id=11118&atid=111118 
19 #    Make sure that the bug has not already been submitted. Please try
20 #    to verify that it is a Privoxy bug, and not a browser or site
21 #    bug first. If you are using your own custom configuration, please
22 #    try the stock configs to see if the problem is a configuration
23 #    related bug. And if not using the latest development snapshot,
24 #    please try the latest one. Or even better, CVS sources.
25 #  * Submit feature requests only thru our feature request forum:
26 #    http://sourceforge.net/tracker/?atid=361118&group_id=11118&func=browse
27 #      
28 # For any other issues, feel free to use the mailing lists:
29 # http://sourceforge.net/mail/?group_id=11118
30 #    
31 # Anyone interested in actively participating in development and related
32 # discussions can join the appropriate mailing list here:
33 # http://sourceforge.net/mail/?group_id=11118. Archives are available
34 # here too.
35
36 #################################################################################
37 #
38 # Syntax:
39 #
40 # Filters start with a line "FILTER: name description". They are then referrable
41 # from the actionsfile with +filter{name}
42 #
43 # Inside the filters, write one Perl-Style substitution (job) per line.
44 # Jobs that precede the first FILTER: line are ignored.
45 #
46 # For Details see the pcrs manpage contained in this distribution.
47 # (and the perlre, perlop and pcre manpages)
48 #
49 # Note that you are free to choose the delimter as you see fit.
50 #
51 # Note2: In addidion to the Perl options gimsx, the following nonstandard
52 # options are supported:
53
54 # 'U' turns the default to ungreedy matching.  Add ? to quantifiers to
55 #     switch back to greedy.
56 # 'T' (trivial) prevents parsing for backreferences in the substitute.
57 #     Use if you want to include text like '$&' in your substitute without
58 #     quoting.
59
60 #################################################################################
61
62
63 #################################################################################
64 #
65 # js-annoyances: Get rid of particularly annoying JavaScript abuse
66 #
67 #################################################################################
68 FILTER: js-annoyances Get rid of particularly annoying JavaScript abuse
69
70 # Note: Most of these jobs would be safer if restricted to a
71 # <script> context as in:
72 #
73 # s/(<script.*)nasty-item(?=.*<\/script>)/$1replacement/sigU
74 #
75 # but that would make them match only the first occurance of
76 # nasty-item in each <script>. We need nestable jobs!
77
78 # Get rid of Javascript referrer tracking. 
79 # Test page: http://www.javascript-page.com/referrer.html
80 #
81 s|(?:\w+\.)+referrer|"Not Your Business!"|gisU
82
83 # The status bar is for displaying link targets, not pointless blahblah
84
85 s/(\W\s*)((this|window)\.(default)?status)\s*=\s*((['"]).*?(?<!\\)\6)/$1if(typeof(this.href) != 'undefined') $2 = $5 + ' URL: ' + this.href;else return false/ig
86 s/(?:(?:this|window)\.(?:default)?status)\s*=\s*\w*\s*;//ig
87
88 # Kill OnUnload popups. Yummy.
89 # Test: http://www.zdnet.com/zdsubs/yahoo/tree/yfs.html
90 #
91 s/(<body\s+[^>]*)onunload/$1never/siU
92 s|(<script.*)window\.onunload(?=.*</script>)|$1never|sigU
93
94 # If we allow window.open, we want normal window features: 
95 # Test: http://www.htmlgoodies.com/beyond/notitle.html
96 #
97 s/(open\s*\([^\)]+resizable=)(["']?)(?:no|0)\2/$1$2yes$2/sigU
98 s/(open\s*\([^\)]+location=)(["']?)(?:no|0)\2/$1$2yes$2/sigU 
99 s/(open\s*\([^\)]+status=)(["']?)(?:no|0)\2/$1$2yes$2/sigU 
100 s/(open\s*\([^\)]+scroll(?:ing|bars)=)(["']?)(?:no|0)\2/$1$2auto$2/sigU 
101 s/(open\s*\([^\)]+menubar=)(["']?)(?:no|0)\2/$1$2yes$2/sigU 
102 s/(open\s*\([^\)]+toolbar=)(["']?)(?:no|0)\2/$1$2yes$2/sigU 
103 s/(open\s*\([^\)]+directories=)(["']?)(?:no|0)\2/$1$2yes$2/sigU 
104 s/(open\s*\([^\)]+fullscreen=)(["']?)(?:yes|1)\2/$1$2no$2/sigU
105 s/(open\s*\([^\)]+always(?:raised|lowered)=)(["']?)(?:yes|1)\2/$1$2no$2/sigU
106 s/(open\s*\([^\)]+z-?lock=)(["']?)(?:yes|1)\2/$1$2no$2/sigU
107 s/(open\s*\([^\)]+hotkeys=)(["']?)(?:yes|1)\2/$1$2no$2/sigU
108 s/(open\s*\([^\)]+titlebar=)(["']?)(?:no|0)\2/$1$2yes$2/sigU
109 s/(open\s*\([^\)]+always(?:raised|lowered)=)(["']?)(?:yes|1)\2/$1$2no$2/sigU
110
111
112 #################################################################################
113 #
114 # js-events: Kill all JS event bindings and timers (Radically destructive! Only for extra nasty sites)
115 #
116 #################################################################################
117 FILTER: js-events Kill all JS event bindings and timers (Radically destructive! Only for extra nasty sites)
118
119 s/(on|event\.)((mouse(over|out|down|up|move))|(un)?load|contextmenu|selectstart)/never/ig
120 # Not events, but abused on the same type of sites:
121 s/(alert|confirm)\s*\(/concat(/ig
122 s/settimeout\(/concat(/ig
123
124 #################################################################################
125 #
126 # html-annoyances: Get rid of particularly annoying HTML abuse
127 #
128 #################################################################################
129 FILTER: html-annoyances Get rid of particularly annoying HTML abuse
130
131 # New browser windows (if allowed -- see no-popups filter below) should be
132 # resizeable and have a location and status bar
133 #
134 s/(<a\s+href[^>]+resizable=)(['"]?)(?:no|0)\2/$1$2yes$2/igU 
135 s/(<a\s+href[^>]+location=)(['"]?)(?:no|0)\2/$1$2yes$2/igU 
136 s/(<a\s+href[^>]+status=)(['"]?)(?:no|0)\2/$1$2yes1$2/igU
137 s/(<a\s+href[^>]+scrolling=)(['"]?)(?:no|0)\2/$1$2auto$2/igU
138 s/(<a\s+href[^>]+menubar=)(['"]?)(?:no|0)\2/$1$2yes$2/igU
139
140 # The <BLINK> and <MARQUEE> tags were crimes!
141 #
142 s-</?(blink|marquee).*>--sigU
143
144
145 #################################################################################
146 #
147 # content-cookies: Kill cookies that come in the HTML or JS content
148 #
149 #################################################################################
150 FILTER: content-cookies Kill cookies that come in the HTML or JS content
151
152 # JS cookies, except those used by antiadbuster.com to detect us:
153 #
154 s|(\w+\.)+cookie(?=[ \t\r\n]*=)(?!='aab)|ZappedCookie|ig
155
156 # HTML cookies:
157 #
158 s|<meta\s+http-equiv=['"]?set-cookie.*>|<!-- ZappedCookie -->|igU
159
160
161 #################################################################################
162 #
163 # refresh-tags: Kill automatic refresh tags (for dial-on-demand setups)
164 #
165 #################################################################################
166 FILTER: refresh-tags Kill automatic refresh tags (for dial-on-demand setups)
167
168 # Note: Only deactivates refreshes with more than 9 seconds delay to
169 #       preserve monster-stupid but common redirections via meta tags.
170 #
171 s/<meta\s+http-equiv\s*=\s*(['"]?)refresh\1\s+content\s*=\s*(['"]?)\d{2,}\s*(;\s*url\s*=\s*([^>\2]*))?\2/<link rev="x-refresh" href="$4"/iU
172
173
174 #################################################################################
175 #
176 # unsolicited-popups: Disable unsolicited pop-up windows
177 #
178 #################################################################################
179 FILTER: unsolicited-popups Disable only unsolicited pop-up windows
180
181 s+([^'"]\s*<head.*>)(?=\s*[^'"])+$1<script>function PrivoxyWindowOpen(){return(null);}</script>+isU
182 s+([^\w\s.]\s*)((window|this|parent)\.)?open\s*\(+$1PrivoxyWindowOpen(+ig
183 s+([^'"]\s*</html>)(?!\s*(\\n|'|"))+$1<script>function PrivoxyWindowOpen(a, b, c){return(window.open(a, b, c));}</script>+iU     
184
185
186 ##################################################################################
187 #
188 # all-popups: Kill all popups in JavaScript and HTML
189 #
190 #################################################################################
191 FILTER: all-popups Kill all popups in JavaScript and HTML
192
193 s/((\W\s*)(window|this|parent)\.)open\s*\\?\(/$1concat(/ig  # JavaScript
194 s/\starget\s*=\s*(['"]?)_?(blank|new)\1?/ notarget/ig        # HTML
195
196
197 ##################################################################################
198 #
199 # img-reorder: Reorder attributes in <img> tags to make the banners-by-* filters more effective
200 #
201 #################################################################################
202 FILTER: img-reorder Reorder attributes in <img> tags to make the banners-by-* filters more effective
203
204 # In the first step src is moved to the start, then width is moved to the second
205 # place to guarantee an order of src, width, height.
206 # This makes banners-by-size more effective and allows both banners-by-size
207 # and banners-by-link to preserve the original image URL in the title attribute.
208
209 s|<img\s+?([^>]*) src\s*=\s*(['"])([^>\\\2]+)\2|<img src=$2$3$2 $1|siUg
210 s|<img\s+?([^>]*) src\s*=\s*([^'">\\\s]+)|<img src=$2 $1|sig
211
212 s|<img (src=(?:(['"])[^>\\\\2]*\2\|[^'">\\\s]+?))([^>]*)\s+width\s*=\s*(["']?)(\d+?)\4|<img $1 width=$4$5$4$3|siUg
213
214
215 #################################################################################
216 #
217 # banners-by-size: Kill banners by size
218 #
219 #################################################################################
220 #
221 # Standard banner sizes taken from http://www.iab.net/iab_banner_standards/bannersizes.html
222 #
223 # Note: Use http://config.privoxy.org/send-banner?type=trans for a transparent 1x1 image
224 #       Use http://config.privoxy.org/send-banner?type=pattern for a grey/white pattern image
225 #       Use http://config.privoxy.org/send-banner?type=auto  to auto-select.
226 #
227 # Note2: Use img-reorder before this filter to ensure maximum matching success
228 #
229 #################################################################################
230 FILTER: banners-by-size Kill banners by size
231
232 # 88*31
233 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)88\4)[^>]*?(height=(['"]?)31\6)[^>]*?(?=/?>)@\
234   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
235 # 120*60, 120*90, 120*240, 120*600
236 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)120\4)[^>]*?(height=(['"]?)(?:600?|90|240)\6)[^>]*?(?=/?>)@\
237   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
238 # 125*125
239 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)125\4)[^>]*?(height=(['"]?)125\6)[^>]*?(?=/?>)@\
240   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
241 # 160*600
242 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)160\4)[^>]*?(height=(['"]?)600\6)[^>]*?(?=/?>)@\
243   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
244 # 180*150
245 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)180\4)[^>]*?(height=(['"]?)150\6)[^>]*?(?=/?>)@\
246   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
247 # 234*60, 468*60 (Most Banners!)
248 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)(?:234|468)\4)[^>]*?(height=(['"]?)60\6)[^>]*?(?=/?>)@\
249   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
250 # 240*400
251 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)240\4)[^>]*?(height=(['"]?)400\6)[^>]*?(?=/?>)@\
252   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
253 # 250*250, 300*250
254 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)(?:250|300)\4)[^>]*?(height=(['"]?)250\6)[^>]*?(?=/?>)@\
255   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
256 # 336*280
257 s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)336\4)[^>]*?(height=(['"]?)280\6)[^>]*?(?=/?>)@\
258   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
259
260 # Note: 200*50 was also proposed, but it probably causes too much collateral damage:
261 #
262 #s@<img\s+(?:src\s*=\s*(['"]?)([^>\\\1\s]+)\1)?[^>]*?(width=(['"]?)200\4)[^>]*?(height=(['"]?)50\6)[^>]*?(?=/?>)@\
263 #   <img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed-$2-by-size" $3 $5@sig
264
265
266 #################################################################################
267 #
268 # banners-by-link: Kill banners by their links to known clicktrackers (Experimental)
269 #
270 #################################################################################
271 FILTER: banners-by-link Kill banners by their links to known clicktrackers
272
273 # Common case with width and height attributes:
274 #
275 s@<a\s+href\s*=\s*(['"]?)([^>\1\s]*?(?:\
276   adclick                             # See www.dn.se \
277 | advert                              # see dict.leo.org \
278 | atwola\.com/(?:link|redir)          # see www.cnn.com \
279 | /jump/                              # redirs for doublecklick.net ads \
280 | tracker | counter                   # common \
281 | adlog\.pl                           # see sf.net \
282 )[^>\1\s]*)\1[^>]*>\s*<img\s+(?:src\s*=\s*(['"]?)([^>\\\3\s]+)\3)?[^>]*((?:width|height)\s*=\s*(['"]?)\d+?\6)[^>]*((?:width|height)\s*=\s*(['"]?)\d+?\8)[^>]*?(?=/?>)\
283 @<img $5 $7 src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed $4 by link to $2"@sigx
284
285 # Rare case w/o explicit dimensions:
286 #
287 s@<a\s+href\s*=\s*(['"]?)([^>\1\s]*?(?:ad(?:click|vert)|atwola\.com/(?:link|redir)|doubleclick\.net/jump/|tracker|counter|adlog\.pl)[^>\1\s]*)\1[^>]*>\s*<img\s+(?:src\s*=\s*(['"]?)([^>\\\3\s]+)\3)?[^>]*?(?=/?>)@<img src="http://config.privoxy.org/send-banner?type=auto" border="0" title="Killed $4 by link to $2"@sig
288
289
290 ################################################################################
291 #
292 # webbugs: Squish WebBugs (1x1 invisible GIFs used for user tracking)
293 #
294 #################################################################################
295 FILTER: webbugs Squish WebBugs (1x1 invisible GIFs used for user tracking)
296
297 s@<img[^>]*\s(?:width|height)\s*=\s*['"]?[01](?=\D)[^>]*\s(?:width|height)\s*=\s*['"]?[01](?=\D)[^>]*?>@@siUg
298
299
300 #################################################################################
301 #
302 # tiny-textforms: Extend those tiny textareas up to 40x80 and kill the hard wrap
303 #
304 #################################################################################
305 FILTER: tiny-textforms Extend those tiny textareas up to 40x80 and kill the hard wrap
306
307 s/(<textarea[^>]*?)(?:\s*(?:rows|cols)=(['"]?)\d+\2)+/$1 rows=$2\40$2 cols=$2\80$2/ig 
308 s/(<textarea[^>]*?)wrap=(['"]?)hard\2/$1/ig
309
310
311 #################################################################################
312 #
313 # jumping-windows: Prevent windows from resizing and moving themselves
314 #
315 #################################################################################
316 FILTER: jumping-windows Prevent windows from resizing and moving themselves
317
318 s/(?<=[\W])(?:window|this|self)\.(?:move|resize)(?:to|by)\(/''.concat(/ig
319
320 #################################################################################
321 #
322 # frameset-borders: Give frames a border, make them resizable and scrollable
323 #
324 #################################################################################
325 FILTER: frameset-borders Give frames a border and make them resizable
326
327 s/(<frameset\s+[^>]*)framespacing=(['"]?)(no|0)\2/$1/igU
328 s/(<frameset\s+[^>]*)frameborder=(['"]?)(no|0)\2/$1/igU
329 s/(<frameset\s+[^>]*)border=(['"]?)(no|0)\2/$1/igU
330 s/(<frame\s+[^>]*)noresize/$1/igU
331 s/(<frame\s+[^>]*)frameborder=(['"]?)(no|0)\2/$1/igU 
332 s/(<frame\s+[^>]*)scrolling=(['"]?)(no|0)\2/$1/igU
333
334
335
336 #################################################################################
337 #
338 # demoronizer: Correct Microsoft's abuse of standardized character sets, which 
339 #              leave the browser to (mis)-interpret unknown characters, with 
340 #              sometimes bizarre results on non-MS platforms.
341 #
342 # credit: ripped from the demoroniser.pl script by: 
343 #         John Walker -- January 1998, http://www.fourmilab.ch/webtools/demoroniser
344 #
345 #################################################################################
346 FILTER: demoronizer Fix MS's non-standard use of standard charsets
347
348 s/(&\#[0-2]\d\d)\s/$1; /g
349 # per Robert Lynch: http://slate.msn.com//?id=2067547, just a guess.
350 # Must come before x94 below.
351 s/\xE2\x80\x94/ -- /g
352 s/\x82/,/g
353 #s-\x83-<em>f</em>-g
354 s/\x84/,,/g
355 s/\x85/.../g
356 #s/\x88/^/g
357 #s-\x89- °/°°-g
358 s/\x8B/</g
359 s/\x8C/Oe/g
360 s/\x91/`/g
361 s/\x92/'/g
362 s/(\x93|\x94)/"/g
363 # Bullet type character.
364 s/\x95/&middot;/g
365 s/\x96/-/g
366 s/\x97/--/g
367 #s-\x98-<sup>~</sup>-g
368 #s-\x99-<sup>TM</sup>-g
369 # per Robert Lynch.
370 s/\x9B/>/g                  # 155
371
372
373 #################################################################################
374 #
375 # shockwave-flash: Kill embedded Shockwave Flash objects
376 #                  Note: Better just block "/.*\.swf$"!
377 #
378 #################################################################################
379 FILTER: shockwave-flash Kill embedded Shockwave Flash objects
380
381 s|<object [^>]*macromedia.*</object>|<!-- Squished Shockwave Object -->|sigU
382 s|<embed [^>]*(application/x-shockwave-flash\|\.swf).*>(.*</embed>)?|<!-- Squished Shockwave Flash Embed -->|sigU
383
384
385 #################################################################################
386 #
387 # quicktime-kioskmode: Make Quicktime movies saveable
388 #
389 #################################################################################
390 FILTER: quicktime-kioskmode Make Quicktime movies saveable
391
392 s/(<embed\s+[^>]*)kioskmode\s*=\s*(["']?)true\2/$1/ig 
393
394
395 #################################################################################
396 #
397 # fun: Text replacements for subversive browsing fun!
398 #
399 #################################################################################
400 FILTER: fun Text replacements for subversive browsing fun!
401
402 # SCNR
403 #
404 s/microsoft(?!.[^\s])/MicroSuck/ig
405
406 # Buzzword Bingo (example for extended regex syntax)
407 #
408 s* (?:industry|world)[ -]leading \
409 |  cutting[ -]edge \
410 |  customer[ -]focused \
411 |  market[ -]driven \
412 |  award[ -]winning # Comments are OK, too! \
413 |  high[ -]performance \
414 |  solutions[ -]based \
415 |  unmatched \
416 |  unparalleled \
417 |  unrivalled \
418 *$0<sup><font color="red"><b>Bingo!</b></font></sup> \
419 *igx
420
421 # For Germans only
422 #
423 s/(M|m)edien(?![^<]*>)/$1&auml;dchen/Ug
424
425 #################################################################################
426 #
427 # crude-parental: Crude parental filtering?  (Use along with a suitable blocklist).
428 #                 Shows how to deny access to whole page based on a keyword.
429 #
430 #################################################################################
431 FILTER: crude-parental Crude parental filtering (demo only)
432
433 # (Note: Middlesex, Sussex and Essex are counties in the UK, not rude words)
434 # (Note #2: Is 'sex' a rude word?!)
435
436 s%^.*(?<!middle)(?<!sus)(?<!es)sex.*$%<html><head><title>Blocked</title></head><body><h3>Blocked due to possible adult content. Please see <a href="http://dmoz.org/Kids_and_Teens/">this site</a>.</h3></body></html>%is
437 s+^.*warez.*$+<html><head><title>No Warez</title></head><body><h3>You're not searching for illegal stuff, are you?</h3></body></html>+is
438
439
440 #################################################################################
441 #
442 # IE-Exploits: Disable some known Internet Explorer bug exploits
443 #
444 #################################################################################
445 FILTER: ie-exploits Disable some known Internet Explorer bug exploits
446
447 # Note: This is basically a demo and waits for someone more interested in IE
448 # security (sic!) to take over.
449
450 # Cross-site-scripting:
451 #
452 s%f\("javascript:location.replace\('mk:@MSITStore:C:'\)"\);%alert\("This page looks like it tries to use a vulnerability described here:\n http://online.securityfocus.com/archive/1/298748/2002-11-02/2002-11-08/2"\);%siU
453
454 # Address bar spoofing (http://www.secunia.com/advisories/10395/):
455 #
456 s/(<a[^>]*href[^>]*)(?:\x01|\x02|\x03|%0[012])@/$1MALICIOUS-LINK@/ig
457
458 # Nimda:
459 #
460 s%<script language="JavaScript">(window\.open|1;''\.concat)\("readme\.eml", null, "resizable=no,top=6000,left=6000"\)</script>%<br><font size="7"> WARNING: This Server is infected with <a href="http://www.cert.org/advisories/CA-2001-26.html">Nimda</a>!</font>%g
461
462
463 #################################################################################
464 #
465 #
466 # site-specifics: Cure for site-specific problems. Don't apply generally!
467 #
468 #   Note: The fixes contained here are so specific to the problems of the
469 #         particular web sites they are designed for that they would be a
470 #         waste of CPU cycles (or even destructive!) on 99.9% of the web
471 #         sites where they don't apply.
472 #
473 #################################################################################
474 FILTER: site-specifics Cure for site-specific problems. Don't apply generally!
475
476 # www.spiegel.de excludes X11 users from viewing Flash5 objects - shame.
477 # Apply to: www.spiegel.de/static/js/flash-plugin.js 
478 #
479 s/indexOf\("x11"\)/indexOf("x13")/
480
481 # www.quelle-bausparkasse.de uses a very stupid redirect mechanism that
482 # relies on a webbug being present. Can we tolerate that? No!
483 # Apply to: www.quelle-bausparkasse.de/$
484 #
485 s/mylogfunc()//g
486
487 # groups.yahoo.com has splash pages that one needs to click through in
488 # order to access the actual messages. Let the browser do that. Thanks
489 # to Paul Jobson for this one:
490 #
491 s|<a href="(.+?)">(?:Continue to message\|Weiter zu Nachricht)</a>|<meta http-equiv="refresh" content="0; URL=$1">|ig
492
493 # monster.com has two very similar gimmicks:
494 #
495 s|<input type="hidden" name="REDIRECT" value="(.+?)">|<meta http-equiv="refresh" content="0; URL=$1">|i
496  
497 s|<IMG SRC="http://media.monster.com/mm/usen/my/no_thanks_211x40.gif".+?>|<meta http-equiv="refresh" content="0; URL=http://my.monster.com/resume.asp">|i 
498
499 # nytimes.com triggers popups through the onload handler of dummy images
500 # to fool popup-blockers.  
501 #
502 s|(<img [^>]*)onload|$1never|sig
503
504 # Pre-check all the "Discard" buttons in GNU Mailman's web interface.
505 # (This saves a lot of mouse aiming practice when flushing spamtraps)
506 #
507 s|(<INPUT name="\d{2,4}" type="RADIO" value="0") CHECKED |$1|g
508 s|<INPUT name="\d{2,4}" type="RADIO" value="3" |$0 checked|g
509
510 #################################################################################
511 #
512 # no-ping: Removes non-standard ping attributes in <a> and <area> tags.
513 #          
514 #################################################################################
515 FILTER: no-ping Removes non-standard ping attributes in <a> and <area> tags.
516 s@(<a(?:rea)?[^>]*?)\sping=(['"]?)([^"'>]+)\2([>\s]?)@\
517 <strong style="color:white; background-color:red;" title="Privoxy removed ping target '$3'">PING!</strong>\n$1$4@ig
518
519 #################################################################################
520 #
521 # google: CSS-based block for Google text ads. Also removes
522 #         a width limitation and the toolbar advertisement.
523 #
524 #################################################################################
525 FILTER: google CSS-based block for Google text ads. Also removes a width limitation and the toolbar advertisement.
526 s@</head>@<style type="text/css">\n\
527  /* Style sheet inserted by Privoxy's google filter. */\n\
528  \#fbc, \#fbl, \#ra, .rhh {visibility: hidden !important;}\n\
529  \#tpa1,\#tpa2,\#tpa3,\#tpa4,\#tpa5,\#tpa5, \#spl, .ch, \#ads,\
530  \#toolbar, \#google_ads_frame, \#mbEnd {display: none !important;}\n\
531  .main_body, .j {width: 100%}\n</style>\n$0@
532 s@<div style=\"padding-top:11px;min-width:500px\">@<div id="main_body">@
533 s@(<table cellspacing=0 cellpadding=0 width=25% align=right bgcolor=\#ffffff border=0\
534 |</font></td></tr></tbody></table><table align=\"right\" bgcolor=\"\#ffffff\"\
535 |<table cellspacing=0 cellpadding=0 align=right bgcolor=\#ffffff border=0\
536 |<table style=\"clear:both\" align=right width=25% cellspacing=\"0\" cellpadding=\"0\"\
537  border=\"0\" bgcolor=\"\#ffffff\")@$0 id="ads"@
538 s@(<br clear=all><table)( border=0 cellpadding=9><tr><td)@$1 id="toolbar"$2@
539
540 #################################################################################
541 #
542 # yahoo: CSS-based block for Yahoo text ads. Also removes a width limitation.
543 #
544 #################################################################################
545 FILTER: yahoo CSS-based block for Yahoo text ads. Also removes a width limitation.
546 s@</head>@\n<style type="text/css">\n\
547  /* Style sheet inserted by Privoxy's yahoo filter. */\n\
548  \#symadbn, \#ymadbn, .yschbox, \#yschsec, .yschhd, \#yschanswr, .yschftad,\
549  .yschspn, .yschspns, \#ygrp-sponsored-links {display: none !important;}\n\
550  \#yschpri, \#yschweb {width: 100% !important; max-width: 100% !important;}\n\
551  \#yschqcon, \#yschtg {width: auto !important; /* No useless horizontal scrollbar please */}\n\
552 </style>\n$0@
553
554 #################################################################################
555 #
556 # msn: CSS-based block for MSN text ads. Also removes tracking URLs
557 #      and a width limitation.
558 #
559 #################################################################################
560 FILTER: msn CSS-based block for MSN text ads. Also removes tracking URLs and a width limitation.
561 s@</head>@<style type="text/css">\n\
562  /* Style sheet inserted by Privoxy's msn filter. */\n\
563  .msn_ads {display: none !important;}\n\
564  \#results, .flank, .results_area_flank, .results_area_stroke, .SearchSection .not\
565  {width: 99% /*!important*/; min-width: 99% !important;\
566  max-width: 100% !important; /* width:100% sometimes causes horizontal scrollbars */}\n\
567  /* Make continue links harder to miss */\n\
568  \#pagination_bottom a {padding: .3em .5em .3em .5em; border: 1px solid \#e6e6e6;}\n\
569  \#pagination_bottom li, \#pagination_bottom li .selected, li .nextPage \
570  {margin: 0 !important; cursor: auto; border: none; padding:.1em;}\n\
571  \#pagination_bottom li .prevPage {padding-right: 1.5em !important;}\n\
572  \#pagination_bottom li .selected {border: none;}\n\
573  .selected a {background-color: \#d2eaf6; border: 1px solid \#b7d8ee;}\n\
574  /* Remove "suggestions". They are next to worthless but partly overlap with the search results */\n\
575  .suggestion, \#nys_right {clear: both; display:none;}\n\
576  </style>\n$0@
577 s@(<div[^>]*) id=(["']?)ads_[^\2]*\2@$1 class="msn_ads"@Uig
578 s@(<a[^>]*href=\")http://g.msn.com/.*\?(http://.*)(&amp;&amp;DI=.*)(\")@$1$2$4@Ug
579 s@(<a[^>]*)gping=\".*\"@$1 title="URL cleaned up by Privoxy's msn filter"@Ug
580
581 #################################################################################
582 #
583 # blogspot: Cleans up some Blogspot blogs. Read the fine print before using this.
584 #
585 #           This filter also intentionally removes some navigation stuff and
586 #           sets the page width to 100%. As a result, some rounded "corners" would
587 #           appear to early or not at all and as fixing this would require a browser
588 #           that understands background-size (CSS3), they are removed instead.
589 #
590 #################################################################################
591 FILTER: blogspot Cleans up some Blogspot blogs. Read the fine print before using this.
592 s@</head>@<style type="text/css">\n\
593  /* Style sheet inserted by Privoxy's blogspot filter. */\n\
594  \#powered-by {display: none !important;}\n\
595  \#wrap4, \#wrapper {margin-top: 0px }\n\
596  \#blogheader, \#header {margin-top: 0.5em !important}\n\
597  \#content {width: 98% }\n\
598  \#main {width: 70% }\n\
599  \#sidebar {width: 29% }\n\
600  .post-body {overflow: auto;}\n\
601  .blogComments {width: 100%; overflow: auto;}\n</style>\n$0@
602 s@<body.*(?:<div id="space-for-ie"></div>|(<div id="(?:content|wrap4|wrapper)))@<body>\
603  <!-- Privoxy's blogspot filter ditched some garbage here -->$1@Us
604 s@(<div style=\"[^\"]*width:)30em@$1 100%@
605 s@background:url\(\"http://www.blogblog.com/rounders[^\"]*\"\).*;@/*$0*/@Ug
606 s@(background:\#[a-f\d]{3})( url\(\"http://www.blogblog.com/rounders[^\"]*\"\).*;)@$1 ;/*$2*/@Ug
607
608 #################################################################################
609 #
610 # x-httpd-php-to-html: Header filter to change the Content-Type from
611 #                      x-httpd-php to html. "Content-Type: x-httpd-php"
612 #                      is set by clueless PHP users and causes many
613 #                      browsers do open a download menu instead of
614 #                      rendering the page.
615 #
616 #################################################################################
617 FILTER: x-httpd-php-to-html Header filter to change the Content-Type from x-httpd-php to html.
618 s@^(Content-Type:) application/x-httpd-php@$1 text/html@
619
620 #################################################################################
621 #
622 # html-to-xml: Header filter to change the Content-Type from html to xml.
623 #
624 #################################################################################
625 FILTER: html-to-xml Header filter to change the Content-Type from html to xml.
626 s@^(Content-Type:) text/html(;.*)?$@$1 application/xhtml+xml$2@
627
628 #################################################################################
629 #
630 # xml-to-html: Header filter to change the Content-Type from xml to html.
631 #
632 #################################################################################
633 FILTER: xml-to-html Header filter to change the Content-Type from xml to html.
634 s@^(Content-Type:) (?:application|text)/(?:xhtml\+)?xml(;.*)?$@$1 text/html$2@
635
636 #################################################################################
637 #
638 # hide-tor-exit-notation: Header filter to remove the Tor exit node notation
639 #                         in Host and Referer headers.
640 #
641 #   Note: If Privoxy and Tor are chained and Privoxy is configured to
642 #         use socks4a, one can use http://www.example.org.foobar.exit/
643 #         to access the host www.example.org through Tor exit node foobar.
644 #
645 #         As the HTTP client isn't aware of this notation, it treats the
646 #         whole string "www.example.org.foobar.exit" as host and uses it
647 #         for the "Host" and "Referer" headers. From the server's point of
648 #         view the resulting headers are invalid and can cause problems.
649 #
650 #         An invalid "Referer" header can trigger "hot-linking" protections,
651 #         an invalid "Host" header will make it impossible for the server to
652 #         find the right vhost (several domains hosted on the same IP address).
653 #
654 #         This filter removes the "foo.exit" part in those headers
655 #         to prevent the mentioned problems. Note that it only modifies
656 #         the HTTP headers, it doesn't make it impossible for the server
657 #         to detect your Tor exit node based on the IP address the request is
658 #         coming from.
659 #
660 #################################################################################
661 FILTER: hide-tor-exit-notation Header filter to remove the Tor exit node notation in Host and Referer headers.
662 s@^((?:Referer|Host):\s*(?:https?://)?[^/]*)\.[^\./]*?\.exit@$1@i
663
664
665 ############################################################################## 
666 #
667 #  Revisions   :
668 #     $Log: default.filter,v $
669 #     Revision 1.35  2006/12/21 12:28:12  fabiankeil
670 #     Escaping special characters in filter descriptions is no
671 #     longer necessary, it's done by Privoxy now.
672 #
673 #     Revision 1.34  2006/12/12 17:32:23  fabiankeil
674 #     Added id mbEnd to google filter, it's now and then
675 #     used for the sponsored links.
676 #
677 #     Have js-annoyances try to prevent status bar
678 #     modifications where the status bar text is
679 #     inside another variable. Fixes 1605710.
680 #
681 #     Revision 1.33  2006/11/16 17:10:43  fabiankeil
682 #     Removed webbugs debugging comment again.
683 #     The apostrophe could break JavaScript and
684 #     the comment itself could mess up existing
685 #     comments.
686 #
687 #     Revision 1.32  2006/11/10 18:04:04  fabiankeil
688 #     Have no-ping print the ping warning in red.
689 #
690 #     Modified yahoo to keep in sync with recent
691 #     CSS changes and to suppress a useless horizontal
692 #     scrollbar.
693 #
694 #     msn now makes sure that the continue-link boxes
695 #     act as links (the original CSS just changes the cursor).
696 #
697 #     Changed fun filter regex to leave microsoft links alone.
698 #     Fixes BR 1019996.
699 #
700 #     Revision 1.31  2006/10/21 13:12:28  fabiankeil
701 #     Added no-ping and hide-tor-exit-notation.
702 #
703 #     Adjusted jumping-windows to break less.
704 #     Fixes BR 1146134.
705 #
706 #     Revision 1.30  2006/10/18 12:36:50  fabiankeil
707 #     google filter now cleans Google groups as well.
708 #
709 #     Revision 1.29  2006/10/11 14:03:17  fabiankeil
710 #     Changed img-reorder regex to only move width
711 #     attributes if they are following at least one
712 #     whitespace. Fixes BR 1328455.
713 #
714 #     Revision 1.28  2006/10/11 13:31:13  fabiankeil
715 #     Added Anduin Withers' js-annoyances fix
716 #     for not messing up escaped quotes. Fixes BR 999765.
717 #
718 #     Improved blogspot filter to make it less likely that
719 #     the blogspot banner at the top of the page is missed.
720 #
721 #     Revision 1.27  2006/10/08 17:00:51  fabiankeil
722 #     Modified webbugs filter to create a comment around the offending
723 #     image instead of removing it entirely.
724 #
725 #     Adjusted regex to only match if there's at least one whitespace
726 #     before the width and height attributes. Makes it more likely that
727 #     they are indeed attributes, and not part of the value of another attribute.
728 #     Solves BR 1035587.
729 #
730 #     Thanks to Martin Thomas for diagnosing the cause of the problem.
731 #
732 #     Revision 1.26  2006/10/06 18:06:16  fabiankeil
733 #     Added header filter x-httpd-php-to-html
734 #     and reverted another img-reorder whitespace
735 #     problem.
736 #
737 #     Revision 1.25  2006/10/06 15:26:09  fabiankeil
738 #     Bumped copyright year.
739 #
740 #     Reverted parts of the last img-reorder change
741 #     which were intended to remove superfluous whitespace
742 #     but had the side effect to mess up some tags.
743 #
744 #     Modified banners-by-size and banners-by-link to
745 #     use border value "0" instead of "\0". Fixes BR 1100065.
746 #
747 #     Revision 1.24  2006/10/06 11:25:31  fabiankeil
748 #     Taught img-reorder not to break img tags
749 #     with empty src attributes. Fixes BR 1089474.
750 #     Thanks to Raphael Moll for reporting.
751 #
752 #     Revision 1.23  2006/10/05 14:46:28  fabiankeil
753 #     Replaced "<" in img-reorder's description with "&lt;".
754 #
755 #     Modified msn filter to tag ads with classes instead
756 #     of ids. There may be more than one ad per page,
757 #     but ids are required to be unique.
758 #
759 #     Revision 1.22  2006/10/04 19:17:14  fabiankeil
760 #     Incorportated Frédéric Crozat's ie-exploits
761 #     modification to make it less trigger-happy.
762 #
763 #     Modified blogspot filter to make .post-body
764 #     scrollable if necessary.
765 #
766 #     Revision 1.21  2006/10/02 16:21:14  fabiankeil
767 #     Adjusted yahoo filter to hide .yschspns as well.
768 #     Added header filters: html-to-xml and xml-to-html.
769 #
770 #     Revision 1.20  2006/10/01 21:00:22  fabiankeil
771 #     New site-specific filters: google, yahoo, msn and blogspot.
772 #
773 #     Revision 1.19  2006/07/18 14:48:45  david__schmidt
774 #     Reorganizing the repository: swapping out what was HEAD (the old 3.1 branch)
775 #     with what was really the latest development (the v_3_0_branch branch)
776 #
777 #     Revision 1.11.2.23  2004/02/17 13:34:01  oes
778 #     - Beefed up the protection of the unsolicited-popups
779 #       filter against matching in JavaScript string constants.
780 #     - Extended the fun filter with a German joke
781 #     - Extended the site-specifics filter with a convenience
782 #       reeplacement for managing mailing lists at SourceForge
783 #
784 #     Revision 1.11.2.22  2004/01/30 15:29:29  oes
785 #     Updated the copyright note
786 #
787 #     Revision 1.11.2.21  2004/01/20 15:15:01  oes
788 #     Detail enhancement in all-popups
789 #
790 #     Revision 1.11.2.20  2004/01/06 16:46:14  oes
791 #     Fixed a JS syntax problem in jumping-windows
792 #
793 #     Revision 1.11.2.19  2003/12/17 17:09:25  oes
794 #     Added remedy against IE address bar spoofing
795 #
796 #     Revision 1.11.2.18  2003/12/02 11:25:27  oes
797 #     Fixed a line trashed in previous commit
798 #
799 #     Revision 1.11.2.17  2003/12/01 21:58:46  oes
800 #     Assorted tuning:
801 #
802 #      - unsolicited-popups no longer matches at start or end of quoted
803 #        strings, and is now activated earlier and deactivated later in
804 #        the page.
805 #      - replacement images in banners-by-* now without border
806 #      - more effective shockwave flash flattening
807 #      - Custom annoyance filtering for Yahoo Groups, Monster.com, NY Times.
808 #
809 #     Revision 1.11.2.16  2003/05/08 09:44:56  oes
810 #     Allow extra parameters in blink,marquee tags. Fixes bug #734012
811 #
812 #     Revision 1.11.2.15  2003/03/30 13:57:08  oes
813 #     Making unsolicited-popups safe for use on <html> tags enclosed in JS strings
814 #
815 #     Revision 1.11.2.14  2003/03/19 13:17:50  oes
816 #     - Added filter "site-specifics" to address site specific problems
817 #     - Fixed a small problem in the img-reorder filter
818 #
819 #     Revision 1.11.2.13  2003/03/18 19:28:59  oes
820 #     Fixed a minor problem in the img-reorder filter
821 #
822 #     Revision 1.11.2.12  2003/03/15 14:06:58  oes
823 #      - Assorted refinements, optimizations and fixes in the js-annoyances,
824 #        img-reorder, banners-by-size, banners-by-link, webbugs, refresh-tags,
825 #        html-annoyances, content-cookies and fun filters
826 #      - Replaced filter "popups" by choice between two modes:
827 #        - "unsolicited-popups" tries to catch only the unsolicited ones
828 #        - "all-popups" tries to kill them all (as before)
829 #      - New filter "tiny-textforms" Help those tiny or hard-wrap textareas.
830 #      - New filter "jumping-windows" that prevents windows from resizing
831 #        and moving themselves
832 #      - Replaced "nimda" with more general "ie-exploits" filter in which
833 #        all filters for exploits shall be collected
834 #
835 #     Revision 1.11.2.11  2002/11/12 16:14:43  oes
836 #     Exchanged js-annoyance filter against status bar rewrites with improved version by Don Libes
837 #
838 #     Revision 1.11.2.10  2002/11/11 13:39:47  oes
839 #     Make refresh-tags filter work even on incorrect refresh tags like found on usatoday.com
840 #
841 #     Revision 1.11.2.9  2002/11/08 16:39:17  oes
842 #     Made img-reorder more cautious. Fixes bug #632715
843 #
844 #     Revision 1.11.2.8  2002/10/13 21:56:52  hal9
845 #     Adding demoronizer filter. This should include all the common abuses. I have
846 #     left a few of the rare cases commented out (never found these in the wild).
847 #
848 #     Revision 1.11.2.7  2002/09/25 15:09:39  oes
849 #     Preserve original quoting style in <img> tags wherever possible. Fixes Bug #605956
850 #
851 #     Revision 1.11.2.6  2002/08/23 14:12:26  oes
852 #     Proofed frameset-borders against "fremaborder=0 border=0"
853 #
854 #     Revision 1.11.2.5  2002/08/22 15:05:20  oes
855 #     Added Filter to make Quicktime movies saveable (thanks to aaron@linville.org for the idea)
856 #
857 #     Revision 1.11.2.4  2002/08/10 11:32:29  oes
858 #     Attribute values in replacement tags of banners-by-size filter now undelimited. (Fixes bug #592493)
859 #
860 #     Revision 1.11.2.3  2002/08/05 11:43:56  oes
861 #     Fixed a bug in the popups filter that was introduced with the last fix :-(
862 #
863 #     Revision 1.11.2.2  2002/08/01 11:20:13  oes
864 #     Fixed bugs 587802, 577802 and an unreported one
865 #
866 #     Revision 1.11.2.1  2002/07/26 15:18:26  oes
867 #     - All filters reviewed and many shorcomings fixed
868 #     - New filters: img-reorder, banners-by-link and js-events
869 #     - Jobs reorderd because they are now executed in order of
870 #       appearance
871 #
872 #     Revision 1.11  2002/05/24 00:57:18  oes
873 #     Made WeBugs job ungreedy; Fixes bug 559190
874 #
875 #     Revision 1.10  2002/04/18 10:14:19  oes
876 #     renamed some filters
877 #
878 #     Revision 1.9  2002/04/11 07:36:35  oes
879 #     Generalized js-popup filter
880 #
881 #     Revision 1.8  2002/04/10 17:07:21  oes
882 #     Fixed potentially desctructive jobs, added noflash filter
883 #
884 #     Revision 1.7  2002/04/09 18:34:51  oes
885 #     Fixed HTML syntax in replacements
886 #
887 #     Revision 1.6  2002/04/03 19:49:52  swa
888 #     name change
889 #
890 #     Revision 1.5  2002/03/27 15:30:26  swa
891 #     have a consistent appearance
892 #
893 #     Revision 1.4  2002/03/26 22:29:54  swa
894 #     we have a new homepage!
895 #
896 #     Revision 1.3  2002/03/24 16:08:03  jongfoster
897 #     Fixing banners-by-size for new config URLs
898 #
899 #     Revision 1.2  2002/03/24 13:02:18  swa
900 #     name change related issues.
901 #
902 #     Revision 1.1  2002/03/24 11:37:39  jongfoster
903 #     Name change
904 #
905 #     Revision 1.24  2002/03/16 20:39:54  oes
906 #      - Added descriptions to the filters so users will know what they select in the cgi editor
907 #      - Added content-cookies filter
908 #      - Bugfixed many jobs (Thanks to Al for some hints)
909 #
910 #     Revision 1.22  2002/03/12 13:42:50  oes
911 #     Fixing & Optimizing REs
912 #
913 #     Revision 1.21  2002/03/12 11:59:20  oes
914 #     Beefed up Buzzword Bingo
915 #
916 #     Revision 1.20  2002/03/12 01:42:50  oes
917 #     Introduced modular filters
918 #
919 #     Revision 1.19  2002/03/10 19:49:24  oes
920 #     Added expression to kill referer tracking in JavaScripts
921 #
922 #     Revision 1.18  2002/03/08 17:14:12  oes
923 #     PNG -> image in comments
924 #
925 #     Revision 1.17  2002/03/07 03:50:54  oes
926 #     Adapted comments to new built-in images
927 #
928 #     Revision 1.16  2002/02/21 00:12:19  jongfoster
929 #     Modifying the banner regexps to use long URLS and to autodetect
930 #     whether to show a logo or a transparent GIF, based on actionsfile
931 #     setting.
932 #
933 #     Revision 1.15  2001/12/28 23:54:20  steudten
934 #     Fix for feature Req #495374: http-equiv problem
935 #
936 #     Revision 1.14  2001/12/09 18:55:11  david__schmidt
937 #     Updated CODE_STATUS to beta, commented out microsuck line in re_filterfile
938 #     for 2.9.10 beta
939 #
940 #     Revision 1.13  2001/10/13 13:11:20  joergs
941 #     Fixed WebBug filter.
942 #
943 #     Revision 1.12  2001/10/07 15:46:42  oes
944 #     Followed Guy's proposal to change the document.cookie job
945 #
946 #     Revision 1.11  2001/09/21 12:34:00  joergs
947 #     Added filter to replace "Nimda" code by a warning.
948 #
949 #     Revision 1.10  2001/07/20 11:04:26  oes
950 #     Added Rodneys javascript cookie filter
951 #
952 #     Revision 1.9  2001/07/13 14:03:48  oes
953 #     Elimiated yet another bug in the banner-by-size jobs. Shame on me!
954 #
955 #     Revision 1.8  2001/06/29 13:34:00  oes
956 #     - Added explanation for U and T options
957 #     - Added hint on image replacement by CGI call
958 #     - Fixed bug in banner-by-size jobs
959 #
960 #     Revision 1.7  2001/06/19 14:21:56  oes
961 #     Fixed microsuck line
962 #
963 #     Revision 1.6  2001/06/09 14:01:57  swa
964 #     header. cosmetics. default: no messing ala microsuck.
965 #
966 #
967
968
969