s/Advanced|Radical/Adventuresome/g to avoid complaints re fun filter
[privoxy.git] / doc / source / user-manual.sgml
1 <!DOCTYPE article PUBLIC "-//OASIS//DTD DocBook V3.1//EN" [
2 <!entity % dummy "IGNORE"> 
3 <!entity supported SYSTEM "supported.sgml">
4 <!entity newfeatures SYSTEM "newfeatures.sgml">
5 <!entity p-intro SYSTEM "privoxy.sgml">
6 <!entity seealso SYSTEM "seealso.sgml">
7 <!entity buildsource SYSTEM "buildsource.sgml">
8 <!entity contacting SYSTEM "contacting.sgml">
9 <!entity history SYSTEM "history.sgml">
10 <!entity copyright SYSTEM "copyright.sgml">
11 <!entity license SYSTEM "license.sgml">
12 <!entity p-authors SYSTEM "p-authors.sgml">
13 <!entity config SYSTEM "p-config.sgml">
14 <!entity p-version "0.0.0">
15 <!entity p-status "UNRELEASED">
16 <!entity % p-authors-formal "INCLUDE"> <!-- include additional text, etc  -->
17 <!entity % p-not-stable "INCLUDE">
18 <!entity % p-stable "IGNORE">
19 <!entity % p-text "IGNORE">        <!-- define we are not a text only doc -->
20 <!entity % p-doc "INCLUDE">        <!-- and we are a formal doc           -->
21 <!entity % p-readme "IGNORE">
22 <!entity % user-man "IGNORE">
23 <!entity % config-file "IGNORE">
24 <!entity % p-supp-userman "IGNORE"> <!-- Omit some from supported.sgml    -->
25 <!entity  my-copy "&copy;">         <!-- kludge for docbook2man           -->
26 <!entity % draft "IGNORE">          <!-- WIP stuff    -->
27 ]>
28 <!--
29  File        :  $Source: /cvsroot/ijbswa/current/doc/source/user-manual.sgml,v $
30
31  Purpose     :  user manual
32                 This file belongs into
33                 ijbswa.sourceforge.net:/home/groups/i/ij/ijbswa/htdocs/
34
35  $Id: user-manual.sgml,v 1.123.2.26 2003/03/17 16:50:53 oes Exp $
36
37  Copyright (C) 2001, 2002 Privoxy Developers <developers@privoxy.org>
38  See LICENSE.
39
40  ========================================================================
41  NOTE: Please read developer-manual/documentation.html before touching 
42  anything in this, or other Privoxy documentation.
43  ========================================================================
44
45 -->
46
47 <article id="index">
48 <artheader>
49
50 <title>Privoxy &p-version; User Manual</title>
51
52 <pubdate>
53  <subscript>
54 <!-- Completely the wrong markup, but very little is allowed  -->
55 <!-- in this part of an article. FIXME -->
56  <link linkend="copyright">Copyright</link> &my-copy; 2001, 2002 by 
57  <ulink url="http://www.privoxy.org/">Privoxy Developers</ulink>
58  </subscript>
59 </pubdate>
60
61 <pubdate>$Id: user-manual.sgml,v 1.123.2.26 2003/03/17 16:50:53 oes Exp $</pubdate>
62
63 <!--
64
65 Note: the following should generate a separate page, and a live link to it,
66 all nicely done. But it doesn't for some mysterious reason. Please leave
67 commented unless it can be fixed proper. For the time being, the
68 copyright/license declarations will be in their own sgml.
69
70 Hal.
71
72 <copyright>
73   <year>2001</year>
74   <year>2002</year>
75   <holder>Privoxy Developers</holder>
76 </copyright>
77
78 <legalnotice id="legalnotice"> 
79  <para>
80   text goes here ........
81  </para>
82 </legalnotice>
83
84 -->
85
86
87 <abstract>
88
89 <![%dummy;[
90  <para>
91  <comment>
92   This is here to keep vim syntax file from breaking :/
93   If I knew enough to fix it, I would.
94   PLEASE DO NOT REMOVE! HB: hal@foobox.net
95  </comment>
96  </para>
97 ]]>
98
99  <para>
100   The <citetitle>User Manual</citetitle> gives users information on how to
101   install, configure and use <ulink
102   url="http://www.privoxy.org/"><application>Privoxy</application></ulink>.
103  </para>
104
105 <!-- Include privoxy.sgml boilerplate: -->
106  &p-intro;
107 <!-- end privoxy.sgml -->
108
109  <para>
110   You can find the latest version of the <citetitle>User Manual</citetitle> at  <ulink
111   url="http://www.privoxy.org/user-manual/">http://www.privoxy.org/user-manual/</ulink>.
112   Please see the <link linkend="contact">Contact section</link> on how to
113   contact the developers.
114  </para>
115
116 <!--   <para> -->
117 <!--    Feel free to send a note to the developers at <email>ijbswa-developers@lists.sourceforge.net</email>. -->
118 <!--   </para> -->
119 </abstract>
120
121 </artheader>
122
123 <!--   ~~~~~       New section      ~~~~~     -->
124 <sect1 label="1" id="introduction"><title>Introduction</title>
125 <para>
126  This documentation is included with the current &p-status; version of
127  <application>Privoxy</application>, v.&p-version;<![%p-not-stable;[, 
128  and is mostly complete at this point. The most up to date reference for the
129  time being is still the comments in the source files and in the individual
130  configuration files. Development of version 3.0 is currently nearing
131  completion, and includes many significant changes and enhancements over
132  earlier versions. The target release date for
133  stable v3.0 is <quote>soon</quote> ;-)]]>.
134 </para>
135
136 <!-- include only in non-stable versions -->
137 <![%p-not-stable;[
138 <para>
139  Since this is a &p-status; version, not all new features are well tested. This
140  documentation may be slightly out of sync as a result (especially with 
141  CVS sources). And there <emphasis>may be</emphasis> bugs, though hopefully
142  not many! 
143 </para>
144 ]]>
145
146 <!--   ~~~~~       New section      ~~~~~     -->
147 <sect2 id="features"><title>Features</title>
148 <para>
149  In addition to <application>Internet Junkbuster's</application> traditional
150  features of ad and banner blocking and cookie management,
151  <application>Privoxy</application> provides new features<![%p-not-stable;[,
152  some of them currently under development]]>:
153 </para>
154 <!-- Include newfeatures.sgml boilerplate here: -->
155  &newfeatures;
156 <!-- end boilerplate -->
157 </sect2>
158
159 </sect1>
160
161 <!--  ~  End section  ~  -->
162
163
164 <!--   ~~~~~       New section      ~~~~~     -->
165 <sect1 id="installation"><title>Installation</title>
166
167 <para>
168  <application>Privoxy</application> is available both in convenient pre-compiled
169  packages for a wide range of operating systems, and as raw source code.
170  For most users, we recommend using the packages, which can be downloaded from our
171  <ulink url="http://sourceforge.net/projects/ijbswa/">Privoxy Project
172  Page</ulink>.
173 </para>
174
175 <para>
176  Note: If you have a previous <application>Junkbuster</application> or
177  <application>Privoxy</application> installation on your system, you
178  will need to remove it.  On some platforms, this may be done for you as part
179  of their installation procedure. (See below for your platform). In any case
180  <emphasis>be sure to backup your old configuration if it is valuable to
181  you.</emphasis> See the <link linkend="upgradersnote">note to
182  upgraders</link> section below.
183 </para>
184
185 <!--   ~~~~~       New section      ~~~~~     --> 
186 <sect2 id="installation-packages"><title>Binary Packages</title>
187 <para>
188 How to install the binary packages depends on your operating system:
189 </para>
190
191 <!--   ~~~~~       New section      ~~~~~     -->
192 <sect3 id="installation-pack-rpm"><title>Red Hat, SuSE and Conectiva RPMs</title>
193
194 <para>
195  RPMs can be installed with <literal>rpm -Uvh privoxy-&p-version;-1.rpm</literal>,
196  and will use <filename>/etc/privoxy</filename> for the location 
197  of configuration files.
198 </para>
199
200 <para>
201  Note that on Red Hat, <application>Privoxy</application> will
202  <emphasis>not</emphasis> be automatically started on system boot. You will
203  need to enable that using <command>chkconfig</command>,
204  <command>ntsysv</command>, or similar methods. Note that SuSE will 
205 automatically start Privoxy in the boot process.
206 </para>
207
208 <para>
209  If you have problems with failed dependencies, try rebuilding the SRC RPM: 
210  <literal>rpm --rebuild privoxy-&p-version;-1.src.rpm</literal>. This 
211  will use your locally installed libraries and RPM version. 
212 </para>
213
214 <para>
215  Also note that if you have a <application>Junkbuster</application> RPM installed
216  on your system, you need to remove it first, because the packages conflict.
217  Otherwise, RPM will try to remove <application>Junkbuster</application>
218  automatically, before installing <application>Privoxy</application>.
219 </para>
220 </sect3>
221
222 <!--   ~~~~~       New section      ~~~~~     -->
223 <sect3 id="installation-deb"><title>Debian</title>
224 <para>
225  DEBs can be installed with <literal>dpkg -i
226  privoxy_&p-version;-1.deb</literal>, and will use
227  <filename>/etc/privoxy</filename> for the location of configuration
228  files.
229 </para>
230 </sect3>
231
232 <!--   ~~~~~       New section      ~~~~~     -->
233 <sect3 id="installation-pack-win"><title>Windows</title>
234
235 <para>
236  Just double-click the installer, which will guide you through
237  the installation process. You will find the configuration files
238  in the same directory as you installed Privoxy in. We do not
239  use the registry of Windows. 
240 </para>
241 </sect3>
242
243 <!--   ~~~~~       New section      ~~~~~     -->
244 <sect3 id="installation-pack-bintgz"><title>Solaris, NetBSD, FreeBSD, HP-UX</title>
245
246 <para>
247  Create a new directory, <literal>cd</literal> to it, then unzip and
248  untar the archive. For the most part, you'll have to figure out where
249  things go. <!-- FIXME, more info needed? -->
250 </para>
251 </sect3>
252
253 <!--   ~~~~~       New section      ~~~~~     -->
254 <sect3 id="installation-os2"><title>OS/2</title>
255
256 <para>
257  First, make sure that no previous installations of
258  <application>Junkbuster</application> and / or 
259  <application>Privoxy</application> are left on your
260  system. Check that no <application>Junkbuster</application>
261  or <application>Privoxy</application> objects are in
262  your startup folder.
263
264 </para>
265
266 <para>
267  Then, just double-click the WarpIN self-installing archive, which will
268  guide you through the installation process. A shadow of the
269  <application>Privoxy</application> executable will be placed in your
270  startup folder so it will start automatically whenever OS/2 starts.
271 </para>
272
273 <para>
274  The directory you choose to install <application>Privoxy</application>
275  into will contain all of the configuration files.
276 </para>
277 </sect3>
278
279 <!--   ~~~~~       New section      ~~~~~     -->
280 <sect3 id="installation-mac"><title>Mac OSX</title>
281 <para>
282  Unzip the downloaded file (you can either double-click on the file
283  from the finder, or from the desktop if you downloaded it there).
284  Then, double-click on the package installer icon named
285  <literal>Privoxy.pkg</literal>
286  and follow the installation process.
287  <application>Privoxy</application> will be installed in the folder
288  <literal>/Library/Privoxy</literal>.
289  It will start automatically whenever you start up.  To prevent it from
290  starting automatically, remove or rename the folder
291  <literal>/Library/StartupItems/Privoxy</literal>. 
292 </para>
293 <para>
294  To start Privoxy by hand, double-click on 
295  <literal>StartPrivoxy.command</literal> in the
296  <literal>/Library/Privoxy</literal> folder.
297  Or, type this command in the Terminal:
298 </para>
299 <para>
300   <screen>
301   /Library/Privoxy/StartPrivoxy.command
302   </screen>
303 </para>
304 <para>
305  You will be prompted for the administrator password.
306 </para>
307 </sect3>
308
309 <!--   ~~~~~       New section      ~~~~~     -->
310 <sect3 id="installation-amiga"><title>AmigaOS</title>
311 <para>
312  Copy and then unpack the <filename>lha</filename> archive to a suitable location. 
313  All necessary files will be installed into <application>Privoxy</application>
314  directory, including all configuration and log files. To uninstall, just 
315  remove this directory.
316 </para>
317 </sect3>
318
319 <!--   ~~~~~       New section      ~~~~~     -->
320 <sect3 id="installattion-gentoo"><title>Gentoo</title>
321 <para>
322  Gentoo source packages (Ebuilds) for <application>Privoxy</application> are 
323  contained in the Gentoo  Portage Tree (they are not on the download page, 
324  but there is a Gentoo section, where you can see when a new 
325  <application>Privoxy</application> Version is added to the  Portage Tree).
326 </para>
327 <para>
328  Before installing <application>Privoxy</application> under Gentoo just do 
329  first <literal>emerge rsync</literal> to get the latest changes from the 
330  Portage tree. With <literal>emerge privoxy</literal> you install the latest 
331  version.
332 </para>
333 <para>
334  Configuration files are in <filename>/etc/privoxy</filename>, the 
335  documentation is in <filename>/usr/share/doc/privoxy-&p-version;</filename>
336  and the Log directory is in <filename>/var/log/privoxy</filename>.
337 </para>
338 </sect3>
339
340 </sect2>
341
342 <!--   ~~~~~       New section      ~~~~~     -->
343 <sect2 id="installation-source"><title>Building from Source</title>
344
345 <para>
346  The most convenient way to obtain the <application>Privoxy</application> sources
347  is to download the source tarball from our <ulink url="http://sf.net/projects/ijbswa/">project
348  page</ulink>.
349 </para>
350
351 <para>
352  If you like to live on the bleeding edge and are not afraid of using
353  possibly unstable development versions, you can check out the up-to-the-minute
354  version directly from <ulink url="http://sourceforge.net/cvs/?group_id=11118">the
355  CVS repository</ulink> or simply download <ulink
356  url="http://cvs.sourceforge.net/cvstarballs/ijbswa-cvsroot.tar.gz">the nightly CVS
357  tarball.</ulink>
358 </para>
359
360 <!-- include buildsource.sgml boilerplate: -->
361 &buildsource;
362 <!-- end boilerplate -->
363
364 </sect2>
365 <!--   ~~~~~       New section      ~~~~~     --> 
366 <sect2 id="installation-keepupdated"><title>Keeping your Installation Up-to-Date</title>
367 <para>
368  As user feedback comes in and development continues, we will make updated versions
369  of both the main <link linkend="actions-file">actions file</link> (as a <ulink
370  url="http://sourceforge.net/project/showfiles.php?group_id=11118&amp;release_id=103670">separate
371  package</ulink>) and the software itself (including the actions file) available for
372  download.
373 </para>
374
375 <para>
376  If you wish to receive an email notification whenever we release updates of
377  <application>Privoxy</application> or the actions file, <ulink
378  url="http://lists.sourceforge.net/lists/listinfo/ijbswa-announce/">subscribe
379  to our announce  mailing list</ulink>, ijbswa-announce@lists.sourceforge.net.
380 </para>
381
382 <para>
383  In order not to loose your personal changes and adjustments when updating
384  to the latest <literal>default.action</literal> file we <emphasis>strongly
385  recommend</emphasis> that you use <literal>user.action</literal> for your
386  customization of <application>Privoxy</application>. See the <link
387  linkend="actions-file">Chapter on actions files</link> for details.
388 </para>
389
390 </sect2>
391
392
393 </sect1>
394
395 <!--  ~  End section  ~  -->
396
397 <!--   ~~~~~       New section      ~~~~~     -->
398 <sect1 id="upgradersnote">
399 <title>Note to Upgraders</title>
400 <para>
401  There are very significant changes from earlier 
402  <application>Junkbuster</application> versions to the current
403  <application>Privoxy</application>. The number, names, syntax, and
404  purposes of configuration files have substantially  changed.
405  <application>Junkbuster 2.0.x</application> configuration
406  files will not migrate, <application>Junkbuster 2.9.x</application>
407  and <application>Privoxy</application> configurations will need to be
408  ported. The functionalities of the old <filename>blockfile</filename>,
409  <filename>cookiefile</filename> and <filename>imagelist</filename> 
410  are now combined into the <link linkend="actions-file"><quote>actions
411  files</quote></link>.  
412  <filename>default.action</filename>, is the main actions file. Local
413  exceptions should best be put into <filename>user.action</filename>.
414 </para>
415 <para>
416  A <link linkend="filter-file"><quote>filter file</quote></link> (typically
417  <filename>default.filter</filename>) is new as of <application>Privoxy
418  2.9.x</application>, and provides some of the new sophistication (explained
419  below). <filename>config</filename> is much the same as before.
420 </para>
421 <para>
422  If upgrading from a 2.0.x version, you will have to use the new config 
423  files, and possibly adapt any personal rules from your older files.
424  When porting personal rules over from the old <filename>blockfile</filename>
425  to the new actions files, please note that even the pattern syntax has
426  changed. If upgrading from 2.9.x development versions, it is still
427  recommended to use the new configuration files.
428 </para>
429 <para>
430  A quick list of things to be aware of before upgrading: 
431 </para>
432
433 <para>
434  <itemizedlist>
435
436  <listitem>
437   <para>
438    The default listening port is now 8118 due to a conflict with another 
439    service (NAS).
440   </para>
441  </listitem>  
442  <listitem>
443   <para>  
444     Some installers may remove earlier versions completely. Save any 
445     important configuration files!
446   </para>
447  </listitem>
448  <listitem>
449   <para>
450    <application>Privoxy</application> is controllable with a web browser 
451    at the special URL: <ulink
452    url="http://config.privoxy.org/">http://config.privoxy.org/</ulink>
453    (Shortcut: <ulink url="http://p.p/">http://p.p/</ulink>). Many
454    aspects of configuration can be done here, including temporarily disabling
455    <application>Privoxy</application>.
456   </para>
457  </listitem> 
458  <listitem>
459   <para>
460    The primary configuration files for cookie management, ad and banner 
461    blocking, and many other aspects of <application>Privoxy</application>
462    configuration are the <link linkend="actions-file">actions
463    files</link>. It is strongly recommended to become familiar with the new
464    actions concept below, before modifying these files. Locally defined rules 
465    should go into <filename>user.action</filename>.
466   </para>
467  </listitem> 
468   <listitem>
469   <para>
470 <!-- I think it is best to keep this somewhat vague, in case  -->
471 <!-- the situation changes under our feet. -->   
472    Some installers may not automatically start
473    <application>Privoxy</application> after installation.
474   </para>
475  </listitem> 
476
477  </itemizedlist>
478 </para>
479 </sect1>
480
481 <!--   ~~~~~       New section      ~~~~~     -->
482 <sect1 id="quickstart"><title>Quickstart to Using <application>Privoxy</application></title>
483 <para>
484  <itemizedlist>
485
486  <listitem>
487   <para>
488    If upgrading, from versions before 2.9.16, please back up any configuration
489    files. See the <link linkend="upgradersnote">Note to Upgraders</link> Section.
490  </para>
491 </listitem> 
492
493  <listitem>
494   <para>
495   Install <application>Privoxy</application>. See the <link
496   linkend="installation">Installation Section</link> below for platform specific
497   information. 
498  </para>
499  </listitem>  
500
501  <listitem>
502   <para>
503    Advanced users and those who want to offer <application>Privoxy</application>
504    service to more than just their local machine should check the <link
505    linkend="config">main config file</link>, especially the <link
506    linkend="access-control">security-relevant</link> options. These are 
507    off by default.
508   </para>
509  </listitem>  
510
511  <listitem>
512   <para>
513   Start <application>Privoxy</application>, if the installation program has
514   not done this already (may vary according to platform). See the section
515   <link linkend="startup">Starting <application>Privoxy</application></link>.
516   </para>
517  </listitem>
518
519  <listitem>
520   <para>
521    Set your browser to use <application>Privoxy</application> as HTTP and
522    HTTPS (SSL) proxy by setting the proxy configuration for address of
523    <literal>127.0.0.1</literal> and port <literal>8118</literal>.
524    (<application>Junkbuster</application> and earlier versions of
525    <application>Privoxy</application> used port 8000.) See the section <link
526    linkend="startup">Starting <application>Privoxy</application></link> below
527    for more details on this.
528   </para>
529  </listitem>  
530
531  <listitem>
532   <para>
533     Flush your browser's disk and memory caches, to remove any cached ad images.
534     If using <application>Privoxy</application> to manage cookies, you should 
535     remove any currently stored cookies too.
536   </para>
537  </listitem> 
538
539  <listitem>
540   <para>
541    A default installation should provide a reasonable starting point for 
542    most. There will undoubtedly be occasions where you will want to adjust the
543    configuration, but that can be dealt with as the need arises. Little 
544    to no initial configuration is required in most cases.
545   </para>
546   <para>
547    See the <link linkend="configuration">Configuration section</link> for more
548    configuration options, and how to customize your installation.
549  <![%draft;[  You might also want to look at the <link
550    linkend="quickstart-ad-blocking">next section</link> for a quick
551    introduction to how <application>Privoxy</application> blocks ads and
552    banners.]]>
553   </para>
554  </listitem> 
555
556  <listitem>
557   <para>
558     If you experience ads that slipped through, innocent images that are
559     blocked, or otherwise feel the need to fine-tune
560     <application>Privoxy's</application> behaviour, take a look at the <link
561     linkend="actions-file">actions files</link>. As a quick start, you might
562     find the <link linkend="act-examples">richly commented examples</link>
563     helpful. You can also view and edit the actions files through the <ulink
564     url="http://config.privoxy.org">web-based user interface</ulink>. The
565     Appendix <quote><link linkend="actionsanat">Anatomy of an
566     Action</link></quote> has hints how to debug actions that
567     <quote>misbehave</quote>.
568   </para>
569  </listitem> 
570
571  <listitem>
572   <para>
573    Please see the section <link linkend="contact">Contacting the
574    Developers</link> on how to report bugs or problems with websites or to get
575    help. 
576   </para>
577  </listitem> 
578
579  <listitem>
580   <para>
581    Now enjoy surfing with enhanced comfort and privacy!
582   </para>
583  </listitem> 
584  
585  </itemizedlist>
586 </para>
587
588
589 <!--   ~~~~~       New section      ~~~~~     -->
590
591 <sect2 id="quickstart-ad-blocking">
592 <title>Quickstart to Ad Blocking</title>
593 <!--
594  NOTE:  This section is deliberately redundant for those that don't 
595  want to read the whole thing (which is getting lengthy).
596 -->
597 <para>
598  Ad blocking is but one of <application>Privoxy's</application>
599  array of features. Many of these features are for the technically minded advanced 
600  user. But, ad and banner blocking is surely common ground for everybody.
601 </para>
602 <para> 
603  This section will provide a quick summary of ad blocking so 
604  you can get up to speed quickly without having to read the more extensive
605  information provided below, though this is highly recommended.
606 </para>
607 <para>
608  First a bit of a warning ... blocking ads is much like blocking SPAM: the
609  more aggressive you are about it, the more likely you are to block 
610  things that were not intended. So there is a trade off here. If you want
611  extreme ad free browsing, be prepared to deal with more
612  <quote>problem</quote> sites, and to spend more time adjusting the
613  configuration to solve these unintended consequences. In short, there is 
614  not an easy way to eliminate <emphasis>all</emphasis> ads. Either take 
615  the easy way and settle for <emphasis>most</emphasis> ads blocked with the
616  default configuration, or jump in and tweak it for your personal surfing
617  habits and preferences.
618 </para>
619 <para>
620  Secondly, a brief explanation of <application>Privoxy's </application>
621  <quote>actions</quote>. <quote>Actions</quote> in this context, are 
622  the directives we use to tell <application>Privoxy</application> to perform
623  some task relating to HTTP transactions (i.e. web browsing). We tell
624  <application>Privoxy</application> to take some <quote>action</quote>. Each
625  action has a unique name and function. While there are many potential
626  <application>actions</application> in <application>Privoxy's</application>
627  arsenal, only a few are used for ad blocking. <link
628  linkend="actions">Actions</link>, and <link linkend="actions-file">action
629  configuration files</link>, are explained in depth below.
630 </para>
631 <para>
632  Actions are specified in <application>Privoxy's</application> configuration,
633  followed by one or more URLs to which the action should apply. URLs 
634  can actually be URL type <link linkend="af-patterns">patterns</link> that use
635  wildcards so they can apply potentially to a range of similar URLs. The
636  actions, together with the URL patterns are called a section.
637 </para>
638 <para>
639  When you connect to a website, the full URL will either match one or more
640  of the sections as defined in <application>Privoxy's</application> configuration,
641  or not. If so, then <application>Privoxy</application> will perform the
642  respective actions. If not, then nothing special happens. Furthermore, web
643  pages may contain embedded, secondary URLs that your web browser will
644  use to load additional components of the page, as it parses the
645  original page's HTML content. An ad image for instance, is just an URL
646  embedded in the page somewhere. The image itself may be on the same server,
647  or a server somewhere else on the Internet. Complex web pages will have many
648  such embedded URLs.
649 </para>
650
651 <para>
652  The actions we need to know about for ad blocking are:  <literal><link
653  linkend="block">block</link></literal>, <literal><link
654  linkend="handle-as-image">handle-as-image</link></literal>, and
655  <literal><link linkend="set-image-blocker">set-image-blocker</link></literal>:
656 </para>
657
658 <para>
659  <itemizedlist>
660   
661  <listitem>
662   <para>
663    <literal><link linkend="block">block</link></literal> - this action stops
664    any contact between your browser and any URL patterns that match this
665    action's configuration. It can be used for blocking ads, but also anything
666    that is determined to be unwanted. By itself, it simply stops any
667    communication with the remote server and sends <application>Privoxy</application>'s
668    own built-in BLOCKED page instead to let you now what has happened.
669   </para>
670  </listitem> 
671
672  <listitem>
673   <para>
674    <literal><link linkend="handle-as-image">handle-as-image</link></literal> - 
675    tells <application>Privoxy</application> to treat this URL as an image.
676    <application>Privoxy</application>'s default configuration already does this
677    for all common image types (e.g. GIF), but there are many situations where this
678    is not so easy to determine. So we'll force it in these cases. This is particularly
679    important for ad blocking, since  only if we know that it's an image of
680    some kind, can we replace it with an image of our choosing, instead of the 
681    <application>Privoxy</application> BLOCKED page (which would only result in
682    a <quote>broken image</quote> icon). There are some limitations to this
683    though. For instance, you can't just brute-force an image substitution for
684    an entire HTML page in most situations.
685   </para>
686  </listitem> 
687
688  <listitem>
689   <para>
690    <literal><link
691    linkend="set-image-blocker">set-image-blocker</link></literal> - tells
692    <application>Privoxy</application> what to display in place of an ad image that
693    has hit a block rule. For this to come into play, the URL must match a
694    <literal><link linkend="block">block</link></literal> action somewhere in the
695    configuration, <emphasis>and</emphasis>, it must also match an
696    <literal><link linkend="handle-as-image">handle-as-image</link></literal> action.
697   </para>
698   <para>
699    The configuration options on what to display instead of the ad are:
700   </para>
701   <simplelist>
702    <member>
703     &nbsp;&nbsp;&nbsp;<emphasis>pattern</emphasis> - a checkerboard pattern, so that an ad 
704     replacement is obvious. This is the default.
705    </member>
706   </simplelist>
707   <simplelist>
708    <member>
709     &nbsp;&nbsp;&nbsp;<emphasis>blank</emphasis> - A very small empty GIF image is displayed.
710     This is the so-called <quote>invisible</quote> configuration option.
711    </member>
712   </simplelist>
713   <simplelist>
714    <member>
715     &nbsp;&nbsp;&nbsp;<emphasis>http://&lt;URL&gt;</emphasis> - A redirect to any image anywhere
716     of the user's choosing (advanced usage).
717    </member>
718   </simplelist>
719   </listitem> 
720
721 </itemizedlist>
722 </para>
723
724 <para>
725  The quickest way to adjust any of these settings is with your browser through
726  the special <application>Privoxy</application> editor at <ulink
727  url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>
728  (shortcut: <ulink url="http://p.p/">http://p.p/show-status</ulink>). This 
729  is an internal page, and does not require Internet access. Select the
730  appropriate <quote>actions</quote> file, and click
731  <quote><guibutton>Edit</guibutton></quote>. It is best to put personal or
732  local preferences in <filename>user.action</filename> since this is not
733  meant to be overwritten during upgrades, and will over-ride the settings in
734  other files. Here you can insert new <quote>actions</quote>, and URLs for ad
735  blocking or other purposes, and make other adjustments to the configuration.
736  <application>Privoxy</application> will detect these changes automatically.
737 </para>
738
739 <para>
740  A quick and simple step by step example:
741 </para>
742
743 <para>
744  <itemizedlist>
745
746   <listitem>
747    <para>
748      Right click on the ad image to be blocked, then select 
749      <quote><guimenuitem>Copy Link Location</guimenuitem></quote> from the
750      pop-up menu. 
751    </para>
752   </listitem> 
753   <listitem>
754    <para>
755     Set your browser to 
756     <ulink
757  url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>
758    </para>
759   </listitem> 
760   <listitem>
761    <para>
762     Find <filename>user.action</filename> in the top section, and click 
763     on <quote><guibutton>Edit</guibutton></quote>:
764    </para>
765
766  <!-- image of editor and actions files selections -->
767  <para>
768   <figure pgwide="0" float="0"><title>Actions Files in Use</title>
769    <mediaobject>
770      <imageobject>
771       <imagedata  fileref="../images/files-in-use.jpg" format="jpg">
772        </imageobject> 
773        <textobject>
774         <phrase>[ Screenshot of Actions Files in Use ]</phrase>
775       </textobject>
776    </mediaobject>
777   </figure>
778  </para>
779  </listitem> 
780  
781  <listitem>
782   <para>
783    You should have a section with only
784    <literal><link linkend="block">block</link></literal> listed under 
785    <quote>Actions:</quote>.
786    If not, click a <quote><guibutton>Insert new section below</guibutton></quote>
787    button, and in the new section that just appeared, click the 
788    <guibutton>Edit</guibutton> button right under the word <quote>Actions:</quote>.
789    This will bring up a list of all actions. Find
790    <literal><link linkend="block">block</link></literal> near the top, and click
791    in the <quote>Enabled</quote> column, then <quote><guibutton>Submit</guibutton></quote>
792    just below the list.
793   </para>
794  </listitem> 
795  <listitem>
796   <para>
797    Now, in the <literal><link linkend="block">block</link></literal> actions section,
798    click the <quote><guibutton>Add</guibutton></quote> button, and paste the URL the
799    browser got from <quote><guimenuitem>Copy Link Location</guimenuitem></quote>.
800    Remove the <literal>http://</literal> at the beginning of the URL. Then, click
801    <quote><guibutton>Submit</guibutton></quote> (or
802    <quote><guibutton>OK</guibutton></quote> if in a pop-up window).
803   </para>
804  </listitem> 
805  <listitem>
806   <para>
807    Now go back to the original page, and press <keycap>SHIFT-Reload</keycap>
808    (or flush all browser caches). The image should be gone now.
809   </para>
810  </listitem> 
811  
812  </itemizedlist>
813 </para>
814
815 <para>
816  This is a very crude and simple example. There might be good reasons to use a 
817  wildcard pattern match to include potentially similar images from the same
818  site. For a more extensive explanation of <quote>patterns</quote>, and 
819  the entire actions concept, see <link linkend="actions-file">the Actions
820  section</link>.
821 </para>
822
823 <para>
824  For advanced users who want to hand edit their config files, you might want
825  to now go to the <link linkend="act-examples">Actions Files Tutorial</link>.
826  The ideas explained therein also apply to the web-based editor.
827 </para>
828
829 </sect2>
830
831 </sect1>
832
833 <!--  ~  End section  ~  -->
834
835
836 <!--   ~~~~~       New section      ~~~~~     -->
837 <sect1 id="startup">
838 <title>Starting <application>Privoxy</application></title>
839 <para>
840  Before launching <application>Privoxy</application> for the first time, you
841  will want to configure your browser(s) to use
842  <application>Privoxy</application> as a HTTP and HTTPS proxy. The default is
843  127.0.0.1 (or localhost) for the proxy address, and port 8118 (earlier versions
844  used port 8000). This is the one configuration step that must be done!
845 </para>
846 <para>
847  Please note that <application>Privoxy</application> can only proxy HTTP and 
848  HTTPS traffic. It will not work with FTP or other protocols.
849 </para>
850
851  <!-- image of Mozilla Proxy configuration -->
852  <para>
853   <figure pgwide="0" float="0"><title>Proxy Configuration (Mozilla)</title>
854    <mediaobject>
855      <imageobject>
856       <imagedata  fileref="../images/proxy_setup.jpg" format="jpg">
857        </imageobject> 
858        <textobject>
859         <phrase>[ Screenshot of Mozilla Proxy Configuration ]</phrase>
860       </textobject>
861    </mediaobject>
862   </figure>
863  </para>
864  
865 <para> 
866  With <application>Netscape</application> (and
867  <application>Mozilla</application>), this can be set under:
868 </para>
869  
870 <literallayout>
871 <!-- Mix ascii and gui art, something for everybody -->
872 <!-- spacing on this is tricky -->
873  <guibutton>Edit</guibutton>
874    |_   
875          <guibutton>Preferences</guibutton>
876                 |_       
877                         <guibutton>Advanced</guibutton>
878                               |_     
879                                     <guibutton>Proxies</guibutton>
880                                          |_       
881                                                 <guibutton>HTTP Proxy</guibutton>
882 </literallayout>
883
884 <para>
885  For <application>Internet Explorer</application>: 
886 </para>
887
888 <literallayout>
889 <!-- Mix ascii and gui art, something for everybody -->
890 <!-- spacing on this is tricky -->
891  <guibutton>Tools</guibutton>
892      |_   
893          <guibutton>Internet Properties</guibutton>
894                             |_       
895                                       <guibutton>Connections</guibutton>
896                                                |_     
897                                                             <guibutton>LAN Settings</guibutton>
898 </literallayout>
899
900 <para>
901  Then, check <quote>Use Proxy</quote> and fill in the appropriate info
902  (Address: 127.0.0.1, Port: 8118). Include HTTPS (SSL), if you want HTTPS
903  proxy support too. 
904 </para>
905
906 <para>
907  After doing this, flush your browser's disk and memory caches to force a
908  re-reading of all pages and to get rid of any ads that may be cached. You 
909  are now ready to start enjoying the benefits of using
910  <application>Privoxy</application>!
911 </para>
912
913 <para>
914  <application>Privoxy</application> is typically started by specifying the
915  main configuration file to be used on the command line. If no configuration
916  file is specified on the command line, <application>Privoxy</application>
917  will look for a file named <filename>config</filename> in the current
918  directory. Except on Win32 where it will try <filename>config.txt</filename>.
919 </para>
920
921 <sect2 id="start-redhat">
922 <title>Red Hat and Conectiva</title>
923 <para>
924  We use a script. Note that Red Hat does not start Privoxy upon booting per
925  default. It will use the file <filename>/etc/privoxy/config</filename> as
926  its main configuration file.
927 </para>
928 <para>
929  <screen>
930  # /etc/rc.d/init.d/privoxy start
931 </screen>
932 </para>
933 </sect2>
934
935 <sect2 id="start-debian">
936 <title>Debian</title>
937 <para>
938  We use a script. Note that Debian starts Privoxy upon booting per
939  default.  It will use the file
940  <filename>/etc/privoxy/config</filename> as its main configuration
941  file.
942 </para>
943 <para>
944  <screen>
945  # /etc/init.d/privoxy start
946 </screen>
947 </para>
948 </sect2>
949
950 <sect2 id="start-suse">
951 <title>SuSE</title>
952 <para>
953 We use a script. It will use the file <filename>/etc/privoxy/config</filename>
954 as its main configuration file. Note that SuSE starts Privoxy upon booting
955 your PC.
956 </para>
957 <para>
958  <screen>
959  # rcprivoxy start
960 </screen>
961 </para>
962 </sect2>
963
964 <sect2 id="start-windows">
965 <title>Windows</title>
966 <para>
967 Click on the Privoxy Icon to start Privoxy. If no configuration file is
968  specified on the command line, <application>Privoxy</application> will look
969  for a file named <filename>config.txt</filename>. Note that Windows will
970  automatically start Privoxy upon booting you PC.
971 </para>
972 </sect2>
973
974 <sect2 id="start-unices">
975 <title>Solaris, NetBSD, FreeBSD, HP-UX and others</title>
976 <para>
977 Example Unix startup command:
978 </para>
979 <para>
980  <screen>
981  # /usr/sbin/privoxy /etc/privoxy/config
982 </screen>
983 </para>
984 </sect2>
985
986 <sect2 id="start-os2">
987 <title>OS/2</title>
988 <para>
989  During installation, <application>Privoxy</application> is configured to
990  start automatically when the system restarts. You can start it manually by
991  double-clicking on the <application>Privoxy</application> icon in the
992  <application>Privoxy</application> folder.
993 </para>
994 </sect2>
995
996 <sect2 id="start-macosx">
997 <title>Mac OSX</title>
998 <para>
999  During installation, <application>Privoxy</application> is configured to
1000  start automatically when the system restarts.  To start Privoxy by hand,
1001  double-click on the <literal>StartPrivoxy.command</literal> icon in the
1002  <literal>/Library/Privoxy</literal> folder.  Or, type this command
1003  in the Terminal:
1004 </para>
1005 <para>
1006   <screen>
1007   /Library/Privoxy/StartPrivoxy.command
1008   </screen>
1009 </para>
1010 <para>
1011  You will be prompted for the administrator password.
1012 </para>
1013 </sect2>
1014
1015
1016 <sect2 id="start-amigaos">
1017 <title>AmigaOS</title>
1018 <para>
1019  Start <application>Privoxy</application> (with RUN &lt;&gt;NIL:) in your
1020  <filename>startnet</filename> script (AmiTCP), in
1021  <filename>s:user-startup</filename> (RoadShow), as startup program in your
1022  startup script (Genesis), or as startup action (Miami and MiamiDx). 
1023  <application>Privoxy</application> will automatically quit when you quit your
1024  TCP/IP stack (just ignore the harmless warning your TCP/IP stack may display that
1025  <application>Privoxy</application> is still running).
1026 </para>
1027 </sect2>
1028
1029 <sect2 id="start-gentoo">
1030 <title>Gentoo</title>
1031 <para>
1032  A script is again used. It will use the file <filename>/etc/privoxy/config 
1033  </filename> as its main configuration file.
1034 </para>
1035 <para>
1036  <screen>
1037  /etc/init.d/privoxy start
1038  </screen>
1039 </para>
1040 <para>
1041  Note that <application>Privoxy</application> is not automatically started at 
1042  boot time by default. You can change this with the <literal>rc-update</literal> 
1043  command.
1044 </para>
1045 <para> 
1046  <screen>
1047  rc-update add privoxy default
1048  </screen>
1049 </para>
1050 </sect2>
1051
1052 <!--
1053
1054 <para>
1055  See the section <link linkend="cmdoptions">Command line options</link> for
1056  further info.
1057 </para>
1058
1059 must find a better place for this paragraph
1060
1061 <para>
1062  The included default configuration files should give a reasonable starting
1063  point. Most of the per site configuration is done in the
1064  <ulink url="actions-file.html"><quote>actions</quote></ulink> files. These are
1065  where various cookie actions are defined, ad and banner blocking, and other
1066  aspects of <application>Privoxy</application> configuration. There are several
1067  such files included, with varying levels of aggressiveness. 
1068 </para>
1069
1070 <para>
1071  You will probably want to keep an eye out for sites for which you may prefer
1072  persistent cookies, and add these to your actions configuration as needed. By
1073  default, most of these will be accepted only during the current browser
1074  session (aka <quote>session cookies</quote>), unless you add them to the
1075  configuration. If you want the browser to handle this instead, you will need
1076  to edit <filename>user.action</filename> (or through the web based interface)
1077  and disable this feature. If you use more than one browser, it would make
1078  more sense to let <application>Privoxy</application> handle this. In which
1079  case, the browser(s) should be set to accept all cookies.
1080 </para>
1081
1082 <para>
1083  Another feature where you will probably want to define exceptions for trusted
1084  sites is the popup-killing (through the <ulink
1085  url="actions-file.html#KILL-POPUPS"><quote>+kill-popups</quote></ulink> and
1086  <ulink
1087  url="actions-file.html#FILTER-POPUPS"><quote>+filter{popups}</quote></ulink>
1088  actions), because your favorite shopping, banking, or leisure site may need
1089  popups (explained below). 
1090 </para>
1091
1092 <para>
1093  <application>Privoxy</application> is HTTP/1.1 compliant,  but not all of
1094  the optional 1.1 features are as yet supported. In the unlikely event that
1095  you experience inexplicable problems with browsers that use HTTP/1.1 per default
1096  (like <application>Mozilla</application> or recent versions of I.E.), you might
1097  try to force HTTP/1.0 compatibility. For Mozilla, look under <literal>Edit -&gt;
1098  Preferences -&gt; Debug -&gt; Networking</literal>.
1099  Alternatively, set the <quote>+downgrade-http-version</quote> config option in
1100  <filename>default.action</filename> which will downgrade your browser's HTTP
1101  requests from HTTP/1.1 to HTTP/1.0 before processing them.
1102 </para>
1103
1104 <para>
1105  After running <application>Privoxy</application> for a while, you can 
1106  start to fine tune the configuration to suit your personal, or site, 
1107  preferences and requirements. There are many, many aspects that can 
1108  be customized. <quote>Actions</quote> 
1109  can be adjusted by pointing your browser to 
1110  <ulink url="http://config.privoxy.org/">http://config.privoxy.org/</ulink>
1111  (shortcut: <ulink url="http://p.p/">http://p.p/</ulink>), 
1112  and then follow the link to <quote>View &#38; Change the Current Configuration</quote>. 
1113  (This is an internal page and does not require Internet access.)
1114 </para>
1115
1116 <para>
1117  In fact, various aspects of <application>Privoxy</application>
1118  configuration can be viewed from this page, including 
1119  current configuration parameters, source code version numbers, 
1120  the browser's request headers, and <quote>actions</quote> that apply 
1121  to a given URL. In addition to the actions file 
1122  editor mentioned above, <application>Privoxy</application> can also 
1123  be turned <quote>on</quote> and <quote>off</quote> (toggled) from this page.
1124 </para>
1125
1126 <para>
1127  If you encounter problems, try loading the page without
1128  <application>Privoxy</application>. If that helps, enter the URL where
1129  you have the problems into <ulink url="http://p.p/show-url-info">the browser
1130  based rule tracing utility</ulink>. See which rules apply and why, and
1131  then try turning them off for that site one after the other, until the problem
1132  is gone. When you have found the culprit, you might want to turn the rest on
1133  again.
1134 </para>
1135
1136 <para>
1137  If the above paragraph sounds gibberish to you, you might want to <link
1138  linkend="actions-file">read more about the actions concept</link>
1139  or even dive deep into the <link linkend="actionsanat">Appendix
1140  on actions</link>.
1141 </para>
1142
1143 <para>
1144  If you can't get rid of the problem at all, think you've found a bug in
1145  Privoxy, want to propose a new feature or smarter rules, please see the 
1146  section <link linkend="contact"><quote>Contacting the
1147  Developers</quote></link> below. 
1148 </para>
1149
1150 -->
1151
1152 <!--   ~~~~~       New section      ~~~~~     -->
1153 <sect2 id="cmdoptions">
1154 <title>Command Line Options</title>
1155 <para>
1156  <application>Privoxy</application> may be invoked with the following
1157  command-line options:
1158 </para>
1159
1160 <para>
1161  <itemizedlist>
1162
1163  <listitem>
1164   <para>
1165     <emphasis>--version</emphasis>
1166   </para>
1167   <para>
1168      Print version info and exit. Unix only.
1169   </para>
1170  </listitem> 
1171  <listitem>
1172   <para>
1173     <emphasis>--help</emphasis>
1174   </para>
1175   <para>
1176    Print short usage info and exit. Unix only.
1177   </para>
1178  </listitem> 
1179  <listitem>
1180   <para>
1181    <emphasis>--no-daemon</emphasis>
1182   </para>
1183   <para>
1184    Don't become a daemon, i.e. don't fork and become process group
1185    leader, and don't detach from controlling tty. Unix only.
1186   </para>
1187  </listitem> 
1188  <listitem>
1189   <para>
1190    <emphasis>--pidfile FILE</emphasis>
1191   
1192   </para>
1193   <para>
1194    On startup, write the process ID to <emphasis>FILE</emphasis>. Delete the
1195    <emphasis>FILE</emphasis> on exit. Failure to create or delete the
1196    <emphasis>FILE</emphasis> is non-fatal. If no <emphasis>FILE</emphasis>
1197    option is given, no PID file will be used. Unix only.
1198   </para>
1199  </listitem> 
1200  <listitem>
1201   <para>
1202    <emphasis>--user USER[.GROUP]</emphasis>
1203   
1204   </para>
1205   <para>
1206    After (optionally) writing the PID file, assume the user  ID  of
1207    <emphasis>USER</emphasis>, and if included the GID of GROUP.  Exit if the
1208    privileges are not sufficient to do so. Unix only.
1209   </para>
1210  </listitem>
1211   <listitem>
1212   <para>
1213    <emphasis>--chroot</emphasis>
1214   
1215   </para>
1216   <para>
1217    Before changing to the user ID given in the <emphasis>--user</emphasis> option, 
1218    chroot to that user's home directory, i.e. make the kernel pretend to the Privoxy
1219    process that the directory tree starts there. If set up carefully, this can limit 
1220    the impact of possible vulnerabilities in Privoxy to the files contained in that hierarchy.
1221    Unix only.
1222   </para>
1223  </listitem>
1224  <listitem>
1225   <para>
1226     <emphasis>configfile</emphasis>
1227   </para>
1228   <para>
1229     If no <emphasis>configfile</emphasis> is included on the command line, 
1230     <application>Privoxy</application> will look for a file named 
1231     <quote>config</quote> in the current directory (except on Win32 
1232     where it will look for <quote>config.txt</quote> instead). Specify 
1233     full path to avoid confusion. If no config file is found, 
1234     <application>Privoxy</application> will fail to start.
1235   </para>
1236  </listitem> 
1237
1238  </itemizedlist>
1239 </para>
1240
1241 </sect2>
1242
1243 </sect1>
1244
1245 <!--  ~  End section  ~  -->
1246
1247
1248 <!--   ~~~~~       New section      ~~~~~     -->
1249 <sect1 id="configuration"><title><application>Privoxy</application> Configuration</title>
1250  <para>
1251   All <application>Privoxy</application> configuration is stored  
1252   in text files. These files can be edited with a text editor.
1253   Many important aspects of <application>Privoxy</application> can 
1254   also be controlled easily with a web browser.
1255  </para>
1256
1257
1258 <!--   ~~~~~       New section      ~~~~~     -->
1259
1260 <sect2>
1261 <title>Controlling <application>Privoxy</application> with Your Web Browser</title>
1262 <para>
1263  <application>Privoxy</application>'s user interface can be reached through the special 
1264  URL <ulink url="http://config.privoxy.org/">http://config.privoxy.org/</ulink>
1265  (shortcut: <ulink url="http://p.p/">http://p.p/</ulink>), 
1266  which is a built-in page and works without Internet access.
1267  You will see the following section:
1268
1269 </para>
1270
1271 <!-- Needs to be put in a table and colorized  -->
1272 <screen>
1273  <msgtext>
1274  <bridgehead renderas="sect2">&nbsp;&nbsp;&nbsp;&nbsp;Privoxy Menu</bridgehead>
1275
1276  <simplelist>
1277  <member>
1278   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://config.privoxy.org/show-status">View & change the current configuration</ulink>
1279  </member>
1280  <member>
1281   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://config.privoxy.org/show-version">View the source code version numbers</ulink>
1282  </member>
1283  <member>
1284   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://config.privoxy.org/show-request">View the request headers.</ulink>
1285  </member>
1286  <member>
1287   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://config.privoxy.org/show-url-info">Look up which actions apply to a URL and why</ulink>
1288  </member>
1289  <member>
1290   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://config.privoxy.org/toggle">Toggle Privoxy on or off</ulink>
1291  </member>
1292  <member>
1293   &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&squf;&nbsp;&nbsp;<ulink url="http://www.privoxy.org/&p-version;/user-manual/">Documentation</ulink>
1294  </member>
1295  </simplelist>
1296  </msgtext>
1297 </screen>
1298
1299
1300 <para>
1301  This should be self-explanatory. Note the first item leads to an editor for the
1302  <link linkend="actions-file">actions files</link>, which is where the ad, banner,
1303  cookie, and URL blocking magic is configured as well as other advanced features of
1304  <application>Privoxy</application>. This is an easy way to adjust various
1305  aspects of <application>Privoxy</application> configuration. The actions
1306  file, and other configuration files, are explained in detail below. 
1307 </para>
1308
1309 <para>
1310  <quote>Toggle Privoxy On or Off</quote> is handy for sites that might 
1311  have problems with your current actions and filters. You can in fact use
1312  it as a test to see whether it is <application>Privoxy</application> 
1313  causing the problem or not. <application>Privoxy</application> continues 
1314  to run as a proxy in this case, but all manipulation is disabled, i.e.
1315  <application>Privoxy</application> acts like a normal forwarding proxy. There
1316  is even a toggle <link linkend="bookmarklets">Bookmarklet</link> offered, so
1317  that you can toggle <application>Privoxy</application> with one click from
1318  your browser.
1319 </para>
1320
1321 </sect2>
1322
1323 <!--  ~  End section  ~  -->
1324
1325
1326
1327
1328 <!--   ~~~~~       New section      ~~~~~     -->
1329
1330 <sect2 id="confoverview">
1331 <title>Configuration Files Overview</title>
1332 <para>
1333  For Unix, *BSD and Linux, all configuration files are located in
1334  <filename>/etc/privoxy/</filename> by default. For MS Windows, OS/2, and
1335  AmigaOS these are all in the same directory as the 
1336  <application>Privoxy</application> executable. <![%p-not-stable;[ The name
1337  and number of configuration files has changed from previous versions, and is
1338  subject to change as development progresses.]]>
1339 </para>
1340
1341 <para>
1342  The installed defaults provide a reasonable starting point, though 
1343  some settings may be aggressive by some standards. For the time being, the
1344  principle configuration files are:
1345 </para>
1346
1347 <para>
1348  <itemizedlist>
1349
1350   <listitem>
1351    <para>
1352      The <link linkend="config">main configuration file</link> is named <filename>config</filename>
1353      on Linux, Unix, BSD, OS/2, and AmigaOS and <filename>config.txt</filename>
1354      on Windows. This is a required file.
1355    </para>
1356   </listitem> 
1357
1358   <listitem>
1359    <para>
1360     <filename>default.action</filename> (the main <link linkend="actions-file">actions file</link>)
1361     is used to define which <quote>actions</quote> relating to banner-blocking, images, pop-ups,
1362     content modification, cookie handling etc should be applied by default. It also defines many
1363     exceptions (both positive and negative) from this default set of actions that enable 
1364     <application>Privoxy</application> to selectively eliminate the junk, and only the junk, on
1365     as many websites as possible.
1366    </para>
1367    <para>
1368     Multiple actions files may be defined in <filename>config</filename>. These 
1369     are processed in the order they are defined. Local customizations and locally 
1370     preferred exceptions to the default policies  as defined in
1371     <filename>default.action</filename> (which you will most probably want
1372     to define sooner or later) are probably best applied in
1373     <filename>user.action</filename>, where you can preserve them across
1374     upgrades. <filename>standard.action</filename> is for
1375     <application>Privoxy's</application> internal use.
1376    </para>
1377    <para>    
1378     There is also a web based editor that can be accessed from
1379     <ulink
1380     url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>
1381     (Shortcut: <ulink
1382     url="http://p.p/show-status">http://p.p/show-status</ulink>) for the
1383     various actions files. 
1384    </para>
1385   </listitem> 
1386
1387   <listitem>
1388    <para>
1389     <filename>default.filter</filename> (the <link linkend="filter-file">filter
1390     file</link>) can be used to re-write the raw page content, including
1391     viewable text as well as embedded HTML and JavaScript, and whatever else
1392     lurks on any given web page. The filtering jobs are only pre-defined here;
1393     whether to apply them or not is up to the actions files.
1394    </para>
1395   </listitem> 
1396
1397  </itemizedlist>
1398 </para>
1399
1400 <para>
1401  All files use the <quote><literal>#</literal></quote> character to denote a
1402  comment (the rest of the line will be ignored) and understand line continuation
1403  through placing a backslash ("<literal>\</literal>") as the very last character
1404  in a line. If the <literal>#</literal> is preceded by a backslash, it looses
1405  its special function. Placing a <literal>#</literal> in front of an otherwise
1406  valid configuration line to prevent it from being interpreted is called "commenting
1407  out" that line.
1408 </para>
1409
1410 <para>
1411  The actions files and <filename>default.filter</filename> 
1412  can use Perl style <link linkend="regex">regular expressions</link> for
1413  maximum flexibility. 
1414 </para>
1415
1416 <para>
1417  After making any changes, there is no need to restart
1418  <application>Privoxy</application> in order for the changes to take
1419  effect. <application>Privoxy</application> detects such changes 
1420  automatically. Note, however, that it may take one or two additional
1421  requests for the change to take effect. When changing the listening address
1422  of <application>Privoxy</application>, these <quote>wake up</quote> requests
1423  must obviously be sent to the <emphasis>old</emphasis> listening address.
1424 </para>
1425
1426 <![%p-not-stable;[
1427 <para>
1428  While under development, the configuration content is subject to change. 
1429  The below documentation may not be accurate by the time you read this. 
1430  Also, what constitutes a <quote>default</quote> setting, may change, so 
1431  please check all your configuration files on important issues.
1432 </para>
1433 ]]>
1434
1435 </sect2>
1436 </sect1>
1437 <!--  ~  End section  ~  -->
1438
1439
1440 <!--   ~~~~~~~~       New section Header    ~~~~~~~~~     -->
1441
1442 <!-- **************************************************** -->
1443 <!-- Include config.sgml here -->
1444 <!-- This is where the entire config file is detailed. -->
1445  &config;
1446 <!-- end include  -->
1447
1448
1449 <!--  ~  End section  ~  -->
1450
1451
1452
1453 <!--   ~~~~~~~~       New section Header    ~~~~~~~~~     -->
1454
1455 <sect1 id="actions-file"><title>Actions Files</title>
1456
1457 <para>
1458  The actions files are used to define what actions
1459  <application>Privoxy</application> takes for which URLs, and thus determine
1460  how ad images, cookies and various other aspects of HTTP content and
1461  transactions are handled, and on which sites (or even parts thereof). There 
1462  are three such files included with <application>Privoxy</application>
1463  with differing purposes:
1464  </para>
1465  
1466  <para>
1467   <itemizedlist>
1468    <listitem>
1469     <para>
1470      <filename>default.action</filename> - is the primary action file 
1471      that sets the initial values for all actions. It is intended to 
1472      provide a base level of functionality for
1473      <application>Privoxy's</application> array of features. So it is 
1474      a set of broad rules that should work reasonably well for users everywhere.
1475      This is the file that the developers are keeping updated, and <link
1476      linkend="installation-keepupdated">making available to users</link>.
1477     </para>
1478    </listitem> 
1479    <listitem>
1480     <para>
1481      <filename>user.action</filename> - is intended to be for local site 
1482      preferences and exceptions. As an example, if your ISP or your bank
1483      has specific requirements, and need special handling, this kind of 
1484      thing should go here. This file will not be upgraded.
1485     </para>
1486   </listitem> 
1487    <listitem>
1488     <para>
1489      <filename>standard.action</filename> - is used by the web based editor, 
1490      to set various pre-defined sets of rules for the default actions section
1491      in <filename>default.action</filename>. These have increasing levels of
1492      aggressiveness <emphasis>and have no influence on your browsing unless
1493      you select them explicitly in the editor</emphasis>. It is not recommend
1494      to edit this file.
1495     </para>
1496     <para>
1497      The default profiles, and their associated actions, as pre-defined in
1498      <filename>standard.action</filename> are:
1499     </para>
1500     <para>
1501     <table frame=all><title>Default Configurations</title>
1502     <tgroup cols=4 align=left colsep=1 rowsep=1>
1503     <colspec colname=c1>
1504     <colspec colname=c2>
1505     <colspec colname=c3>
1506     <colspec colname=c4>
1507     <thead>
1508     <row>
1509       <entry>Feature</entry>
1510       <entry>Cautious</entry>
1511       <entry>Medium</entry>
1512       <entry>Adventuresome</entry>
1513     </row>
1514     </thead>
1515     <!--  <tfoot> -->
1516     <!--  <row> -->
1517     <!--    <entry>f1</entry> -->
1518     <!--    <entry>f2</entry> -->
1519     <!--    <entry>f3</entry> -->
1520     <!--    <entry>f4</entry> -->
1521     <!--  </row> -->
1522     <!--  </tfoot> -->
1523     <tbody>
1524
1525     <row>
1526       <entry>Ad-blocking by URL</entry>
1527       <entry>yes</entry>
1528       <entry>yes</entry>
1529       <entry>yes</entry>
1530     </row>
1531
1532     <row>
1533       <entry>Ad-filtering by size</entry>
1534       <entry>yes</entry>
1535       <entry>yes</entry>
1536       <entry>yes</entry>
1537     </row>
1538
1539     <row>
1540       <entry>GIF de-animation</entry>
1541       <entry>no</entry>
1542       <entry>yes</entry>
1543       <entry>yes</entry>
1544     </row>
1545
1546     <row>
1547       <entry>Referer forging</entry>
1548       <entry>no</entry>
1549       <entry>yes</entry>
1550       <entry>yes</entry>
1551     </row>
1552
1553     <row>
1554       <entry>Cookie handling</entry>
1555       <entry>none</entry>
1556       <entry>session-only</entry>
1557       <entry>kill</entry>
1558     </row>
1559
1560     <row>
1561       <entry>Pop-up killing</entry>
1562       <entry>unsolicited</entry>
1563       <entry>unsolicited</entry>
1564       <entry>all</entry>
1565     </row>
1566
1567     <row>
1568       <entry>Fast redirects</entry>
1569       <entry>no</entry>
1570       <entry>no</entry>
1571       <entry>yes</entry>
1572     </row>
1573
1574     <row>
1575       <entry>HTML taming</entry>
1576       <entry>yes</entry>
1577       <entry>yes</entry>
1578       <entry>yes</entry>
1579     </row>
1580
1581     <row>
1582       <entry>JavaScript taming</entry>
1583       <entry>yes</entry>
1584       <entry>yes</entry>
1585       <entry>yes</entry>
1586     </row>
1587
1588     <row>
1589       <entry>Web-bug killing</entry>
1590       <entry>yes</entry>
1591       <entry>yes</entry>
1592       <entry>yes</entry>
1593     </row>
1594
1595     <row>
1596       <entry>Fun text replacements</entry>
1597       <entry>no</entry>
1598       <entry>no</entry>
1599       <entry>yes</entry>
1600     </row>
1601
1602     <row>
1603       <entry>Image tag reordering</entry>
1604       <entry>no</entry>
1605       <entry>no</entry>
1606       <entry>yes</entry>
1607     </row>
1608
1609     <row>
1610       <entry>Ad-filtering by link</entry>
1611       <entry>no</entry>
1612       <entry>no</entry>
1613       <entry>yes</entry>
1614     </row>
1615
1616     <row>
1617       <entry>Demoronizer</entry>
1618       <entry>no</entry>
1619       <entry>yes</entry>
1620       <entry>yes</entry>
1621     </row>
1622
1623
1624     </tbody>
1625     </tgroup>
1626     </table>
1627     </para>
1628
1629    </listitem> 
1630   </itemizedlist>
1631  </para> 
1632
1633 <para>
1634  The list of actions files to be used are defined in the main configuration 
1635  file, and are processed in the order they are defined (e.g.
1636  <filename>default.action</filename> is typically process before
1637  <filename>user.action</filename>). The content of these can all be viewed and
1638  edited from <ulink
1639  url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>.
1640 </para>
1641
1642 <para>
1643  An actions file typically has multiple sections. If you want to use
1644  <quote>aliases</quote> in an actions file, you have to place the (optional)
1645  <link linkend="aliases">alias section</link> at the top of that file.
1646  Then comes the default set of rules which will apply universally to all
1647  sites and pages (be <emphasis>very careful</emphasis> with using such a
1648  universal set in <filename>user.action</filename> or any other actions file after 
1649  <filename>default.action</filename>, because it will override the result
1650  from consulting any previous file). And then below that,
1651  exceptions to the defined universal policies. You can regard
1652  <filename>user.action</filename> as an appendix to <filename>default.action</filename>,
1653  with the advantage that is a separate file, which makes preserving your
1654  personal settings across <application>Privoxy</application> upgrades easier.
1655 </para>
1656
1657 <para> 
1658  Actions can be used to block anything you want, including ads, banners, or
1659  just some obnoxious URL that you would rather not see. Cookies can be accepted
1660  or rejected, or accepted only during the current browser session (i.e. not
1661  written to disk), content can be modified, JavaScripts tamed, user-tracking
1662  fooled, and much more. See below for a <link linkend="actions">complete list
1663  of actions</link>.
1664 </para>
1665
1666 <!--   ~~~~~       New section      ~~~~~     -->
1667 <sect2>
1668 <title>Finding the Right Mix</title>
1669 <para>
1670  Note that some <link linkend="actions">actions</link>, like cookie suppression
1671  or script disabling, may render some sites unusable that rely on these
1672  techniques to work properly. Finding the right mix of actions is not always easy and
1673  certainly a matter of personal taste. In general, it can be said that the more
1674  <quote>aggressive</quote> your default settings (in the top section of the
1675  actions file) are, the more exceptions for <quote>trusted</quote> sites you
1676  will have to make later. If, for example, you want to crunch all cookies per
1677  default, you'll have to make exceptions from that rule for sites that you
1678  regularly use and that require cookies for actually useful puposes, like maybe
1679  your bank, favorite shop, or newspaper. 
1680 </para>
1681
1682 <para>
1683  We have tried to provide you with reasonable rules to start from in the
1684  distribution actions files. But there is no general rule of thumb on these
1685  things. There just are too many variables, and sites are constantly changing.
1686  Sooner or later you will want to change the rules (and read this chapter again :).
1687 </para>
1688 </sect2>
1689
1690 <!--   ~~~~~       New section      ~~~~~     -->
1691 <sect2>
1692 <title>How to Edit</title>
1693 <para>
1694  The easiest way to edit the actions files is with a browser by
1695  using our browser-based editor, which can be reached from <ulink
1696  url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>.
1697  The editor allows both fine-grained control over every single feature on a
1698  per-URL basis, and easy choosing from wholesale sets of defaults like
1699  <quote>Cautious</quote>, <quote>Medium</quote> or <quote>Adventuresome</quote>.
1700  Warning: the <quote>Adventuresome</quote> setting is not only more aggressive, 
1701  but includes settings that are fun and subversive, and which some may find of 
1702  dubious merit!
1703 </para>
1704
1705 <para>
1706  If you prefer plain text editing to GUIs, you can of course also directly edit the
1707  the actions files. Look at <filename>default.action</filename> which is richly
1708  commented.
1709 </para>
1710 </sect2>
1711
1712
1713 <sect2 id="actions-apply">
1714 <title>How Actions are Applied to URLs</title>
1715 <para>
1716  Actions files are divided into sections. There are special sections,
1717  like the <quote><link linkend="aliases">alias</link></quote> sections which will
1718  be discussed later. For now let's concentrate on regular sections: They have a
1719  heading line (often split up to multiple lines for readability) which consist
1720  of a list of actions, separated by whitespace and enclosed in curly braces.
1721  Below that, there is a list of URL patterns, each on a separate line.
1722 </para>
1723
1724 <para>
1725  To determine which actions apply to a request, the URL of the request is
1726  compared to all patterns in each action file file. Every time it matches, the list of
1727  applicable actions for the URL is incrementally updated, using the heading
1728  of the section in which the pattern is located. If multiple matches for
1729  the same URL set the same action differently, the last match wins. If not, 
1730  the effects are aggregated. E.g. a URL might match a regular section with 
1731  a heading line of <literal>{ 
1732  +<link linkend="handle-as-image">handle-as-image</link> }</literal>,
1733  then later another one with just <literal>{
1734  +<link linkend="block">block</link> }</literal>, resulting
1735  in <emphasis>both</emphasis> actions to apply.
1736 </para>
1737
1738 <para>
1739  You can trace this process for any given URL by visiting <ulink
1740  url="http://config.privoxy.org/show-url-info">http://config.privoxy.org/show-url-info</ulink>.
1741 </para>
1742
1743 <para>
1744  More detail on this is provided in the Appendix, <link linkend="ACTIONSANAT">
1745  Anatomy of an Action</link>.
1746 </para>
1747 </sect2>
1748
1749 <!--   ~~~~~       New section      ~~~~~     -->
1750 <sect2 id="af-patterns">
1751 <title>Patterns</title>
1752 <para> 
1753  As mentioned, <application>Privoxy</application> uses <quote>patterns</quote>
1754  to determine what actions might apply to which sites and pages your browser 
1755  attempts to access. These <quote>patterns</quote> use wild card type 
1756  <emphasis>pattern</emphasis> matching to achieve a high degree of 
1757  flexibility. This allows one expression to be expanded and potentially match
1758  against many similar patterns.
1759 </para>
1760  
1761 <para>
1762  Generally, a <application>Privoxy</application> pattern has the form
1763  <literal>&lt;domain&gt;/&lt;path&gt;</literal>, where both the
1764  <literal>&lt;domain&gt;</literal> and <literal>&lt;path&gt;</literal> are
1765  optional. (This is why the special <literal>/</literal> pattern matches all
1766  URLs). Note that the protocol portion of the URL pattern (e.g.
1767  <literal>http://</literal>) should <emphasis>not</emphasis> be included in
1768  the pattern. This is assumed already!
1769 </para>
1770
1771 <variablelist>
1772  <varlistentry>
1773   <term><literal>www.example.com/</literal></term>
1774   <listitem>
1775    <para>
1776     is a domain-only pattern and will match any request to <literal>www.example.com</literal>,
1777     regardless of which document on that server is requested.
1778    </para>
1779   </listitem>
1780  </varlistentry>
1781  <varlistentry>
1782   <term><literal>www.example.com</literal></term>
1783   <listitem>
1784    <para>
1785     means exactly the same. For domain-only patterns, the trailing <literal>/</literal> may
1786     be omitted.
1787    </para>
1788   </listitem>
1789  </varlistentry>
1790  <varlistentry>
1791   <term><literal>www.example.com/index.html</literal></term>
1792   <listitem>
1793    <para>
1794     matches only the single document <literal>/index.html</literal>
1795     on <literal>www.example.com</literal>.
1796    </para>
1797   </listitem>
1798  </varlistentry>
1799  <varlistentry>
1800   <term><literal>/index.html</literal></term>
1801   <listitem>
1802    <para>
1803     matches the document <literal>/index.html</literal>, regardless of the domain,
1804     i.e. on <emphasis>any</emphasis> web server.
1805    </para>
1806   </listitem>
1807  </varlistentry>
1808  <varlistentry>
1809   <term><literal>index.html</literal></term>
1810   <listitem>
1811    <para>
1812     matches nothing, since it would be  interpreted as a domain name and
1813     there is no top-level domain called <literal>.html</literal>.
1814    </para>
1815   </listitem>
1816  </varlistentry>
1817 </variablelist>
1818
1819
1820 <!--   ~~~~~       New section      ~~~~~     -->
1821 <sect3><title>The Domain Pattern</title>
1822
1823 <para>
1824  The matching of the domain part offers some flexible options: if the
1825  domain starts or ends with a dot, it becomes unanchored at that end. 
1826  For example:
1827 </para>
1828
1829 <variablelist>
1830  <varlistentry>
1831   <term><literal>.example.com</literal></term>
1832   <listitem>
1833    <para>
1834     matches any domain that <emphasis>ENDS</emphasis> in
1835     <literal>.example.com</literal>
1836    </para>
1837   </listitem>
1838  </varlistentry>
1839  <varlistentry>
1840   <term><literal>www.</literal></term>
1841   <listitem>
1842    <para>
1843     matches any domain that <emphasis>STARTS</emphasis> with
1844     <literal>www.</literal>
1845    </para>
1846   </listitem>
1847  </varlistentry>
1848  <varlistentry>
1849   <term><literal>.example.</literal></term>
1850   <listitem>
1851    <para>
1852     matches any domain that <emphasis>CONTAINS</emphasis> <literal>.example.</literal>
1853     (Correctly speaking: It matches any FQDN that contains <literal>example</literal> as a domain.)
1854    </para>
1855   </listitem>
1856  </varlistentry>
1857 </variablelist>
1858
1859 <para>
1860  Additionally, there are wild-cards that you can use in the domain names
1861  themselves. They work pretty similar to shell wild-cards: <quote>*</quote>
1862  stands for zero or more arbitrary characters, <quote>?</quote> stands for
1863  any single character, you can define character classes in square
1864  brackets and all of that can be freely mixed:
1865 </para>
1866
1867 <variablelist>
1868  <varlistentry>
1869   <term><literal>ad*.example.com</literal></term>
1870   <listitem>
1871    <para>
1872     matches <quote>adserver.example.com</quote>, 
1873     <quote>ads.example.com</quote>, etc but not <quote>sfads.example.com</quote>
1874    </para>
1875   </listitem>
1876  </varlistentry>
1877  <varlistentry>
1878   <term><literal>*ad*.example.com</literal></term>
1879   <listitem>
1880    <para>
1881     matches all of the above, and then some.
1882    </para>
1883   </listitem>
1884  </varlistentry>
1885  <varlistentry>
1886   <term><literal>.?pix.com</literal></term>
1887   <listitem>
1888    <para>
1889     matches <literal>www.ipix.com</literal>,
1890     <literal>pictures.epix.com</literal>, <literal>a.b.c.d.e.upix.com</literal> etc. 
1891    </para>
1892   </listitem>
1893  </varlistentry>
1894  <varlistentry>
1895   <term><literal>www[1-9a-ez].example.c*</literal></term>
1896   <listitem>
1897    <para>
1898      matches <literal>www1.example.com</literal>, 
1899      <literal>www4.example.cc</literal>, <literal>wwwd.example.cy</literal>, 
1900      <literal>wwwz.example.com</literal> etc., but <emphasis>not</emphasis> 
1901      <literal>wwww.example.com</literal>.
1902    </para>
1903   </listitem>
1904  </varlistentry>
1905 </variablelist>
1906
1907 </sect3>
1908
1909 <!--  ~  End section  ~  -->
1910
1911
1912 <!--   ~~~~~       New section      ~~~~~     -->
1913 <sect3><title>The Path Pattern</title>
1914
1915 <para>
1916  <application>Privoxy</application> uses Perl compatible regular expressions
1917  (through the <ulink url="http://www.pcre.org/">PCRE</ulink> library) for
1918  matching the path.
1919 </para>
1920
1921 <para>
1922  There is an <link linkend="regex">Appendix</link> with a brief quick-start into regular
1923  expressions, and full (very technical) documentation on PCRE regex syntax is available on-line
1924  at <ulink url="http://www.pcre.org/man.txt">http://www.pcre.org/man.txt</ulink>.
1925  You might also find the Perl man page on regular expressions (<literal>man perlre</literal>)
1926  useful, which is available on-line at <ulink
1927  url="http://www.perldoc.com/perl5.6/pod/perlre.html">http://www.perldoc.com/perl5.6/pod/perlre.html</ulink>.
1928 </para>
1929
1930 <para>
1931  Note that the path pattern is automatically left-anchored at the <quote>/</quote>,
1932  i.e. it matches as if it would start with a <quote>^</quote> (regular expression speak 
1933  for the beginning of a line).
1934 </para>
1935
1936 <para>
1937  Please also note that matching in the path is <emphasis>CASE INSENSITIVE</emphasis>
1938  by default, but you can switch to case sensitive at any point in the pattern by using the 
1939  <quote>(?-i)</quote> switch: <literal>www.example.com/(?-i)PaTtErN.*</literal> will match
1940  only documents whose path starts with <literal>PaTtErN</literal> in
1941  <emphasis>exactly</emphasis> this capitalization.
1942 </para>
1943 </sect3>
1944
1945 </sect2>
1946
1947 <!--  ~  End section  ~  -->
1948
1949
1950 <!--   ~~~~~       New section      ~~~~~     -->
1951
1952 <sect2 id="actions">
1953 <title>Actions</title>
1954 <para>
1955  All actions are disabled by default, until they are explicitly enabled
1956  somewhere in an actions file. Actions are turned on if preceded with a
1957  <quote>+</quote>, and turned off if preceded with a <quote>-</quote>. So a
1958  <literal>+action</literal> means <quote>do that action</quote>, e.g.
1959  <literal>+block</literal> means <quote>please block URLs that match the
1960  following patterns</quote>, and <literal>-block</literal> means <quote>don't
1961  block URLs that match the following patterns, even if <literal>+block</literal>
1962  previously applied.</quote>
1963
1964 </para>
1965
1966 <para> 
1967  Again, actions are invoked by placing them on a line, enclosed in curly braces and
1968  separated by whitespace, like in 
1969  <literal>{+some-action -some-other-action{some-parameter}}</literal>,
1970  followed by a list of URL patterns, one per line, to which they apply.
1971  Together, the actions line and the following pattern lines make up a section
1972  of the actions file. 
1973 </para>
1974
1975 <para> 
1976  There are three classes of actions:
1977 </para>
1978
1979 <para>
1980  <itemizedlist>
1981  <listitem>
1982   <para>  
1983    Boolean, i.e the action can only be <quote>enabled</quote> or
1984    <quote>disabled</quote>. Syntax:
1985   </para>
1986   <para>
1987    <screen>
1988   +<replaceable class="function">name</replaceable>        # enable action <replaceable class="parameter">name</replaceable>
1989   -<replaceable class="function">name</replaceable>        # disable action <replaceable class="parameter">name</replaceable></screen>
1990   </para>
1991   <para>  
1992    Example: <literal>+block</literal>
1993   </para>
1994  </listitem>
1995
1996
1997  <listitem>
1998   <para>  
1999    Parameterized, where some value is required in order to enable this type of action.
2000    Syntax:
2001   </para>
2002   <para>
2003    <screen>
2004   +<replaceable class="function">name</replaceable>{<replaceable class="parameter">param</replaceable>}  # enable action and set parameter to <replaceable class="parameter">param</replaceable>,
2005                # overwriting parameter from previous match if necessary
2006   -<replaceable class="function">name</replaceable>         # disable action. The parameter can be omitted</screen>
2007   </para>
2008   <para>
2009    Note that if the URL matches multiple positive forms of a parameterized action,
2010    the last match wins, i.e. the params from earlier matches are simply ignored.
2011   </para>
2012   <para>  
2013    Example: <literal>+hide-user-agent{ Mozilla 1.0 }</literal>
2014   </para>
2015  </listitem>
2016  
2017  <listitem>
2018   <para>  
2019    Multi-value. These look exactly like parameterized actions,
2020    but they behave differently: If the action applies multiple times to the
2021    same URL, but with different parameters, <emphasis>all</emphasis> the parameters
2022    from <emphasis>all</emphasis> matches are remembered. This is used for actions
2023    that can be executed for the same request repeatedly, like adding multiple
2024    headers, or filtering through multiple filters. Syntax:
2025   </para>
2026   <para>
2027    <screen>
2028   +<replaceable class="function">name</replaceable>{<replaceable class="parameter">param</replaceable>}   # enable action and add <replaceable class="parameter">param</replaceable> to the list of parameters
2029   -<replaceable class="function">name</replaceable>{<replaceable class="parameter">param</replaceable>}   # remove the parameter <replaceable class="parameter">param</replaceable> from the list of parameters
2030                 # If it was the last one left, disable the action.
2031   <replaceable class="parameter">-name</replaceable>          # disable this action completely and remove all parameters from the list</screen>
2032   </para>
2033   <para>  
2034    Examples: <literal>+add-header{X-Fun-Header: Some text}</literal> and
2035    <literal>+filter{html-annoyances}</literal>
2036   </para>
2037  </listitem>
2038
2039  </itemizedlist>
2040 </para>
2041
2042 <para>
2043  If nothing is specified in any actions file, no <quote>actions</quote> are
2044  taken. So in this case <application>Privoxy</application> would just be a
2045  normal, non-blocking, non-anonymizing proxy. You must specifically enable the
2046  privacy and blocking features you need (although the provided default actions
2047  files will give a good starting point).
2048 </para>
2049
2050 <para>
2051  Later defined actions always over-ride earlier ones.  So exceptions 
2052  to any rules you make, should come in the latter part of the file (or 
2053  in a file that is processed later when using multiple actions files). For
2054  multi-valued actions, the actions are applied in the order they are specified.
2055  Actions files are processed in the order they are defined in
2056  <filename>config</filename> (the default installation has three actions
2057  files). It also quite possible for any given URL pattern to match more than
2058  one pattern and thus more than one set of actions!
2059 </para>
2060
2061 <!-- start actions listing -->
2062 <para>
2063  The list of valid <application>Privoxy</application> actions are:
2064 </para>
2065
2066
2067 <!-- ********************************************************** -->
2068 <!-- Please note the below defined actions use id's that are    -->
2069 <!-- probably linked from other places, so please don't change. -->
2070 <!--                                                            -->
2071 <!-- ********************************************************** -->
2072
2073
2074 <!--   ~~~~~       New section      ~~~~~     -->
2075
2076 <sect3 renderas="sect4" id="add-header">
2077 <title>add-header</title>
2078
2079 <variablelist>
2080  <varlistentry>
2081   <term>Typical use:</term>
2082   <listitem>
2083    <para>Confuse log analysis, custom applications</para>
2084   </listitem>
2085  </varlistentry>
2086
2087  <varlistentry>
2088   <term>Effect:</term>
2089   <listitem>
2090    <para>
2091     Sends a user defined HTTP header to the web server.
2092    </para>
2093   </listitem>
2094  </varlistentry>
2095
2096  <varlistentry>
2097   <term>Type:</term>
2098   <!-- boolean, parameterized, Multi-value -->
2099   <listitem>
2100    <para>Multi-value.</para>
2101   </listitem>
2102  </varlistentry>
2103  
2104  <varlistentry>
2105   <term>Parameter:</term>
2106   <listitem>
2107    <para>
2108     Any string value is possible. Validity of the defined HTTP headers is not checked.
2109     It is recommended that you use the <quote><literal>X-</literal></quote> prefix
2110     for custom headers.
2111    </para>
2112   </listitem>
2113  </varlistentry>
2114  
2115 <varlistentry>
2116   <term>Notes:</term>
2117   <listitem>
2118    <para>
2119     This action may be specified multiple times, in order to define multiple 
2120     headers. This is rarely needed for the typical user. If you don't know what 
2121     <quote>HTTP headers</quote> are, you definitely don't need to worry about this 
2122     one.
2123    </para>
2124   </listitem>
2125  </varlistentry>
2126
2127  <varlistentry>
2128   <term>Example usage:</term>
2129   <listitem>
2130     <para>
2131      <screen>+add-header{X-User-Tracking: sucks}</screen>
2132    </para>
2133   </listitem>
2134  </varlistentry>
2135 </variablelist>
2136 </sect3>
2137
2138
2139 <!--   ~~~~~       New section      ~~~~~     -->
2140 <sect3 renderas="sect4" id="block">
2141 <title>block</title>
2142
2143 <variablelist>
2144  <varlistentry>
2145   <term>Typical use:</term>
2146   <listitem>
2147    <para>Block ads or other obnoxious content</para>
2148   </listitem>
2149  </varlistentry>
2150
2151  <varlistentry>
2152   <term>Effect:</term>
2153   <listitem>
2154    <para>
2155     Requests for URLs to which this action applies are blocked, i.e. the requests are not
2156     forwarded to the remote server, but answered locally with a substitute page or image,
2157     as determined by the <literal><link linkend="handle-as-image">handle-as-image</link></literal>
2158     and <literal><link linkend="set-image-blocker">set-image-blocker</link></literal> actions.
2159    </para>
2160   </listitem>
2161  </varlistentry>
2162
2163  <varlistentry>
2164   <term>Type:</term>
2165   <!-- boolean, parameterized, Multi-value -->
2166   <listitem>
2167    <para>Boolean.</para>
2168   </listitem>
2169  </varlistentry>
2170
2171  <varlistentry>
2172   <term>Parameter:</term>
2173   <listitem>
2174    <para>N/A</para>
2175   </listitem>
2176  </varlistentry>
2177  
2178 <varlistentry>
2179   <term>Notes:</term>
2180   <listitem>
2181    <para>
2182     <application>Privoxy</application> sends a special <quote>BLOCKED</quote> page
2183     for requests to blocked pages. This page contains links to find out why the request
2184     was blocked, and a click-through to the blocked content (the latter only if compiled with the
2185     force feature enabled). The <quote>BLOCKED</quote> page adapts to the available
2186     screen space -- it displays full-blown if space allows, or miniaturized and text-only
2187     if loaded into a small frame or window. If you are using <application>Privoxy</application>
2188     right now, you can take a look at the 
2189     <ulink url="http://ads.bannerserver.example.com/nasty-ads/sponsor.html"><quote>BLOCKED</quote>
2190     page</ulink>.
2191    </para>
2192    <para> 
2193     A very important exception occurs if <emphasis>both</emphasis> 
2194     <literal>block</literal> and <literal><link linkend="handle-as-image">handle-as-image</link></literal>,
2195     apply to the same request: it will then be replaced by an image. If 
2196     <literal><link linkend="set-image-blocker">set-image-blocker</link></literal>
2197     (see below) also applies, the type of image will be determined by its parameter,
2198     if not, the standard checkerboard pattern is sent.
2199    </para>
2200    <para>
2201     It is important to understand this process, in order 
2202     to understand how <application>Privoxy</application> deals with 
2203     ads and other unwanted content.
2204    </para>
2205    <para>
2206     The <literal><link linkend="filter">filter</link></literal>
2207     action can perform a very similar task, by <quote>blocking</quote>
2208     banner images and other content through rewriting the relevant URLs in the
2209     document's HTML source, so they don't get requested in the first place.
2210     Note that this is a totally different technique, and it's easy to confuse the two.
2211    </para>
2212   </listitem>
2213  </varlistentry>
2214
2215  <varlistentry>
2216   <term>Example usage (section):</term>
2217   <listitem>
2218     <para>
2219      <screen>{+block}      # Block and replace with "blocked" page
2220 .nasty-stuff.example.com
2221
2222 {+block +handle-as-image} # Block and replace with image
2223 .ad.doubleclick.net
2224 .ads.r.us</screen>
2225     </para>
2226   </listitem>
2227  </varlistentry>
2228
2229
2230 </variablelist>
2231 </sect3>
2232
2233 <!--   ~~~~~       New section      ~~~~~     -->
2234 <sect3 renderas="sect4" id="crunch-incoming-cookies">
2235 <title>crunch-incoming-cookies</title>
2236
2237 <variablelist>
2238  <varlistentry>
2239   <term>Typical use:</term>
2240   <listitem>
2241    <para>
2242     Prevent the web server from setting any cookies on your system
2243    </para>
2244   </listitem>
2245  </varlistentry>
2246
2247  <varlistentry>
2248   <term>Effect:</term>
2249   <listitem>
2250    <para>
2251     Deletes any <quote>Set-Cookie:</quote> HTTP headers from server replies.
2252    </para>
2253   </listitem>
2254  </varlistentry>
2255
2256  <varlistentry>
2257   <term>Type:</term>
2258   <!-- Boolean, Parameterized, Multi-value -->
2259   <listitem>
2260    <para>Boolean.</para>
2261   </listitem>
2262  </varlistentry>
2263
2264  <varlistentry>
2265   <term>Parameter:</term>
2266   <listitem>
2267    <para>
2268     N/A
2269    </para>
2270   </listitem>
2271  </varlistentry>
2272  
2273  <varlistentry>
2274   <term>Notes:</term>
2275   <listitem>
2276    <para>
2277     This action is only concerned with <emphasis>incoming</emphasis> cookies. For
2278     <emphasis>outgoing</emphasis> cookies, use
2279     <literal><link linkend="crunch-outgoing-cookies">crunch-outgoing-cookies</link></literal>.
2280     Use <emphasis>both</emphasis> to disable cookies completely.
2281    </para>
2282    <para>
2283     It makes <emphasis>no sense at all</emphasis> to use this action in conjunction
2284     with the <literal><link linkend="session-cookies-only">session-cookies-only</link></literal> action,
2285     since it would prevent the session cookies from being set. See also 
2286     <literal><link linkend="filter-content-cookies">filter-content-cookies</link></literal>.
2287    </para>
2288   </listitem>
2289  </varlistentry>
2290
2291  <varlistentry>
2292   <term>Example usage:</term>
2293   <listitem>
2294    <para>
2295     <screen>+crunch-incoming-cookies</screen>
2296    </para>
2297   </listitem>
2298  </varlistentry>
2299 </variablelist>
2300 </sect3>
2301
2302
2303 <!--   ~~~~~       New section      ~~~~~     -->
2304 <sect3 renderas="sect4" id="crunch-outgoing-cookies">
2305 <title>crunch-outgoing-cookies</title>
2306
2307 <variablelist>
2308  <varlistentry>
2309   <term>Typical use:</term>
2310   <listitem>
2311    <para>
2312     Prevent the web server from reading any cookies from your system
2313    </para>
2314   </listitem>
2315  </varlistentry>
2316
2317  <varlistentry>
2318   <term>Effect:</term>
2319   <listitem>
2320    <para>
2321     Deletes any <quote>Cookie:</quote> HTTP headers from client requests.
2322    </para>
2323   </listitem>
2324  </varlistentry>
2325
2326  <varlistentry>
2327   <term>Type:</term>
2328   <!-- Boolean, Parameterized, Multi-value -->
2329   <listitem>
2330    <para>Boolean.</para>
2331   </listitem>
2332  </varlistentry>
2333
2334  <varlistentry>
2335   <term>Parameter:</term>
2336   <listitem>
2337    <para>
2338     N/A
2339    </para>
2340   </listitem>
2341  </varlistentry>
2342  
2343  <varlistentry>
2344   <term>Notes:</term>
2345   <listitem>
2346    <para>
2347     This action is only concerned with <emphasis>outgoing</emphasis> cookies. For
2348     <emphasis>incoming</emphasis> cookies, use
2349     <literal><link linkend="crunch-incoming-cookies">crunch-incoming-cookies</link></literal>.
2350     Use <emphasis>both</emphasis> to disable cookies completely.
2351    </para>
2352    <para>
2353     It makes <emphasis>no sense at all</emphasis> to use this action in conjunction
2354     with the <literal><link linkend="session-cookies-only">session-cookies-only</link></literal> action,
2355     since it would prevent the session cookies from being read.
2356    </para>
2357   </listitem>
2358  </varlistentry>
2359
2360  <varlistentry>
2361   <term>Example usage:</term>
2362   <listitem>
2363    <para>
2364     <screen>+crunch-outgoing-cookies</screen>
2365    </para>
2366   </listitem>
2367  </varlistentry>
2368
2369 </variablelist>
2370 </sect3>
2371
2372
2373 <!--   ~~~~~       New section      ~~~~~     -->
2374 <sect3 renderas="sect4" id="deanimate-gifs">
2375 <title>deanimate-gifs</title>
2376
2377 <variablelist>
2378  <varlistentry>
2379   <term>Typical use:</term>
2380   <listitem>
2381    <para>Stop those annoying, distracting animated GIF images.</para>
2382   </listitem>
2383  </varlistentry>
2384
2385  <varlistentry>
2386   <term>Effect:</term>
2387   <listitem>
2388    <para>
2389     De-animate GIF animations, i.e. reduce them to their first or last image.
2390    </para>
2391   </listitem>
2392  </varlistentry>
2393
2394  <varlistentry>
2395   <term>Type:</term>
2396   <!-- boolean, parameterized, Multi-value -->
2397   <listitem>
2398    <para>Parameterized.</para>
2399   </listitem>
2400  </varlistentry>
2401
2402  <varlistentry>
2403   <term>Parameter:</term>
2404   <listitem>
2405    <para>
2406     <quote>last</quote> or <quote>first</quote>
2407    </para>
2408   </listitem>
2409  </varlistentry>
2410  
2411  <varlistentry>
2412   <term>Notes:</term>
2413   <listitem>
2414    <para>
2415     This will also shrink the images considerably (in bytes, not pixels!). If
2416     the option <quote>first</quote> is given, the first frame of the animation
2417     is used as the replacement. If <quote>last</quote> is given, the last
2418     frame of the animation is used instead, which probably makes more sense for
2419     most banner animations, but also has the risk of not showing the entire
2420     last frame (if it is only a delta to an earlier frame).
2421    </para>
2422    <para>
2423     You can safely use this action with patterns that will also match non-GIF
2424     objects, because no attempt will be made at anything that doesn't look like
2425     a GIF.
2426    </para>
2427   </listitem>
2428  </varlistentry>
2429
2430  <varlistentry>
2431   <term>Example usage:</term>
2432   <listitem>
2433     <para>
2434       <screen>+deanimate-gifs{last}</screen>
2435     </para>
2436   </listitem>
2437  </varlistentry>
2438 </variablelist>
2439 </sect3>
2440
2441 <!--   ~~~~~       New section      ~~~~~     -->
2442 <sect3 renderas="sect4" id="downgrade-http-version">
2443 <title>downgrade-http-version</title>
2444
2445 <variablelist>
2446  <varlistentry>
2447   <term>Typical use:</term>
2448   <listitem>
2449    <para>Work around (very rare) problems with HTTP/1.1</para>
2450   </listitem>
2451  </varlistentry>
2452
2453  <varlistentry>
2454   <term>Effect:</term>
2455   <listitem>
2456    <para>
2457     Downgrades HTTP/1.1 client requests and server replies to HTTP/1.0.
2458    </para>
2459   </listitem>
2460  </varlistentry>
2461
2462  <varlistentry>
2463   <term>Type:</term>
2464   <!-- boolean, parameterized, Multi-value -->
2465   <listitem>
2466    <para>Boolean.</para>
2467   </listitem>
2468  </varlistentry>
2469
2470  <varlistentry>
2471   <term>Parameter:</term>
2472   <listitem>
2473    <para>
2474     N/A
2475    </para>
2476   </listitem>
2477  </varlistentry>
2478  
2479 <varlistentry>
2480   <term>Notes:</term>
2481   <listitem>
2482    <para>
2483     This is a left-over from the time when <application>Privoxy</application>
2484     didn't support important HTTP/1.1 features well. It is left here for the
2485     unlikely case that you experience HTTP/1.1 related problems with some server
2486     out there. Not all (optional) HTTP/1.1 features are supported yet, so there
2487     is a chance you might need this action.
2488    </para>
2489   </listitem>
2490  </varlistentry>
2491
2492  <varlistentry>
2493   <term>Example usage (section):</term>
2494   <listitem>
2495     <para>
2496      <screen>{+downgrade-http-version}
2497 problem-host.example.com</screen>
2498     </para>
2499   </listitem>
2500  </varlistentry>
2501
2502 </variablelist>
2503 </sect3>
2504
2505 <!--   ~~~~~       New section      ~~~~~     -->
2506 <sect3 renderas="sect4" id="fast-redirects">
2507 <title>fast-redirects</title>
2508
2509 <variablelist>
2510  <varlistentry>
2511   <term>Typical use:</term>
2512   <listitem>
2513    <para>Fool some click-tracking scripts and speed up indirect links</para>
2514   </listitem>
2515  </varlistentry>
2516
2517  <varlistentry>
2518   <term>Effect:</term>
2519   <listitem>
2520    <para>
2521     Cut off all but the last valid URL from requests.
2522    </para>
2523   </listitem>
2524  </varlistentry>
2525
2526  <varlistentry>
2527   <term>Type:</term>
2528   <!-- boolean, parameterized, Multi-value -->
2529   <listitem>
2530    <para>Boolean.</para>
2531   </listitem>
2532  </varlistentry>
2533
2534  <varlistentry>
2535   <term>Parameter:</term>
2536   <listitem>
2537    <para>
2538     N/A
2539    </para>
2540   </listitem>
2541  </varlistentry>
2542
2543  <varlistentry>
2544   <term>Notes:</term>
2545   <listitem>
2546    <para>  
2547     Many sites, like yahoo.com, don't just link to other sites. Instead, they
2548     will link to some script on their own servers, giving the destination as a
2549     parameter, which will then redirect you to the final target. URLs
2550     resulting from this scheme typically look like:
2551     <emphasis>http://some.place/click-tracker.cgi?target=http://some.where.else</emphasis>.
2552   </para>
2553    <para>
2554     Sometimes, there are even multiple consecutive redirects encoded in the
2555     URL. These redirections via scripts make your web browsing more traceable,
2556     since the server from which you follow such a link can see where you go
2557     to. Apart from that, valuable bandwidth and time is wasted, while your
2558     browser ask the server for one redirect after the other. Plus, it feeds
2559     the advertisers.
2560    </para>
2561    <para>
2562     This feature is currently not very smart and is scheduled for improvement.
2563     It is likely to break some sites. You should expect to need possibly 
2564     many exceptions to this action, if it is enabled by default in
2565     <filename>default.action</filename>. Some sites just don't work without 
2566     it.
2567    </para>
2568   </listitem>
2569  </varlistentry>
2570
2571  <varlistentry>
2572   <term>Example usage:</term>
2573   <listitem>
2574     <para>
2575      <screen>{+fast-redirects}</screen>
2576     </para>
2577   </listitem>
2578  </varlistentry>
2579
2580 </variablelist>
2581 </sect3>
2582
2583
2584 <!--   ~~~~~       New section      ~~~~~     -->
2585 <sect3 renderas="sect4" id="filter">
2586 <title>filter</title>
2587
2588 <variablelist>
2589  <varlistentry>
2590   <term>Typical use:</term>
2591   <listitem>
2592    <para>Get rid of HTML and JavaScript annoyances, banner advertisements (by size), do fun text replacements, etc.</para>
2593   </listitem>
2594  </varlistentry>
2595
2596  <varlistentry>
2597   <term>Effect:</term>
2598   <listitem>
2599    <para>
2600     Text documents, including HTML and JavaScript, to which this action
2601     applies, are filtered on-the-fly through the specified regular expression
2602     based substitutions.
2603    </para>
2604   </listitem>
2605  </varlistentry>
2606
2607  <varlistentry>
2608   <term>Type:</term>
2609   <!-- boolean, parameterized, Multi-value -->
2610   <listitem>
2611    <para>Parameterized.</para>
2612   </listitem>
2613  </varlistentry>
2614
2615  <varlistentry>
2616   <term>Parameter:</term>
2617   <listitem>
2618    <para>
2619     The name of a filter, as defined in the <link linkend="filter-file">filter file</link>
2620     (typically <filename>default.filter</filename>, set by the
2621     <literal><link linkend="filterfile">filterfile</link></literal>
2622     option in the <link linkend="config">config file</link>). Filtering 
2623     can be completely disabled without the use of parameters.
2624    </para>
2625   </listitem>
2626  </varlistentry>
2627  
2628  <varlistentry>
2629   <term>Notes:</term>
2630   <listitem>
2631    <para>
2632     For your convenience, there are a number of pre-defined filters available 
2633     in the distribution filter file that you can use. See the examples below for
2634     a list.
2635    </para>
2636    <para>
2637     This is potentially a very powerful feature!  But <quote>rolling your own</quote>
2638     filters requires a knowledge of regular expressions and HTML.
2639    </para>
2640    <para>
2641     Filtering requires buffering the page content, which may appear to
2642     slow down page rendering since nothing is displayed until all content has
2643     passed the filters. (It does not really take longer, but seems that way
2644     since the page is not incrementally displayed.) This effect will be more
2645     noticeable on slower connections.
2646    </para>
2647    <para>
2648     The amount of data that can be filtered is limited to the 
2649     <literal><link linkend="buffer-limit">buffer-limit</link></literal>
2650     option in the main <link linkend="config">config file</link>. The 
2651     default is 4096 KB (4 Megs). Once this limit is exceeded, the buffered
2652     data, and all pending data, is passed through unfiltered. 
2653    </para>
2654    <para>
2655     Inappropriate MIME types, such as zipped files, are not filtered at all.
2656     Encrypted SSL data (from HTTPS servers) cannot be filtered either since
2657     this would violate the integrity of the secure transaction.
2658    </para>
2659    <para>
2660     At this time, <application>Privoxy</application> cannot (yet!) uncompress compressed
2661     documents. If you want filtering to work on all documents, even those that
2662     would normally be sent compressed, use the
2663     <literal><link linkend="prevent-compression">prevent-compression</link></literal>
2664     action in conjunction with <literal>filter</literal>.
2665    </para>
2666    <para>
2667     Filtering can achieve some of the same effects as the 
2668     <literal><link linkend="block">block</link></literal>
2669     action, i.e. it can be used to block ads and banners. But the mechanism 
2670     works quite differently. One effective use, is to block ad banners 
2671     based on their size (see below), since many of these seem to be somewhat 
2672     standardized.
2673    </para>
2674    <para>
2675     <link linkend="contact">Feedback</link> with suggestions for new or
2676     improved filters is particularly welcome!
2677    </para>
2678   </listitem>
2679  </varlistentry>
2680
2681  <varlistentry>
2682   <term>Example usage (with filters from the distribution <filename>default.filter</filename> file):</term>
2683   <listitem>
2684    <para>
2685     <anchor id="filter-js-annoyances">
2686     <screen>+filter{js-annoyances}       # Get rid of particularly annoying JavaScript abuse</screen>
2687    </para>
2688    <para>
2689     <anchor id="filter-js-events">
2690     <screen>+filter{js-events}           # Kill all JS event bindings (Radically destructive! Only for extra nasty sites)</screen>
2691    </para>
2692    <para>
2693     <anchor id="filter-html-annoyances">
2694     <screen>+filter{html-annoyances}     # Get rid of particularly annoying HTML abuse</screen>
2695    </para>
2696    <para>
2697     <anchor id="filter-content-cookies">
2698     <screen>+filter{content-cookies}     # Kill cookies that come in the HTML or JS content</screen>
2699    </para>
2700    <para>
2701     <anchor id="filter-refresh-tags">
2702     <screen>+filter{refresh-tags}        # Kill automatic refresh tags (for dial-on-demand setups)</screen>
2703    </para>
2704    <para>
2705     <anchor id="filter-unsolicited-popups">
2706     <screen>+filter{unsolicited-popups}  # Disable only unsolicited pop-up windows</screen>
2707    </para>
2708    <para>
2709     <anchor id="filter-all-popups">
2710     <screen>+filter{all-popups}          # Kill all popups in JavaScript and HTML</screen>
2711    </para>
2712    <para>
2713     <anchor id="filter-img-reorder">
2714     <screen>+filter{img-reorder}         # Reorder attributes in &lt;img&gt; tags to make the banners-by-* filters more effective</screen>
2715    </para>
2716    <para>
2717     <anchor id="filter-banners-by-size">
2718     <screen>+filter{banners-by-size}     # Kill banners by size</screen>
2719    </para>
2720    <para>
2721     <anchor id="filter-banners-by-link">
2722     <screen>+filter{banners-by-link}     # Kill banners by their links to known clicktrackers</screen>
2723    </para>
2724    <para>
2725     <anchor id="filter-webbugs">
2726     <screen>+filter{webbugs}             # Squish WebBugs (1x1 invisible GIFs used for user tracking)</screen>
2727    </para>
2728    <para>
2729     <anchor id="filter-tiny-textforms">
2730     <screen>+filter{tiny-textforms}      # Extend those tiny textareas up to 40x80 and kill the hard wrap</screen>
2731    </para>
2732    <para>
2733     <anchor id="filter-jumping-windows">
2734     <screen>+filter{jumping-windows}     # Prevent windows from resizing and moving themselves</screen>
2735    </para>
2736    <para>
2737     <anchor id="filter-frameset-borders">
2738     <screen>+filter{frameset-borders}    # Give frames a border and make them resizable</screen>
2739    </para>
2740    <para>
2741     <anchor id="filter-demoronizer">
2742     <screen>+filter{demoronizer}         # Fix MS's non-standard use of standard charsets</screen>
2743    </para>
2744    <para>
2745     <anchor id="filter-shockwave-flash">
2746     <screen>+filter{shockwave-flash}     # Kill embedded Shockwave Flash objects</screen>
2747    </para>
2748    <para>
2749     <anchor id="filter-quicktime-kioskmode">
2750     <screen>+filter{quicktime-kioskmode} # Make Quicktime movies saveable</screen>
2751    </para>
2752    <para>
2753     <anchor id="filter-fun">
2754     <screen>+filter{fun}                 # Text replacements for subversive browsing fun!</screen>
2755    </para>
2756    <para>
2757     <anchor id="filter-crude-parental">
2758     <screen>+filter{crude-parental}      # Crude parental filtering (demo only)</screen>
2759    </para>
2760    <para>
2761     <anchor id="filter-ie-exploits">
2762     <screen>+filter{ie-exploits}         # Disable some known Internet Explorer bug exploits</screen>
2763    </para>
2764   </listitem>
2765  </varlistentry>
2766 </variablelist>
2767 </sect3>
2768
2769
2770 <!--   ~~~~~       New section      ~~~~~     -->
2771 <sect3 renderas="sect4" id="handle-as-image">
2772 <title>handle-as-image</title>
2773
2774 <variablelist>
2775  <varlistentry>
2776   <term>Typical use:</term>
2777   <listitem>
2778    <para>Mark URLs as belonging to images (so they'll be replaced by images <emphasis>if they get blocked</emphasis>)</para>
2779   </listitem>
2780  </varlistentry>
2781
2782  <varlistentry>
2783   <term>Effect:</term>
2784   <listitem>
2785    <para>
2786     This action alone doesn't do anything noticeable. It just marks URLs as images.
2787     If the <literal><link linkend="block">block</link></literal> action <emphasis>also applies</emphasis>,
2788     the presence or absence of this mark decides whether an HTML <quote>blocked</quote>
2789     page, or a replacement image (as determined by the <literal><link
2790     linkend="set-image-blocker">set-image-blocker</link></literal> action) will be sent to the
2791     client as a substitute for the blocked content.
2792    </para>
2793   </listitem>
2794  </varlistentry>
2795
2796  <varlistentry>
2797   <term>Type:</term>
2798   <!-- Boolean, Parameterized, Multi-value -->
2799   <listitem>
2800    <para>Boolean.</para>
2801   </listitem>
2802  </varlistentry>
2803
2804  <varlistentry>
2805   <term>Parameter:</term>
2806   <listitem>
2807    <para>
2808     N/A
2809    </para>
2810   </listitem>
2811  </varlistentry>
2812  
2813  <varlistentry>
2814   <term>Notes:</term>
2815   <listitem>
2816    <para>
2817     The below generic example section is actually part of <filename>default.action</filename>.
2818     It marks all URLs with well-known image file name extensions as images and should
2819     be left intact. 
2820    </para>
2821    <para>
2822     Users will probably only want to use the handle-as-image action in conjunction with
2823     <literal><link linkend="block">block</link></literal>, to block sources of banners, whose URLs don't
2824     reflect the file type, like in the second example section.
2825    </para>
2826    <para>
2827     Note that you cannot treat HTML pages as images in most cases. For instance, (in-line) ad
2828     frames require an HTML page to be sent, or they won't display properly.
2829     Forcing <literal>handle-as-image</literal> in this situation will not replace the
2830     ad frame with an image, but lead to error messages.
2831    </para>
2832   </listitem>
2833  </varlistentry>
2834
2835  <varlistentry>
2836   <term>Example usage (sections):</term>
2837   <listitem>
2838    <para>
2839      <screen># Generic image extensions:
2840 #
2841 {+handle-as-image}
2842 /.*\.(gif|jpg|jpeg|png|bmp|ico)$
2843
2844 # These don't look like images, but they're banners and should be
2845 # blocked as images:
2846 #
2847 {+block +handle-as-image}
2848 some.nasty-banner-server.com/junk.cgi?output=trash
2849
2850 # Banner source! Who cares if they also have non-image content?
2851 ad.doubleclick.net 
2852 </screen>
2853    </para>
2854   </listitem>
2855  </varlistentry>
2856 </variablelist>
2857 </sect3>
2858
2859
2860 <!--   ~~~~~       New section      ~~~~~     -->
2861 <sect3 renderas="sect4" id="hide-forwarded-for-headers">
2862 <title>hide-forwarded-for-headers</title>
2863
2864 <variablelist>
2865  <varlistentry>
2866   <term>Typical use:</term>
2867   <listitem>
2868    <para>Improve privacy by hiding the true source of the request</para>
2869   </listitem>
2870  </varlistentry>
2871
2872  <varlistentry>
2873   <term>Effect:</term>
2874   <listitem>
2875    <para>
2876     Deletes any existing <quote>X-Forwarded-for:</quote> HTTP header from client requests,
2877     and prevents adding a new one.
2878    </para>
2879   </listitem>
2880  </varlistentry>
2881
2882  <varlistentry>
2883   <term>Type:</term>
2884   <!-- Boolean, Parameterized, Multi-value -->
2885   <listitem>
2886    <para>Boolean.</para>
2887   </listitem>
2888  </varlistentry>
2889
2890  <varlistentry>
2891   <term>Parameter:</term>
2892   <listitem>
2893    <para>
2894     N/A
2895    </para>
2896   </listitem>
2897  </varlistentry>
2898  
2899  <varlistentry>
2900   <term>Notes:</term>
2901   <listitem>
2902    <para>
2903     It is fairly safe to leave this on.
2904    </para>
2905    <para>
2906     This action is scheduled for improvement: It should be able to generate forged 
2907     <quote>X-Forwarded-for:</quote> headers using random IP addresses from a specified network,
2908     to make successive requests from the same client look like requests from a pool of different
2909     users sharing the same proxy.
2910    </para>
2911   </listitem>
2912  </varlistentry>
2913
2914  <varlistentry>
2915   <term>Example usage:</term>
2916   <listitem>
2917     <para>
2918      <screen>+hide-forwarded-for-headers</screen>
2919    </para>
2920   </listitem>
2921  </varlistentry>
2922 </variablelist>
2923 </sect3>
2924
2925
2926 <!--   ~~~~~       New section      ~~~~~     -->
2927 <sect3 renderas="sect4" id="hide-from-header">
2928 <title>hide-from-header</title>
2929
2930 <variablelist>
2931  <varlistentry>
2932   <term>Typical use:</term>
2933   <listitem>
2934    <para>Keep your (old and ill) browser from telling web servers your email address</para>
2935   </listitem>
2936  </varlistentry>
2937
2938  <varlistentry>
2939   <term>Effect:</term>
2940   <listitem>
2941    <para>
2942     Deletes any existing <quote>From:</quote> HTTP header, or replaces it with the
2943     specified string.
2944    </para>
2945   </listitem>
2946  </varlistentry>
2947
2948  <varlistentry>
2949   <term>Type:</term>
2950   <!-- Boolean, Parameterized, Multi-value -->
2951   <listitem>
2952    <para>Parameterized.</para>
2953   </listitem>
2954  </varlistentry>
2955
2956  <varlistentry>
2957   <term>Parameter:</term>
2958   <listitem>
2959    <para>
2960     Keyword: <quote>block</quote>, or any user defined value.
2961    </para>
2962   </listitem>
2963  </varlistentry>
2964  
2965  <varlistentry>
2966   <term>Notes:</term>
2967   <listitem>
2968    <para>
2969     The keyword <quote>block</quote> will completely remove the header 
2970     (not to be confused with the <literal><link linkend="block">block</link></literal>
2971     action).
2972    </para>
2973    <para>
2974     Alternately, you can specify any value you prefer to be sent to the web
2975     server. If you do, it is a matter of fairness not to use any address that
2976     is actually used by a real person.
2977    </para>
2978    <para>
2979     This action is rarely needed, as modern web browsers don't send
2980     <quote>From:</quote> headers anymore.
2981    </para>
2982   </listitem>
2983  </varlistentry>
2984
2985  <varlistentry>
2986   <term>Example usage:</term>
2987   <listitem>
2988    <para>
2989     <screen>+hide-from-header{block}</screen> or
2990     <screen>+hide-from-header{spam-me-senseless@sittingduck.example.com}</screen>
2991    </para>
2992   </listitem>
2993  </varlistentry>
2994 </variablelist>
2995 </sect3>
2996
2997
2998 <!--   ~~~~~       New section      ~~~~~     -->
2999 <sect3 renderas="sect4" id="hide-referrer">
3000 <title>hide-referrer</title>
3001 <anchor id="hide-referer">
3002 <variablelist>
3003  <varlistentry>
3004   <term>Typical use:</term>
3005   <listitem>
3006    <para>Conceal which link you followed to get to a particular site</para>
3007   </listitem>
3008  </varlistentry>
3009
3010  <varlistentry>
3011   <term>Effect:</term>
3012   <listitem>
3013    <para>
3014     Deletes the <quote>Referer:</quote> (sic) HTTP header from the client request,
3015     or replaces it with a forged one.
3016    </para>
3017   </listitem>
3018  </varlistentry>
3019
3020  <varlistentry>
3021   <term>Type:</term>
3022   <!-- Boolean, Parameterized, Multi-value -->
3023   <listitem>
3024    <para>Parameterized.</para>
3025   </listitem>
3026  </varlistentry>
3027
3028  <varlistentry>
3029   <term>Parameter:</term>
3030   <listitem>
3031    <itemizedlist>
3032     <listitem>
3033      <para><quote>block</quote> to delete the header completely.</para>
3034     </listitem>
3035     <listitem>
3036      <para><quote>forge</quote> to pretend to be coming from the homepage of the server we are talking to.</para>
3037     </listitem>
3038     <listitem>
3039      <para>Any other string to set a user defined referrer.</para>
3040     </listitem>
3041    </itemizedlist>
3042   </listitem>
3043  </varlistentry>
3044  
3045  <varlistentry>
3046   <term>Notes:</term>
3047   <listitem>
3048    <para>
3049     <quote>forge</quote> is the preferred option here, since some servers will
3050     not send images back otherwise, in an attempt to prevent their valuable
3051     content from being embedded elsewhere (and hence, without being surrounded
3052     by <emphasis>their</emphasis> banners).
3053    </para>
3054   <para>  
3055    <literal>hide-referer</literal> is an alternate spelling of
3056    <literal>hide-referrer</literal> and the two can be can be freely
3057    substituted with each other. (<quote>referrer</quote> is the
3058    correct English spelling, however the HTTP specification has a bug - it
3059    requires it to be spelled as <quote>referer</quote>.) 
3060   </para>
3061   </listitem>
3062  </varlistentry>
3063
3064  <varlistentry>
3065   <term>Example usage:</term>
3066   <listitem>
3067    <para>
3068      <screen>+hide-referrer{forge}</screen> or
3069      <screen>+hide-referrer{http://www.yahoo.com/}</screen>
3070    </para>
3071   </listitem>
3072  </varlistentry>
3073 </variablelist>
3074 </sect3>
3075
3076
3077 <!--   ~~~~~       New section      ~~~~~     -->
3078 <sect3 renderas="sect4" id="hide-user-agent">
3079 <title>hide-user-agent</title>
3080
3081 <variablelist>
3082  <varlistentry>
3083   <term>Typical use:</term>
3084   <listitem>
3085    <para>Conceal your type of browser and client operating system</para>
3086   </listitem>
3087  </varlistentry>
3088
3089  <varlistentry>
3090   <term>Effect:</term>
3091   <listitem>
3092    <para>
3093     Replaces the value of the <quote>User-Agent:</quote> HTTP header
3094     in client requests with the specified value.
3095    </para>
3096   </listitem>
3097  </varlistentry>
3098
3099  <varlistentry>
3100   <term>Type:</term>
3101   <!-- Boolean, Parameterized, Multi-value -->
3102   <listitem>
3103    <para>Parameterized.</para>
3104   </listitem>
3105  </varlistentry>
3106
3107  <varlistentry>
3108   <term>Parameter:</term>
3109   <listitem>
3110    <para>
3111     Any user-defined string.
3112    </para>
3113   </listitem>
3114  </varlistentry>
3115  
3116  <varlistentry>
3117   <term>Notes:</term>
3118   <listitem>
3119    <warning> 
3120     <para>
3121      This breaks many web sites that depend on looking at this header in order
3122      to customize their content for different browsers (which, by the
3123      way, is <emphasis>NOT</emphasis> a <ulink
3124      url="http://www.javascriptkit.com/javaindex.shtml">smart way to do
3125      that</ulink>!).
3126     </para>
3127    </warning>
3128    <para>
3129     Using this action in multi-user setups or wherever different types of
3130     browsers will access the same <application>Privoxy</application> is
3131     <emphasis>not recommended</emphasis>. In single-user, single-browser
3132     setups, you might use it to delete your OS version information from
3133     the headers, because it is an invitation to exploit known bugs for your
3134     OS. It is also occasionally useful to forge this in order to access 
3135     sites that won't let you in otherwise (though there may be a good 
3136     reason in some cases). Example of this: some MSN sites will not 
3137     let <application>Mozilla</application> enter, yet forging to a 
3138     <application>Netscape 6.1</application> user-agent works just fine.
3139     (Must be just a silly MS goof, I'm sure :-).
3140    </para>
3141    <para>
3142     This action is scheduled for improvement.
3143    </para>
3144    </listitem>
3145  </varlistentry>
3146
3147  <varlistentry>
3148   <term>Example usage:</term>
3149   <listitem>
3150    <para>
3151      <screen>+hide-user-agent{Netscape 6.1 (X11; I; Linux 2.4.18 i686)}</screen>
3152    </para>
3153   </listitem>
3154  </varlistentry>
3155 </variablelist>
3156 </sect3>
3157
3158
3159 <!--   ~~~~~       New section      ~~~~~     -->
3160 <sect3 renderas="sect4" id="kill-popups">
3161 <title>kill-popups<anchor id="kill-popup"></title>
3162
3163 <variablelist>
3164  <varlistentry>
3165   <term>Typical use:</term>
3166   <listitem>
3167    <para>Eliminate those annoying pop-up windows (deprecated)</para>
3168   </listitem>
3169  </varlistentry>
3170
3171  <varlistentry>
3172   <term>Effect:</term>
3173   <listitem>
3174    <para>
3175     While loading the document, replace JavaScript code that opens
3176     pop-up windows with (syntactically neutral) dummy code on the fly.
3177    </para>
3178   </listitem>
3179  </varlistentry>
3180
3181  <varlistentry>
3182   <term>Type:</term>
3183   <!-- Boolean, Parameterized, Multi-value -->
3184   <listitem>
3185    <para>Boolean.</para>
3186   </listitem>
3187  </varlistentry>
3188
3189  <varlistentry>
3190   <term>Parameter:</term>
3191   <listitem>
3192    <para>
3193     N/A
3194    </para>
3195   </listitem>
3196  </varlistentry>
3197  
3198  <varlistentry>
3199   <term>Notes:</term>
3200   <listitem>
3201    <para>
3202     This action is basically a built-in, hardwired special-purpose filter
3203     action, but there are important differences: For <literal>kill-popups</literal>,
3204     the document need not be buffered, so it can be incrementally rendered while
3205     downloading. But <literal>kill-popups</literal> doesn't catch as many pop-ups as
3206     <literal><link
3207     linkend="FILTER-ALL-POPUPS">filter{<replaceable>all-popups</replaceable>}</link></literal>
3208     does and is not as smart as <literal><link
3209     linkend="FILTER-UNSOLICITED-POPUPS">filter{<replaceable>unsolicited-popups</replaceable>}</link>
3210     </literal>is.
3211    </para>
3212    <para>
3213     Think of it as a fast and efficient replacement for a filter that you
3214     can use if you don't want any filtering at all. Note that it doesn't make
3215     sense to combine it with any <literal><link linkend="filter">filter</link></literal> action,
3216     since as soon as one <literal><link linkend="filter">filter</link></literal> applies,
3217     the whole document needs to be buffered anyway, which destroys the advantage of
3218     the <literal>kill-popups</literal> action over its filter equivalent.
3219    </para>
3220    <para>
3221     Killing all pop-ups unconditionally is problematic. Many shops and banks rely on
3222     pop-ups to display forms, shopping carts etc, and the <literal><link
3223     linkend="FILTER-UNSOLICITED-POPUPS">filter{<replaceable>unsolicited-popups</replaceable>}</link>
3224     </literal> does a fairly good job of catching only the unwanted ones.
3225    </para>
3226    <para>
3227     If the only kind of pop-ups that you want to kill are exit consoles (those
3228     <emphasis>really nasty</emphasis> windows that appear when you close an other
3229     one), you might want to use
3230     <literal><link
3231     linkend="filter">filter</link>{<replaceable>js-annoyances</replaceable>}</literal>
3232     instead. 
3233    </para>
3234
3235   <!-- 
3236    <para>
3237     An alternate spelling is <literal>+kill-popup</literal>, which is 
3238     interchangeable.
3239    </para>
3240  --> 
3241   </listitem>
3242  </varlistentry>
3243
3244  <varlistentry>
3245   <term>Example usage:</term>
3246   <listitem>
3247    <para><screen>+kill-popups</screen></para>
3248   </listitem>
3249  </varlistentry>
3250 </variablelist>
3251 </sect3>
3252
3253
3254 <!--   ~~~~~       New section      ~~~~~     -->
3255 <sect3 renderas="sect4" id="limit-connect">
3256 <title>limit-connect</title>
3257
3258 <variablelist>
3259  <varlistentry>
3260   <term>Typical use:</term>
3261   <listitem>
3262    <para>Prevent abuse of <application>Privoxy</application> as a TCP proxy relay</para>
3263   </listitem>
3264  </varlistentry>
3265
3266  <varlistentry>
3267   <term>Effect:</term>
3268   <listitem>
3269    <para>
3270     Specifies to which ports HTTP CONNECT requests are allowable.
3271    </para>
3272   </listitem>
3273  </varlistentry>
3274
3275  <varlistentry>
3276   <term>Type:</term>
3277   <!-- Boolean, Parameterized, Multi-value -->
3278   <listitem>
3279    <para>Parameterized.</para>
3280   </listitem>
3281  </varlistentry>
3282
3283  <varlistentry>
3284   <term>Parameter:</term>
3285   <listitem>
3286    <para>
3287     A comma-separated list of ports or port ranges (the latter using dashes, with the minimum
3288     defaulting to 0 and the maximum to 65K).
3289    </para>
3290   </listitem>
3291  </varlistentry>
3292  
3293  <varlistentry>
3294   <term>Notes:</term>
3295   <listitem>
3296    <para>
3297     By default, i.e. if no <literal>limit-connect</literal> action applies,
3298     <application>Privoxy</application> only allows HTTP CONNECT
3299     requests to port 443 (the standard, secure HTTPS port). Use 
3300     <literal>limit-connect</literal> if more fine-grained control is desired
3301     for some or all destinations.
3302    </para>
3303    <para>
3304     The CONNECT methods exists in HTTP to allow access to secure websites
3305     (<quote>https://</quote> URLs) through proxies. It works very simply:
3306     the proxy connects to the server on the specified port, and then
3307     short-circuits its connections to the client and to the remote server.
3308     This can be a big security hole, since CONNECT-enabled proxies can be
3309     abused as TCP relays very easily.
3310   </para>
3311   <para>
3312    If you don't know what any of this means, there probably is no reason to 
3313    change this one, since the default is already very restrictive.
3314   </para>
3315   </listitem>
3316  </varlistentry>
3317
3318  <varlistentry>
3319   <term>Example usages:</term>
3320   <listitem>
3321    <!-- I had trouble getting the spacing to look right in my browser -->
3322    <!-- I probably have the wrong font setup, bollocks. -->
3323    <!-- Apparently the emphasis tag uses a proportional font no matter what -->
3324     <para>
3325      <screen>+limit-connect{443}                   # This is the default and need not be specified.
3326 +limit-connect{80,443}                # Ports 80 and 443 are OK.
3327 +limit-connect{-3, 7, 20-100, 500-}   # Ports less than 3, 7, 20 to 100 and above 500 are OK.
3328 +limit-connect{-}                     # All ports are OK (gaping security hole!)</screen>
3329    </para>
3330   </listitem>
3331  </varlistentry>
3332 </variablelist>
3333 </sect3>
3334
3335 <!--   ~~~~~       New section      ~~~~~     -->
3336 <sect3 renderas="sect4" id="prevent-compression">
3337 <title>prevent-compression</title>
3338
3339 <variablelist>
3340  <varlistentry>
3341   <term>Typical use:</term>
3342   <listitem>
3343    <para>
3344     Ensure that servers send the content uncompressed, so it can be
3345     passed through <literal><link linkend="filter">filter</link></literal>s
3346    </para>
3347   </listitem>
3348  </varlistentry>
3349
3350  <varlistentry>
3351   <term>Effect:</term>
3352   <listitem>
3353    <para>
3354     Adds a header to the request that asks for uncompressed transfer.
3355    </para>
3356   </listitem>
3357  </varlistentry>
3358
3359  <varlistentry>
3360   <term>Type:</term>
3361   <!-- Boolean, Parameterized, Multi-value -->
3362   <listitem>
3363    <para>Boolean.</para>
3364   </listitem>
3365  </varlistentry>
3366
3367  <varlistentry>
3368   <term>Parameter:</term>
3369   <listitem>
3370    <para>
3371     N/A
3372    </para>
3373   </listitem>
3374  </varlistentry>
3375  
3376  <varlistentry>
3377   <term>Notes:</term>
3378   <listitem>
3379    <para>
3380     More and more websites send their content compressed by default, which
3381     is generally a good idea and saves bandwidth. But for the <literal><link
3382     linkend="filter">filter</link></literal>, <literal><link linkend="deanimate-gifs">deanimate-gifs</link></literal>
3383     and <literal><link linkend="kill-popups">kill-popups</link></literal> actions to work,
3384     <application>Privoxy</application> needs access to the  uncompressed data.
3385     Unfortunately, <application>Privoxy</application> can't yet(!)  uncompress, filter, and
3386     re-compress the content on the fly. So if you want to ensure that all websites, including
3387     those that normally compress, can be filtered, you need to use this action.
3388    </para>
3389    <para>
3390     This will slow down transfers from those websites, though. If you use any of the above-mentioned
3391     actions, you will typically want to use <literal>prevent-compression</literal> in conjunction
3392     with them.
3393    </para>
3394    <para>
3395     Note that some (rare) ill-configured sites don't handle requests for uncompressed
3396     documents correctly (they send an empty document body). If you use <literal>prevent-compression</literal>
3397     per default, you'll have to add exceptions for those sites. See the example for how to do that.
3398    </para>
3399   </listitem>
3400  </varlistentry>
3401
3402  <varlistentry>
3403   <term>Example usage (sections):</term>
3404   <listitem>
3405    <para>
3406     <screen># Set default:
3407 #
3408 {+prevent-compression}
3409 / # Match all sites
3410
3411 # Make exceptions for ill sites:
3412 #
3413 {-prevent-compression}
3414 www.debianhelp.org
3415 www.pclinuxonline.com</screen>
3416    </para>
3417   </listitem>
3418  </varlistentry>
3419
3420 </variablelist>
3421 </sect3>
3422
3423
3424 <!--   ~~~~~       New section      ~~~~~     -->
3425 <sect3 renderas="sect4" id="send-vanilla-wafer">
3426 <title>send-vanilla-wafer</title>
3427
3428 <variablelist>
3429  <varlistentry>
3430   <term>Typical use:</term>
3431   <listitem>
3432    <para>
3433     Feed log analysis scripts with useless data.
3434    </para>
3435   </listitem>
3436  </varlistentry>
3437
3438  <varlistentry>
3439   <term>Effect:</term>
3440   <listitem>
3441    <para>
3442     Sends a cookie with each request stating that you do not accept any copyright
3443     on cookies sent to you, and asking the site operator not to track you.
3444    </para>
3445   </listitem>
3446  </varlistentry>
3447
3448  <varlistentry>
3449   <term>Type:</term>
3450   <!-- Boolean, Parameterized, Multi-value -->
3451   <listitem>
3452    <para>Boolean.</para>
3453   </listitem>
3454  </varlistentry>
3455
3456  <varlistentry>
3457   <term>Parameter:</term>
3458   <listitem>
3459    <para>
3460     N/A
3461    </para>
3462   </listitem>
3463  </varlistentry>
3464  
3465  <varlistentry>
3466   <term>Notes:</term>
3467   <listitem>
3468    <para>
3469     The vanilla wafer is a (relatively) unique header and could conceivably be used to track you.
3470    </para>
3471    <para>
3472     This action is rarely used and not enabled in the default configuration.
3473    </para>
3474   </listitem>
3475  </varlistentry>
3476
3477  <varlistentry>
3478   <term>Example usage:</term>
3479   <listitem>
3480    <para>
3481      <screen>+send-vanilla-wafer</screen>
3482    </para>
3483   </listitem>
3484  </varlistentry>
3485
3486 </variablelist>
3487 </sect3>
3488
3489
3490 <!--   ~~~~~       New section      ~~~~~     -->
3491 <sect3 renderas="sect4" id="send-wafer">
3492 <title>send-wafer</title>
3493
3494 <variablelist>
3495  <varlistentry>
3496   <term>Typical use:</term>
3497   <listitem>
3498    <para>
3499     Send custom cookies or feed log analysis scripts with even more useless data.
3500    </para>
3501   </listitem>
3502  </varlistentry>
3503
3504  <varlistentry>
3505   <term>Effect:</term>
3506   <listitem>
3507    <para>
3508     Sends a custom, user-defined cookie with each request.
3509    </para>
3510   </listitem>
3511  </varlistentry>
3512
3513  <varlistentry>
3514   <term>Type:</term>
3515   <!-- Boolean, Parameterized, Multi-value -->
3516   <listitem>
3517    <para>Multi-value.</para>
3518   </listitem>
3519  </varlistentry>
3520
3521  <varlistentry>
3522   <term>Parameter:</term>
3523   <listitem>
3524    <para>
3525     A string of the form <quote><replaceable class="option">name</replaceable>=<replaceable
3526     class="parameter">value</replaceable></quote>.
3527    </para>
3528   </listitem>
3529  </varlistentry>
3530  
3531  <varlistentry>
3532   <term>Notes:</term>
3533   <listitem>
3534    <para>
3535     Being multi-valued, multiple instances of this action can apply to the same request,
3536     resulting in multiple cookies being sent.
3537    </para>
3538    <para>
3539     This action is rarely used and not enabled in the default configuration.
3540    </para>
3541   </listitem>
3542  </varlistentry>
3543  <varlistentry>
3544   <term>Example usage (section):</term>
3545   <listitem>
3546    <para>
3547     <screen>{+send-wafer{UsingPrivoxy=true}}
3548 my-internal-testing-server.void</screen>
3549    </para>
3550   </listitem>
3551  </varlistentry>
3552 </variablelist>
3553 </sect3>
3554
3555
3556 <!--   ~~~~~       New section      ~~~~~     -->
3557 <sect3 renderas="sect4" id="session-cookies-only">
3558 <title>session-cookies-only</title>
3559
3560 <variablelist>
3561  <varlistentry>
3562   <term>Typical use:</term>
3563   <listitem>
3564    <para>
3565     Allow only temporary <quote>session</quote> cookies (for the current
3566     browser session <emphasis>only</emphasis>). 
3567    </para>
3568   </listitem>
3569  </varlistentry>
3570
3571  <varlistentry>
3572   <term>Effect:</term>
3573   <listitem>
3574    <para>
3575     Deletes the <quote>expires</quote> field from <quote>Set-Cookie:</quote>
3576     server headers. Most browsers will not store such cookies permanently and
3577     forget them in between sessions.
3578    </para>
3579   </listitem>
3580  </varlistentry>
3581
3582 <varlistentry>
3583   <term>Type:</term>
3584   <!-- Boolean, Parameterized, Multi-value -->
3585   <listitem>
3586    <para>Boolean.</para>
3587   </listitem>
3588  </varlistentry>
3589
3590  <varlistentry>
3591   <term>Parameter:</term>
3592   <listitem>
3593    <para>
3594     N/A
3595    </para>
3596   </listitem>
3597  </varlistentry>
3598  
3599  <varlistentry>
3600   <term>Notes:</term>
3601   <listitem>
3602    <para>
3603     This is less strict than <literal><link linkend="crunch-incoming-cookies">crunch-incoming-cookies</link></literal> / 
3604     <literal><link linkend="crunch-outgoing-cookies">crunch-outgoing-cookies</link></literal> and allows you to browse
3605     websites that insist or rely on setting cookies, without compromising your privacy too badly.
3606    </para>
3607    <para>
3608     Most browsers will not permanently store cookies that have been processed by
3609     <literal>session-cookies-only</literal> and will forget about them between sessions.
3610     This makes profiling cookies useless, but won't break sites which require cookies so
3611     that you can log in for transactions. This is generally turned on for all 
3612     sites, and is the recommended setting.
3613    </para>
3614    <para>
3615     It makes <emphasis>no sense at all</emphasis> to use <literal>session-cookies-only</literal>
3616     together with <literal><link linkend="crunch-incoming-cookies">crunch-incoming-cookies</link></literal> or
3617     <literal><link linkend="crunch-outgoing-cookies">crunch-outgoing-cookies</link></literal>. If you do, cookies
3618     will be plainly killed.
3619    </para>
3620    <para>
3621     Note that it is up to the browser how it handles such cookies without an <quote>expires</quote>
3622     field. If you use an exotic browser, you might want to try it out to be sure.
3623    </para>
3624    <para>
3625     This setting also has no effect on cookies that may have been stored
3626     previously by the browser before starting <application>Privoxy</application>.
3627     These would have to be removed manually.
3628    </para>
3629    <para>
3630      <application>Privoxy</application> also uses  
3631      the <link linkend="filter-content-cookies">content-cookies filter</link> 
3632      to block some types of cookies. Content cookies are not effected by 
3633      <literal>session-cookies-only</literal>.
3634    </para>
3635   </listitem>
3636  </varlistentry>
3637
3638  <varlistentry>
3639   <term>Example usage:</term>
3640   <listitem>
3641    <para>
3642      <screen>+session-cookies-only</screen>
3643    </para>
3644   </listitem>
3645  </varlistentry>
3646 </variablelist>
3647 </sect3>
3648
3649
3650 <!--   ~~~~~       New section      ~~~~~     -->
3651 <sect3 renderas="sect4" id="set-image-blocker">
3652 <title>set-image-blocker</title>
3653
3654 <variablelist>
3655  <varlistentry>
3656   <term>Typical use:</term>
3657   <listitem>
3658    <para>Choose the replacement for blocked images</para>
3659   </listitem>
3660  </varlistentry>
3661
3662  <varlistentry>
3663   <term>Effect:</term>
3664   <listitem>
3665    <para>
3666      This action alone doesn't do anything noticeable. If <emphasis>both</emphasis>
3667      <literal><link linkend="block">block</link></literal> <emphasis>and</emphasis> <literal><link
3668      linkend="handle-as-image">handle-as-image</link></literal> <emphasis>also</emphasis>
3669      apply, i.e. if the request is to be blocked as an image,
3670      <emphasis>then</emphasis> the parameter of this action decides what will be
3671      sent as a replacement.
3672    </para>
3673   </listitem>
3674  </varlistentry>
3675
3676  <varlistentry>
3677   <term>Type:</term>
3678   <!-- Boolean, Parameterized, Multi-value -->
3679   <listitem>
3680    <para>Parameterized.</para>
3681   </listitem>
3682  </varlistentry>
3683
3684  <varlistentry>
3685   <term>Parameter:</term>
3686   <listitem>
3687    <itemizedlist>
3688     <listitem>
3689      <para>
3690       <quote>pattern</quote> to send a built-in checkerboard pattern image. The image is visually
3691       decent, scales very well, and makes it obvious where banners were busted.
3692      </para>
3693     </listitem>
3694     <listitem>
3695      <para>
3696       <quote>blank</quote> to send a built-in transparent image. This makes banners disappear
3697       completely, but makes it hard to detect where <application>Privoxy</application> has blocked
3698       images on a given page and complicates troubleshooting if <application>Privoxy</application>
3699       has blocked innocent images, like navigation icons.
3700      </para>
3701     </listitem>
3702     <listitem>
3703      <para>
3704       <quote><replaceable class="parameter">target-url</replaceable></quote> to
3705       send a redirect to <replaceable class="parameter">target-url</replaceable>. You can redirect
3706       to any image anywhere, even in your local filesystem (via <quote>file:///</quote> URL).
3707      </para>
3708      <para>
3709       A good application of redirects is to use special <application>Privoxy</application>-built-in
3710       URLs, which send the built-in images, as <replaceable class="parameter">target-url</replaceable>.
3711       This has the same visual effect as specifying <quote>blank</quote> or <quote>pattern</quote> in
3712       the first place, but enables your browser to cache the replacement image, instead of requesting
3713       it over and over again.
3714      </para>
3715     </listitem>
3716    </itemizedlist>
3717   </listitem>
3718  </varlistentry>
3719
3720  <varlistentry>
3721   <term>Notes:</term>
3722   <listitem>
3723    <para>
3724     The URLs for the built-in images are <quote>http://config.privoxy.org/send-banner?type=<replaceable
3725     class="parameter">type</replaceable></quote>, where <replaceable class="parameter">type</replaceable> is
3726     either <quote>blank</quote> or <quote>pattern</quote>.
3727    </para>
3728    <para>
3729     There is a third (advanced) type, called <quote>auto</quote>. It is <emphasis>NOT</emphasis> to be
3730     used in <literal>set-image-blocker</literal>, but meant for use from <link linkend="filter-file">filters</link>.
3731     Auto will select the type of image that would have applied to the referring page, had it been an image.
3732    </para>
3733   </listitem>
3734  </varlistentry>
3735
3736  <varlistentry>
3737   <term>Example usage:</term>
3738   <listitem>
3739    <para>
3740     Built-in pattern:
3741    </para>
3742    <para>
3743     <screen>+set-image-blocker{pattern}</screen>
3744    </para>
3745    <para>
3746     Redirect to the BSD devil:
3747    </para>
3748    <para>
3749     <screen>+set-image-blocker{http://www.freebsd.org/gifs/dae_up3.gif}</screen>
3750    </para>
3751    <para>
3752     Redirect to the built-in pattern for better caching:
3753    </para>
3754    <para>
3755     <screen>+set-image-blocker{http://config.privoxy.org/send-banner?type=pattern}</screen>
3756    </para>
3757   </listitem>
3758  </varlistentry>
3759 </variablelist>
3760 </sect3>
3761
3762
3763 <!--   ~~~~~       New section      ~~~~~     -->
3764 <sect3>
3765 <title>Summary</title>
3766 <para>
3767  Note that many of these actions have the potential to cause a page to
3768  misbehave, possibly even not to display at all. There are many ways 
3769  a site designer may choose to design his site, and what HTTP header 
3770  content, and other criteria, he may depend on. There is no way to have hard
3771  and fast rules for all sites. See the <link
3772  linkend="ACTIONSANAT">Appendix</link> for a brief example on troubleshooting
3773  actions.
3774 </para>
3775 </sect3>
3776 </sect2>
3777
3778 <!--   ~~~~~       New section      ~~~~~     -->
3779 <sect2 id="aliases">
3780 <title>Aliases</title>
3781 <para>
3782  Custom <quote>actions</quote>, known to <application>Privoxy</application>
3783  as <quote>aliases</quote>, can be defined by combining other actions.
3784  These can in turn be invoked just like the built-in actions.
3785  Currently, an alias name can contain any character except space, tab,
3786  <quote>=</quote>,
3787  <quote>{</quote> and <quote>}</quote>, but we <emphasis>strongly 
3788  recommend</emphasis> that you only use <quote>a</quote> to <quote>z</quote>,
3789  <quote>0</quote> to <quote>9</quote>, <quote>+</quote>, and <quote>-</quote>.
3790  Alias names are not case sensitive, and are not required to start with a
3791  <quote>+</quote> or <quote>-</quote> sign, since they are merely textually
3792  expanded.
3793 </para>
3794 <para>
3795  Aliases can be used throughout the actions file, but they <emphasis>must be
3796  defined in a special section at the top of the file!</emphasis>
3797  And there can only be one such section per actions file. Each actions file may
3798  have its own alias section, and the aliases defined in it are only visible
3799  within that file.
3800 </para>
3801 <para>
3802  There are two main reasons to use aliases: One is to save typing for frequently
3803  used combinations of actions, the other one is a gain in flexibility: If you
3804  decide once how you want to handle shops by defining an alias called
3805  <quote>shop</quote>, you can later change your policy on shops in
3806  <emphasis>one</emphasis> place, and your changes will take effect everywhere
3807  in the actions file where the <quote>shop</quote> alias is used. Calling aliases
3808  by their purpose also makes your actions files more readable.
3809 </para>
3810 <para>
3811  Currently, there is one big drawback to using aliases, though:
3812  <application>Privoxy</application>'s built-in web-based action file
3813  editor honors aliases when reading the actions files, but it expands
3814  them before writing. So the effects of your aliases are of course preserved,
3815  but the aliases themselves are lost when you edit sections that use aliases
3816  with it.
3817  This is likely to change in future versions of <application>Privoxy</application>.
3818 </para>
3819
3820 <para>
3821  Now let's define some aliases...
3822 </para>
3823
3824 <para>
3825  <screen>
3826  # Useful custom aliases we can use later.
3827  #
3828  # Note the (required!) section header line and that this section
3829  # must be at the top of the actions file!
3830  #
3831  {{alias}}
3832
3833  # These aliases just save typing later:
3834  # (Note that some already use other aliases!)
3835  #
3836  +crunch-all-cookies = +<link linkend="CRUNCH-INCOMING-COOKIES">crunch-incoming-cookies</link> +<link linkend="CRUNCH-OUTGOING-COOKIES">crunch-outgoing-cookies</link>
3837  -crunch-all-cookies = -<link linkend="CRUNCH-INCOMING-COOKIES">crunch-incoming-cookies</link> -<link linkend="CRUNCH-OUTGOING-COOKIES">crunch-outgoing-cookies</link>
3838  block-as-image      = +block +handle-as-image
3839  mercy-for-cookies   = -crunch-all-cookies -<link linkend="SESSION-COOKIES-ONLY">session-cookies-only</link> -<link linkend="FILTER-CONTENT-COOKIES">filter{content-cookies}</link>
3840
3841  # These aliases define combinations of actions
3842  # that are useful for certain types of sites:
3843  #
3844  fragile     = -<link linkend="BLOCK">block</link> -<link linkend="FILTER">filter</link> -crunch-all-cookies -<link linkend="FAST-REDIRECTS">fast-redirects</link> -<link linkend="HIDE-REFERER">hide-referrer</link> -<link linkend="KILL-POPUPS">kill-popups</link>
3845  shop        = -crunch-all-cookies -<link linkend="FILTER-ALL-POPUPS">filter{all-popups}</link> -<link linkend="KILL-POPUPS">kill-popups</link>
3846
3847  # Short names for other aliases, for really lazy people ;-)
3848  #
3849  c0 = +crunch-all-cookies
3850  c1 = -crunch-all-cookies</screen>
3851 </para>
3852
3853 <para>
3854  ...and put them to use. These sections would appear in the lower part of an 
3855  actions file and define exceptions to the default actions (as specified further
3856  up for the <quote>/</quote> pattern):
3857 </para>
3858
3859 <para>
3860  <screen>
3861  # These sites are either very complex or very keen on
3862  # user data and require minimal interference to work:
3863  #
3864  {fragile}
3865  .office.microsoft.com
3866  .windowsupdate.microsoft.com
3867  .nytimes.com
3868
3869  # Shopping sites:
3870  # Allow cookies (for setting and retrieving your customer data)
3871  #           
3872  {shop}
3873  .quietpc.com
3874  .worldpay.com   # for quietpc.com
3875  .scan.co.uk
3876
3877  # These shops require pop-ups:
3878  #
3879  {shop -kill-popups -filter{all-popups}}
3880   .dabs.com
3881   .overclockers.co.uk</screen>
3882 </para>
3883
3884 <para>
3885  Aliases like <quote>shop</quote> and <quote>fragile</quote> are often used for 
3886  <quote>problem</quote> sites that require some actions to be disabled 
3887  in order to function properly.
3888 </para>
3889 </sect2>
3890
3891 <!--   ~~~~~       New section      ~~~~~     -->
3892 <sect2 id="act-examples">
3893 <title>Actions Files Tutorial</title>
3894 <para>
3895  The above chapters have shown <link linkend="actions-file">which actions files
3896  there are and how they are organized</link>, how actions are <link
3897  linkend="actions">specified</link> and <link linkend="actions-apply">applied
3898  to URLs</link>, how <link linkend="af-patterns">patterns</link> work, and how to
3899  define and use <link linkend="aliases">aliases</link>. Now, let's look at an
3900  example <filename>default.action</filename> and <filename>user.action</filename>
3901  file and see how all these pieces come together:
3902 </para>
3903
3904 <sect3><title>default.action</title>
3905
3906 <para>
3907 Every config file should start with a short comment stating its purpose:
3908 </para>
3909
3910 <para>
3911  <screen># Sample default.action file &lt;developers@privoxy.org&gt;</screen>
3912 </para>
3913
3914 <para>
3915 Then, since this is the <filename>default.action</filename> file, the
3916 first section is a special section for internal use that you needn't
3917 change or worry about:
3918 </para>
3919
3920 <para>
3921  <screen>
3922 ##########################################################################
3923 # Settings -- Don't change! For internal Privoxy use ONLY.
3924 ##########################################################################
3925
3926 {{settings}}
3927 for-privoxy-version=3.0</screen>
3928 </para>
3929
3930 <para>
3931 After that comes the (optional) alias section. We'll use the example
3932 section from the above <link linkend="aliases">chapter on aliases</link>,
3933 that also explains why and how aliases are used:
3934 </para>
3935
3936 <para>
3937  <screen>
3938 ##########################################################################
3939 # Aliases
3940 ##########################################################################
3941 {{alias}}
3942
3943  # These aliases just save typing later:
3944  # (Note that some already use other aliases!)
3945  #
3946  +crunch-all-cookies = +<link linkend="CRUNCH-INCOMING-COOKIES">crunch-incoming-cookies</link> +<link linkend="CRUNCH-OUTGOING-COOKIES">crunch-outgoing-cookies</link>
3947  -crunch-all-cookies = -<link linkend="CRUNCH-INCOMING-COOKIES">crunch-incoming-cookies</link> -<link linkend="CRUNCH-OUTGOING-COOKIES">crunch-outgoing-cookies</link>
3948  block-as-image      = +block +handle-as-image
3949  mercy-for-cookies   = -crunch-all-cookies -<link linkend="SESSION-COOKIES-ONLY">session-cookies-only</link> -<link linkend="FILTER-CONTENT-COOKIES">filter{content-cookies}</link>
3950
3951  # These aliases define combinations of actions
3952  # that are useful for certain types of sites:
3953  #
3954  fragile     = -<link linkend="BLOCK">block</link> -<link linkend="FILTER">filter</link> -crunch-all-cookies -<link linkend="FAST-REDIRECTS">fast-redirects</link> -<link linkend="HIDE-REFERER">hide-referrer</link> -<link linkend="KILL-POPUPS">kill-popups</link>
3955  shop        = -crunch-all-cookies -<link linkend="FILTER-ALL-POPUPS">filter{all-popups}</link> -<link linkend="KILL-POPUPS">kill-popups</link></screen>
3956 </para>
3957
3958 <para>
3959  Now come the regular sections, i.e. sets of actions, accompanied
3960  by URL patterns to which they apply. Remember <emphasis>all actions
3961  are disabled when matching starts</emphasis>, so we have to explicitly
3962  enable the ones we want.
3963 </para>
3964
3965 <para>
3966  The first regular section is probably the most important. It has only
3967  one pattern, <quote><literal>/</literal></quote>, but this pattern
3968  <link linkend="af-patterns">matches all URLs</link>. Therefore, the
3969  set of actions used in this <quote>default</quote> section <emphasis>will
3970  be applied to all requests as a start</emphasis>. It can  be partly or
3971  wholly overridden by later matches further down this file, or in user.action,
3972  but it will still be largely responsible for your overall browsing
3973  experience.
3974 </para>
3975
3976 <para>
3977  Again, at the start of matching, all actions are disabled, so there is
3978  no real need to disable any actions here, but we will do that nonetheless,
3979  to have a complete listing for your reference. (Remember: a <quote>+</quote>
3980  preceding the action name enables the action, a <quote>-</quote> disables!).
3981  Also note how this long line has been made more readable by splitting it into
3982  multiple lines with line continuation.
3983 </para> 
3984
3985 <para>
3986  <screen>
3987 ##########################################################################
3988 # "Defaults" section:
3989 ##########################################################################
3990  { \
3991  -<link linkend="ADD-HEADER">add-header</link> \
3992  -<link linkend="BLOCK">block</link> \
3993  -<link linkend="CRUNCH-INCOMING-COOKIES">crunch-incoming-cookies</link> \
3994  -<link linkend="CRUNCH-OUTGOING-COOKIES">crunch-outgoing-cookies</link> \
3995  +<link linkend="DEANIMATE-GIFS">deanimate-gifs</link> \
3996  -<link linkend="DOWNGRADE-HTTP-VERSION">downgrade-http-version</link> \
3997  +<link linkend="FAST-REDIRECTS">fast-redirects</link> \
3998  +<link linkend="FILTER-JS-ANNOYANCES">filter{js-annoyances}</link> \
3999  -<link linkend="FILTER-JS-EVENTS">filter{js-events}</link> \
4000  +<link linkend="FILTER-HTML-ANNOYANCES">filter{html-annoyances}</link> \
4001  -<link linkend="FILTER-CONTENT-COOKIES">filter{content-cookies}</link> \
4002  +<link linkend="FILTER-REFRESH-TAGS">filter{refresh-tags}</link> \
4003  +<link linkend="FILTER-UNSOLICITED-POPUPS">filter{unsolicited-popups}</link> \
4004  -<link linkend="FILTER-ALL-POPUPS">filter{all-popups}</link> \
4005  +<link linkend="FILTER-IMG-REORDER">filter{img-reorder}</link> \
4006  +<link linkend="FILTER-BANNERS-BY-SIZE">filter{banners-by-size}</link> \
4007  -<link linkend="FILTER-BANNERS-BY-LINK">filter{banners-by-link}</link> \
4008  +<link linkend="FILTER-WEBBUGS">filter{webbugs}</link> \
4009  -<link linkend="FILTER-TINY-TEXTFORMS">filter{tiny-textforms}</link> \
4010  +<link linkend="FILTER-JUMPING-WINDOWS">filter{jumping-windows}</link> \
4011  -<link linkend="FILTER-FRAMESET-BORDERS">filter{frameset-borders}</link> \
4012  +<link linkend="FILTER-DEMORONIZER">filter{demoronizer}</link> \
4013  -<link linkend="FILTER-SHOCKWAVE-FLASH">filter{shockwave-flash}</link> \
4014  -<link linkend="FILTER-QUICKTIME-KIOSKMODE">filter{quicktime-kioskmode}</link> \
4015  -<link linkend="FILTER-FUN">filter{fun}</link> \
4016  -<link linkend="FILTER-CRUDE-PARENTAL">filter{crude-parental}</link> \
4017  +<link linkend="FILTER-IE-EXPLOITS">filter{ie-exploits}</link> \     
4018  -<link linkend="HANDLE-AS-IMAGE">handle-as-image</link> \
4019  +<link linkend="HIDE-FORWARDED-FOR-HEADERS">hide-forwarded-for-headers</link> \
4020  +<link linkend="HIDE-FROM-HEADER">hide-from-header{block}</link> \
4021  +<link linkend="HIDE-REFERER">hide-referrer{forge}</link> \
4022  -<link linkend="HIDE-USER-AGENT">hide-user-agent</link> \
4023  -<link linkend="KILL-POPUPS">kill-popups</link> \
4024  -<link linkend="LIMIT-CONNECT">limit-connect</link> \
4025  +<link linkend="PREVENT-COMPRESSION">prevent-compression</link> \
4026  -<link linkend="SEND-VANILLA-WAFER">send-vanilla-wafer</link> \
4027  -<link linkend="SEND-WAFER">send-wafer</link> \
4028  +<link linkend="SESSION-COOKIES-ONLY">session-cookies-only</link> \
4029  +<link linkend="SET-IMAGE-BLOCKER">set-image-blocker{pattern}</link> \
4030  }
4031  / # forward slash will match *all* potential URL patterns.</screen>
4032 </para>
4033
4034 <para>
4035  The default behavior is now set. Note that some actions, like not hiding
4036  the user agent, are part of a <quote>general policy</quote> that applies
4037  universally and won't get any exceptions defined later. Other choices,
4038  like not blocking (which is <emphasis>understandably</emphasis> the
4039  default!) need exceptions, i.e. we need to specify explicitly what we
4040  want to block in later sections.
4041 </para>
4042
4043 <para>
4044  The first of our specialized sections is concerned with <quote>fragile</quote>
4045  sites, i.e. sites that require minimum interference, because they are either
4046  very complex or very keen on tracking you (and have mechanisms in place that
4047  make them unusable for people who avoid being tracked). We will simply use
4048  our pre-defined <literal>fragile</literal> alias instead of stating the list
4049  of actions explicitly:
4050 </para>
4051
4052 <para>
4053  <screen>
4054 ##########################################################################
4055 # Exceptions for sites that'll break under the default action set:
4056 ##########################################################################
4057
4058 # "Fragile" Use a minimum set of actions for these sites (see alias above):
4059 #
4060 { fragile }
4061 .office.microsoft.com           # surprise, surprise!
4062 .windowsupdate.microsoft.com</screen>
4063 </para>
4064
4065 <para>
4066  Shopping sites are not as fragile, but they typically
4067  require cookies to log in, and pop-up windows for shopping
4068  carts or item details. Again, we'll use a pre-defined alias:
4069 </para>
4070  
4071 <para>
4072  <screen>
4073 # Shopping sites:
4074 #
4075 { shop }
4076 .quietpc.com 
4077 .worldpay.com   # for quietpc.com
4078 .jungle.com
4079 .scan.co.uk</screen>
4080 </para>
4081
4082 <!-- No longer needed BEGIN OF COMMENTED OUT BLOCK 
4083
4084 <para>
4085  Then, there are sites which rely on pop-up windows (yuck!) to work.
4086  Since we made pop-up-killing our default above, we need to make exceptions
4087  now. <ulink url="http://www.mozilla.org/">Mozilla</ulink> users, who
4088  can turn on smart handling of unwanted pop-ups in their browsers, can
4089  safely choose
4090  -<literal><link linkend="FILTER-ALL-POPUPS">filter{popups}</link></literal> (and
4091  -<literal><link linkend="KILL-POPUPS">kill-popups</link></literal>) above
4092  and hence don't need this section. Anyway, disabling an already disabled
4093  action doesn't hurt, so we'll define our exceptions regardless of what was
4094  chosen in the defaults section:
4095 </para>
4096
4097 <para>
4098  <screen>
4099 # These sites require pop-ups too :( 
4100 #
4101 { -<link linkend="KILL-POPUPS">kill-popups</link> -<link linkend="FILTER-ALL-POPUPS">filter{popups}</link> }
4102 .dabs.com
4103 .overclockers.co.uk
4104 .deutsche-bank-24.de</screen>
4105 </para>
4106
4107  END OF COMMENTED OUT BLOCK -->
4108
4109 <para>
4110  The <literal><link linkend="FAST-REDIRECTS">fast-redirects</link></literal>
4111  action, which we enabled per default above,  breaks some sites. So disable
4112  it for popular sites where we know it misbehaves:
4113 </para>
4114
4115 <para>
4116  <screen>
4117 { -<link linkend="FAST-REDIRECTS">fast-redirects</link> }
4118 login.yahoo.com
4119 edit.*.yahoo.com
4120 .google.com
4121 .altavista.com/.*(like|url|link):http
4122 .altavista.com/trans.*urltext=http
4123 .nytimes.com</screen>
4124 </para>
4125
4126 <para>
4127  It is important that <application>Privoxy</application> knows which
4128  URLs belong to images, so that <emphasis>if</emphasis> they are to
4129  be blocked, a substitute image can be sent, rather than an HTML page.
4130  Contacting the remote site to find out is not an option, since it
4131  would destroy the loading time advantage of banner blocking, and it
4132  would feed the advertisers (in terms of money <emphasis>and</emphasis>
4133  information). We can mark any URL as an image with the <literal><link
4134  linkend="handle-as-image">handle-as-image</link></literal> action,
4135  and marking all URLs that end in a known image file extension is a
4136  good start:
4137 </para>
4138
4139 <para>
4140  <screen>
4141 ##########################################################################
4142 # Images:
4143 ##########################################################################
4144
4145 # Define which file types will be treated as images, in case they get
4146 # blocked further down this file:
4147 #
4148 { +<link linkend="HANDLE-AS-IMAGE">handle-as-image</link> }
4149 /.*\.(gif|jpe?g|png|bmp|ico)$</screen>
4150 </para>
4151
4152 <para>
4153  And then there are known banner sources. They often use scripts to
4154  generate the banners, so it won't be visible from the URL that the
4155  request is for an image. Hence we block them <emphasis>and</emphasis>
4156  mark them as images in one go, with the help of our
4157  <literal>block-as-image</literal> alias defined above. (We could of
4158  course just as well use <literal>+<link linkend="block">block</link>
4159  +<link linkend="handle-as-image">handle-as-image</link></literal> here.)
4160  Remember that the type of the replacement image is chosen by the
4161  <literal><link linkend="set-image-blocker">set-image-blocker</link></literal>
4162  action. Since all URLs have matched the default section with its
4163  <literal>+<link linkend="set-image-blocker">set-image-blocker</link>{pattern}</literal>
4164  action before, it still applies and needn't be repeated:
4165 </para>
4166
4167 <para>
4168  <screen>
4169 # Known ad generators:
4170 #
4171 { block-as-image }
4172 ar.atwola.com 
4173 .ad.doubleclick.net
4174 .ad.*.doubleclick.net
4175 .a.yimg.com/(?:(?!/i/).)*$
4176 .a[0-9].yimg.com/(?:(?!/i/).)*$
4177 bs*.gsanet.com
4178 bs*.einets.com
4179 .qkimg.net</screen>
4180 </para>
4181
4182 <para>
4183  One of the most important jobs of <application>Privoxy</application>
4184  is to block banners. A huge bunch of them are already <quote>blocked</quote>
4185  by the <literal><link linkend="filter">filter</link>{banners-by-size}</literal>
4186  action, which we enabled above, and which deletes the references to banner
4187  images from the pages while they are loaded, so the browser doesn't request
4188  them anymore, and hence they don't need to be blocked here. But this naturally
4189  doesn't catch all banners, and some people choose not to use filters, so we
4190  need a comprehensive list of patterns for banner URLs here, and apply the
4191  <literal><link linkend="block">block</link></literal> action to them.
4192 </para>
4193 <para>
4194  First comes a bunch of generic patterns, which do most of the work, by
4195  matching typical domain and path name components of banners. Then comes
4196  a list of individual patterns for specific sites, which is omitted here
4197  to keep the example short:
4198 </para>
4199
4200 <para>
4201  <screen>
4202 ##########################################################################
4203 # Block these fine banners:
4204 ##########################################################################
4205 { <link linkend="BLOCK">+block</link> }
4206
4207 # Generic patterns:
4208
4209 ad*.
4210 .*ads.
4211 banner?.
4212 count*.
4213 /.*count(er)?\.(pl|cgi|exe|dll|asp|php[34]?)
4214 /(?:.*/)?(publicite|werbung|rekla(ma|me|am)|annonse|maino(kset|nta|s)?)/
4215
4216 # Site-specific patterns (abbreviated):
4217 #
4218 .hitbox.com</screen>
4219 </para>
4220
4221 <para>
4222  You wouldn't believe how many advertisers actually call their banner
4223  servers ads.<replaceable>company</replaceable>.com, or call the directory
4224  in which the banners are stored simply <quote>banners</quote>. So the above
4225  generic patterns are surprisingly effective.
4226 </para>
4227 <para>
4228  But being very generic, they necessarily also catch URLs that we don't want
4229  to block. The pattern <literal>.*ads.</literal> e.g. catches 
4230  <quote>nasty-<emphasis>ads</emphasis>.nasty-corp.com</quote> as intended,
4231  but also <quote>downlo<emphasis>ads</emphasis>.sourcefroge.net</quote> or
4232  <quote><emphasis>ads</emphasis>l.some-provider.net.</quote> So here come some
4233  well-known exceptions to the <literal>+<link linkend="BLOCK">block</link></literal>
4234  section above.
4235 </para>
4236 <para>
4237  Note that these are exceptions to exceptions from the default! Consider the URL
4238  <quote>downloads.sourcefroge.net</quote>: Initially, all actions are deactivated,
4239  so it wouldn't get blocked. Then comes the defaults section, which matches the
4240  URL, but just deactivates the <literal><link linkend="BLOCK">block</link></literal>
4241  action once again. Then it matches <literal>.*ads.</literal>, an exception to the
4242  general non-blocking policy, and suddenly
4243  <literal><link linkend="BLOCK">+block</link></literal> applies. And now, it'll match
4244  <literal>.*loads.</literal>, where <literal><link linkend="BLOCK">-block</link></literal>
4245  applies, so (unless it matches <emphasis>again</emphasis> further down) it ends up
4246  with no <literal><link linkend="BLOCK">block</link></literal> action applying.
4247 </para>
4248
4249 <para>
4250  <screen>
4251 ##########################################################################
4252 # Save some innocent victims of the above generic block patterns:
4253 ##########################################################################
4254
4255 # By domain:
4256
4257 { -<link linkend="BLOCK">block</link> }
4258 adv[io]*.  # (for advogato.org and advice.*)
4259 adsl.      # (has nothing to do with ads)
4260 ad[ud]*.   # (adult.* and add.*)
4261 .edu       # (universities don't host banners (yet!))
4262 .*loads.   # (downloads, uploads etc)
4263
4264 # By path:
4265 #
4266 /.*loads/
4267
4268 # Site-specific:
4269 #
4270 www.globalintersec.com/adv # (adv = advanced)
4271 www.ugu.com/sui/ugu/adv</screen>
4272 </para>
4273
4274 <para>
4275  Filtering source code can have nasty side effects,
4276  so make an exception for our friends at sourceforge.net,
4277  and all paths with <quote>cvs</quote> in them. Note that
4278  <literal>-<link linkend="FILTER">filter</link></literal>
4279  disables <emphasis>all</emphasis> filters in one fell swoop!
4280 </para>
4281
4282 <para>
4283  <screen>
4284 # Don't filter code!
4285 #
4286 { -<link linkend="FILTER">filter</link> }
4287 /.*cvs
4288 .sourceforge.net</screen>
4289 </para>
4290
4291 <para>
4292  The actual <filename>default.action</filename> is of course more
4293  comprehensive, but we hope this example made clear how it works.
4294 </para>
4295
4296 </sect3>
4297
4298 <sect3><title>user.action</title>
4299
4300 <para>
4301  So far we are painting with a broad brush by setting general policies,
4302  which would be a reasonable starting point for many people. Now, 
4303  you might want to be more specific and have customized rules that
4304  are more suitable to your personal habits and preferences. These would
4305  be for narrowly defined situations like your ISP or your bank, and should
4306  be placed in <filename>user.action</filename>, which is parsed after all other 
4307  actions files and hence has the last word, over-riding any previously
4308  defined actions. <filename>user.action</filename> is also a 
4309  <emphasis>safe</emphasis> place for your personal settings, since
4310  <filename>default.action</filename> is actively maintained by the
4311  <application>Privoxy</application> developers and you'll probably want
4312  to install updated versions from time to time.
4313 </para>
4314
4315 <para>
4316  So let's look at a few examples of things that one might typically do in
4317  <filename>user.action</filename>: 
4318 </para>
4319
4320
4321 <!-- brief sample user.action here -->
4322
4323 <para>
4324  <screen>
4325 # My user.action file. &lt;fred@foobar.com&gt;</screen>
4326 </para>
4327
4328 <para>
4329  As <link linkend="aliases">aliases</link> are local to the actions
4330  file that they are defined in, you can't use the ones from
4331  <filename>default.action</filename>, unless you repeat them here:
4332 </para>
4333
4334 <para>
4335  <screen>
4336 # Aliases are local to the file they are defined in.
4337 # (Re-)define aliases for this file:
4338 #
4339 {{alias}}
4340
4341 # These aliases just save typing later, and the alias names should 
4342 # be self explanatory.
4343 #
4344 +crunch-all-cookies = +crunch-incoming-cookies +crunch-outgoing-cookies
4345 -crunch-all-cookies = -crunch-incoming-cookies -crunch-outgoing-cookies
4346  allow-all-cookies  = -crunch-all-cookies -session-cookies-only
4347  allow-popups       = -filter{all-popups} -kill-popups
4348 +block-as-image     = +block +handle-as-image
4349 -block-as-image     = -block
4350
4351 # These aliases define combinations of actions that are useful for
4352 # certain types of sites:
4353 #
4354 fragile     = -block -crunch-all-cookies -filter -fast-redirects -hide-referer -kill-popups
4355 shop        = -crunch-all-cookies allow-popups
4356
4357 # Allow ads for selected useful free sites:
4358 #
4359 allow-ads   = -block -filter{banners-by-size} -filter{banners-by-link}</screen>
4360
4361  
4362 </para>
4363
4364 <para>
4365  Say you have accounts on some sites that you visit regularly, and
4366  you don't want to have to log in manually each time. So you'd like
4367  to allow persistent cookies for these sites. The
4368  <literal>allow-all-cookies</literal> alias defined above does exactly
4369  that, i.e. it disables crunching of cookies in any direction, and the 
4370  processing of cookies to make them only temporary.
4371 </para>
4372
4373 <para>
4374  <screen>
4375 { allow-all-cookies }
4376 sunsolve.sun.com
4377 slashdot.org
4378 .yahoo.com
4379 .msdn.microsoft.com
4380 .redhat.com</screen>
4381 </para>
4382
4383 <para>
4384  Your bank is allergic to some filter, but you don't know which, so you disable them all:
4385 </para>
4386
4387 <para>
4388  <screen>
4389 { -<link linkend="FILTER">filter</link> }
4390 .your-home-banking-site.com</screen>
4391 </para>
4392
4393 <para>
4394  Some file types you may not want to filter.
4395  <application>Privoxy</application> makes no distinctions between regular web
4396  pages and downloads done via your web browser if it is an html or text type
4397  document.
4398 </para>
4399
4400 <para>
4401  <screen>
4402 # A list of common file extensions that are likely to indicate raw text, and best
4403 # if unfiltered.
4404 /(.*/)?.*\.(pl|(s|p)?h|c(c|xx|pp)?|tcl|am|init?|cfg?|conf(ig)?|txt|rc|bat)$
4405
4406 # Documentation should not need filtering (at least on some sites).
4407 .tldp.org</screen>
4408 </para>
4409
4410 <para>
4411  Example of a simple <link linkend="BLOCK">block</link> action. Say you've
4412  seen an ad on your favourite page on example.com that you want to get rid of.
4413  You have right-clicked the image, selected <quote>copy image location</quote>
4414  and pasted the URL below while removing the leading http://, into a 
4415  <literal>{ +block }</literal> section. Note that <literal>{ +handle-as-image
4416  }</literal> need not be specified, since all URLs ending in
4417  <literal>.gif</literal> will be tagged as images by the general rules as set
4418  in default.action anyway:
4419 </para>
4420
4421 <para>
4422  <screen>
4423 { +<link linkend="BLOCK">block</link> }
4424 www.example.com/nasty-ads/sponsor.gif
4425 another.popular.site.net/more/junk/here/
4426
4427 #  Here we found one that is not in <application>Privoxy's</application> default blocked list:
4428 .adfactory.net</screen>
4429 </para>
4430
4431 <para>
4432  To force URLs that tend to have ad images, but it is difficult for
4433  <application>Privoxy</application> to know this since the ultimate returned
4434  object is obscured for one reason or another, we can try to force these to be
4435  treated as images (and thus avoid <application>Privoxy's</application>
4436  <quote>BLOCKED</quote> banner page). Note that if what is returned by the
4437  server turns out NOT to be an image, then your browser typically will display
4438  a broken icon image. Use cautiously.
4439 </para>
4440
4441 <para>
4442  <screen>
4443 { +block-as-image }
4444 # A shockwave ad, very annoying.
4445 .trip.com/.*\.swf
4446 .doubleclick.net
4447 /Realmedia/ads/
4448 adremote.</screen>
4449 </para>
4450
4451 <para>
4452  Now you noticed that the default configuration breaks Forbes Magazine,
4453  but you were too lazy to find out which action is the culprit, and you
4454  were again too lazy to give <link linkend="contact">feedback</link>, so
4455  you just used the <literal>fragile</literal> alias on the site, and
4456  -- <emphasis>whoa!</emphasis> -- it worked. The <literal>fragile</literal>
4457  aliases disables those actions that are most likely to break a site. Also,
4458  good for testing purposes to see if it is <application>Privoxy</application>
4459  that is causing the problem or not.
4460 </para>
4461
4462 <para>
4463 <screen>
4464 { fragile }
4465 .forbes.com</screen>
4466 </para>
4467
4468 <para>
4469  You like the <quote>fun</quote> text replacements in <filename>default.filter</filename>,
4470  but it is disabled in the distributed actions file. (My colleagues on the team just
4471  don't have a sense of humour, that's why! ;-). So you'd like to turn it on in your private,
4472  update-safe config, once and for all:
4473 </para>
4474
4475 <para>
4476 <screen>
4477 { +<link linkend="filter-fun">filter{fun}</link> }
4478 / # For ALL sites!</screen>
4479 </para>
4480
4481 <para>
4482  Note that the above is not really a good idea: There are exceptions
4483  to the filters in <filename>default.action</filename> for things that
4484  really shouldn't be filtered, like code on CVS->Web interfaces. Since
4485  <filename>user.action</filename> has the last word, these exceptions
4486  won't be valid for the <quote>fun</quote> filtering specified here.
4487 </para>
4488
4489 <para>
4490  You might also worry about how your favourite free websites are
4491  funded, and find that they rely on displaying banner advertisements
4492  to survive. So you might want to specifically allow banners for those
4493  sites that you feel provide value to you:
4494 </para>
4495
4496 <para>
4497 <screen>
4498 { allow-ads }
4499 .sourceforge.net
4500 .slashdot.org
4501 .osdn.net</screen>   
4502 </para>
4503
4504 <para>
4505  Note that <literal>allow-ads</literal> has been aliased to 
4506  <literal>-<link linkend="block">block</link></literal>, 
4507  <literal>-<link linkend="filter-banners-by-size">filter{banners-by-size}</link></literal>, and 
4508  <literal>-<link linkend="filter-banners-by-link">filter{banners-by-link}</link></literal> above.
4509 </para>
4510
4511 <para>
4512  <filename>user.action</filename> is generally the best place to define
4513  exceptions and additions to the default policies of
4514  <filename>default.action</filename>. Some actions are safe to have their
4515  default policies set here though. So let's set a default policy to have a
4516  <quote>blank</quote> image as opposed to the checkerboard pattern for
4517  <emphasis>ALL</emphasis> sites. <quote>/</quote> of course matches all URL
4518  paths and patterns:
4519 </para>
4520
4521 <para>
4522 <screen>
4523 { +<link linkend="set-image-blocker">set-image-blocker{blank}</link> }
4524 / # ALL sites</screen>
4525 </para>
4526
4527 </sect3>
4528 </sect2>
4529
4530 <!--  ~  End section  ~  -->
4531
4532 </sect1>
4533
4534 <!--  ~  End section  ~  -->
4535
4536 <!--   ~~~~~~~~       New section Header    ~~~~~~~~~     -->
4537
4538 <sect1 id="filter-file">
4539 <title>The Filter File</title>
4540
4541 <para>
4542  All text substitutions that can be invoked through the
4543  <literal><link linkend="filter">filter</link></literal> action
4544  must first be defined in the filter file, which is typically
4545  called <filename>default.filter</filename> and which can be
4546  selected through the <literal>
4547  <link linkend="filterfile">filterfile</link></literal> config
4548  option.
4549 </para>
4550
4551 <para>
4552  Typical reasons for doing such substitutions are to eliminate
4553  common annoyances in HTML and JavaScript, such as pop-up windows,
4554  exit consoles, crippled windows without navigation tools, the
4555  infamous &lt;BLINK&gt; tag etc, to suppress images with certain
4556  width and height attributes (standard banner sizes or web-bugs),
4557  or just to have fun. The possibilities are endless.
4558 </para>
4559
4560 <para>
4561  Filtering works on any text-based document type, including plain
4562  text, HTML, JavaScript, CSS etc. (all <literal>text/*</literal>
4563  MIME types). Substitutions are made at the source level, so if
4564  you want to <quote>roll your own</quote> filters, you should be
4565  familiar with HTML syntax.
4566 </para>
4567
4568 <para>
4569  Just like the <link linkend="actions-file">actions files</link>, the
4570  filter file is organized in sections, which are called <emphasis>filters</emphasis>
4571  here. Each filter consists of a heading line, that starts with the
4572  <emphasis>keyword</emphasis> <literal>FILTER:</literal>, followed by
4573  the filter's <emphasis>name</emphasis>, and a short (one line) 
4574  <emphasis>description</emphasis> of what it does. Below that line
4575  come the <emphasis>jobs</emphasis>, i.e. lines that define the actual
4576  text substitutions. By convention, the name of a filter
4577  should describe what the filter <emphasis>eliminates</emphasis>. The
4578  comment is used in the <ulink url="http://config.privoxy.org/">web-based
4579  user interface</ulink>.
4580 </para>
4581
4582 <para>
4583  Once a filter called <replaceable>name</replaceable> has been defined
4584  in the filter file, it can be invoked by using an action of the form
4585  +<literal><link linkend="filter">filter</link>{<replaceable>name</replaceable>}</literal>
4586  in any <link linkend="actions-file">actions file</link>.
4587 </para>
4588  
4589 <para>
4590  A filter header line for a filter called <quote>foo</quote> could look
4591  like this:
4592 </para>
4593
4594 <para>
4595  <screen>FILTER: foo Replace all "foo" with "bar"</screen>
4596 </para>
4597
4598 <para>
4599  Below that line, and up to the next header line, come the jobs that
4600  define what text replacements the filter executes. They are specified
4601  in a syntax that imitates <ulink url="http://www.perl.org/">Perl</ulink>'s
4602  <literal>s///</literal> operator. If you are familiar with Perl, you
4603  will find this to be quite intuitive, and may want to look at the
4604  <ulink url="http://www.oesterhelt.org/pcrs/pcrs.3.html">PCRS man page</ulink>
4605  for the subtle differences to Perl behaviour. Most notably, the non-standard
4606  option letter <literal>U</literal> is supported, which turns the default
4607  to ungreedy matching.
4608 </para>
4609
4610 <para>
4611  If you are new to regular expressions, you might want to take a look at
4612  the <link linkend="regex">Appendix on regular expressions</link>, and
4613  see the <ulink url="http://perldoc.com/perl5.6.1/pod/perl.html">Perl
4614  manual</ulink> for
4615  <ulink url="http://perldoc.com/perl5.6.1/pod/perlop.html#s-PATTERN-REPLACEMENT-egimosx">the 
4616  <literal>s///</literal> operator's syntax</ulink> and <ulink
4617  url="http://perldoc.com/perl5.6.1/pod/perlre.html">Perl-style regular
4618  expressions</ulink> in general.
4619  The below examples might also help to get you started.
4620 </para>
4621
4622 <!--   ~~~~~~~~       New section Header    ~~~~~~~~~     -->
4623
4624 <sect2><title>Filter File Tutorial</title>
4625 <para>
4626  Now, let's complete our <quote>foo</quote> filter. We have already defined
4627  the heading, but the jobs are still missing. Since all it does is to replace
4628  <quote>foo</quote> with <quote>bar</quote>, there is only one (trivial) job
4629  needed:
4630 </para>
4631
4632 <para>
4633  <screen>s/foo/bar/</screen>
4634 </para>
4635
4636 <para>
4637  But wait! Didn't the comment say that <emphasis>all</emphasis> occurrences
4638  of <quote>foo</quote> should be replaced? Our current job will only take
4639  care of the first <quote>foo</quote> on each page. For global substitution,
4640  we'll need to add the <literal>g</literal> option:
4641 </para>
4642
4643 <para>
4644  <screen>s/foo/bar/g</screen>
4645 </para>
4646
4647 <para>
4648  Our complete filter now looks like this:
4649 </para>
4650 <para>
4651  <screen>FILTER: foo Replace all "foo" with "bar"
4652 s/foo/bar/g</screen>
4653 </para>
4654
4655 <para>
4656  Let's look at some real filters for more interesting examples. Here you see
4657  a filter that protects against some common annoyances that arise from JavaScript
4658  abuse. Let's look at its jobs one after the other:
4659 </para>
4660
4661
4662 <para>
4663  <screen>
4664 FILTER: js-annoyances Get rid of particularly annoying JavaScript abuse
4665
4666 # Get rid of JavaScript referrer tracking. Test page: http://www.randomoddness.com/untitled.htm
4667 #
4668 s|(&lt;script.*)document\.referrer(.*&lt;/script&gt;)|$1"Not Your Business!"$2|Usg</screen>
4669 </para>
4670
4671 <para>
4672  Following the header line and a comment, you see the job. Note that it uses
4673  <literal>|</literal> as the delimiter instead of <literal>/</literal>, because
4674  the pattern contains a forward slash, which would otherwise have to be escaped
4675  by a backslash (<literal>\</literal>).
4676 </para>
4677
4678 <para>
4679  Now, let's examine the pattern: it starts with the text <literal>&lt;script.*</literal>
4680  enclosed in parentheses. Since the dot matches any character, and <literal>*</literal>
4681  means: <quote>Match an arbitrary number of the element left of myself</quote>, this
4682  matches <quote>&lt;script</quote>, followed by <emphasis>any</emphasis> text, i.e.
4683  it matches the whole page, from the start of the first &lt;script&gt; tag.
4684 </para>
4685
4686 <para>
4687  That's more than we want, but the pattern continues: <literal>document\.referrer</literal>
4688  matches only the exact string <quote>document.referrer</quote>. The dot needed to
4689  be <emphasis>escaped</emphasis>, i.e. preceded by a backslash, to take away its
4690  special meaning as a joker, and make it just a regular dot. So far, the meaning is:
4691  Match from the start of the first &lt;script&gt; tag in a the page, up to, and including,
4692  the text <quote>document.referrer</quote>, if <emphasis>both</emphasis> are present
4693  in the page (and appear in that order).
4694 </para>
4695
4696 <para>
4697  But there's still more pattern to go. The next element, again enclosed in parentheses,
4698  is <literal>.*&lt;/script&gt;</literal>. You already know what <literal>.*</literal>
4699  means, so the whole pattern translates to: Match from the start of the first  &lt;script&gt;
4700  tag in a page to the end of the last &lt;script&gt; tag, provided that the text
4701  <quote>document.referrer</quote> appears somewhere in between.
4702 </para>
4703
4704 <para>
4705  This is still not the whole story, since we have ignored the options and the parentheses:
4706  The portions of the page matched by sub-patterns that are enclosed in parentheses, will be
4707  remembered and be available through the variables <literal>$1, $2, ...</literal> in
4708  the substitute. The <literal>U</literal> option switches to ungreedy matching, which means
4709  that the first <literal>.*</literal> in the pattern will only <quote>eat up</quote> all
4710  text in between <quote>&lt;script</quote> and the <emphasis>first</emphasis> occurrence
4711  of <quote>document.referrer</quote>, and that the second <literal>.*</literal> will
4712  only span the text up to the <emphasis>first</emphasis> <quote>&lt;/script&gt;</quote>
4713  tag. Furthermore, the <literal>s</literal> option says that the match may span
4714  multiple lines in the page, and the <literal>g</literal> option again means that the
4715  substitution is global.
4716 </para>
4717
4718 <para>
4719  So, to summarize, the pattern means: Match all scripts that contain the text
4720  <quote>document.referrer</quote>. Remember the parts of the script from
4721  (and including) the start tag up to (and excluding) the string
4722  <quote>document.referrer</quote> as <literal>$1</literal>, and the part following
4723  that string, up to and including the closing tag, as <literal>$2</literal>.
4724 </para>
4725
4726 <para>
4727  Now the pattern is deciphered, but wasn't this about substituting things? So
4728  lets look at the substitute: <literal>$1"Not Your Business!"$2</literal> is
4729  easy to read: The text remembered as <literal>$1</literal>, followed by 
4730  <literal>"Not Your Business!"</literal> (<emphasis>including</emphasis>
4731  the quotation marks!), followed by the text remembered as <literal>$2</literal>.
4732  This produces an exact copy of the original string, with the middle part
4733  (the <quote>document.referrer</quote>) replaced by <literal>"Not Your
4734  Business!"</literal>.
4735 </para>
4736
4737 <para>
4738  The whole job now reads: Replace <quote>document.referrer</quote> by
4739  <literal>"Not Your Business!"</literal> wherever it appears inside a
4740  &lt;script&gt tag. Note that this job won't break JavaScript syntax,
4741  since both the original and the replacement are syntactically valid
4742  string objects. The script just won't have access to the referrer
4743  information anymore.
4744 </para>
4745
4746 <para>
4747  We'll show you two other jobs from the JavaScript taming department, but
4748  this time only point out the constructs of special interest:
4749 </para>
4750
4751 <para>
4752  <screen>
4753 # The status bar is for displaying link targets, not pointless blahblah
4754 #
4755 s/window\.status\s*=\s*(['"]).*?\1/dUmMy=1/ig</screen>
4756 </para>
4757
4758 <para>
4759  <literal>\s</literal> stands for whitespace characters (space, tab, newline,
4760  carriage return, form feed), so that <literal>\s*</literal> means: <quote>zero
4761  or more whitespace</quote>. The <literal>?</literal> in <literal>.*?</literal>
4762  makes this matching of arbitrary text ungreedy. (Note that the <literal>U</literal>
4763  option is not set). The <literal>['"]</literal> construct means: <quote>a single
4764  <emphasis>or</emphasis> a double quote</quote>. Finally, <literal>\1</literal> is
4765  a backreference to the first parenthesis just like <literal>$1</literal> above,
4766  with the difference that in the <emphasis>pattern</emphasis>, a backslash indicates
4767  a backreference, whereas in the <emphasis>substitute</emphasis>, it's the dollar.
4768 </para>
4769
4770 <para>
4771  So what does this job do? It replaces assignments of single- or double-quoted
4772  strings to the <quote>window.status</quote> object with a dummy assignment
4773  (using a variable name that is hopefully odd enough not to conflict with
4774  real variables in scripts). Thus, it catches many cases where e.g. pointless
4775  descriptions are displayed in the status bar instead of the link target when
4776  you move your mouse over links.
4777 </para>
4778
4779 <para>
4780  <screen>
4781 # Kill OnUnload popups. Yummy. Test: http://www.zdnet.com/zdsubs/yahoo/tree/yfs.html
4782 #
4783 s/(&lt;body [^&gt;]*)onunload(.*&gt;)/$1never$2/iU</screen>
4784 </para>
4785
4786 <para>
4787  Including the
4788  <ulink url="http://www.w3.org/TR/2000/REC-DOM-Level-2-Events-20001113/events.html#Events-eventgroupings-htmlevents">OnUnload
4789  event binding</ulink> in the HTML DOM was a <emphasis>CRIME</emphasis>.
4790  When I close a browser window, I want it to close and die. Basta.
4791  This job replaces the <quote>onunload</quote> attribute in
4792  <quote>&lt;body&gt</quote> tags with the dummy word <literal>never</literal>.
4793  Note that the <literal>i</literal> option makes the pattern matching
4794  case-insensitive. Also note that ungreedy matching alone doesn't always guarantee
4795  a minimal match: In the first parenthesis, we had to use <literal>[^&gt;]*</literal>
4796  instead of <literal>.*</literal> to prevent the match from exceeding the 
4797  &lt;body&gt tag if it doesn't contain <quote>OnUnload</quote>, but the page's
4798  content does.
4799 </para>
4800
4801 <para>
4802  The last example is from the fun department:
4803 </para>
4804
4805 <para>
4806  <screen>
4807 FILTER: fun Fun text replacements
4808
4809 # Spice the daily news:
4810 #
4811 s/microsoft(?!\.com)/MicroSuck/ig</screen>
4812 </para>
4813
4814 <para>
4815  Note the <literal>(?!\.com)</literal> part (a so-called negative lookahead)
4816  in the job's pattern, which means: Don't match, if the string 
4817  <quote>.com</quote> appears directly following <quote>microsoft</quote>
4818  in the page. This prevents links to microsoft.com from being trashed, while
4819  still replacing the word everywhere else.
4820 </para>
4821
4822 <para>
4823  <screen>
4824 # Buzzword Bingo (example for extended regex syntax)
4825 #
4826 s* industry[ -]leading \
4827 |  cutting[ -]edge \
4828 |  customer[ -]focused \
4829 |  market[ -]driven \
4830 |  award[ -]winning # Comments are OK, too! \
4831 |  high[ -]performance \
4832 |  solutions[ -]based \
4833 |  unmatched \
4834 |  unparalleled \
4835 |  unrivalled \
4836 *&lt;font color="red"&gt;&lt;b&gt;BINGO!&lt;/b&gt;&lt;/font&gt; \
4837 *igx</screen>
4838 </para>
4839
4840 <para>
4841  The <literal>x</literal> option in this job turns on extended syntax, and allows for
4842  e.g. the liberal use of (non-interpreted!) whitespace for nicer formatting. 
4843 </para>
4844
4845 <para>
4846  You get the idea?
4847 </para>
4848 </sect2>
4849 </sect1>
4850
4851 <!--  ~  End section  ~  -->
4852
4853
4854
4855 <!--   ~~~~~       New section      ~~~~~     -->
4856
4857 <sect1 id="templates">
4858 <title>Templates</title>
4859 <para>
4860  All <application>Privoxy</application> built-in pages, i.e. error pages such as the 
4861  <ulink url="http://show-the-404-error.page"><quote>404 - No Such Domain</quote>
4862  error page</ulink>, the <ulink
4863  url="http://ads.bannerserver.example.com/nasty-ads/sponsor.html"><quote>BLOCKED</quote>
4864  page</ulink>
4865  and all pages of its <ulink url="http://config.privoxy.org/">web-based
4866  user interface</ulink>, are generated from <emphasis>templates</emphasis>. 
4867  (<application>Privoxy</application> must be running for the above links to work as
4868  intended.)
4869 </para>
4870
4871 <para>
4872  These templates are stored in a subdirectory of the <link linkend="confdir">configuration
4873  directory</link> called <filename>templates</filename>. On Unixish platforms,
4874  this is typically
4875  <ulink url="file:///etc/privoxy/templates/"><filename>/etc/privoxy/templates/</filename></ulink>.
4876 </para>
4877
4878 <para>
4879  The templates are basically normal HTML files, but with place-holders (called symbols
4880  or exports), which <application>Privoxy</application> fills at run time. You can
4881  edit the templates with a normal text editor, should you want to customize them.
4882  (<emphasis>Not recommended for the casual user</emphasis>). Note that
4883  just like in configuration files, lines starting with <literal>#</literal> are
4884  ignored when the templates are filled in.
4885 </para>
4886
4887 <para>
4888  The place-holders are of the form <literal>@name@</literal>, and you will
4889  find a list of available symbols, which vary from template to template,
4890  in the comments at the start of each file. Note that these comments are not
4891  always accurate, and that it's probably best to look at the existing HTML
4892  code to find out which symbols are supported and what they are filled in with.
4893 </para>
4894
4895 <para>
4896  A special application of this substitution mechanism is to make whole
4897  blocks of HTML code disappear when a specific symbol is set. We use this
4898  for many purposes, one of them being to include the beta warning in all
4899  our user interface (CGI) pages when <application>Privoxy</application>
4900  in in an alpha or beta development stage:
4901 </para>
4902
4903 <para>
4904  <screen>
4905 &lt;!-- @if-unstable-start --&gt;
4906
4907   ... beta warning HTML code goes here ...
4908
4909 &lt;!-- if-unstable-end@ --&gt;</screen>
4910 </para>
4911
4912 <para>
4913  If the "unstable" symbol is set, everything in between and including
4914  <literal>@if-unstable-start</literal> and <literal>if-unstable-end@</literal>
4915  will disappear, leaving nothing but an empty comment:
4916 </para>
4917
4918 <para>
4919  <screen>&lt;!--  --&gt;</screen>
4920 </para>
4921
4922 <para>
4923  There's also an if-then-else construct and an <literal>#include</literal>
4924  mechanism, but you'll sure find out if you are inclined to edit the
4925  templates ;-)
4926 </para>
4927
4928 <para>
4929  All templates refer to a style located at
4930  <ulink url="http://config.privoxy.org/send-stylesheet"><literal>http://config.privoxy.org/send-stylesheet</literal></ulink>.
4931  This is, of course, locally served by <application>Privoxy</application>
4932  and the source for it can be found and edited in the
4933  <filename>cgi-style.css</filename> template.
4934 </para>
4935
4936 </sect1>
4937
4938 <!--  ~  End section  ~  -->
4939
4940
4941
4942 <!--   ~~~~~       New section      ~~~~~     -->
4943
4944 <sect1 id="contact"><title>Contacting the Developers, Bug Reporting and Feature
4945 Requests</title>
4946
4947 <!-- Include contacting.sgml boilerplate: -->
4948  &contacting;
4949 <!-- end boilerplate -->
4950
4951 </sect1>
4952
4953 <!--  ~  End section  ~  -->
4954
4955
4956 <!--   ~~~~~       New section      ~~~~~     -->
4957 <sect1 id="copyright"><title><application>Privoxy</application> Copyright, License and History</title>
4958
4959 <!-- Include copyright.sgml: -->
4960  &copyright;
4961 <!-- end copyright -->
4962
4963 <!--   ~~~~~       New section      ~~~~~     -->
4964 <sect2><title>License</title>
4965 <!-- Include copyright.sgml: -->
4966  &license;
4967 <!-- end copyright -->
4968 </sect2>
4969 <!--  ~  End section  ~  -->
4970
4971
4972 <!--   ~~~~~       New section      ~~~~~     -->
4973
4974 <sect2 id="history"><title>History</title>
4975 <!-- Include history.sgml: -->
4976  &history;
4977 <!-- end history -->
4978 </sect2>
4979
4980 <sect2 id="authors"><title>Authors</title>
4981 <!-- Include p-authors.sgml: -->
4982  &p-authors;
4983 <!-- end authors -->
4984 </sect2>
4985
4986 </sect1>
4987
4988 <!--  ~  End section  ~  -->
4989
4990
4991 <!--   ~~~~~       New section      ~~~~~     -->
4992 <sect1 id="seealso"><title>See Also</title>
4993 <!-- Include seealso.sgml: -->
4994  &seealso;
4995 <!-- end seealso -->
4996 </sect1>
4997
4998
4999
5000 <!--   ~~~~~       New section      ~~~~~     -->
5001 <sect1 id="appendix"><title>Appendix</title>
5002
5003
5004 <!--   ~~~~~       New section      ~~~~~     -->
5005 <sect2 id="regex">
5006 <title>Regular Expressions</title>
5007 <para>
5008  <application>Privoxy</application> uses Perl-style <quote>regular
5009  expressions</quote> in its <link linkend="actions-file">actions
5010  files</link> and <link linkend="filter-file">filter file</link>,
5011  through the <ulink url="http://www.pcre.org/">PCRE</ulink> and
5012  <ulink url="http://www.oesterhelt.org/pcrs/">PCRS</ulink> libraries.
5013 </para>
5014
5015 <para>
5016  If you are reading this, you probably don't understand what <quote>regular
5017  expressions</quote> are, or what they can do. So this will be a very brief
5018  introduction only. A full explanation would require a <ulink
5019  url="http://www.oreilly.com/catalog/regex/">book</ulink> ;-)
5020 </para>
5021
5022 <para>
5023  Regular expressions provide a language to describe patterns that can be
5024  run against strings of characters (letter, numbers, etc), to see if they
5025  match the string or not. The  patterns are themselves (sometimes complex)
5026  strings of literal characters, combined with  wild-cards, and other special
5027  characters, called meta-characters. The <quote>meta-characters</quote> have
5028  special meanings and are used to build complex patterns to be matched against.
5029  Perl Compatible Regular Expressions are an especially convenient
5030  <quote>dialect</quote> of the regular expression language.
5031 </para>
5032
5033 <para>
5034  To make a simple analogy, we do something similar when we use wild-card
5035  characters when listing files with the <command>dir</command> command in DOS. 
5036  <literal>*.*</literal> matches all filenames. The <quote>special</quote>
5037  character here is the asterisk which matches any and all characters. We can be
5038  more specific and use <literal>?</literal> to match just individual
5039  characters. So <quote>dir file?.text</quote> would match
5040  <quote>file1.txt</quote>, <quote>file2.txt</quote>, etc. We are pattern
5041  matching, using a similar technique to <quote>regular expressions</quote>!
5042 </para>
5043
5044 <para>
5045  Regular expressions do essentially the same thing, but are much, much more
5046  powerful. There are many more <quote>special characters</quote> and ways of 
5047  building complex patterns however. Let's look at a few of the common ones,
5048  and then some examples:
5049 </para>
5050
5051 <para><simplelist>
5052  <member>
5053   <emphasis>.</emphasis> - Matches any single character, e.g. <quote>a</quote>,
5054   <quote>A</quote>, <quote>4</quote>, <quote>:</quote>, or <quote>@</quote>.
5055  </member>
5056 </simplelist></para>
5057
5058 <para><simplelist>
5059  <member>
5060   <emphasis>?</emphasis> - The preceding character or expression is matched ZERO or ONE
5061   times. Either/or.
5062  </member>
5063 </simplelist></para>
5064
5065 <para><simplelist>
5066  <member>
5067   <emphasis>+</emphasis> - The preceding character or expression is matched ONE or MORE
5068   times.
5069  </member>
5070 </simplelist></para>
5071
5072 <para><simplelist>
5073  <member>
5074   <emphasis>*</emphasis> - The preceding character or expression is matched ZERO or MORE
5075   times.
5076  </member>
5077 </simplelist></para>
5078
5079 <para><simplelist>
5080  <member>
5081   <emphasis>\</emphasis> - The <quote>escape</quote> character denotes that
5082   the following character should be taken literally. This is used where one of the 
5083   special characters (e.g. <quote>.</quote>) needs to be taken literally and
5084   not as a special meta-character. Example: <quote>example\.com</quote>, makes 
5085   sure the period is recognized only as a period (and not expanded to its 
5086   meta-character meaning of any single character).
5087  </member>
5088 </simplelist></para>
5089
5090 <para><simplelist>
5091  <member>
5092   <emphasis>[]</emphasis> - Characters enclosed in brackets will be matched if
5093   any of the enclosed characters are encountered. For instance, <quote>[0-9]</quote>
5094   matches any numeric digit (zero through nine). As an example, we can combine 
5095   this with <quote>+</quote> to match any digit one of more times: <quote>[0-9]+</quote>.
5096  </member>
5097 </simplelist></para>
5098
5099 <para><simplelist>
5100  <member>
5101   <emphasis>()</emphasis> - parentheses are used to group a sub-expression,
5102   or multiple sub-expressions.
5103  </member>
5104 </simplelist></para>
5105
5106 <para><simplelist>
5107  <member>
5108   <emphasis>|</emphasis> - The <quote>bar</quote> character works like an
5109   <quote>or</quote> conditional statement. A match is successful if the
5110   sub-expression on either side of <quote>|</quote> matches. As an example:
5111   <quote>/(this|that) example/</quote> uses grouping and the bar character 
5112   and would match either <quote>this example</quote> or <quote>that
5113   example</quote>, and nothing else.
5114  </member>
5115 </simplelist></para>
5116
5117 <para>
5118  These are just some of the ones you are likely to use when matching URLs with 
5119  <application>Privoxy</application>, and is a long way from a definitive
5120  list. This is enough to get us started with a few simple examples which may
5121  be more illuminating:
5122 </para>
5123
5124 <para>
5125  <emphasis><literal>/.*/banners/.*</literal></emphasis> - A  simple example
5126  that uses the common combination of <quote>.</quote> and <quote>*</quote> to 
5127  denote any character, zero or more times. In other words, any string at all.
5128  So we start with a literal forward slash, then our regular expression pattern 
5129  (<quote>.*</quote>) another literal forward slash, the string
5130  <quote>banners</quote>, another forward slash, and lastly another
5131  <quote>.*</quote>. We are building 
5132  a directory path here. This will match any file with the path that has a
5133  directory named <quote>banners</quote> in it. The <quote>.*</quote> matches
5134  any characters, and this could conceivably be more forward slashes, so it
5135  might expand into a much longer looking path. For example, this could match:
5136  <quote>/eye/hate/spammers/banners/annoy_me_please.gif</quote>, or just
5137  <quote>/banners/annoying.html</quote>, or almost an infinite number of other
5138  possible combinations, just so it has <quote>banners</quote> in the path
5139  somewhere.
5140 </para>
5141
5142 <para>
5143  A now something a little more complex:
5144 </para>
5145
5146 <para>
5147  <emphasis><literal>/.*/adv((er)?ts?|ertis(ing|ements?))?/</literal></emphasis> - 
5148  We have several literal forward slashes again (<quote>/</quote>), so we are
5149  building another expression that is a file path statement. We have another 
5150  <quote>.*</quote>, so we are matching against any conceivable sub-path, just so
5151  it matches our expression. The only true literal that <emphasis>must
5152  match</emphasis> our pattern is <application>adv</application>, together with
5153  the forward slashes. What comes after the <quote>adv</quote> string is the
5154  interesting part. 
5155 </para>
5156
5157 <para>
5158  Remember the <quote>?</quote> means the preceding expression (either a
5159  literal character or anything grouped with <quote>(...)</quote> in this case)
5160  can exist or not, since this means either zero or one match. So
5161  <quote>((er)?ts?|ertis(ing|ements?))</quote> is optional, as are the
5162  individual sub-expressions: <quote>(er)</quote>,
5163  <quote>(ing|ements?)</quote>, and the <quote>s</quote>. The <quote>|</quote>
5164  means <quote>or</quote>. We have two of those. For instance, 
5165  <quote>(ing|ements?)</quote>, can expand to match either <quote>ing</quote> 
5166  <emphasis>OR</emphasis> <quote>ements?</quote>. What is being done here, is an
5167  attempt at matching as many variations of <quote>advertisement</quote>, and 
5168  similar, as possible. So this would expand to match just <quote>adv</quote>,
5169  or <quote>advert</quote>, or <quote>adverts</quote>, or
5170  <quote>advertising</quote>, or <quote>advertisement</quote>, or
5171  <quote>advertisements</quote>. You get the idea. But it would not match 
5172  <quote>advertizements</quote> (with a <quote>z</quote>). We could fix that by
5173  changing our regular expression to: 
5174  <quote>/.*/adv((er)?ts?|erti(s|z)(ing|ements?))?/</quote>, which would then match
5175  either spelling.
5176 </para>
5177
5178 <para>
5179  <emphasis><literal>/.*/advert[0-9]+\.(gif|jpe?g)</literal></emphasis> - Again 
5180  another path statement with forward slashes. Anything in the square brackets 
5181  <quote>[]</quote> can be matched. This is using <quote>0-9</quote> as a
5182  shorthand expression to mean any digit one through nine. It is the same as
5183  saying <quote>0123456789</quote>. So any digit matches. The <quote>+</quote>
5184  means one or more of the preceding expression must be included. The preceding 
5185  expression here is what is in the square brackets -- in this case, any digit 
5186  one through nine. Then, at the end, we have a grouping: <quote>(gif|jpe?g)</quote>. 
5187  This includes a <quote>|</quote>, so this needs to match the expression on
5188  either side of that bar character also. A simple <quote>gif</quote> on one side, and the other
5189  side will in turn match either <quote>jpeg</quote> or <quote>jpg</quote>,
5190  since the <quote>?</quote> means the letter <quote>e</quote> is optional and
5191  can be matched once or not at all. So we are building an expression here to
5192  match image GIF or JPEG type image file. It must include the literal
5193  string <quote>advert</quote>, then one or more digits, and a <quote>.</quote>
5194  (which is now a literal, and not a special character, since it is escaped
5195  with <quote>\</quote>), and lastly either <quote>gif</quote>, or
5196  <quote>jpeg</quote>, or <quote>jpg</quote>. Some possible matches would
5197  include: <quote>//advert1.jpg</quote>,
5198  <quote>/nasty/ads/advert1234.gif</quote>,
5199  <quote>/banners/from/hell/advert99.jpg</quote>. It would not match
5200  <quote>advert1.gif</quote> (no leading slash), or
5201  <quote>/adverts232.jpg</quote> (the expression does not include an
5202  <quote>s</quote>), or <quote>/advert1.jsp</quote> (<quote>jsp</quote> is not
5203  in the expression anywhere).
5204 </para>
5205
5206 <para>
5207  We are barely scratching the surface of regular expressions here so that you
5208  can understand the default <application>Privoxy</application>
5209  configuration files, and maybe use this knowledge to customize your own
5210  installation. There is much, much more that can be done with regular
5211  expressions. Now that you know enough to get started, you can learn more on
5212  your own :/
5213 </para>
5214
5215 <para>
5216  More reading on Perl Compatible Regular expressions: 
5217  <ulink url="http://www.perldoc.com/perl5.6/pod/perlre.html">http://www.perldoc.com/perl5.6/pod/perlre.html</ulink>
5218 </para>
5219
5220 <para>
5221  For information on regular expression based substitutions and their applications
5222  in filters, please see the <link linkend="filter-file">filter file tutorial</link>
5223  in this manual.
5224 </para>
5225 </sect2>
5226
5227 <!--  ~  End section  ~  -->
5228
5229
5230 <!--   ~~~~~       New section      ~~~~~     -->
5231 <sect2>
5232 <title><application>Privoxy</application>'s Internal Pages</title>
5233
5234 <para>
5235  Since <application>Privoxy</application> proxies each requested 
5236  web page, it is easy for <application>Privoxy</application> to 
5237  trap certain special URLs. In this way, we can talk directly to
5238  <application>Privoxy</application>, and see how it is 
5239  configured, see how our rules are being applied, change these 
5240  rules and other configuration options, and even turn
5241  <application>Privoxy's</application> filtering off, all with 
5242  a web browser.
5243
5244 </para>
5245
5246 <para>
5247  The URLs listed below are the special ones that allow direct access 
5248  to <application>Privoxy</application>. Of course,
5249  <application>Privoxy</application> must be running to access these. If 
5250  not, you will get a friendly error message. Internet access is not 
5251  necessary either.
5252 </para>
5253
5254 <para>
5255  <itemizedlist>
5256
5257  <listitem>
5258   <para>  
5259    Privoxy main page: 
5260   </para>
5261   <blockquote>
5262    <para> 
5263      <ulink url="http://config.privoxy.org/">http://config.privoxy.org/</ulink>
5264    </para>
5265   </blockquote>
5266   <para>
5267    There is a shortcut: <ulink url="http://p.p/">http://p.p/</ulink> (But it
5268    doesn't provide a fall-back to a real page, in case the request is not
5269    sent through <application>Privoxy</application>)
5270   </para>
5271  </listitem>
5272
5273  <listitem>
5274   <para>  
5275     Show information about the current configuration, including viewing and 
5276     editing of actions files:
5277   </para>
5278    <blockquote>
5279    <para> 
5280     <ulink url="http://config.privoxy.org/show-status">http://config.privoxy.org/show-status</ulink>
5281    </para>
5282   </blockquote>
5283  </listitem>
5284  
5285  <listitem>
5286   <para>  
5287     Show the source code version numbers:
5288   </para>
5289   <blockquote>
5290    <para> 
5291     <ulink url="http://config.privoxy.org/show-version">http://config.privoxy.org/show-version</ulink>
5292    </para>
5293   </blockquote>
5294  </listitem>
5295  
5296  <listitem>
5297   <para>  
5298    Show the browser's request headers:
5299   </para>
5300   <blockquote>
5301    <para> 
5302     <ulink url="http://config.privoxy.org/show-request">http://config.privoxy.org/show-request</ulink>
5303    </para>
5304   </blockquote>
5305  </listitem>
5306  
5307  <listitem>
5308   <para>  
5309    Show which actions apply to a URL and why:
5310   </para>
5311    <blockquote>
5312    <para> 
5313     <ulink url="http://config.privoxy.org/show-url-info">http://config.privoxy.org/show-url-info</ulink>
5314    </para>
5315   </blockquote>
5316  </listitem>
5317  
5318  <listitem>
5319   <para>  
5320    Toggle Privoxy on or off. In this case, <quote>Privoxy</quote> continues 
5321    to run, but only as a pass-through proxy, with no actions taking place:
5322   </para>
5323    <blockquote>
5324    <para> 
5325     <ulink url="http://config.privoxy.org/toggle">http://config.privoxy.org/toggle</ulink>
5326    </para>
5327   </blockquote>
5328   <para>
5329    Short cuts. Turn off, then on: 
5330   </para>
5331    <blockquote>
5332    <para> 
5333      <ulink url="http://config.privoxy.org/toggle?set=disable">http://config.privoxy.org/toggle?set=disable</ulink>
5334    </para>
5335   </blockquote>
5336    <blockquote>
5337    <para> 
5338      <ulink url="http://config.privoxy.org/toggle?set=enable">http://config.privoxy.org/toggle?set=enable</ulink>
5339    </para>
5340   </blockquote>
5341  </listitem>
5342  
5343  </itemizedlist>
5344 </para>
5345
5346 <para>
5347  These may be bookmarked for quick reference. See next.
5348
5349 </para>
5350
5351 <sect3 id="bookmarklets">
5352 <title>Bookmarklets</title>
5353 <para>
5354  Below are some <quote>bookmarklets</quote> to allow you to easily access a
5355  <quote>mini</quote> version of some of <application>Privoxy's</application>
5356  special pages. They are designed for MS Internet Explorer, but should work
5357  equally well in Netscape, Mozilla, and other browsers which support
5358  JavaScript. They are designed to run directly from your bookmarks - not by
5359  clicking the links below (although that should work for testing).
5360 </para>
5361 <para>
5362  To save them, right-click the link and choose <quote>Add to Favorites</quote>
5363  (IE) or <quote>Add Bookmark</quote> (Netscape). You will get a warning that
5364  the bookmark <quote>may not be safe</quote> - just click OK. Then you can run the
5365  Bookmarklet directly from your favorites/bookmarks. For even faster access,
5366  you can put them on the <quote>Links</quote> bar (IE) or the <quote>Personal
5367  Toolbar</quote> (Netscape), and run them with a single click. 
5368 </para>
5369
5370 <para>
5371  <itemizedlist>
5372
5373   <listitem>
5374    <para>
5375     <ulink
5376     url="javascript:void(window.open('http://config.privoxy.org/toggle?mini=y&#38;set=enabled','ijbstatus','width=250,height=100,resizable=yes,scrollbars=no,toolbar=no,location=no,directories=no,status=no,menubar=no,copyhistory=no').focus());">Privoxy - Enable</ulink>
5377    </para>
5378   </listitem> 
5379
5380   <listitem>
5381    <para>
5382     <ulink
5383     url="javascript:void(window.open('http://config.privoxy.org/toggle?mini=y&#38;set=disabled','ijbstatus','width=250,height=100,resizable=yes,scrollbars=no,toolbar=no,location=no,directories=no,status=no,menubar=no,copyhistory=no').focus());">Privoxy - Disable</ulink>
5384    </para>
5385   </listitem> 
5386
5387   <listitem>
5388    <para>
5389     <ulink
5390     url="javascript:void(window.open('http://config.privoxy.org/toggle?mini=y&#38;set=toggle','ijbstatus','width=250,height=100,resizable=yes,scrollbars=no,toolbar=no,location=no,directories=no,status=no,menubar=no,copyhistory=no').focus());">Privoxy - Toggle Privoxy</ulink> (Toggles between enabled and disabled)
5391    </para>
5392   </listitem> 
5393
5394   <listitem>
5395    <para>
5396     <ulink
5397     url="javascript:void(window.open('http://config.privoxy.org/toggle?mini=y','ijbstatus','width=250,height=2,resizable=yes,scrollbars=no,toolbar=no,location=no,directories=no,status=no,menubar=no,copyhistory=no').focus());">Privoxy- View Status</ulink>
5398    </para>
5399   </listitem> 
5400
5401   <listitem>
5402    <para>
5403     <ulink url="javascript:w=Math.floor(screen.width/2);h=Math.floor(screen.height*0.9);void(window.open('http://www.privoxy.org/actions/index.php?url='+escape(location.href),'Feedback','screenx='+w+',width='+w+',height='+h+',scrollbars=yes,toolbar=no,location=no,directories=no,status=no,menubar=no,copyhistory=no').focus());">Privoxy - Submit Actions File Feedback</ulink>
5404    </para>
5405   </listitem> 
5406   <listitem>
5407    <para>
5408     <ulink url="javascript:void(window.open('http://config.privoxy.org/show-url-info?url='+escape(location.href),'Why').focus());">Privoxy - Why?</ulink>
5409    </para>
5410   </listitem> 
5411  </itemizedlist>
5412 </para>
5413
5414 <para>
5415  Credit: The site which gave us the general idea for these bookmarklets is
5416  <ulink url="http://www.bookmarklets.com/">www.bookmarklets.com</ulink>. They
5417  have more information about bookmarklets. 
5418 </para>
5419
5420
5421 </sect3>
5422
5423 </sect2>
5424
5425
5426 <!--   ~~~~~       New section      ~~~~~     -->
5427 <sect2 id="chain">
5428 <title>Chain of Events</title>
5429 <para>
5430  Let's take a quick look at the basic sequence of events when a web page is 
5431  requested by your browser and <application>Privoxy</application> is on duty:
5432 </para>
5433
5434 <para>
5435  <itemizedlist>
5436  <listitem>
5437   <para>
5438    First, your web browser requests a web page. The browser knows to send 
5439    the request to <application>Privoxy</application>, which will in turn, 
5440    relay the request to the remote web server after passing the following 
5441    tests: 
5442   </para>
5443  </listitem> 
5444  <listitem>
5445   <para>
5446    <application>Privoxy</application> traps any request for its own internal CGI 
5447    pages (e.g http://p.p/) and sends the CGI page back to the browser.
5448   </para>
5449  </listitem> 
5450  <listitem>
5451   <para>
5452    Next, <application>Privoxy</application> checks to see if the URL 
5453    matches any <link
5454    linkend="BLOCK"><quote>+block</quote></link> patterns. If
5455    so, the URL is then blocked, and the remote web server will not be contacted.
5456    <link linkend="HANDLE-AS-IMAGE"><quote>+handle-as-image</quote></link> 
5457    is then checked and if it does not match, an 
5458    HTML <quote>BLOCKED</quote> page is sent back. Otherwise, if it does match,
5459    an image is returned. The type of image depends on the setting of <link
5460    linkend="SET-IMAGE-BLOCKER"><quote>+set-image-blocker</quote></link>
5461    (blank, checkerboard pattern, or an HTTP redirect to an image elsewhere).
5462   </para>
5463  </listitem> 
5464  <listitem>
5465   <para>
5466    Untrusted URLs are blocked. If URLs are being added to the
5467    <filename>trust</filename> file, then that is done.
5468   </para>
5469  </listitem> 
5470  <listitem>
5471   <para>
5472    If the URL pattern matches the <link
5473    linkend="FAST-REDIRECTS"><quote>+fast-redirects</quote></link> action,
5474    it is then processed. Unwanted parts of the requested URL are stripped.
5475   </para>
5476  </listitem> 
5477  <listitem>
5478   <para>
5479    Now the rest of the client browser's request headers are processed. If any
5480    of these match any of the relevant actions (e.g. <link
5481    linkend="HIDE-USER-AGENT"><quote>+hide-user-agent</quote></link>,
5482    etc.), headers are suppressed or forged as determined by these actions and
5483    their parameters.
5484   </para>
5485  </listitem> 
5486  <listitem>
5487   <para>
5488    Now the web server starts sending its response back (i.e. typically a web page and related 
5489    data).
5490   </para>
5491  </listitem> 
5492  <listitem>
5493   <para>
5494    First, the server headers are read and processed to determine, among other
5495    things, the MIME type (document type) and encoding. The headers are then
5496    filtered as determined by the 
5497    <link linkend="CRUNCH-INCOMING-COOKIES"><quote>+crunch-incoming-cookies</quote></link>,
5498    <link linkend="SESSION-COOKIES-ONLY"><quote>+session-cookies-only</quote></link>,
5499    and <link linkend="DOWNGRADE-HTTP-VERSION"><quote>+downgrade-http-version</quote></link>
5500    actions.
5501   </para>
5502  </listitem> 
5503  <listitem>
5504   <para>
5505    If the <link linkend="KILL-POPUPS"><quote>+kill-popups</quote></link>
5506    action applies, and it is an HTML or JavaScript document, the popup-code in the
5507    response is filtered on-the-fly as it is received.
5508   </para>
5509  </listitem> 
5510  <listitem>
5511   <para>
5512    If a <link linkend="FILTER"><quote>+filter</quote></link>
5513    or <link
5514    linkend="DEANIMATE-GIFS"><quote>+deanimate-gifs</quote></link>
5515    action applies (and the document type fits the action), the rest of the page is
5516    read into memory (up to a configurable limit). Then the filter rules (from
5517    <filename>default.filter</filename>) are processed against the buffered
5518    content. Filters are applied in the order they are specified in the
5519    <filename>default.filter</filename> file. Animated GIFs, if present, are
5520    reduced to either the first or last frame, depending on the action
5521    setting.The entire page, which is now filtered, is then sent by
5522    <application>Privoxy</application> back to your browser. 
5523   </para>
5524   <para>
5525    If neither <link linkend="FILTER"><quote>+filter</quote></link>
5526    or <link
5527    linkend="DEANIMATE-GIFS"><quote>+deanimate-gifs</quote></link>
5528    matches, then <application>Privoxy</application> passes the raw data through 
5529    to the client browser as it becomes available.
5530   </para>
5531  </listitem> 
5532  <listitem>
5533   <para>
5534    As the browser receives the now (probably filtered) page content, it 
5535    reads and then requests any URLs that may be embedded within the page
5536    source, e.g. ad images, stylesheets, JavaScript, other HTML documents (e.g.
5537    frames), sounds, etc. For each of these objects, the browser issues a new
5538    request. And each such request is in turn processed as above. Note that a
5539    complex web page may have many such embedded URLs.
5540   </para>
5541  </listitem> 
5542  
5543  </itemizedlist>
5544 </para>
5545
5546 </sect2>
5547
5548
5549 <!--   ~~~~~       New section      ~~~~~     -->
5550 <sect2 id="actionsanat">
5551 <title>Anatomy of an Action</title>
5552
5553 <para>
5554  The way <application>Privoxy</application> applies 
5555  <link linkend="ACTIONS">actions</link> and <link linkend="FILTER">filters</link>
5556  to any given URL can be complex, and not always so
5557  easy to understand what is happening. And sometimes we need to be able to
5558  <emphasis>see</emphasis> just what <application>Privoxy</application> is
5559  doing. Especially, if something <application>Privoxy</application> is doing
5560  is causing us a problem inadvertently. It can be a little daunting to look at
5561  the actions and filters files themselves, since they tend to be filled with
5562  <link linkend="regex">regular expressions</link> whose consequences are not
5563  always so obvious. 
5564 </para>
5565
5566 <para>
5567  One quick test to see if <application>Privoxy</application> is causing a problem 
5568  or not, is to disable it temporarily. This should be the first troubleshooting 
5569  step. See <link linkend="bookmarklets">the Bookmarklets</link> section on a quick 
5570  and easy way to do this (be sure to flush caches afterward!). Looking at the 
5571  logs is a good idea too.
5572 </para>
5573
5574 <para>
5575  <application>Privoxy</application> also provides the 
5576  <ulink url="http://config.privoxy.org/show-url-info">http://config.privoxy.org/show-url-info</ulink>
5577  page that can show us very specifically how <application>actions</application>
5578  are being applied to any given URL. This is a big help for troubleshooting.
5579 </para>
5580
5581 <para>
5582  First, enter one URL (or partial URL) at the prompt, and then
5583  <application>Privoxy</application> will tell us 
5584  how the current configuration will handle it. This will not
5585  help with filtering effects (i.e. the <link
5586  linkend="FILTER"><quote>+filter</quote></link> action) from
5587  the <filename>default.filter</filename> file since this is handled very
5588  differently and not so easy to trap! It also will not tell you about any other
5589  URLs that may be embedded within the URL you are testing. For instance, images
5590  such as ads are expressed as URLs within the raw page source of HTML pages. So
5591  you will only get info for the actual URL that is pasted into the prompt area
5592  -- not any sub-URLs. If you want to know about embedded URLs like ads, you
5593  will have to dig those out of the HTML source. Use your browser's <quote>View
5594  Page Source</quote> option for this. Or right click on the ad, and grab the
5595  URL.
5596 </para>
5597
5598 <para>
5599  Let's try an example, <ulink url="http://google.com">google.com</ulink>, 
5600  and look at it one section at a time:
5601 </para>
5602
5603 <para>
5604  <screen>
5605  Matches for http://google.com:
5606
5607  In file: default.action <guibutton>[ View ]</guibutton> <guibutton>[ Edit ]</guibutton>
5608
5609 {-add-header 
5610  -block 
5611  -crunch-outgoing-cookies 
5612  -crunch-incoming-cookies 
5613  +deanimate-gifs{last} 
5614  -downgrade-http-version 
5615  +fast-redirects 
5616  -filter{popups} 
5617  -filter{fun} 
5618  -filter{shockwave-flash} 
5619  -filter{crude-parental} 
5620  +filter{html-annoyances} 
5621  +filter{js-annoyances} 
5622  +filter{content-cookies} 
5623  +filter{webbugs} 
5624  +filter{refresh-tags} 
5625  +filter{nimda} 
5626  +filter{banners-by-size} 
5627  +hide-forwarded-for-headers 
5628  +hide-from-header{block} 
5629  +hide-referer{forge} 
5630  -hide-user-agent 
5631  -handle-as-image 
5632  -kill-popups 
5633  -limit-connect 
5634  +prevent-compression 
5635  -send-vanilla-wafer 
5636  -send-wafer 
5637  +session-cookies-only 
5638  +set-image-blocker{pattern} }
5639 /
5640
5641  { -session-cookies-only }
5642  .google.com
5643
5644  { -fast-redirects }
5645  .google.com
5646
5647 In file: user.action <guibutton>[ View ]</guibutton> <guibutton>[ Edit ]</guibutton>
5648 (no matches in this file)  
5649 </screen>
5650 </para>
5651
5652 <para>
5653  This tells us how we have defined our 
5654  <link linkend="ACTIONS"><quote>actions</quote></link>, and
5655  which ones match for our example, <quote>google.com</quote>. The first listing
5656  is any matches for the <filename>standard.action</filename> file. No hits at
5657  all here on <quote>standard</quote>. Then next is <quote>default</quote>, or
5658  our <filename>default.action</filename> file. The large, multi-line listing,
5659  is how the actions are set to match for all URLs, i.e. our default settings.
5660  If you look at your <quote>actions</quote> file, this would be the section
5661  just below the <quote>aliases</quote> section near the top. This will apply to
5662  all URLs as signified by the single forward slash at the end of the listing
5663  -- <quote>/</quote>.
5664 </para>
5665
5666 <para>
5667  But we can define additional actions that would be exceptions to these general
5668  rules, and then list specific URLs (or patterns) that these exceptions would
5669  apply to. Last match wins. Just below this then are two explicit matches for
5670  <quote>.google.com</quote>. The first is negating our previous cookie setting, 
5671  which was for <link
5672  linkend="SESSION-COOKIES-ONLY"><quote>+session-cookies-only</quote></link>
5673  (i.e. not persistent). So we will allow persistent cookies for google. The
5674  second turns <emphasis>off</emphasis> any 
5675  <link
5676  linkend="FAST-REDIRECTS"><quote>+fast-redirects</quote></link>
5677  action, allowing this to take place unmolested. Note that there is a leading
5678  dot here -- <quote>.google.com</quote>. This will match any hosts and
5679  sub-domains, in the google.com domain also, such as
5680  <quote>www.google.com</quote>. So, apparently, we have these two actions
5681  defined somewhere in the lower part of our <filename>default.action</filename>
5682  file, and <quote>google.com</quote> is referenced somewhere in these latter
5683  sections.
5684 </para>
5685
5686 <para>
5687  Then, for our <filename>user.action</filename> file, we again have no hits.
5688 </para>
5689
5690 <para>
5691  And finally we pull it all together in the bottom section and summarize how
5692  <application>Privoxy</application> is applying all its <quote>actions</quote> 
5693  to <quote>google.com</quote>:
5694
5695 </para>
5696
5697 <para>
5698  <screen>
5699
5700  Final results:
5701  
5702  -add-header 
5703  -block 
5704  -crunch-outgoing-cookies 
5705  -crunch-incoming-cookies 
5706  +deanimate-gifs{last} 
5707  -downgrade-http-version 
5708  -fast-redirects 
5709  -filter{popups} 
5710  -filter{fun} 
5711  -filter{shockwave-flash} 
5712  -filter{crude-parental} 
5713  +filter{html-annoyances} 
5714  +filter{js-annoyances} 
5715  +filter{content-cookies} 
5716  +filter{webbugs} 
5717  +filter{refresh-tags} 
5718  +filter{nimda} 
5719  +filter{banners-by-size} 
5720  +hide-forwarded-for-headers 
5721  +hide-from-header{block} 
5722  +hide-referer{forge} 
5723  -hide-user-agent 
5724  -handle-as-image 
5725  -kill-popups 
5726  -limit-connect 
5727  +prevent-compression 
5728  -send-vanilla-wafer 
5729  -send-wafer
5730  -session-cookies-only 
5731  +set-image-blocker{pattern} 
5732 </screen>
5733 </para>
5734
5735 <para>
5736  Notice the only difference here to the previous listing, is to 
5737  <quote>fast-redirects</quote> and <quote>session-cookies-only</quote>.
5738 </para>
5739
5740 <para>
5741  Now another example, <quote>ad.doubleclick.net</quote>:
5742 </para>
5743
5744 <para>
5745  <screen>
5746
5747  { +block +handle-as-image }
5748   .ad.doubleclick.net
5749
5750  { +block +handle-as-image }
5751   ad*.
5752
5753  { +block +handle-as-image }
5754   .doubleclick.net
5755 </screen>
5756 </para>
5757
5758 <para>
5759  We'll just show the interesting part here, the explicit matches. It is 
5760  matched three different times. Each as an <quote>+block +handle-as-image</quote>,
5761  which is the expanded form of one of our aliases that had been defined as: 
5762  <quote>+imageblock</quote>. (<link
5763  linkend="ALIASES"><quote>Aliases</quote></link> are defined in
5764  the first section of the actions file and typically used to combine more 
5765  than one action.)
5766 </para>
5767
5768 <para>
5769  Any one of these would have done the trick and blocked this as an unwanted 
5770  image. This is unnecessarily redundant since the last case effectively 
5771  would also cover the first. No point in taking chances with these guys 
5772  though ;-) Note that if you want an ad or obnoxious 
5773  URL to be invisible, it should be defined as <quote>ad.doubleclick.net</quote>
5774  is done here -- as both a <link
5775  linkend="BLOCK"><quote>+block</quote></link>
5776  <emphasis>and</emphasis> an 
5777  <link
5778  linkend="HANDLE-AS-IMAGE"><quote>+handle-as-image</quote></link>.
5779  The custom alias <quote>+imageblock</quote> just simplifies the process and make 
5780  it more readable.
5781 </para>
5782
5783 <para>
5784  One last example. Let's try <quote>http://www.rhapsodyk.net/adsl/HOWTO/</quote>.
5785  This one is giving us problems. We are getting a blank page. Hmmm ...
5786 </para>
5787
5788 <para>
5789  <screen>
5790
5791  Matches for http://www.rhapsodyk.net/adsl/HOWTO/:
5792
5793  In file: default.action <guibutton>[ View ]</guibutton> <guibutton>[ Edit ]</guibutton>
5794
5795  {-add-header 
5796   -block 
5797   -crunch-incoming-cookies 
5798   -crunch-outgoing-cookies 
5799   +deanimate-gifs 
5800   -downgrade-http-version 
5801   +fast-redirects 
5802   +filter{html-annoyances} 
5803   +filter{js-annoyances} 
5804   +filter{kill-popups} 
5805   +filter{webbugs} 
5806   +filter{nimda} 
5807   +filter{banners-by-size} 
5808   +filter{hal} 
5809   +filter{fun} 
5810   +hide-forwarded-for-headers 
5811   +hide-from-header{block} 
5812   +hide-referer{forge} 
5813   -hide-user-agent 
5814   -handle-as-image 
5815   +kill-popups 
5816   +prevent-compression 
5817   -send-vanilla-wafer 
5818   -send-wafer 
5819   +session-cookies-only 
5820   +set-image-blocker{blank} }
5821    /
5822
5823  { +block +handle-as-image }
5824   /ads
5825 </screen>
5826 </para>
5827
5828 <para>
5829  Ooops, the <quote>/adsl/</quote> is matching <quote>/ads</quote>! But 
5830  we did not want this at all! Now we see why we get the blank page. We could
5831  now add a new action below this that explicitly does <emphasis>not</emphasis>
5832  block (<quote>{-block}</quote>) paths with <quote>adsl</quote>. There are
5833  various ways to handle such exceptions. Example:
5834 </para>
5835
5836 <para>
5837  <screen>
5838
5839  { -block }
5840   /adsl
5841 </screen>
5842 </para>
5843
5844 <para>
5845  Now the page displays ;-) Be sure to flush your browser's caches when 
5846  making such changes. Or, try using <literal>Shift+Reload</literal>.
5847 </para>
5848
5849 <para>
5850  But now what about a situation where we get no explicit matches like 
5851  we did with:
5852 </para>
5853
5854 <para>
5855  <screen>
5856
5857  { +block +handle-as-image }
5858  /ads
5859 </screen>
5860 </para>
5861
5862 <para>
5863  That actually was very telling and pointed us quickly to where the problem
5864  was. If you don't get this kind of match, then it means one of the default 
5865  rules in the first section is causing the problem. This would require some 
5866  guesswork, and maybe a little trial and error to isolate the offending rule.
5867  One likely cause would be one of the <quote>{+filter}</quote> actions. These 
5868  tend to be harder to troubleshoot. Try adding the URL for the site to one of
5869  aliases that turn off <quote>+filter</quote>:
5870 </para>
5871
5872 <para>
5873  <screen>
5874
5875  {shop}
5876  .quietpc.com
5877  .worldpay.com   # for quietpc.com
5878  .jungle.com
5879  .scan.co.uk
5880  .forbes.com
5881 </screen>
5882 </para>
5883
5884 <para>
5885  <quote>{shop}</quote> is an <quote>alias</quote> that expands to 
5886  <quote>{ -filter -session-cookies-only }</quote>.
5887  Or you could do your own exception to negate filtering:
5888
5889 </para>
5890
5891 <para>
5892  <screen>
5893
5894  {-filter}
5895  .forbes.com
5896 </screen>
5897 </para>
5898
5899 <para>
5900  This would turn off all filtering for that site. This would probably be most
5901  appropriately put in <filename>user.action</filename>, for local site
5902  exceptions.
5903 </para>
5904
5905 <para>
5906  Images that are inexplicably being blocked, may well be hitting the 
5907  <quote>+filter{banners-by-size}</quote> rule, which assumes 
5908  that images of certain sizes are ad banners (works well most of the time 
5909  since these tend to be standardized).
5910 </para>
5911
5912 <para>
5913  <quote>{fragile}</quote> is an alias that disables most actions. This can be 
5914  used as a last resort for problem sites. Remember to flush caches! If this 
5915  still does not work, you will have to go through the remaining actions one by
5916  one to find which one(s) is causing the problem.
5917 </para>
5918
5919 </sect2>
5920
5921 </sect1>
5922
5923  <!--
5924
5925  This program is free software; you can redistribute it 
5926  and/or modify it under the terms of the GNU General
5927  Public License as published by the Free Software
5928  Foundation; either version 2 of the License, or (at
5929  your option) any later version.
5930
5931  This program is distributed in the hope that it will
5932  be useful, but WITHOUT ANY WARRANTY; without even the
5933  implied warranty of MERCHANTABILITY or FITNESS FOR A
5934  PARTICULAR PURPOSE.  See the GNU General Public
5935  License for more details.
5936
5937  The GNU General Public License should be included with
5938  this file.  If not, you can view it at
5939  http://www.gnu.org/copyleft/gpl.html
5940  or write to the Free Software Foundation, Inc., 59
5941  Temple Place - Suite 330, Boston, MA  02111-1307, USA.
5942
5943  $Log: user-manual.sgml,v $
5944  Revision 1.123.2.26  2003/03/17 16:50:53  oes
5945  Added documentation for new --chroot option
5946
5947  Revision 1.123.2.25  2003/03/15 18:36:55  oes
5948  Adapted to the new filters
5949
5950  Revision 1.123.2.24  2002/11/17 06:41:06  hal9
5951  Move default profiles table from FAQ to U-M, and other minor related changes.
5952  Add faq on cookies.
5953
5954  Revision 1.123.2.23  2002/10/21 02:32:01  hal9
5955  Updates to the user.action examples section. A few new ones.
5956
5957  Revision 1.123.2.22  2002/10/12 00:51:53  hal9
5958  Add demoronizer to filter section.
5959
5960  Revision 1.123.2.21  2002/10/10 04:09:35  hal9
5961  s/Advanced/Radical/ and added very brief note.
5962
5963  Revision 1.123.2.20  2002/10/10 03:49:21  hal9
5964  Add notes to session-cookies-only and Quickstart about pre-existing
5965  cookies. Also, note content-cookies work differently.
5966
5967  Revision 1.123.2.19  2002/09/26 01:25:36  hal9
5968  More explanation on Privoxy patterns, more on content-cookies and SSL.
5969
5970  Revision 1.123.2.18  2002/08/22 23:47:58  hal9
5971  Add 'Documentation' to Privoxy Menu shot in Configuration section to match
5972  CGIs.
5973
5974  Revision 1.123.2.17  2002/08/18 01:13:05  hal9
5975  Spell checked (only one typo this time!).
5976
5977  Revision 1.123.2.16  2002/08/09 19:20:54  david__schmidt
5978  Update to Mac OSX startup script name
5979
5980  Revision 1.123.2.15  2002/08/07 17:32:11  oes
5981  Converted some internal links from ulink to link for PDF creation; no content changed
5982
5983  Revision 1.123.2.14  2002/08/06 09:16:13  oes
5984  Nits re: actions file download
5985
5986  Revision 1.123.2.13  2002/08/02 18:23:19  g_sauthoff
5987  Just 2 small corrections to the Gentoo sections
5988
5989  Revision 1.123.2.12  2002/08/02 18:17:21  g_sauthoff
5990  Added 2 Gentoo sections
5991
5992  Revision 1.123.2.11  2002/07/26 15:20:31  oes
5993  - Added version info to title
5994  - Added info on new filters
5995  - Revised parts of the filter file tutorial
5996  - Added info on where to get updated actions files
5997
5998  Revision 1.123.2.10  2002/07/25 21:42:29  hal9
5999  Add brief notes on not proxying non-HTTP protocols.
6000
6001  Revision 1.123.2.9  2002/07/11 03:40:28  david__schmidt
6002
6003  Updated Mac OSX sections due to installation location change
6004
6005  Revision 1.123.2.8  2002/06/09 16:36:32  hal9
6006  Clarifications on filtering and MIME. Hardcode 'latest release' in index.html.
6007
6008  Revision 1.123.2.7  2002/06/09 00:29:34  hal9
6009  Touch ups on filtering, in actions section and Anatomy.
6010
6011  Revision 1.123.2.6  2002/06/06 23:11:03  hal9
6012  Fix broken link. Linkchecked all docs.
6013
6014  Revision 1.123.2.5  2002/05/29 02:01:02  hal9
6015  This is break out of the entire config section from u-m, so it can
6016  eventually be used to generate the comments, etc in the main config file
6017  so that these are in sync with each other.
6018
6019  Revision 1.123.2.4  2002/05/27 03:28:45  hal9
6020  Ooops missed something from David.
6021
6022  Revision 1.123.2.3  2002/05/27 03:23:17  hal9
6023  Fix FIXMEs for OS2 and OSX startup. Fix Redhat typos (should be Red Hat).
6024  That's a wrap, I think.
6025
6026  Revision 1.123.2.2  2002/05/26 19:02:09  hal9
6027  Move Amiga stuff around to take of FIXME in start up section.
6028
6029  Revision 1.123.2.1  2002/05/26 17:04:25  hal9
6030  -Spellcheck, very minor edits, and sync across branches
6031
6032  Revision 1.123  2002/05/24 23:19:23  hal9
6033  Include new image (Proxy setup). More fun with guibutton.
6034  Minor corrections/clarifications here and there.
6035
6036  Revision 1.122  2002/05/24 13:24:08  oes
6037  Added Bookmarklet for one-click pre-filled access to show-url-info
6038
6039  Revision 1.121  2002/05/23 23:20:17  oes
6040   - Changed more (all?) references to actions to the
6041     <literal><link> style.
6042   - Small fixes in the actions chapter
6043   - Small clarifications in the quickstart to ad blocking
6044   - Removed <emphasis> from <title>s since the new doc CSS
6045     renders them red (bad in TOC).
6046
6047  Revision 1.120  2002/05/23 19:16:43  roro
6048  Correct Debian specials (installation and startup).
6049
6050  Revision 1.119  2002/05/22 17:17:05  oes
6051  Added Security hint
6052
6053  Revision 1.118  2002/05/21 04:54:55  hal9
6054  -New Section: Quickstart to Ad Blocking
6055  -Reformat Actions Anatomy to match new CGI layout
6056
6057  Revision 1.117  2002/05/17 13:56:16  oes
6058   - Reworked & extended Templates chapter
6059   - Small changes to Regex appendix
6060   - #included authors.sgml into (C) and hist chapter
6061
6062  Revision 1.116  2002/05/17 03:23:46  hal9
6063  Fixing merge conflict in Quickstart section.
6064
6065  Revision 1.115  2002/05/16 16:25:00  oes
6066  Extended the Filter File chapter & minor fixes
6067
6068  Revision 1.114  2002/05/16 09:42:50  oes
6069  More ulink->link, added some hints to Quickstart section
6070
6071  Revision 1.113  2002/05/15 21:07:25  oes
6072  Extended and further commented the example actions files
6073
6074  Revision 1.112  2002/05/15 03:57:14  hal9
6075  Spell check. A few minor edits here and there for better syntax and
6076  clarification.
6077
6078  Revision 1.111  2002/05/14 23:01:36  oes
6079  Fixing the fixes   
6080
6081  Revision 1.110  2002/05/14 19:10:45  oes
6082  Restored alphabetical order of actions
6083
6084  Revision 1.109  2002/05/14 17:23:11  oes
6085  Renamed the prevent-*-cookies actions, extended aliases section and moved it before the example AFs
6086
6087  Revision 1.108  2002/05/14 15:29:12  oes
6088  Completed proofreading the actions chapter
6089
6090  Revision 1.107  2002/05/12 03:20:41  hal9
6091  Small clarifications for 127.0.0.1 vs localhost for listen-address since this
6092  apparently an important distinction for some OS's.
6093
6094  Revision 1.106  2002/05/10 01:48:20  hal9
6095  This is mostly proposed copyright/licensing additions and changes. Docs
6096  are still GPL, but licensing and copyright are more visible. Also, copyright
6097  changed in doc header comments (eliminate references to JB except FAQ).
6098
6099  Revision 1.105  2002/05/05 20:26:02  hal9
6100  Sorting out license vs copyright in these docs.
6101
6102  Revision 1.104  2002/05/04 08:44:45  swa
6103  bumped version
6104
6105  Revision 1.103  2002/05/04 00:40:53  hal9
6106  -Remove the TOC first page kludge. It's fixed proper now in ldp.dsl.in.
6107  -Some minor additions to Quickstart.
6108
6109  Revision 1.102  2002/05/03 17:46:00  oes
6110  Further proofread & reactivated short build instructions
6111
6112  Revision 1.101  2002/05/03 03:58:30  hal9
6113  Move the user-manual config directive to top of section. Add note about
6114  Privoxy needing read permissions for configs, and write for logs.
6115
6116  Revision 1.100  2002/04/29 03:05:55  hal9
6117  Add clarification on differences of new actions files.
6118
6119  Revision 1.99  2002/04/28 16:59:05  swa
6120  more structure in starting section
6121
6122  Revision 1.98  2002/04/28 05:43:59  hal9
6123  This is the break up of configuration.html into multiple files. This
6124  will probably break links elsewhere :(
6125
6126  Revision 1.97  2002/04/27 21:04:42  hal9
6127  -Rewrite of Actions File example.
6128  -Add section for user-manual directive in config.
6129
6130  Revision 1.96  2002/04/27 05:32:00  hal9
6131  -Add short section to Filter Files to tie in with +filter action.
6132  -Start rewrite of examples in Actions Examples (not finished).
6133
6134  Revision 1.95  2002/04/26 17:23:29  swa
6135  bookmarks cleaned, changed structure of user manual, screen and programlisting cleanups, and numerous other changes that I forgot
6136
6137  Revision 1.94  2002/04/26 05:24:36  hal9
6138  -Add most of Andreas suggestions to Chain of Events section.
6139  -A few other minor corrections and touch up.
6140
6141  Revision 1.92  2002/04/25 18:55:13  hal9
6142  More catchups on new actions files, and new actions names.
6143  Other assorted cleanups, and minor modifications.
6144
6145  Revision 1.91  2002/04/24 02:39:31  hal9
6146  Add 'Chain of Events' section.
6147
6148  Revision 1.90  2002/04/23 21:41:25  hal9
6149  Linuxconf is deprecated on RH, substitute chkconfig.
6150
6151  Revision 1.89  2002/04/23 21:05:28  oes
6152  Added hint for startup on Red Hat
6153
6154  Revision 1.88  2002/04/23 05:37:54  hal9
6155  Add AmigaOS install stuff.
6156
6157  Revision 1.87  2002/04/23 02:53:15  david__schmidt
6158  Updated OSX installation section
6159  Added a few English tweaks here an there
6160
6161  Revision 1.86  2002/04/21 01:46:32  hal9
6162  Re-write actions section.
6163
6164  Revision 1.85  2002/04/18 21:23:23  hal9
6165  Fix ugly typo (mine).
6166
6167  Revision 1.84  2002/04/18 21:17:13  hal9
6168  Spell Redhat correctly (ie Red Hat). A few minor grammar corrections.
6169
6170  Revision 1.83  2002/04/18 18:21:12  oes
6171  Added RPM install detail
6172
6173  Revision 1.82  2002/04/18 12:04:50  oes
6174  Cosmetics
6175
6176  Revision 1.81  2002/04/18 11:50:24  oes
6177  Extended Install section - needs fixing by packagers
6178
6179  Revision 1.80  2002/04/18 10:45:19  oes
6180  Moved text to buildsource.sgml, renamed some filters, details
6181
6182  Revision 1.79  2002/04/18 03:18:06  hal9
6183  Spellcheck, and minor touchups.
6184
6185  Revision 1.78  2002/04/17 18:04:16  oes
6186  Proofreading part 2
6187
6188  Revision 1.77  2002/04/17 13:51:23  oes
6189  Proofreading, part one
6190
6191  Revision 1.76  2002/04/16 04:25:51  hal9
6192  -Added 'Note to Upgraders' and re-ordered the 'Quickstart' section.
6193  -Note about proxy may need requests to re-read config files.
6194
6195  Revision 1.75  2002/04/12 02:08:48  david__schmidt
6196  Remove OS/2 building info... it is already in the developer-manual
6197
6198  Revision 1.74  2002/04/11 00:54:38  hal9
6199  Add small section on submitting actions.
6200
6201  Revision 1.73  2002/04/10 18:45:15  swa
6202  generated
6203
6204  Revision 1.72  2002/04/10 04:06:19  hal9
6205  Added actions feedback  to Bookmarklets section
6206
6207  Revision 1.71  2002/04/08 22:59:26  hal9
6208  Version update. Spell chkconfig correctly :)
6209
6210  Revision 1.70  2002/04/08 20:53:56  swa
6211  ?
6212
6213  Revision 1.69  2002/04/06 05:07:29  hal9
6214  -Add privoxy-man-page.sgml, for man page.
6215  -Add authors.sgml for AUTHORS (and p-authors.sgml)
6216  -Reworked various aspects of various docs.
6217  -Added additional comments to sub-docs.
6218
6219  Revision 1.68  2002/04/04 18:46:47  swa
6220  consistent look. reuse of copyright, history et. al.
6221
6222  Revision 1.67  2002/04/04 17:27:57  swa
6223  more single file to be included at multiple points. make maintaining easier
6224
6225  Revision 1.66  2002/04/04 06:48:37  hal9
6226  Structural changes to allow for conditional inclusion/exclusion of content
6227  based on entity toggles, e.g. 'entity % p-not-stable  "INCLUDE"'. And
6228  definition of internal entities, e.g. 'entity p-version "2.9.13"' that will
6229  eventually be set by Makefile.
6230  More boilerplate text for use across multiple docs.
6231
6232  Revision 1.65  2002/04/03 19:52:07  swa
6233  enhance squid section due to user suggestion
6234
6235  Revision 1.64  2002/04/03 03:53:43  hal9
6236  A few minor bug fixes, and touch ups. Ready for review.
6237
6238  Revision 1.63  2002/04/01 16:24:49  hal9
6239  Define entities to include boilerplate text. See doc/source/*.
6240
6241  Revision 1.62  2002/03/30 04:15:53  hal9
6242  - Fix privoxy.org/config links.
6243  - Paste in Bookmarklets from Toggle page.
6244  - Move Quickstart nearer top, and minor rework.
6245
6246  Revision 1.61  2002/03/29 01:31:08  hal9
6247  Minor update.
6248
6249  Revision 1.60  2002/03/27 01:57:34  hal9
6250  Added more to Anatomy section.
6251
6252  Revision 1.59  2002/03/27 00:54:33  hal9
6253  Touch up intro for new name.
6254
6255  Revision 1.58  2002/03/26 22:29:55  swa
6256  we have a new homepage!
6257
6258  Revision 1.57  2002/03/24 20:33:30  hal9
6259  A few minor catch ups with name change.
6260
6261  Revision 1.56  2002/03/24 16:17:06  swa
6262  configure needs to be generated.
6263
6264  Revision 1.55  2002/03/24 16:08:08  swa
6265  we are too lazy to make a block-built
6266  privoxy logo. hence removed the option.
6267
6268  Revision 1.54  2002/03/24 15:46:20  swa
6269  name change related issue.
6270
6271  Revision 1.53  2002/03/24 11:51:00  swa
6272  name change. changed filenames.
6273
6274  Revision 1.52  2002/03/24 11:01:06  swa
6275  name change
6276
6277  Revision 1.51  2002/03/23 15:13:11  swa
6278  renamed every reference to the old name with foobar.
6279  fixed "application foobar application" tag, fixed
6280  "the foobar" with "foobar". left junkbustser in cvs
6281  comments and remarks to history untouched.
6282
6283  Revision 1.50  2002/03/23 05:06:21  hal9
6284  Touch up.
6285
6286  Revision 1.49  2002/03/21 17:01:05  hal9
6287  New section in Appendix.
6288
6289  Revision 1.48  2002/03/12 06:33:01  hal9
6290  Catching up to Andreas and re_filterfile changes.
6291
6292  Revision 1.47  2002/03/11 13:13:27  swa
6293  correct feedback channels
6294
6295  Revision 1.46  2002/03/10 00:51:08  hal9
6296  Added section on JB internal pages in Appendix.
6297
6298  Revision 1.45  2002/03/09 17:43:53  swa
6299  more distros
6300
6301  Revision 1.44  2002/03/09 17:08:48  hal9
6302  New section on Jon's actions file editor, and move some stuff around.
6303
6304  Revision 1.43  2002/03/08 00:47:32  hal9
6305  Added imageblock{pattern}.
6306
6307  Revision 1.42  2002/03/07 18:16:55  swa
6308  looks better
6309
6310  Revision 1.41  2002/03/07 16:46:43  hal9
6311  Fix a few markup problems for jade.
6312
6313  Revision 1.40  2002/03/07 16:28:39  swa
6314  provide correct feedback channels
6315
6316  Revision 1.39  2002/03/06 16:19:28  hal9
6317  Note on perceived filtering slowdown per FR.
6318
6319  Revision 1.38  2002/03/05 23:55:14  hal9
6320  Stupid I did it again. Double hyphen in comment breaks jade.
6321
6322  Revision 1.37  2002/03/05 23:53:49  hal9
6323  jade barfs on '- -' embedded in comments. - -user option broke it.
6324
6325  Revision 1.36  2002/03/05 22:53:28  hal9
6326  Add new - - user option.
6327
6328  Revision 1.35  2002/03/05 00:17:27  hal9
6329  Added section on command line options.
6330
6331  Revision 1.34  2002/03/04 19:32:07  oes
6332  Changed default port to 8118
6333
6334  Revision 1.33  2002/03/03 19:46:13  hal9
6335  Emphasis on where/how to report bugs, etc
6336
6337  Revision 1.32  2002/03/03 09:26:06  joergs
6338  AmigaOS changes, config is now loaded from PROGDIR: instead of
6339  AmiTCP:db/junkbuster/ if no configuration file is specified on the
6340  command line.
6341
6342  Revision 1.31  2002/03/02 22:45:52  david__schmidt
6343  Just tweaking
6344
6345  Revision 1.30  2002/03/02 22:00:14  hal9
6346  Updated 'New Features' list. Ran through spell-checker.
6347
6348  Revision 1.29  2002/03/02 20:34:07  david__schmidt
6349  Update OS/2 build section
6350
6351  Revision 1.28  2002/02/24 14:34:24  jongfoster
6352  Formatting changes.  Now changing the doctype to DocBook XML 4.1
6353  will work - no other changes are needed.
6354
6355  Revision 1.27  2002/01/11 14:14:32  hal9
6356  Added a very short section on Templates
6357
6358  Revision 1.26  2002/01/09 20:02:50  hal9
6359  Fix bug re: auto-detect config file changes.
6360
6361  Revision 1.25  2002/01/09 18:20:30  hal9
6362  Touch ups for *.action files.
6363
6364  Revision 1.24  2001/12/02 01:13:42  hal9
6365  Fix typo.
6366
6367  Revision 1.23  2001/12/02 00:20:41  hal9
6368  Updates for recent changes.
6369
6370  Revision 1.22  2001/11/05 23:57:51  hal9
6371  Minor update for startup now daemon mode.
6372
6373  Revision 1.21  2001/10/31 21:11:03  hal9
6374  Correct 2 minor errors
6375
6376  Revision 1.18  2001/10/24 18:45:26  hal9
6377  *** empty log message ***
6378
6379  Revision 1.17  2001/10/24 17:10:55  hal9
6380  Catching up with Jon's recent work, and a few other things.
6381
6382  Revision 1.16  2001/10/21 17:19:21  swa
6383  wrong url in documentation
6384
6385  Revision 1.15  2001/10/14 23:46:24  hal9
6386  Various minor changes. Fleshed out SEE ALSO section.
6387
6388  Revision 1.13  2001/10/10 17:28:33  hal9
6389  Very minor changes.
6390
6391  Revision 1.12  2001/09/28 02:57:04  hal9
6392  Ditto :/
6393
6394  Revision 1.11  2001/09/28 02:25:20  hal9
6395  Ditto.
6396
6397  Revision 1.9  2001/09/27 23:50:29  hal9
6398  A few changes. A short section on regular expression in appendix.
6399
6400  Revision 1.8  2001/09/25 00:34:59  hal9
6401  Some additions, and re-arranging.
6402
6403  Revision 1.7  2001/09/24 14:31:36  hal9
6404  Diddling.
6405
6406  Revision 1.6  2001/09/24 14:10:32  hal9
6407  Including David's OS/2 installation instructions.
6408
6409  Revision 1.2  2001/09/13 15:27:40  swa
6410  cosmetics
6411
6412  Revision 1.1  2001/09/12 15:36:41  swa
6413  source files for junkbuster documentation
6414
6415  Revision 1.3  2001/09/10 17:43:59  swa
6416  first proposal of a structure.
6417
6418  Revision 1.2  2001/06/13 14:28:31  swa
6419  docs should have an author.
6420
6421  Revision 1.1  2001/06/13 14:20:37  swa
6422  first import of project's documentation for the webserver.
6423
6424  -->
6425
6426 </article>