Move the match-all section into a separate file
[privoxy.git] / doc / source / developer-manual.sgml
1 <!DOCTYPE article PUBLIC "-//OASIS//DTD DocBook V3.1//EN"[
2 <!entity % dummy "IGNORE"> 
3 <!entity supported SYSTEM "supported.sgml">
4 <!entity newfeatures SYSTEM "newfeatures.sgml">
5 <!entity p-intro SYSTEM "privoxy.sgml">
6 <!entity history SYSTEM "history.sgml">
7 <!entity seealso SYSTEM "seealso.sgml">
8 <!entity contacting SYSTEM "contacting.sgml">
9 <!entity copyright SYSTEM "copyright.sgml">
10 <!entity license SYSTEM "license.sgml">
11 <!entity p-version "3.0.11">
12 <!entity p-status "UNRELEASED">
13 <!entity % p-not-stable "INCLUDE">
14 <!entity % p-stable "IGNORE">
15 <!entity % p-text "IGNORE">        <!-- define we are not a text only doc -->
16 <!entity % p-doc "INCLUDE">        <!-- and we are a formal doc           -->
17 <!entity  my-copy "&copy;">        <!-- kludge for docbook2man            -->
18 ]>
19 <!--
20  File        :  $Source: /cvsroot/ijbswa/current/doc/source/developer-manual.sgml,v $
21
22  Purpose     :  developer manual
23                 This file belongs into
24                 ijbswa.sourceforge.net:/home/groups/i/ij/ijbswa/htdocs/
25                 
26  $Id: developer-manual.sgml,v 2.23 2008/09/26 17:02:01 fabiankeil Exp $
27
28  Copyright (C) 2001-2008 Privoxy Developers http://www.privoxy.org/
29  See LICENSE.
30
31  ========================================================================
32  NOTE: Please read developer-manual/documentation.html before touching 
33  anything in this, or other Privoxy documentation. You have been warned!
34  Failure to abide by this rule will result in the revocation of your license 
35  to live a peaceful existence!
36  ========================================================================
37
38 -->
39
40 <article id="index">
41   <artheader>
42     <title>Privoxy Developer Manual</title>
43     <pubdate>
44      <subscript>
45     <!-- Completely the wrong markup, but very little is allowed  -->
46     <!-- in this part of an article. FIXME -->
47       <link linkend="copyright">Copyright</link> &my-copy; 2001-2008 by 
48       <ulink url="http://www.privoxy.org/">Privoxy Developers</ulink>
49      </subscript>
50     </pubdate>
51
52
53     <pubdate>$Id: developer-manual.sgml,v 2.23 2008/09/26 17:02:01 fabiankeil Exp $</pubdate>
54
55 <!--
56
57 Note: this should generate a separate page, and a live link to it. 
58 But it doesn't for some mysterious reason. Please leave commented
59 unless it can be fixed proper. For the time being, the copyright 
60 statement will be in copyright.smgl.
61
62 Hal.
63
64 <legalnotice id="legalnotice"> 
65  <para>
66   text goes here ........
67  </para>
68 </legalnotice>
69
70 -->
71
72     <abstract>
73
74 <![%dummy;[
75  <para>
76  <comment>
77   This is here to keep vim syntax file from breaking :/
78   If I knew enough to fix it, I would.
79   PLEASE DO NOT REMOVE! HB: hal@foobox.net
80  </comment>
81  </para>
82  ]]>
83 <para>
84  The developer manual provides guidance on coding, testing, packaging, documentation
85  and other issues of importance to those involved with
86  <application>Privoxy</application> development. It is mandatory (and helpful!) reading
87  for anyone who wants to join the team. Note that it's currently out of date
88  and may not be entirely correct. As always, patches are welcome.
89 </para>
90
91 <!-- Include privoxy.sgml boilerplate text: -->
92
93 <!--  &p-intro; Someone interested enough in the project to contribute
94                 will already know at this point what Privoxy is. -->
95
96 <!-- end boilerplate -->
97
98 <para>
99  Please note that this document is constantly evolving. This copy represents
100  the state at the release of version &p-version;.
101  You can find the latest version of the this manual at <ulink
102  url="http://www.privoxy.org/developer-manual/">http://www.privoxy.org/developer-manual/</ulink>.
103  Please see <link linkend="contact">the Contact section</link> 
104  on how to contact the developers.
105 </para>
106 <!--        <para> -->
107 <!--    Feel free to send a note to the developers at <email>ijbswa-developers@lists.sourceforge.net</email>. -->
108 <!--   </para> -->
109
110     </abstract>
111   </artheader>
112
113
114 <!--   ~~~~~       New section      ~~~~~     -->
115   <sect1 id="introduction"><title>Introduction</title>
116 <!--
117
118  I don't like seeing blank space :) So added *something* here.
119
120  --> 
121     <para>
122      <application>Privoxy</application>, as an heir to
123      <application>Junkbuster</application>, is a Free Software project 
124      and the code is licensed under the GNU General Public License version 2.
125      As such, <application>Privoxy</application> development is potentially open
126      to anyone who has the time, knowledge, and desire to contribute
127      in any capacity. Our goals are simply to continue the mission,
128      to improve <application>Privoxy</application>, and
129      to make it available to as wide an audience as possible. 
130     </para>
131     <para>
132      One does not have to be a programmer to contribute. Packaging, testing,
133      documenting and porting, are all important jobs as well.
134     </para>
135
136   <!--   ~~~~~       New section      ~~~~~     -->
137   <sect2 id="quickstart"><title>Quickstart to Privoxy Development</title>
138    <!-- 
139     <para>
140       You'll need an account on <ulink
141       url="http://sourceforge.net/">Sourceforge</ulink> to support our
142       development.  Mail your ID to <ulink
143       url="mailto:developers@privoxy.org">the list</ulink> and wait until a
144       project manager has added you.
145     </para>
146    --> 
147    <para>
148     The first step is to join the <ulink
149       url="mailto:ijbswa-developers@lists.sourceforge.net">developer's mailing list</ulink>.
150     You can submit your ideas, or even better patches. Patches are best 
151     submitted to the Sourceforge tracker set up for this purpose, but 
152     can be sent to the list for review too.
153    </para>
154     <para>
155      You will also need to have a cvs package installed, which will 
156      entail having ssh installed as well (which seems to be a requirement of
157      SourceForge), in order to access the cvs repository. Having the GNU build
158      tools is also going to be important (particularly, autoconf and gmake).
159     </para>
160     <para>
161       For the time being (read, this section is under construction), you can 
162       also refer to the extensive comments in the source code. In fact, 
163       reading the code is recommended in any case.
164     </para>
165    </sect2>
166   </sect1>
167
168   <!--   ~~~~~       New section      ~~~~~     -->
169   <sect1 id="cvs"><title>The CVS Repository</title>
170     <para>
171       If you become part of the active development team, you will eventually
172       need write access to our holy grail, the CVS repository. One of the 
173       team members will need to set this up for you. Please read
174       this chapter completely before accessing via CVS.
175     </para>
176
177     <sect2 id="cvsaccess"><title>Access to CVS</title>
178       <para>
179         The project's CVS repository is hosted on
180         <ulink url="http://sourceforge.net/">SourceForge.</ulink>
181         Please refer to the chapters 6 and 7 in
182         <ulink url="http://sourceforge.net/docman/?group_id=1">SF's site
183         documentation</ulink> for the technical access details for your
184         operating system. For historical reasons, the CVS server is
185         called <literal>ijbswa.cvs.sourceforge.net</literal>, the repository is
186         called <literal>ijbswa</literal>, and the source tree module is called
187         <literal>current</literal>.
188       </para>
189     </sect2>
190
191     <sect2 id="cvsbranches">
192     <title>Branches</title>
193      <para>
194        Within the CVS repository, there are modules and branches. As
195        mentioned, the sources are in the <literal>current</literal>
196        <quote>module</quote>. Other modules are present for platform specific
197        issues. There is a webview of the CVS hierarchy at <ulink
198        url="http://ijbswa.cvs.sourceforge.net/ijbswa/">http://ijbswa.cvs.sourceforge.net/ijbswa/</ulink>,
199        which might help with visualizing how these pieces fit together.
200      </para>
201      <para>
202        Branches are used to fork a sub-development path from the main trunk.
203        Within the <literal>current</literal> module where the sources are, there
204        is always at least one <quote>branch</quote> from the main trunk
205        devoted to a stable release series. The main trunk is where active
206        development takes place for the next stable series (e.g. 3.2.x).
207        So just prior to each stable series (e.g. 3.0.x), a branch is created
208        just for stable series releases (e.g. 3.0.0 -> 3.0.1 -> 3.0.2, etc).
209        Once the initial stable release of any stable branch has taken place,
210        this branch is <emphasis>only used for bugfixes</emphasis>, which have
211        had prior testing before being committed to CVS. (See <link
212        linkend="versionnumbers">Version Numbers</link> below for details on
213        versioning.)
214      </para>
215      <para>
216       At one time there were two distinct branches: stable and unstable. The
217       more drastic changes were to be in the unstable branch. These branches 
218       have now been merged to minimize time and effort of maintaining two 
219       branches.
220      </para>
221     <!-- 
222      <para>
223        This will result in at least two active branches, which means there may
224        be occasions that require the same (or similar) item to be 
225        checked into to two different places (assuming its a bugfix and needs 
226        fixing in both the stable and unstable trees). This also means that in
227        order to have access to both trees, both will have to be checked out 
228        separately. Use the <literal>cvs -r</literal> flag to check out a 
229        branch, e.g: <literal>cvs co -r v_3_0_branch current</literal>.
230      </para>
231     --> 
232     </sect2>
233
234     <sect2 id="cvscommit"><title>CVS Commit Guidelines</title>
235       <para>
236         The source tree is the heart of every software project. Every effort must
237         be made to ensure that it is readable, compilable and consistent at all
238         times. There are differing guidelines for the stable branch and the
239         main development trunk, and we ask anyone with CVS access to strictly
240         adhere to the following guidelines:
241       </para>
242       
243       <para>
244        Basic Guidelines, for all branches:
245       </para>
246       <para>
247         <itemizedlist>
248           <listitem><para>
249             Please don't commit even 
250             a small change without testing it thoroughly first. When we're
251             close to a public release, ask a fellow developer to review your 
252             changes.
253           </para></listitem>
254           <listitem><para>
255             Your commit message should give a concise overview of <emphasis>what you
256             changed</emphasis> (no big details) and <emphasis>why you changed it</emphasis>
257             Just check previous messages for good examples.
258           </para></listitem>
259           <listitem><para>
260             Don't use the same message on multiple files, unless it equally applies to
261             all those files.
262           </para></listitem>
263           <listitem><para>
264             If your changes span multiple files, and the code won't recompile unless
265             all changes are committed (e.g. when changing the signature of a function),
266             then commit all files one after another, without long delays in between.
267             If necessary, prepare the commit messages in advance.
268           </para></listitem>
269           <listitem><para>
270             Before changing things on CVS, make sure that your changes are in line
271             with the team's general consensus on what should be done.
272           </para></listitem>
273           <listitem>
274            <para>
275             Note that near a major public release, we get more cautious.
276             There is always the possibility to submit a patch to the <ulink
277             url="http://sourceforge.net/tracker/?atid=311118&amp;group_id=11118&amp;func=browse">patch
278             tracker</ulink> instead.
279           </para>
280          </listitem> 
281         </itemizedlist>
282       </para>
283       
284 <!--
285       <para>
286        Stable branches are handled with more care, especially after the 
287        initial *.*.0 release, and we are just in bugfix mode. In addition to 
288        the above, the below applies only to the stable branch (currently the 
289        <literal>v_3_0_branch</literal> branch):
290       </para>
291       
292       <para>
293        <itemizedlist>
294         <listitem>
295          <para>
296            Do not commit <emphasis>anything</emphasis> unless your proposed
297            changes have been well tested first, preferably by other members of the
298            project, or have prior approval of the project leaders or consensus
299            of the devel list.
300          </para>
301         </listitem> 
302        <listitem>
303         <para>
304          Where possible, bugfixes and changes should be tested in the main 
305          development trunk first. There may be occasions where this is not 
306          feasible, though.
307         </para>
308        </listitem> 
309        <listitem>
310         <para>
311           Alternately, proposed changes can be submitted as patches to the patch tracker on 
312           Sourceforge first: <ulink
313           url="http://sourceforge.net/tracker/?group_id=11118&#38;atid=311118">http://sourceforge.net/tracker/?group_id=11118&#38;atid=311118</ulink>.
314           Then ask for peer review. 
315         </para>
316        </listitem> 
317         <listitem>
318          <para>
319           Do not even think about anything except bugfixes. No new features!
320          </para>
321         </listitem> 
322      
323        </itemizedlist>
324       </para> 
325     -->
326     </sect2>
327
328   </sect1>
329         
330   <!--   ~~~~~       New section      ~~~~~     -->
331 <sect1 id="documentation"><title>Documentation Guidelines</title>
332   <para>
333     All formal documents are maintained in Docbook SGML and located in the
334     <computeroutput>doc/source/*</computeroutput> directory. You will need
335     <ulink url="http://www.docbook.org">Docbook</ulink>, the Docbook 
336     DTD's and the Docbook modular stylesheets (or comparable alternatives),
337     and either <application>jade</application> or
338     <application>openjade</application> (recommended) installed in order to
339     build docs from source. Currently there is <ulink
340     url="../user-manual/index.html"><citetitle>user-manual</citetitle></ulink>,
341     <ulink url="../faq/index.html"><citetitle>FAQ</citetitle></ulink>, and, of
342     course this, the <citetitle>developer-manual</citetitle> in this format.
343     The <citetitle>README</citetitle>, <citetitle>AUTHORS</citetitle>,
344     <citetitle>INSTALL</citetitle>,
345     <citetitle>privoxy.1</citetitle> (man page), and
346     <citetitle>config</citetitle> files are also now maintained as Docbook
347     SGML. These files, when built, in the top-level source directory are
348     generated files! Also, the <application>Privoxy</application> <filename>index.html</filename> (and a 
349     variation on this file, <filename>privoxy-index.html</filename>, 
350     meant for inclusion with doc packages), are maintained as SGML as well.
351     <emphasis>DO NOT edit these directly</emphasis>. Edit the SGML source, or
352     contact someone involved in the documentation.
353     </para> 
354     <para>
355      <filename>config</filename> requires some special handling. The reason it
356      is maintained this way is so that the extensive comments in the file
357      mirror those in <citetitle>user-manual</citetitle>. But the conversion 
358      process requires going from SGML to HTML to text to special formatting 
359      required for the embedded comments. Some of this does not survive so
360      well. Especially some of the examples that are longer than 80 characters.
361      The build process for this file outputs to <filename>config.new</filename>, 
362      which should be reviewed for errors and mis-formatting. Once satisfied
363      that it is correct, then it should be hand copied to
364      <filename>config</filename>.
365     </para>
366     <para>
367      Other, less formal documents (e.g. <filename>LICENSE</filename>) are
368      maintained as plain text files in the top-level source directory.
369     </para>
370     <para>
371      Packagers are encouraged to include this documentation. For those without
372      the ability to build the docs locally, text versions of each are kept in
373      CVS. HTML versions are also being kept in CVS under 
374      <filename>doc/webserver/*</filename>. And PDF version are kept in 
375      <filename>doc/pdf/*</filename>.
376     </para>
377     <para>
378      Formal documents are built with the Makefile targets of
379      <computeroutput>make dok</computeroutput>, or alternately
380      <computeroutput>make redhat-dok</computeroutput>. If you have problems,
381      try both. The build process uses the document SGML sources in
382      <computeroutput>doc/source/*/*</computeroutput> to update all text files in
383      <computeroutput>doc/text/</computeroutput> and to update all HTML
384      documents in <computeroutput>doc/webserver/</computeroutput>.
385     </para>
386     <para>
387      Documentation writers should please make sure documents build
388      successfully before committing to CVS, if possible.
389     </para>
390     <para>
391      How do you update the webserver (i.e. the pages on privoxy.org)?
392      
393      <orderedlist numeration="arabic">
394       <listitem><para>
395         First, build the docs by running <computeroutput>make
396         dok</computeroutput> (or alternately <computeroutput>make
397         redhat-dok</computeroutput>). For PDF docs, do <computeroutput>make
398         dok-pdf</computeroutput>.
399       </para></listitem>
400       <listitem><para>
401         Run <computeroutput>make webserver</computeroutput> which copies all
402         files from <computeroutput>doc/webserver</computeroutput> to the
403         sourceforge webserver via scp.
404       </para></listitem>
405      </orderedlist>
406   </para>
407
408   <para>
409    Finished docs should be occasionally submitted to CVS
410    (<filename>doc/webserver/*/*.html</filename>) so that those without 
411    the ability to build them locally, have access to them if needed.
412    This is especially important just prior to a new release! Please
413    do this <emphasis>after</emphasis> the <literal>$VERSION</literal> and
414    other release specific data in <filename>configure.in</filename> has been
415    updated (this is done just prior to a new release).
416   </para>
417
418 <!--   ~~~~~       New section      ~~~~~     -->
419 <sect2 id="sgml">
420 <title>Quickstart to Docbook and SGML</title>
421 <para>
422  If you are not familiar with SGML, it is a markup language similar to HTML. 
423  Actually, not a mark up language per se, but a language used to define 
424  markup languages. In fact, HTML is an SGML application. Both will use
425  <quote>tags</quote> to format text and other content. SGML tags can be much
426  more varied, and flexible, but do much of the same kinds of things. The tags,
427  or <quote>elements</quote>, are definable in SGML. There is no set
428  <quote>standards</quote>. Since we are using
429  <application>Docbook</application>, our tags are those that are defined by 
430  <application>Docbook</application>. Much of how the finish document is
431  rendered is determined by the <quote>stylesheets</quote>.
432  The stylesheets determine how each tag gets translated to HTML, or other
433  formats.
434 </para>
435
436 <para>
437  Tags in Docbook SGML need to be always <quote>closed</quote>. If not, you
438  will likely generate errors. Example: <literal>&lt;title&gt;My
439  Title&lt;/title&gt;</literal>. They are also case-insensitive, but we
440  strongly suggest using all lower case. This keeps compatibility with
441  [Docbook] <application>XML</application>.
442 </para>
443
444 <para>
445  Our documents use <quote>sections</quote> for the most part. Sections
446  will be processed into HTML headers (e.g. <literal>h1</literal> for 
447  <literal>sect1</literal>). The <application>Docbook</application> stylesheets
448  will use these to also generate the Table of Contents for each doc. Our 
449  TOC's are set to a depth of three. Meaning <literal>sect1</literal>, 
450  <literal>sect2</literal>, and <literal>sect3</literal> will have TOC 
451  entries, but <literal>sect4</literal> will not. Each section requires 
452  a <literal>&lt;title&gt;</literal> element, and at least one 
453  <literal>&lt;para&gt;</literal>. There is a limit of five section 
454  levels in Docbook, but generally three should be sufficient for our 
455  purposes.
456 </para>
457
458 <para>
459  Some common elements that you likely will use: 
460 </para>
461
462 <para>
463   <simplelist>
464     <member>
465       <emphasis>&lt;para&gt;&lt;/para&gt;</emphasis>, paragraph delimiter. Most 
466       text needs to be within paragraph elements (there are some exceptions).
467     </member>
468     <member>
469       <emphasis>&lt;emphasis&gt;&lt;/emphasis&gt;</emphasis>, the stylesheets
470       make this italics.
471     </member>
472     <member>
473       <emphasis>&lt;filename&gt;&lt;/filename&gt;</emphasis>, files and directories.
474     </member>
475     <member>
476       <emphasis>&lt;command&gt;&lt;/command&gt;</emphasis>, command examples.
477     </member>
478     <member>
479       <emphasis>&lt;literallayout&gt;&lt;/literallayout&gt;</emphasis>, like 
480       <literal>&lt;pre&gt;</literal>, more or less.
481     </member>
482     <member>
483       <emphasis>&lt;itemizedlist&gt;&lt;/itemizedlist&gt;</emphasis>, list with bullets.
484     </member>
485     <member>
486       <emphasis>&lt;listitem&gt;&lt;/listitem&gt;</emphasis>, member of the above.
487     </member>
488     <member>
489       <emphasis>&lt;screen&gt;&lt;/screen&gt;</emphasis>, screen output, implies 
490       <literal>&lt;literallayout&gt;</literal>.
491     </member>
492     <member>
493       <emphasis>&lt;ulink url="example.com"&gt;&lt;/ulink&gt;</emphasis>, like 
494       HTML <literal>&lt;a&gt;</literal> tag.
495     </member>
496     <member>
497       <emphasis>&lt;quote&gt;&lt;/quote&gt;</emphasis>, for, doh, quoting text. 
498     </member>
499   </simplelist>
500 </para>
501
502 <para>
503  Look at any of the existing docs for examples of all these and more.
504 </para>
505
506 <para>
507  You might also find <quote><ulink
508  url="http://opensource.bureau-cornavin.com/crash-course/index.html">Writing Documentation
509  Using DocBook - A Crash Course</ulink></quote> useful.
510 </para>
511 </sect2>
512
513 <!--   ~~~~~       New section      ~~~~~     -->
514   <sect2 id="docstyle">
515   <title><application>Privoxy</application> Documentation Style</title>
516    <para>
517     It will be easier if everyone follows a similar writing style. This 
518     just makes it easier to read what someone else has written if it 
519     is all done in a similar fashion.
520    </para>
521    <para>
522     Here it is:
523    </para>
524    <para>
525     <itemizedlist>
526      <listitem>
527       <para>
528        All tags should be lower case.
529       </para>
530     </listitem> 
531     <listitem>
532      <para>
533        Tags delimiting a <emphasis>block</emphasis> of text (even small
534        blocks) should be on their own line. Like:
535        <literallayout>
536  &lt;para&gt;
537   Some text goes here.
538  &lt;/para&gt;
539        </literallayout>
540        Tags marking individual words, or few words, should be in-line:
541        <literallayout>
542   Just to &lt;emphasis&gt;emphasize&lt;/emphasis&gt;, some text goes here.
543        </literallayout>
544      </para>
545    </listitem> 
546    <listitem>
547     <para>
548       Tags should be nested and step indented for block text like: (except
549       in-line tags) 
550      <literallayout>
551  &lt;para&gt;
552   &lt;itemizedlist&gt;
553    &lt;para&gt;
554     &lt;listitem&gt;
555       Some text goes here in our list example.
556      &lt;/listitem&gt;
557    &lt;/para&gt;
558   &lt;/itemizedlist&gt;
559  &lt;/para&gt;
560        </literallayout>
561       This makes it easier to find the text amongst the tags ;-)
562     </para>
563    </listitem> 
564    <listitem>
565     <para>
566      Use white space to separate logical divisions within a document, 
567      like between sections. Running everything together consistently 
568      makes it harder to read and work on.
569     </para>
570    </listitem> 
571    <listitem>
572     <para>
573      Do not hesitate to make comments. Comments can either use the 
574      &lt;comment&gt; element, or the &lt;!--  --&gt; style comment 
575      familiar from HTML. (Note in Docbook v4.x &lt;comment&gt; is 
576      replaced by &lt;remark&gt;.)
577     </para>
578   </listitem> 
579   <listitem>
580    <para>
581      We have an international audience. Refrain from slang, or English 
582      idiosyncrasies (too many to list :). Humor also does not translate 
583      well sometimes.
584    </para>
585   </listitem> 
586   <listitem>
587    <para>
588     Try to keep overall line lengths in source files to 80 characters or less
589     for obvious reasons. This is not always possible, with lengthy URLs for
590     instance.
591    </para>
592   </listitem> 
593   <listitem>
594    <para>
595     Our documents are available in differing formats. Right now, they 
596     are just plain text, HTML, and PDF, but others are always a 
597     future possibility. Be careful with URLs (&lt;ulink&gt;), and avoid 
598     this mistake:
599    </para>
600    <para>
601      My favorite site is &lt;ulink url="http://example.com"&gt;here&lt;/ulink&gt;.
602    </para>
603    <para>
604      This will render as <quote>My favorite site is here</quote>, which is 
605      not real helpful in a text doc. Better like this:
606    </para>
607    <para>
608      My favorite site is &lt;ulink url="http://example.com"&gt;example.com&lt;/ulink&gt;.
609    </para>
610   </listitem>
611   <listitem>
612    <para>
613     All documents should be spell checked occasionally.
614     <application>aspell</application> can check SGML with the
615     <literal>-H</literal> option. (<application>ispell</application> I think
616     too.)
617    </para>
618   </listitem> 
619
620   </itemizedlist>
621  </para> 
622   
623   </sect2>
624
625   
626  <!--   ~~~~~       New section      ~~~~~     -->
627
628  <sect2><title>Privoxy Custom Entities</title>
629  <para>
630   <application>Privoxy</application> documentation is using 
631   a number of customized <quote>entities</quote> to facilitate 
632   documentation maintenance. 
633  </para>
634  <para>
635   We are using a set of <quote>boilerplate</quote> files with generic text,
636   that is used by multiple docs. This way we can write something once, and use
637   it repeatedly without having to re-write the same content over and over again.
638   If editing such a file, keep in mind that it should be
639   <emphasis>generic</emphasis>. That is the purpose; so it can be used in varying 
640   contexts without additional modifications.
641  </para>
642  <para>
643   We are also using what <application>Docbook</application> calls 
644   <quote>internal entities</quote>. These are like variables in 
645   programming. Well, sort of. For instance, we have the
646   <literal>p-version</literal> entity that contains the current 
647   <application>Privoxy</application> version string. You are strongly 
648   encouraged to use these where possible. Some of these obviously 
649   require re-setting with each release (done by the Makefile). A sampling of
650   custom entities are listed below. See any of the main docs for examples.
651  </para>
652
653  <para>
654   <itemizedlist>
655   <listitem>
656    <para>
657     Re- <quote>boilerplate</quote> text entities are defined like:
658    </para>
659    <para>
660     <literal>&lt;!entity supported SYSTEM "supported.sgml"&gt;</literal>
661    </para>
662    <para>
663      In this example, the contents of the file,
664      <filename>supported.sgml</filename> is available for inclusion anywhere 
665      in the doc. To make this happen, just reference the now defined 
666      entity: <literal>&#38;supported;</literal> (starts with an ampersand 
667      and ends with a semi-colon), and the contents will be dumped into 
668      the finished doc at that point.
669    </para>
670   </listitem> 
671   <listitem>
672    <para>
673     Commonly used <quote>internal entities</quote>:
674   </para>
675   <simplelist>
676    <member>
677     <emphasis>p-version</emphasis>: the <application>Privoxy</application> 
678     version string, e.g. <quote>&p-version;</quote>.
679    </member>
680    <member>
681     <emphasis>p-status</emphasis>: the project status, either 
682     <quote>alpha</quote>, <quote>beta</quote>, or <quote>stable</quote>.
683    </member>
684    <member>
685     <emphasis>p-not-stable</emphasis>: use to conditionally include 
686     text in <quote>not stable</quote> releases (e.g. <quote>beta</quote>).
687    </member>
688    <member>
689     <emphasis>p-stable</emphasis>: just the opposite.
690    </member>
691    <member>
692     <emphasis>p-text</emphasis>: this doc is only generated as text.
693    </member>
694   </simplelist>
695  </listitem> 
696  </itemizedlist>
697  </para> 
698  <para>
699   There are others in various places that are defined for a specific 
700   purpose. Read the source!
701  </para>
702  
703  </sect2>
704   
705  </sect1>
706
707 <!--     <listitem><para>be consistent with the redirect script (i.e. the <application>Privoxy</application> program -->
708 <!--       points via the redirect URL at sf to valid end-points in the document)</para></listitem> -->
709
710   <!--   ~~~~~       New section      ~~~~~     -->
711   <sect1 id="coding"><title>Coding Guidelines</title>
712
713     <sect2 id="s1"><title>Introduction</title>
714
715     <para>This set of standards is designed to make our lives easier.  It is
716     developed with the simple goal of helping us keep the "new and improved
717     <application>Privoxy</application>" consistent and reliable. Thus making
718     maintenance easier and increasing chances of success of the
719     project.</para>
720
721     <para>And that of course comes back to us as individuals. If we can
722     increase our development and product efficiencies then we can solve more
723     of the request for changes/improvements and in general feel good about
724     ourselves. ;-></para>
725
726   </sect2>
727
728     <sect2 id="s2"><title>Using Comments</title>
729  
730
731     <sect3 id="s3"><title>Comment, Comment, Comment</title>
732
733     <para><emphasis>Explanation:</emphasis></para>
734
735     <para>Comment as much as possible without commenting the obvious.
736     For example do not comment "variable_a is equal to variable_b".
737     Instead explain why variable_a should be equal to the variable_b.
738     Just because a person can read code does not mean they will
739     understand why or what is being done. A reader may spend a lot
740     more time figuring out what is going on when a simple comment
741     or explanation would have prevented the extra research. Please
742     help your brother IJB'ers out!</para>
743
744     <para>The comments will also help justify the intent of the code.
745     If the comment describes something different than what the code
746     is doing then maybe a programming error is occurring.</para>
747
748     <para><emphasis>Example:</emphasis></para>
749 <programlisting>
750 /* if page size greater than 1k ... */
751 if ( page_length() > 1024 )
752 {
753     ... "block" the page up ...
754 }
755
756 /* if page size is small, send it in blocks */
757 if ( page_length() > 1024 )
758 {
759     ... "block" the page up ...
760 }
761
762 This demonstrates 2 cases of "what not to do".  The first is a
763 "syntax comment".  The second is a comment that does not fit what
764 is actually being done.
765 </programlisting>
766   </sect3>
767
768     
769
770     <sect3 id="s4"><title>Use blocks for comments</title>
771
772     <para><emphasis>Explanation:</emphasis></para>
773
774     <para>Comments can help or they can clutter. They help when they
775     are differentiated from the code they describe. One line
776     comments do not offer effective separation between the comment
777     and the code. Block identifiers do, by surrounding the code
778     with a clear, definable pattern.</para>
779
780     <para><emphasis>Example:</emphasis></para>
781 <programlisting>
782 /*********************************************************************
783  * This will stand out clearly in your code!
784  *********************************************************************/
785 if ( this_variable == that_variable )
786 {
787    do_something_very_important();
788 }
789
790
791 /* unfortunately, this may not */
792 if ( this_variable == that_variable )
793 {
794    do_something_very_important();
795 }
796
797
798 if ( this_variable == that_variable ) /* this may not either */
799 {
800    do_something_very_important();
801 }</programlisting>
802
803     <para><emphasis>Exception:</emphasis></para>
804
805     <para>If you are trying to add a small logic comment and do not
806     wish to "disrupt" the flow of the code, feel free to use a 1
807     line comment which is NOT on the same line as the code.</para>
808
809     
810   </sect3>
811     
812
813     <sect3 id="s5"><title>Keep Comments on their own line</title>
814
815     <para><emphasis>Explanation:</emphasis></para>
816
817     <para>It goes back to the question of readability. If the comment
818     is on the same line as the code it will be harder to read than
819     the comment that is on its own line.</para>
820
821     <para>There are three exceptions to this rule, which should be
822     violated freely and often: during the definition of variables,
823     at the end of closing braces, when used to comment
824     parameters.</para>
825
826     <para><emphasis>Example:</emphasis></para>
827 <programlisting>
828 /*********************************************************************
829  * This will stand out clearly in your code,
830  * But the second example won't.
831  *********************************************************************/
832 if ( this_variable == this_variable )
833 {
834    do_something_very_important();
835 }
836
837 if ( this_variable == this_variable ) /*can you see me?*/
838 {
839    do_something_very_important(); /*not easily*/
840 }
841
842
843 /*********************************************************************
844  * But, the encouraged exceptions:
845  *********************************************************************/
846 int urls_read     = 0;     /* # of urls read + rejected */
847 int urls_rejected = 0;     /* # of urls rejected */
848
849 if ( 1 == X )
850 {
851    do_something_very_important();
852 }
853
854
855 short do_something_very_important(
856    short firstparam,   /* represents something */
857    short nextparam     /* represents something else */ )
858 {
859    ...code here...
860
861 }   /* -END- do_something_very_important */
862 </programlisting>
863   </sect3>
864     
865
866     <sect3 id="s6"><title>Comment each logical step</title>
867
868     <para><emphasis>Explanation:</emphasis></para>
869
870     <para>Logical steps should be commented to help others follow the
871     intent of the written code and comments will make the code more
872     readable.</para>
873
874     <para>If you have 25 lines of code without a comment, you should
875     probably go back into it to see where you forgot to put
876     one.</para>
877
878     <para>Most "for", "while", "do", etc... loops _probably_ need a
879     comment. After all, these are usually major logic
880     containers.</para>
881
882     
883   </sect3>
884     
885
886     <sect3 id="s7"><title>Comment All Functions Thoroughly</title>
887
888     <para><emphasis>Explanation:</emphasis></para>
889
890     <para>A reader of the code should be able to look at the comments
891     just prior to the beginning of a function and discern the
892     reason for its existence and the consequences of using it. The
893     reader should not have to read through the code to determine if
894     a given function is safe for a desired use. The proper
895     information thoroughly presented at the introduction of a
896     function not only saves time for subsequent maintenance or
897     debugging, it more importantly aids in code reuse by allowing a
898     user to determine the safety and applicability of any function
899     for the problem at hand. As a result of such benefits, all
900     functions should contain the information presented in the
901     addendum section of this document.</para>
902
903     
904   </sect3>
905     
906
907     <sect3 id="s8"><title>Comment at the end of braces if the
908     content is more than one screen length</title>
909
910     <para><emphasis>Explanation:</emphasis></para>
911
912     <para>Each closing brace should be followed on the same line by a
913     comment that describes the origination of the brace if the
914     original brace is off of the screen, or otherwise far away from
915     the closing brace. This will simplify the debugging,
916     maintenance, and readability of the code.</para>
917
918     <para>As a suggestion , use the following flags to make the
919     comment and its brace more readable:</para>
920
921     <para>use following a closing brace: } /* -END- if() or while ()
922     or etc... */</para>
923
924     <para><emphasis>Example:</emphasis></para>
925 <programlisting>
926 if ( 1 == X )
927 {
928    do_something_very_important();
929    ...some long list of commands...
930 } /* -END- if x is 1 */
931
932 or:
933
934 if ( 1 == X )
935 {
936    do_something_very_important();
937    ...some long list of commands...
938 } /* -END- if ( 1 == X ) */
939 </programlisting>
940   </sect3>
941     
942   </sect2>
943
944     <sect2 id="s9"><title>Naming Conventions</title>
945
946     
947
948     <sect3 id="s10"><title>Variable Names</title>
949
950     <para><emphasis>Explanation:</emphasis></para>
951
952     <para>Use all lowercase, and separate words via an underscore
953     ('_'). Do not start an identifier with an underscore. (ANSI C
954     reserves these for use by the compiler and system headers.) Do
955     not use identifiers which are reserved in ANSI C++. (E.g.
956     template, class, true, false, ...). This is in case we ever
957     decide to port Privoxy to C++.</para>
958
959     <para><emphasis>Example:</emphasis></para>
960 <programlisting>
961 int ms_iis5_hack = 0;</programlisting>
962
963     <para><emphasis>Instead of:</emphasis></para>
964
965     <para>
966 <programlisting>
967 int msiis5hack = 0; int msIis5Hack = 0;
968 </programlisting>
969 </para>
970
971     
972
973   </sect3>    
974
975     <sect3 id="s11"><title>Function Names</title>
976
977     <para><emphasis>Explanation:</emphasis></para>
978
979     <para>Use all lowercase, and separate words via an underscore
980     ('_'). Do not start an identifier with an underscore. (ANSI C
981     reserves these for use by the compiler and system headers.) Do
982     not use identifiers which are reserved in ANSI C++. (E.g.
983     template, class, true, false, ...). This is in case we ever
984     decide to port Privoxy to C++.</para>
985
986     <para><emphasis>Example:</emphasis></para>
987 <programlisting>
988 int load_some_file( struct client_state *csp )</programlisting>
989
990     <para><emphasis>Instead of:</emphasis></para>
991
992     <para>
993 <programlisting>
994 int loadsomefile( struct client_state *csp )
995 int loadSomeFile( struct client_state *csp )
996 </programlisting>
997 </para>
998
999     
1000   </sect3>
1001     
1002
1003     <sect3 id="s12"><title>Header file prototypes</title>
1004
1005     <para><emphasis>Explanation:</emphasis></para>
1006
1007     <para>Use a descriptive parameter name in the function prototype
1008     in header files. Use the same parameter name in the header file
1009     that you use in the c file.</para>
1010
1011     <para><emphasis>Example:</emphasis></para>
1012 <programlisting>
1013 (.h) extern int load_aclfile( struct client_state *csp );
1014 (.c) int load_aclfile( struct client_state *csp )</programlisting>
1015
1016     <para><emphasis>Instead of:</emphasis>
1017 <programlisting>
1018 (.h) extern int load_aclfile( struct client_state * ); or 
1019 (.h) extern int load_aclfile(); 
1020 (.c) int load_aclfile( struct client_state *csp )
1021 </programlisting>
1022 </para>
1023
1024     
1025   </sect3>
1026     
1027
1028     <sect3 id="s13"><title>Enumerations, and #defines</title>
1029
1030     <para><emphasis>Explanation:</emphasis></para>
1031
1032     <para>Use all capital letters, with underscores between words. Do
1033     not start an identifier with an underscore. (ANSI C reserves
1034     these for use by the compiler and system headers.)</para>
1035
1036     <para><emphasis>Example:</emphasis></para>
1037 <programlisting>
1038 (enumeration) : enum Boolean { FALSE, TRUE };
1039 (#define) : #define DEFAULT_SIZE 100;</programlisting>
1040
1041     <para><emphasis>Note:</emphasis> We have a standard naming scheme for #defines
1042     that toggle a feature in the preprocessor: FEATURE_>, where
1043     > is a short (preferably 1 or 2 word) description.</para>
1044
1045     <para><emphasis>Example:</emphasis></para>
1046 <programlisting>
1047 #define FEATURE_FORCE 1
1048
1049 #ifdef FEATURE_FORCE
1050 #define FORCE_PREFIX blah
1051 #endif /* def FEATURE_FORCE */
1052 </programlisting>
1053   </sect3>
1054     
1055
1056     <sect3 id="s14"><title>Constants</title>
1057
1058     <para><emphasis>Explanation:</emphasis></para>
1059
1060     <para>Spell common words out entirely (do not remove vowels).</para>
1061
1062     <para>Use only widely-known domain acronyms and abbreviations.
1063     Capitalize all letters of an acronym.</para>
1064
1065     <para>Use underscore (_) to separate adjacent acronyms and
1066     abbreviations. Never terminate a name with an underscore.</para>
1067
1068     <para><emphasis>Example:</emphasis></para>
1069 <programlisting>
1070 #define USE_IMAGE_LIST 1</programlisting>
1071
1072     <para><emphasis>Instead of:</emphasis></para>
1073
1074     <para>
1075 <programlisting>
1076 #define USE_IMG_LST 1 or 
1077 #define _USE_IMAGE_LIST 1 or
1078 #define USE_IMAGE_LIST_ 1 or 
1079 #define use_image_list 1 or
1080 #define UseImageList 1
1081 </programlisting>
1082 </para>
1083
1084     
1085   </sect3>
1086
1087   </sect2>
1088     
1089
1090     <sect2 id="s15"><title>Using Space</title>
1091
1092     
1093
1094     <sect3 id="s16"><title>Put braces on a line by themselves.</title>
1095
1096     <para><emphasis>Explanation:</emphasis></para>
1097
1098     <para>The brace needs to be on a line all by itself, not at the
1099     end of the statement. Curly braces should line up with the
1100     construct that they're associated with. This practice makes it
1101     easier to identify the opening and closing braces for a
1102     block.</para>
1103
1104     <para><emphasis>Example:</emphasis></para>
1105 <programlisting>
1106 if ( this == that )
1107 {
1108    ...
1109 }</programlisting>
1110
1111     <para><emphasis>Instead of:</emphasis></para>
1112
1113     <para>if ( this == that ) { ... }</para>
1114
1115     <para>or</para>
1116
1117     <para>if ( this == that ) { ... }</para>
1118
1119     <para><emphasis>Note:</emphasis> In the special case that the if-statement is
1120     inside a loop, and it is trivial, i.e. it tests for a
1121     condition that is obvious from the purpose of the block,
1122     one-liners as above may optically preserve the loop structure
1123     and make it easier to read.</para>
1124
1125     <para><emphasis>Status:</emphasis> developer-discretion.</para>
1126
1127     <para><emphasis>Example exception:</emphasis></para>
1128 <programlisting>
1129 while ( more lines are read )
1130 {
1131    /* Please document what is/is not a comment line here */
1132    if ( it's a comment ) continue;
1133
1134    do_something( line );
1135 }
1136 </programlisting>
1137   </sect3>
1138     
1139
1140     <sect3 id="s17"><title>ALL control statements should have a
1141     block</title>
1142
1143     <para><emphasis>Explanation:</emphasis></para>
1144
1145     <para>Using braces to make a block will make your code more
1146     readable and less prone to error. All control statements should
1147     have a block defined.</para>
1148
1149     <para><emphasis>Example:</emphasis></para>
1150 <programlisting>
1151 if ( this == that )
1152 {
1153    do_something();
1154    do_something_else();
1155 }</programlisting>
1156
1157     <para><emphasis>Instead of:</emphasis></para>
1158
1159     <para>if ( this == that ) do_something(); do_something_else();</para>
1160
1161     <para>or</para>
1162
1163     <para>if ( this == that ) do_something();</para>
1164
1165     <para><emphasis>Note:</emphasis> The first example in "Instead of" will execute
1166     in a manner other than that which the developer desired (per
1167     indentation). Using code braces would have prevented this
1168     "feature". The "explanation" and "exception" from the point
1169     above also applies.</para>
1170
1171     
1172   </sect3>
1173     
1174
1175     <sect3 id="s18"><title>Do not belabor/blow-up boolean
1176     expressions</title>
1177
1178     <para><emphasis>Example:</emphasis></para>
1179 <programlisting>
1180 structure->flag = ( condition );</programlisting>
1181
1182     <para><emphasis>Instead of:</emphasis></para>
1183
1184     <para>if ( condition ) { structure->flag = 1; } else {
1185     structure->flag = 0; }</para>
1186
1187     <para><emphasis>Note:</emphasis> The former is readable and concise. The later
1188     is wordy and inefficient. Please assume that any developer new
1189     to the project has at least a "good" knowledge of C/C++. (Hope
1190     I do not offend by that last comment ... 8-)</para>
1191
1192     
1193   </sect3>
1194     
1195
1196     <sect3 id="s19"><title>Use white space freely because it is
1197     free</title>
1198
1199     <para><emphasis>Explanation:</emphasis></para>
1200
1201     <para>Make it readable. The notable exception to using white space
1202     freely is listed in the next guideline.</para>
1203
1204     <para><emphasis>Example:</emphasis></para>
1205 <programlisting>
1206 int first_value   = 0;
1207 int some_value    = 0;
1208 int another_value = 0;
1209 int this_variable = 0;
1210
1211 if ( this_variable == this_variable )
1212
1213 first_value = old_value + ( ( some_value - another_value ) - whatever )
1214 </programlisting>
1215   </sect3>
1216     
1217
1218     <sect3 id="s20"><title>Don't use white space around structure
1219     operators</title>
1220
1221     <para><emphasis>Explanation:</emphasis></para>
1222
1223     <para>- structure pointer operator ( "->" ) - member operator (
1224     "." ) - functions and parentheses</para>
1225
1226     <para>It is a general coding practice to put pointers, references,
1227     and function parentheses next to names. With spaces, the
1228     connection between the object and variable/function name is not
1229     as clear.</para>
1230
1231     <para><emphasis>Example:</emphasis></para>
1232 <programlisting>
1233 a_struct->a_member;
1234 a_struct.a_member;
1235 function_name();</programlisting>
1236
1237     <para><emphasis>Instead of:</emphasis> a_struct -> a_member; a_struct . a_member;
1238     function_name ();</para>
1239
1240     
1241   </sect3>
1242     
1243
1244     <sect3 id="s21"><title>Make the last brace of a function stand
1245     out</title>
1246
1247     <para><emphasis>Example:</emphasis></para>
1248 <programlisting>
1249 int function1( ... )
1250 {
1251    ...code...
1252    return( ret_code );
1253
1254 }   /* -END- function1 */
1255
1256
1257 int function2( ... )
1258 {
1259 }   /* -END- function2 */
1260 </programlisting>
1261
1262     <para><emphasis>Instead of:</emphasis></para>
1263
1264     <para>int function1( ... ) { ...code... return( ret_code ); } int
1265     function2( ... ) { }</para>
1266
1267     <para><emphasis>Note:</emphasis> Use 1 blank line before the closing brace and 2
1268     lines afterward. This makes the end of function standout to
1269     the most casual viewer. Although function comments help
1270     separate functions, this is still a good coding practice. In
1271     fact, I follow these rules when using blocks in "for", "while",
1272     "do" loops, and long if {} statements too. After all whitespace
1273     is free!</para>
1274
1275     <para><emphasis>Status:</emphasis> developer-discretion on the number of blank
1276     lines. Enforced is the end of function comments.</para>
1277
1278     
1279   </sect3>
1280     
1281
1282     <sect3 id="s22"><title>Use 3 character indentions</title>
1283
1284     <para><emphasis>Explanation:</emphasis></para>
1285
1286     <para>If some use 8 character TABs and some use 3 character TABs,
1287     the code can look *very* ragged. So use 3 character indentions
1288     only. If you like to use TABs, pass your code through a filter
1289     such as "expand -t3" before checking in your code.</para>
1290
1291     <para><emphasis>Example:</emphasis></para>
1292 <programlisting>
1293 static const char * const url_code_map[256] =
1294 {
1295    NULL, ...
1296 };
1297
1298
1299 int function1( ... )
1300 {
1301    if ( 1 )
1302    {
1303       return( ALWAYS_TRUE );
1304    }
1305    else
1306    {
1307       return( HOW_DID_YOU_GET_HERE );
1308    }
1309
1310    return( NEVER_GETS_HERE );
1311
1312 }
1313 </programlisting>
1314   </sect3>
1315
1316   </sect2>
1317     
1318
1319     <sect2 id="s23"><title>Initializing</title>
1320
1321     
1322
1323     <sect3 id="s24"><title>Initialize all variables</title>
1324
1325     <para><emphasis>Explanation:</emphasis></para>
1326
1327     <para>Do not assume that the variables declared will not be used
1328     until after they have been assigned a value somewhere else in
1329     the code. Remove the chance of accidentally using an unassigned
1330     variable.</para>
1331
1332     <para><emphasis>Example:</emphasis></para>
1333 <programlisting>
1334 short a_short = 0;
1335 float a_float  = 0;
1336 struct *ptr = NULL;</programlisting>
1337
1338     <para><emphasis>Note:</emphasis> It is much easier to debug a SIGSEGV if the
1339     message says you are trying to access memory address 00000000
1340     and not 129FA012; or array_ptr[20] causes a SIGSEV vs.
1341     array_ptr[0].</para>
1342
1343     <para><emphasis>Status:</emphasis> developer-discretion if and only if the
1344     variable is assigned a value "shortly after" declaration.</para>
1345
1346   </sect3>
1347   </sect2>
1348     
1349
1350     <sect2 id="s25"><title>Functions</title>
1351
1352     
1353
1354     <sect3 id="s26"><title>Name functions that return a boolean as a
1355     question.</title>
1356
1357     <para><emphasis>Explanation:</emphasis></para>
1358
1359     <para>Value should be phrased as a question that would logically
1360     be answered as a true or false statement</para>
1361
1362     <para><emphasis>Example:</emphasis></para>
1363 <programlisting>
1364 should_we_block_this();
1365 contains_an_image();
1366 is_web_page_blank();
1367 </programlisting>
1368   </sect3>
1369     
1370
1371     <sect3 id="s27"><title>Always specify a return type for a
1372     function.</title>
1373
1374     <para><emphasis>Explanation:</emphasis></para>
1375
1376     <para>The default return for a function is an int. To avoid
1377     ambiguity, create a return for a function when the return has a
1378     purpose, and create a void return type if the function does not
1379     need to return anything.</para>
1380
1381     
1382   </sect3>
1383     
1384
1385     <sect3 id="s28"><title>Minimize function calls when iterating by
1386     using variables</title>
1387
1388     <para><emphasis>Explanation:</emphasis></para>
1389
1390     <para>It is easy to write the following code, and a clear argument
1391     can be made that the code is easy to understand:</para>
1392
1393     <para><emphasis>Example:</emphasis></para>
1394 <programlisting>
1395 for ( size_t cnt = 0; cnt &lt; block_list_length(); cnt++ )
1396 {
1397    ....
1398 }</programlisting>
1399
1400     <para><emphasis>Note:</emphasis> Unfortunately, this makes a function call for
1401     each and every iteration. This increases the overhead in the
1402     program, because the compiler has to look up the function each
1403     time, call it, and return a value. Depending on what occurs in
1404     the block_list_length() call, it might even be creating and
1405     destroying structures with each iteration, even though in each
1406     case it is comparing "cnt" to the same value, over and over.
1407     Remember too - even a call to block_list_length() is a function
1408     call, with the same overhead.</para>
1409
1410     <para>Instead of using a function call during the iterations,
1411     assign the value to a variable, and evaluate using the
1412     variable.</para>
1413
1414     <para><emphasis>Example:</emphasis></para>
1415 <programlisting>
1416 size_t len = block_list_length();
1417
1418 for ( size_t cnt = 0; cnt &lt; len; cnt++ )
1419 {
1420    ....
1421 }</programlisting>
1422
1423     <para><emphasis>Exceptions:</emphasis> if the value of block_list_length()
1424     *may* change or could *potentially* change, then you must code the
1425     function call in the for/while loop.</para>
1426
1427     
1428   </sect3>
1429     
1430
1431     <sect3 id="s29"><title>Pass and Return by Const Reference</title>
1432
1433     <para><emphasis>Explanation:</emphasis></para>
1434
1435     <para>This allows a developer to define a const pointer and call
1436     your function. If your function does not have the const
1437     keyword, we may not be able to use your function. Consider
1438     strcmp, if it were defined as: extern int strcmp( char *s1,
1439     char *s2 );</para>
1440
1441     <para>I could then not use it to compare argv's in main: int main(
1442     int argc, const char *argv[] ) { strcmp( argv[0], "privoxy"
1443     ); }</para>
1444
1445     <para>Both these pointers are *const*! If the c runtime library
1446     maintainers do it, we should too.</para>
1447
1448     
1449   </sect3>
1450     
1451
1452     <sect3 id="s30"><title>Pass and Return by Value</title>
1453
1454     <para><emphasis>Explanation:</emphasis></para>
1455
1456     <para>Most structures cannot fit onto a normal stack entry (i.e.
1457     they are not 4 bytes or less). Aka, a function declaration
1458     like: int load_aclfile( struct client_state csp )</para>
1459
1460     <para>would not work. So, to be consistent, we should declare all
1461     prototypes with "pass by value": int load_aclfile( struct
1462     client_state *csp )</para>
1463
1464     
1465   </sect3>
1466     
1467
1468     <sect3 id="s31"><title>Names of include files</title>
1469
1470     <para><emphasis>Explanation:</emphasis></para>
1471
1472     <para>Your include statements should contain the file name without
1473     a path. The path should be listed in the Makefile, using -I as
1474     processor directive to search the indicated paths. An exception
1475     to this would be for some proprietary software that utilizes a
1476     partial path to distinguish their header files from system or
1477     other header files.</para>
1478
1479     <para><emphasis>Example:</emphasis></para>
1480 <programlisting>
1481 #include &lt;iostream.h&gt;     /* This is not a local include */
1482 #include "config.h"       /* This IS a local include */
1483 </programlisting>
1484
1485     <para><emphasis>Exception:</emphasis></para>
1486
1487     <para>
1488 <programlisting>
1489 /* This is not a local include, but requires a path element. */ 
1490 #include &lt;sys/fileName.h&gt;
1491 </programlisting>
1492 </para>
1493
1494     <para><emphasis>Note:</emphasis> Please! do not add "-I." to the Makefile
1495     without a _very_ good reason. This duplicates the #include
1496     "file.h" behavior.</para>
1497
1498     
1499   </sect3>
1500     
1501
1502     <sect3 id="s32"><title>Provide multiple inclusion
1503     protection</title>
1504
1505     <para><emphasis>Explanation:</emphasis></para>
1506
1507     <para>Prevents compiler and linker errors resulting from
1508     redefinition of items.</para>
1509
1510     <para>Wrap each header file with the following syntax to prevent
1511     multiple inclusions of the file. Of course, replace PROJECT_H
1512     with your file name, with "." Changed to "_", and make it
1513     uppercase.</para>
1514
1515     <para><emphasis>Example:</emphasis></para>
1516 <programlisting>
1517 #ifndef PROJECT_H_INCLUDED
1518 #define PROJECT_H_INCLUDED
1519  ...
1520 #endif /* ndef PROJECT_H_INCLUDED */
1521 </programlisting>
1522   </sect3>
1523     
1524
1525     <sect3 id="s33"><title>Use `extern "C"` when appropriate</title>
1526
1527     <para><emphasis>Explanation:</emphasis></para>
1528
1529     <para>If our headers are included from C++, they must declare our
1530     functions as `extern "C"`. This has no cost in C, but increases
1531     the potential re-usability of our code.</para>
1532
1533     <para><emphasis>Example:</emphasis></para>
1534 <programlisting>
1535 #ifdef __cplusplus
1536 extern "C"
1537 {
1538 #endif /* def __cplusplus */
1539
1540 ... function definitions here ...
1541
1542 #ifdef __cplusplus
1543 }
1544 #endif /* def __cplusplus */
1545 </programlisting>
1546   </sect3>
1547     
1548
1549     <sect3 id="s34"><title>Where Possible, Use Forward Struct
1550     Declaration Instead of Includes</title>
1551
1552     <para><emphasis>Explanation:</emphasis></para>
1553
1554     <para>Useful in headers that include pointers to other struct's.
1555     Modifications to excess header files may cause needless
1556     compiles.</para>
1557
1558     <para><emphasis>Example:</emphasis></para>
1559 <programlisting>
1560 /*********************************************************************
1561  * We're avoiding an include statement here!
1562  *********************************************************************/
1563 struct file_list;
1564 extern file_list *xyz;</programlisting>
1565
1566     <para><emphasis>Note:</emphasis> If you declare "file_list xyz;" (without the
1567     pointer), then including the proper header file is necessary.
1568     If you only want to prototype a pointer, however, the header
1569     file is unnecessary.</para>
1570
1571     <para><emphasis>Status:</emphasis> Use with discretion.</para>
1572
1573     
1574   </sect3>
1575   </sect2>
1576
1577     <sect2 id="s35"><title>General Coding Practices</title>
1578
1579     
1580
1581     <sect3 id="s36"><title>Turn on warnings</title>
1582
1583     <para><emphasis>Explanation</emphasis></para>
1584
1585     <para>Compiler warnings are meant to help you find bugs. You
1586     should turn on as many as possible. With GCC, the switch is
1587     "-Wall". Try and fix as many warnings as possible.</para>
1588
1589     
1590   </sect3>
1591     
1592
1593     <sect3 id="s37"><title>Provide a default case for all switch
1594     statements</title>
1595
1596     <para><emphasis>Explanation:</emphasis></para>
1597
1598     <para>What you think is guaranteed is never really guaranteed. The
1599     value that you don't think you need to check is the one that
1600     someday will be passed. So, to protect yourself from the
1601     unknown, always have a default step in a switch statement.</para>
1602
1603     <para><emphasis>Example:</emphasis></para>
1604 <programlisting>
1605 switch( hash_string( cmd ) )
1606 {
1607    case hash_actions_file :
1608       ... code ...
1609       break;
1610
1611    case hash_confdir :
1612       ... code ...
1613       break;
1614
1615    default :
1616       log_error( ... );
1617       ... anomaly code goes here ...
1618       continue; / break; / exit( 1 ); / etc ...
1619
1620 } /* end switch( hash_string( cmd ) ) */</programlisting>
1621
1622     <para><emphasis>Note:</emphasis> If you already have a default condition, you
1623     are obviously exempt from this point. Of note, most of the
1624     WIN32 code calls `DefWindowProc' after the switch statement.
1625     This API call *should* be included in a default statement.</para>
1626
1627     <para><emphasis>Another Note:</emphasis> This is not so much a readability issue
1628     as a robust programming issue. The "anomaly code goes here" may
1629     be no more than a print to the STDERR stream (as in
1630     load_config). Or it may really be an abort condition.</para>
1631
1632     <para><emphasis>Status:</emphasis> Programmer discretion is advised.</para>
1633
1634     
1635   </sect3>
1636     
1637
1638     <sect3 id="s38"><title>Try to avoid falling through cases in a
1639     switch statement.</title>
1640
1641     <para><emphasis>Explanation:</emphasis></para>
1642
1643     <para>In general, you will want to have a 'break' statement within
1644     each 'case' of a switch statement. This allows for the code to
1645     be more readable and understandable, and furthermore can
1646     prevent unwanted surprises if someone else later gets creative
1647     and moves the code around.</para>
1648
1649     <para>The language allows you to plan the fall through from one
1650     case statement to another simply by omitting the break
1651     statement within the case statement. This feature does have
1652     benefits, but should only be used in rare cases. In general,
1653     use a break statement for each case statement.</para>
1654
1655     <para>If you choose to allow fall through, you should comment both
1656     the fact of the fall through and reason why you felt it was
1657     necessary.</para>
1658
1659     
1660   </sect3>
1661     
1662
1663     <sect3 id="s39"><title>Use 'long' or 'short' Instead of
1664     'int'</title>
1665
1666     <para><emphasis>Explanation:</emphasis></para>
1667
1668     <para>On 32-bit platforms, int usually has the range of long. On
1669     16-bit platforms, int has the range of short.</para>
1670
1671     <para><emphasis>Status:</emphasis> open-to-debate. In the case of most FSF
1672     projects (including X/GNU-Emacs), there are typedefs to int4,
1673     int8, int16, (or equivalence ... I forget the exact typedefs
1674     now). Should we add these to IJB now that we have a "configure"
1675     script?</para>
1676
1677     
1678   </sect3>
1679     
1680
1681     <sect3 id="s40"><title>Don't mix size_t and other types</title>
1682
1683     <para><emphasis>Explanation:</emphasis></para>
1684
1685     <para>The type of size_t varies across platforms. Do not make
1686     assumptions about whether it is signed or unsigned, or about
1687     how long it is. Do not compare a size_t against another
1688     variable of a different type (or even against a constant)
1689     without casting one of the values.</para>
1690
1691     
1692   </sect3>
1693     
1694
1695     <sect3 id="s41"><title>Declare each variable and struct on its
1696     own line.</title>
1697
1698     <para><emphasis>Explanation:</emphasis></para>
1699
1700     <para>It can be tempting to declare a series of variables all on
1701     one line. Don't.</para>
1702
1703     <para><emphasis>Example:</emphasis></para>
1704 <programlisting>
1705 long a = 0;
1706 long b = 0;
1707 long c = 0;</programlisting>
1708
1709     <para><emphasis>Instead of:</emphasis></para>
1710
1711     <para>long a, b, c;</para>
1712
1713     <para><emphasis>Explanation:</emphasis> - there is more room for comments on the
1714     individual variables - easier to add new variables without
1715     messing up the original ones - when searching on a variable to
1716     find its type, there is less clutter to "visually"
1717     eliminate</para>
1718
1719     <para><emphasis>Exceptions:</emphasis> when you want to declare a bunch of loop
1720     variables or other trivial variables; feel free to declare them
1721     on one line. You should, although, provide a good comment on
1722     their functions.</para>
1723
1724     <para><emphasis>Status:</emphasis> developer-discretion.</para>
1725
1726     
1727   </sect3>
1728     
1729
1730     <sect3 id="s42"><title>Use malloc/zalloc sparingly</title>
1731
1732     <para><emphasis>Explanation:</emphasis></para>
1733
1734     <para>Create a local struct (on the stack) if the variable will
1735     live and die within the context of one function call.</para>
1736
1737     <para>Only "malloc" a struct (on the heap) if the variable's life
1738     will extend beyond the context of one function call.</para>
1739
1740     <para><emphasis>Example:</emphasis></para>
1741 <programlisting>
1742 If a function creates a struct and stores a pointer to it in a
1743 list, then it should definitely be allocated via `malloc'.
1744 </programlisting>
1745   </sect3>
1746     
1747
1748     <sect3 id="s43"><title>The Programmer Who Uses 'malloc' is
1749     Responsible for Ensuring 'free'</title>
1750
1751     <para><emphasis>Explanation:</emphasis></para>
1752
1753     <para>If you have to "malloc" an instance, you are responsible for
1754     insuring that the instance is `free'd, even if the deallocation
1755     event falls within some other programmer's code. You are also
1756     responsible for ensuring that deletion is timely (i.e. not too
1757     soon, not too late). This is known as "low-coupling" and is a
1758     "good thing (tm)". You may need to offer a
1759     free/unload/destructor type function to accommodate this.</para>
1760
1761     <para><emphasis>Example:</emphasis></para>
1762 <programlisting>
1763 int load_re_filterfile( struct client_state *csp ) { ... }
1764 static void unload_re_filterfile( void *f ) { ... }</programlisting>
1765
1766     <para><emphasis>Exceptions:</emphasis></para>
1767
1768     <para>The developer cannot be expected to provide `free'ing
1769     functions for C run-time library functions ... such as
1770     `strdup'.</para>
1771
1772     <para><emphasis>Status:</emphasis> developer-discretion. The "main" use of this
1773     standard is for allocating and freeing data structures (complex
1774     or nested).</para>
1775
1776     
1777   </sect3>
1778     
1779
1780     <sect3 id="s44"><title>Add loaders to the `file_list' structure
1781     and in order</title>
1782
1783     <para><emphasis>Explanation:</emphasis></para>
1784
1785     <para>I have ordered all of the "blocker" file code to be in alpha
1786     order. It is easier to add/read new blockers when you expect a
1787     certain order.</para>
1788
1789     <para><emphasis>Note:</emphasis> It may appear that the alpha order is broken in
1790     places by POPUP tests coming before PCRS tests. But since
1791     POPUPs can also be referred to as KILLPOPUPs, it is clear that
1792     it should come first.</para>
1793
1794     
1795   </sect3>
1796     
1797
1798     <sect3 id="s45"><title>"Uncertain" new code and/or changes to
1799     existing code, use FIXME or XXX</title>
1800
1801     <para><emphasis>Explanation:</emphasis></para>
1802
1803     <para>If you have enough confidence in new code or confidence in
1804     your changes, but are not *quite* sure of the repercussions,
1805     add this:</para>
1806
1807     <para>/* FIXME: this code has a logic error on platform XYZ, *
1808     attempting to fix */ #ifdef PLATFORM ...changed code here...
1809     #endif</para>
1810
1811     <para>or:</para>
1812
1813     <para>/* FIXME: I think the original author really meant this...
1814     */ ...changed code here...</para>
1815
1816     <para>or:</para>
1817
1818     <para>/* FIXME: new code that *may* break something else... */
1819     ...new code here...</para>
1820
1821     <para><emphasis>Note:</emphasis> If you make it clear that this may or may not
1822     be a "good thing (tm)", it will be easier to identify and
1823     include in the project (or conversely exclude from the
1824     project).</para>
1825
1826     
1827   </sect3>
1828
1829   </sect2>
1830
1831     <sect2 id="s46"><title>Addendum: Template for files and function
1832     comment blocks:</title>
1833
1834     <para><emphasis>Example for file comments:</emphasis></para>
1835 <programlisting>
1836 const char FILENAME_rcs[] = "$I<!-- Break CVS Substitution -->d$";
1837 /*********************************************************************
1838  *
1839  * File        :  $S<!-- Break CVS Substitution -->ource$
1840  *
1841  * Purpose     :  (Fill me in with a good description!)
1842  *
1843  * Copyright   :  Written by and Copyright (C) 2001-2007 the SourceForge
1844  *                Privoxy team. http://www.privoxy.org/
1845  *
1846  *                Based on the Internet Junkbuster originally written
1847  *                by and Copyright (C) 1997 Anonymous Coders and
1848  *                Junkbusters Corporation.  http://www.junkbusters.com
1849  *
1850  *                This program is free software; you can redistribute it
1851  *                and/or modify it under the terms of the GNU General
1852  *                Public License as published by the Free Software
1853  *                Foundation; either version 2 of the License, or (at
1854  *                your option) any later version.
1855  *
1856  *                This program is distributed in the hope that it will
1857  *                be useful, but WITHOUT ANY WARRANTY; without even the
1858  *                implied warranty of MERCHANTABILITY or FITNESS FOR A
1859  *                PARTICULAR PURPOSE.  See the GNU General Public
1860  *                License for more details.
1861  *
1862  *                The GNU General Public License should be included with
1863  *                this file.  If not, you can view it at
1864  *                http://www.gnu.org/copyleft/gpl.html
1865  *                or write to the Free Software Foundation, Inc., 
1866  *                51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 ,
1867  *                USA
1868  *
1869  * Revisions   :
1870  *    $L<!-- Break CVS Substitution -->og$
1871  *
1872  *********************************************************************/
1873
1874
1875 #include "config.h"
1876
1877    ...necessary include files for us to do our work...
1878
1879 const char FILENAME_h_rcs[] = FILENAME_H_VERSION;
1880 </programlisting>
1881
1882     <para><emphasis>Note:</emphasis> This declares the rcs variables that should be
1883     added to the "show-proxy-args" page. If this is a brand new
1884     creation by you, you are free to change the "Copyright" section
1885     to represent the rights you wish to maintain.</para>
1886
1887     <para><emphasis>Note:</emphasis> The formfeed character that is present right
1888     after the comment flower box is handy for (X|GNU)Emacs users to
1889     skip the verbiage and get to the heart of the code (via
1890     `forward-page' and `backward-page'). Please include it if you
1891     can.</para>
1892
1893     <para><emphasis>Example for file header comments:</emphasis></para>
1894 <programlisting>
1895 #ifndef _FILENAME_H
1896 #define _FILENAME_H
1897 #define FILENAME_H_VERSION "$I<!-- Break CVS Substitution -->d$"
1898 /*********************************************************************
1899  *
1900  * File        :  $S<!-- Break CVS Substitution -->ource$
1901  *
1902  * Purpose     :  (Fill me in with a good description!)
1903  *
1904  * Copyright   :  Written by and Copyright (C) 2001-2008
1905  *                the Privoxy team. http://www.privoxy.org/
1906  *
1907  *                This program is free software; you can redistribute it
1908  *                and/or modify it under the terms of the GNU General
1909  *                Public License as published by the Free Software
1910  *                Foundation; either version 2 of the License, or (at
1911  *                your option) any later version.
1912  *
1913  *                This program is distributed in the hope that it will
1914  *                be useful, but WITHOUT ANY WARRANTY; without even the
1915  *                implied warranty of MERCHANTABILITY or FITNESS FOR A
1916  *                PARTICULAR PURPOSE.  See the GNU General Public
1917  *                License for more details.
1918  *
1919  *                The GNU General Public License should be included with
1920  *                this file.  If not, you can view it at
1921  *                http://www.gnu.org/copyleft/gpl.html
1922  *                or write to the Free Software Foundation, Inc., 
1923  *                51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 ,
1924  *                USA
1925  *
1926  * Revisions   :
1927  *    $L<!-- Break CVS Substitution -->og$
1928  *
1929  *********************************************************************/
1930
1931
1932 #include "project.h"
1933
1934 #ifdef __cplusplus
1935 extern "C" {
1936 #endif
1937
1938    ... function headers here ...
1939
1940
1941 /* Revision control strings from this header and associated .c file */
1942 extern const char FILENAME_rcs[];
1943 extern const char FILENAME_h_rcs[];
1944
1945
1946 #ifdef __cplusplus
1947 } /* extern "C" */
1948 #endif
1949
1950 #endif /* ndef _FILENAME_H */
1951
1952 /*
1953   Local Variables:
1954   tab-width: 3
1955   end:
1956 */
1957 </programlisting>
1958
1959     <para><emphasis>Example for function comments:</emphasis></para>
1960 <programlisting>
1961 /*********************************************************************
1962  *
1963  * Function    :  FUNCTION_NAME
1964  *
1965  * Description :  (Fill me in with a good description!)
1966  *
1967  * parameters  :
1968  *          1  :  param1 = pointer to an important thing
1969  *          2  :  x      = pointer to something else
1970  *
1971  * Returns     :  0 => Ok, everything else is an error.
1972  *
1973  *********************************************************************/
1974 int FUNCTION_NAME( void *param1, const char *x )
1975 {
1976    ...
1977    return( 0 );
1978
1979 }
1980 </programlisting>
1981
1982     <para><emphasis>Note:</emphasis> If we all follow this practice, we should be
1983     able to parse our code to create a "self-documenting" web
1984     page.</para>
1985
1986   </sect2>
1987
1988   </sect1>
1989
1990   <!--   ~~~~~       New section      ~~~~~     -->
1991   <sect1 id="testing"><title>Testing Guidelines</title>
1992     <para>To be filled.
1993 </para>
1994
1995     <!--   ~~~~~       New section      ~~~~~     -->
1996     <sect2 id="testing-plan"><title>Testplan for releases</title>
1997       <para>
1998        Explain release numbers. major, minor. developer releases. etc.
1999
2000 <orderedlist numeration="arabic">
2001           <listitem><para>
2002 Remove any existing rpm with rpm -e
2003 </para></listitem>
2004           <listitem><para>
2005 Remove any file that was left over. This includes (but is not limited to)
2006       <itemizedlist>
2007                 <listitem><para>/var/log/privoxy</para></listitem>
2008                 <listitem><para>/etc/privoxy</para></listitem>
2009                 <listitem><para>/usr/sbin/privoxy</para></listitem>
2010                 <listitem><para>/etc/init.d/privoxy</para></listitem>
2011                 <listitem><para>/usr/doc/privoxy*</para></listitem>
2012               </itemizedlist>
2013 </para></listitem>
2014           <listitem><para>
2015 Install the rpm. Any error messages?
2016 </para></listitem>
2017           <listitem><para>start,stop,status <application>Privoxy</application> with the specific script
2018       (e.g. /etc/rc.d/init/privoxy stop). Reboot your machine. Does
2019       autostart work?</para></listitem>
2020           <listitem><para>Start browsing. Does <application>Privoxy</application> work? Logfile written?</para></listitem>
2021           <listitem><para>Remove the rpm. Any error messages? All files removed?</para></listitem>
2022         </orderedlist>
2023 </para>
2024     </sect2>
2025
2026     <!--   ~~~~~       New section      ~~~~~     -->
2027     <sect2 id="testing-report"><title>Test reports</title>
2028       <para>
2029 Please submit test reports only with the <ulink url="http://sourceforge.net/tracker/?func=add&amp;group_id=11118&amp;atid=395005">test form</ulink>
2030 at sourceforge. Three simple steps:
2031         <itemizedlist>
2032           
2033           <listitem><para>Select category: the distribution you test on.</para></listitem>
2034           <listitem><para>Select group: the version of <application>Privoxy</application> that we are about to release.</para></listitem>
2035           <listitem><para>Fill the Summary and Detailed Description with something
2036               intelligent (keep it short and precise).</para>
2037           </listitem>
2038         </itemizedlist>
2039         Do not mail to the mailing list (we cannot keep track on issues there).
2040       </para>
2041     </sect2>
2042     
2043   </sect1>
2044
2045   <!--   ~~~~~       New section      ~~~~~     -->
2046   <sect1 id="newrelease"><title>Releasing a New Version</title>
2047     <para>
2048         When we release versions of <application>Privoxy</application>,
2049         our work leaves our cozy secret lab and has to work in the cold
2050         RealWorld[tm]. Once it is released, there is no way to call it
2051         back, so it is very important that great care is taken to ensure
2052         that everything runs fine, and not to introduce problems in the
2053         very last minute.
2054     </para>
2055     <para>
2056         So when releasing a new version, please adhere exactly to the
2057         procedure outlined in this chapter.
2058     </para>
2059
2060     <para>
2061         The following programs are required to follow this process:
2062         <filename>ncftpput</filename> (ncftp), <filename>scp, ssh</filename> (ssh),
2063         <filename>gmake</filename> (GNU's version of make), autoconf, cvs.
2064     </para>
2065
2066     <sect2 id="versionnumbers">
2067     <title>Version numbers</title>
2068
2069     <para>
2070       First you need to determine which version number the release will have. 
2071       <application>Privoxy</application> version numbers consist of three numbers,
2072       separated by dots, like in X.Y.Z (e.g. 3.0.0), where:
2073         <itemizedlist>
2074           <listitem>
2075             <para>
2076               X, the version major, is rarely ever changed. It is increased by one if
2077               turning a development branch into stable substantially changes the functionality,
2078               user interface or configuration syntax. Majors 1 and 2 were 
2079               <application>Junkbuster</application>, and 3 will be the first stable
2080               <application>Privoxy</application> release.
2081             </para>
2082           </listitem>
2083           <listitem>
2084             <para>
2085               Y, the version minor, represents the branch within the major version.
2086               At any point in time, there are two branches being maintained:
2087               The stable branch, with an even minor, say, 2N, in which no functionality is
2088               being added and only bug-fixes are made, and 2N+1, the development branch, in
2089               which the further development of <application>Privoxy</application> takes
2090               place.
2091               This enables us to turn the code upside down and inside out, while at the same time
2092               providing and maintaining a stable version.
2093               The minor is reset to zero (and one) when the major is incremented. When a development
2094               branch has matured to the point where it can be turned into stable, the old stable branch
2095               2N is given up (i.e. no longer maintained), the former development branch 2N+1 becomes the
2096               new stable branch 2N+2, and a new development branch 2N+3 is opened.
2097             </para>
2098           </listitem>
2099           <listitem>
2100             <para>
2101               Z, the point or sub version, represents a release of the software within a branch.
2102               It is therefore incremented immediately before each code freeze. 
2103               In development branches, only the even point versions correspond to actual releases,
2104               while the odd ones denote the evolving state of the sources on CVS in between.
2105               It follows that Z is odd on CVS in development branches most of the time. There, it gets
2106               increased to an even number immediately before a code freeze, and is increased to an odd
2107               number again immediately thereafter.
2108               This ensures that builds from CVS snapshots are easily distinguished from released versions.
2109               The point version is reset to zero when the minor changes.
2110             </para>
2111             <para>
2112               Stable branches work a little differently, since there should be
2113               little to no development happening in such branches. Remember,
2114               only bugfixes, which presumably should have had some testing
2115               before being committed. Stable branches will then have their 
2116               version reported as <literal>0.0.0</literal>, during that period 
2117               between releases when changes are being added. This is to denote 
2118               that this code is <emphasis>not for release</emphasis>. Then 
2119               as the release nears, the version is bumped according: e.g. 
2120               <literal>3.0.1 -> 0.0.0 -> 3.0.2</literal>.
2121             </para>
2122           </listitem>
2123         </itemizedlist>
2124     </para>
2125     <para>
2126      In summary, the main CVS trunk is the development branch where new
2127      features are being worked on for the next stable series. This should
2128      almost always be where the most activity takes place. There is always at
2129      least one stable branch from the trunk, e.g now it is
2130      <literal>3.0</literal>, which is only used to release stable versions.
2131      Once the initial *.0 release of the stable branch has been done, then as a
2132      rule, only bugfixes that have had prior testing should be committed to
2133      the stable branch. Once there are enough bugfixes to justify a new
2134      release, the version of this branch is again incremented Example: 3.0.0
2135      -> 3.0.1 -> 3.0.2, etc are all stable releases from within the stable
2136      branch. 3.1.x is currently the main trunk, and where work on 3.2.x is
2137      taking place. If any questions, please post to the devel list
2138      <emphasis>before</emphasis> committing to a stable branch!
2139     </para>
2140     <para>
2141      Developers should remember too that if they commit a bugfix to the stable 
2142      branch, this will more than likely require a separate submission to the 
2143      main trunk, since these are separate development trees within CVS. If you 
2144      are working on both, then this would require at least two separate check
2145      outs (i.e main trunk, <emphasis>and</emphasis> the stable release branch,
2146      which is <literal>v_3_0_branch</literal> at the moment).
2147     </para>
2148
2149     </sect2>
2150      
2151     <sect2 id="beforerelease">
2152     <title>Before the Release: Freeze</title>
2153      <para>
2154        The following <emphasis>must be done by one of the
2155        developers</emphasis> prior to each new release.
2156      </para>
2157      <para>
2158       <itemizedlist>
2159        <listitem>
2160         <para>
2161          Make sure that everybody who has worked on the code in the last
2162          couple of days has had a chance to yell <quote>no!</quote> in case
2163          they have pending changes/fixes in their pipelines. Announce the
2164          freeze so that nobody will interfere with last minute changes.
2165         </para>
2166       </listitem> 
2167       <listitem>
2168        <para>
2169          Increment the version number (point from odd to even in development
2170          branches!) in <filename>configure.in</filename>. (RPM spec files 
2171          will need to be incremented as well.)
2172        </para>
2173       </listitem> 
2174       <listitem>
2175        <para>
2176         If <filename>default.action</filename> has changed since last
2177         release (i.e. software release or standalone actions file release),
2178         bump up its version info to A.B in this line:
2179        </para>
2180        <para> 
2181         <programlisting>
2182   {+add-header{X-Actions-File-Version: A.B} -filter -no-popups}
2183 </programlisting>
2184        </para>
2185        <para> 
2186         Then change the version info in doc/webserver/actions/index.php,
2187         line: '$required_actions_file_version = "A.B";'
2188        </para>
2189       </listitem>
2190       <listitem>
2191        <para>
2192         All documentation should be rebuild after the version bump.
2193         Finished docs should be then be committed to CVS (for those 
2194         without the ability to build these). Some docs may require 
2195         rather obscure processing tools. <filename>config</filename>,
2196         the man page (and the html version of the man page), and the PDF docs
2197         fall in this category. REAMDE, the man page, AUTHORS, and config
2198         should all also be committed to CVS for other packagers. The 
2199         formal docs should be uploaded to the webserver. See the
2200         Section "Updating the webserver" in this manual for details.
2201        </para>
2202       </listitem> 
2203       <listitem>
2204        <para>
2205          The <citetitle>User Manual</citetitle> is also used for context 
2206          sensitive help for the CGI editor. This is version sensitive, so that
2207          the user will get appropriate help for his/her release. So with 
2208          each release a fresh version should be uploaded to the webserver
2209          (this is in addition to the main <citetitle>User Manual</citetitle>
2210          link from the main page since we need to keep manuals for various 
2211          versions available). The CGI pages will link to something like 
2212          <literal>http://privoxy.org/$(VERSION)/user-manual/</literal>. This
2213          will need to be updated for each new release. There is no Makefile
2214          target for this at this time!!! It needs to be done manually.
2215        </para>
2216       </listitem> 
2217       <listitem>
2218        <para>
2219         All developers should look at the <filename>ChangeLog</filename> and
2220         make sure noteworthy changes are referenced.
2221        </para>
2222      </listitem> 
2223       <listitem>
2224        <para>
2225         <emphasis>Commit all files that were changed in the above steps!</emphasis>
2226        </para>
2227       </listitem>
2228       <listitem>
2229        <para>
2230         Tag all files in CVS with the version number with
2231         <quote><command>cvs tag v_X_Y_Z</command></quote>.
2232         Don't use vX_Y_Z, ver_X_Y_Z, v_X.Y.Z (won't work) etc.
2233        </para>
2234       </listitem> 
2235      <listitem>
2236        <para>
2237         If the release was in a development branch, increase the point version
2238         from even to odd (X.Y.(Z+1)) again in <filename>configure.in</filename> and
2239         commit your change.
2240        </para>
2241       </listitem> 
2242      <listitem>
2243        <para>
2244         On the webserver, copy the user manual to a new top-level directory
2245         called <filename>X.Y.Z</filename>. This ensures that help links from the CGI
2246         pages, which have the version as a prefix, will go into the right version of the manual.
2247         If this is a development branch release, also symlink <filename>X.Y.(Z-1)</filename>
2248         to <filename>X.Y.Z</filename> and <filename>X.Y.(Z+1)</filename> to
2249         <filename>.</filename> (i.e. dot). 
2250        </para>
2251       </listitem> 
2252       </itemizedlist>
2253      </para> 
2254     </sect2>
2255     
2256     <sect2 id="therelease">
2257     <title>Building and Releasing the Packages</title>
2258      <para>
2259       Now the individual packages can be built and released. Note that for
2260       GPL reasons the first package to be released is always the source tarball.
2261      </para>
2262  
2263      <para>
2264       For <emphasis>all</emphasis> types of packages, including the source tarball,
2265       <emphasis>you must make sure that you build from clean sources by exporting
2266       the right version from CVS into an empty directory</emphasis> (just press return when
2267       asked for a password):
2268      </para>
2269       
2270      <para>
2271       <programlisting>
2272   mkdir dist # delete or choose different name if it already exists
2273   cd dist
2274   cvs -d:pserver:anonymous@ijbswa.cvs.sourceforge.net:/cvsroot/ijbswa login
2275   cvs -z3 -d:pserver:anonymous@ijbswa.cvs.sourceforge.net:/cvsroot/ijbswa export -r v_X_Y_Z current
2276 </programlisting>
2277     </para>
2278   
2279     <para>
2280      <emphasis>Do NOT change</emphasis> a single bit, including, but not limited to
2281      version information after export from CVS. This is to make sure that
2282      all release packages, and with them, all future bug reports, are based
2283      on exactly the same code.
2284     </para>
2285   
2286     <warning>
2287      <para>
2288       Every significant release of Privoxy has included at least one 
2289       package that either had incorrect versions of files, missing files, 
2290       or incidental leftovers from a previous build process that gave 
2291       unknown numbers of users headaches to try to figure out what was 
2292       wrong. PLEASE, make sure you are using pristene sources, and are
2293       following the prescribed process!
2294      </para>
2295     </warning>
2296
2297     <para>
2298      Please find additional instructions for the source tarball and the
2299      individual platform dependent binary packages below. And details 
2300      on the Sourceforge release process below that.
2301     </para>
2302
2303     <sect3 id="pack-guidelines">
2304     <title>Note on Privoxy Packaging</title>
2305      <para>
2306       Please keep these general guidelines in mind when putting together 
2307       your package. These apply to <emphasis>all</emphasis> platforms!
2308      </para>
2309      <para>
2310       <itemizedlist>
2311        <listitem>
2312         <para>
2313           <application>Privoxy</application> <emphasis>requires</emphasis>
2314           write access to: all <filename>*.action</filename> files, all 
2315           logfiles, and the <filename>trust</filename> file. You will 
2316           need to determine the best way to do this for your platform.
2317         </para>
2318        </listitem> 
2319        <listitem>
2320         <para>
2321           Please include up to date documentation. At a bare minimum:
2322         </para>
2323         <simplelist>
2324          <member>
2325           <filename>LICENSE</filename> (top-level directory)
2326          </member>
2327         </simplelist>
2328         <simplelist>
2329          <member>
2330           <filename>README</filename> (top-level directory)
2331          </member>
2332         </simplelist>
2333         <simplelist>
2334          <member>
2335           <filename>AUTHORS</filename> (top-level directory)
2336          </member>
2337         </simplelist>
2338         <simplelist>
2339          <member>
2340           <filename>man page</filename> (top-level directory, Unix-like
2341           platforms only)
2342          </member>
2343         </simplelist>
2344         <simplelist>
2345          <member>
2346           <filename>The User Manual</filename> (doc/webserver/user-manual/)
2347          </member>
2348         </simplelist>
2349         <simplelist>
2350          <member>
2351           <filename>FAQ</filename> (doc/webserver/faq/)
2352          </member>
2353         </simplelist>
2354         <para>
2355           Also suggested: <filename>Developer Manual</filename>
2356           (doc/webserver/developer-manual) and <filename>ChangeLog</filename>
2357           (top-level directory). <filename>FAQ</filename> and the manuals are
2358           HTML docs. There are also text versions in
2359           <filename>doc/text/</filename> which could conceivably also be
2360           included.
2361         </para>
2362         <para>
2363          The documentation has been designed such that the manuals are linked
2364          to each other from parallel directories, and should be packaged 
2365          that way. <filename>privoxy-index.html</filename> can also be
2366          included and can serve as a focal point for docs and other links of
2367          interest (and possibly renamed to <filename>index.html</filename>).
2368          This should be one level up from the manuals. There is a link also 
2369          on this page to an HTMLized version of the man page. To avoid 404 for
2370          this, it is in CVS as
2371          <filename>doc/webserver/man-page/privoxy-man-page.html</filename>,
2372          and should be included along with the manuals. There is also a
2373          css stylesheets that can be included for better presentation:
2374          <filename>p_doc.css</filename>. This should be in the same directory
2375          with <filename>privoxy-index.html</filename>, (i.e. one level up from
2376          the manual directories).
2377         </para>
2378       </listitem> 
2379       <listitem>
2380        <para>
2381         <filename>user.action</filename> and <filename>user.filter</filename>
2382         are designed for local preferences. Make sure these do not get overwritten!
2383         <filename>config</filename> should not be overwritten either. This 
2384         has especially important configuration data in it.
2385         <filename>trust</filename> should be left in tact as well.
2386        </para>
2387       </listitem> 
2388       <listitem>
2389        <para>
2390         Other configuration files (<filename>default.action</filename> and
2391         <filename>default.filter</filename>) should be installed as the new
2392         defaults, but all previously installed configuration files should be
2393         preserved as backups. This is just good manners :-) These files are
2394         likely to change between releases and contain important new features
2395         and bug fixes.
2396        </para>
2397      </listitem> 
2398      <listitem>
2399       <para>
2400        Please check platform specific notes in this doc, if you haven't 
2401        done <quote>Privoxy</quote> packaging before for other platform 
2402        specific issues. Conversely, please add any notes that you know 
2403        are important for your platform (or contact one of the doc 
2404        maintainers to do this if you can't).
2405       </para>
2406     </listitem> 
2407     <listitem>
2408      <para>
2409        Packagers should do a <quote>clean</quote> install of their 
2410        package after building it. So any previous installs should be 
2411        removed first to ensure the integrity of the newly built package. 
2412        Then run the package for a while to make sure there are no 
2413        obvious problems, before uploading.
2414      </para>
2415     </listitem> 
2416
2417       </itemizedlist>
2418      </para> 
2419     
2420     </sect3>
2421
2422     <sect3 id="newrelease-tarball"><title>Source Tarball</title>
2423         <para>
2424         First, <emphasis>make sure that you have freshly exported the right
2425         version into an empty directory</emphasis>. (See "Building and releasing
2426         packages" above). Then run:
2427         </para>
2428         <para>
2429         <programlisting>
2430   cd current
2431   autoheader && autoconf && ./configure
2432 </programlisting>
2433         </para>
2434         <para>
2435         Then do:
2436         </para>
2437         <para>
2438         <programlisting>
2439   make tarball-dist
2440 </programlisting>
2441         </para>
2442         <para>
2443         To upload the package to Sourceforge, simply issue
2444         </para>
2445         <para>
2446         <programlisting>
2447   make tarball-upload
2448 </programlisting>
2449         </para>
2450         <para>
2451         Go to the displayed URL and release the file publicly on Sourceforge.
2452         For the change log field, use the relevant section of the
2453         <filename>ChangeLog</filename> file.
2454       </para>
2455     </sect3>
2456
2457     <sect3 id="newrelease-rpm"><title>SuSE, Conectiva or Red Hat RPM</title>
2458         <para>
2459         In following text, replace <replaceable class="parameter">dist</replaceable>
2460         with either <quote>rh</quote> for Red Hat or <quote>suse</quote> for SuSE.
2461         </para>
2462         <para>
2463         First, <emphasis>make sure that you have freshly exported the right
2464         version into an empty directory</emphasis>. (See "Building and releasing
2465         packages" above). 
2466         </para>
2467         <para>
2468         As the only exception to not changing anything after export from CVS,
2469         now examine the file <filename>privoxy-</filename><replaceable class="parameter">dist</replaceable><filename>.spec</filename>
2470         and make sure that the version information and the RPM release number are
2471         correct. The RPM release numbers for each version start at one. Hence it must
2472         be reset to one if this is the first RPM for
2473         <replaceable class="parameter">dist</replaceable> which is built from version
2474         X.Y.Z. Check the
2475         <ulink url="http://sourceforge.net/project/showfiles.php?group_id=11118">file
2476         list</ulink> if unsure. Else, it must be set to the highest already available RPM
2477         release number for that version plus one.
2478         </para>
2479         <para>
2480         Then run:
2481         </para>
2482         <para>
2483         <programlisting>
2484   cd current
2485   autoheader && autoconf && ./configure
2486 </programlisting>
2487         </para>
2488         <para>
2489         Then do
2490         </para>
2491         <para>
2492         <programlisting>
2493   make <replaceable class="parameter">dist</replaceable>-dist
2494 </programlisting>
2495         </para>
2496         <para>
2497         To upload the package to Sourceforge, simply issue
2498         </para>
2499         <para>
2500         <programlisting>
2501   make <replaceable class="parameter">dist</replaceable>-upload <replaceable class="parameter">rpm_packagerev</replaceable>
2502 </programlisting>
2503         </para>
2504         <para>
2505         where <replaceable class="parameter">rpm_packagerev</replaceable> is the
2506         RPM release number as determined above.
2507         Go to the displayed URL and release the file publicly on Sourceforge.
2508         Use the release notes and change log from the source tarball package.
2509       </para>
2510     </sect3>
2511
2512     <sect3 id="newrelease-os2"><title>OS/2</title>
2513       <para>
2514         First, <emphasis>make sure that you have freshly exported the right
2515         version into an empty directory</emphasis>. (See "Building and releasing
2516         packages" above). Then get the OS/2 Setup module:
2517         </para>
2518         <para>
2519         <programlisting>
2520   cvs -z3 -d:pserver:anonymous@ijbswa.cvs.sourceforge.net:/cvsroot/ijbswa co os2setup
2521 </programlisting>
2522         </para>
2523         <para>
2524         You will need a mix of development tools.
2525         The main compilation takes place with IBM Visual Age C++.
2526         Some ancillary work takes place with GNU tools, available from
2527         various sources like hobbes.nmsu.edu.
2528         Specificially, you will need <filename>autoheader</filename>,
2529         <filename>autoconf</filename> and <filename>sh</filename> tools.
2530         The packaging takes place with WarpIN, available from various sources, including
2531         its home page: <ulink url="http://www.xworkplace.org/">xworkplace</ulink>.
2532         </para>
2533         <para>
2534         Change directory to the <filename>os2setup</filename> directory.
2535         Edit the os2build.cmd file to set the final executable filename.
2536         For example, 
2537         </para>
2538         <para>
2539         <programlisting>
2540   installExeName='privoxyos2_setup_X.Y.Z.exe'
2541 </programlisting>
2542         </para>
2543         <para>
2544         Next, edit the <filename>IJB.wis</filename> file so the release number matches
2545         in the <filename>PACKAGEID</filename> section:
2546         </para>
2547         <para>
2548         <programlisting>
2549   PACKAGEID="Privoxy Team\Privoxy\Privoxy Package\X\Y\Z"
2550 </programlisting>
2551         </para>
2552         <para>
2553         You're now ready to build.  Run:
2554         </para>
2555         <para>
2556         <programlisting>
2557   os2build
2558 </programlisting>
2559         </para>
2560         <para>
2561          You will find the  WarpIN-installable executable in the
2562         <filename>./files</filename> directory. Upload this anonymously to
2563          <filename>uploads.sourceforge.net/incoming</filename>, create a release
2564          for it, and you're done. Use the release notes and Change Log from the
2565          source tarball package.
2566         </para>
2567     </sect3>
2568
2569     <sect3 id="newrelease-solaris"><title>Solaris</title>
2570       <para>
2571         Login to Sourceforge's compilefarm via ssh:
2572         </para>
2573         <para>
2574         <programlisting>
2575   ssh cf.sourceforge.net
2576 </programlisting>
2577         </para>
2578         <para>
2579         Choose the right operating system (not the Debian one).
2580         When logged in, <emphasis>make sure that you have freshly exported the right
2581         version into an empty directory</emphasis>. (See "Building and releasing
2582         packages" above). Then run:
2583         </para>
2584         <para>
2585         <programlisting>
2586   cd current
2587   autoheader && autoconf && ./configure
2588 </programlisting>
2589         </para>
2590         <para>
2591         Then run
2592         </para>
2593         <para>
2594         <programlisting>
2595   gmake solaris-dist
2596 </programlisting>
2597         </para>
2598         <para>
2599         which creates a gzip'ed tar archive. Sadly, you cannot use <command>make
2600         solaris-upload</command> on the Sourceforge machine (no ncftpput). You now have
2601         to manually upload the archive to Sourceforge's ftp server and release
2602         the file publicly. Use the release notes and Change Log from the
2603         source tarball package.
2604         </para>
2605     </sect3>
2606
2607     <sect3 id="newrelease-windows"><title>Windows</title>
2608       <para>
2609         You should ensure you have the latest version of Cygwin (from
2610         <ulink url="http://www.cygwin.com/">http://www.cygwin.com/</ulink>).
2611         Run the following commands from within a Cygwin bash shell.
2612       </para>
2613       <para>
2614         First, <emphasis>make sure that you have freshly exported the right
2615         version into an empty directory</emphasis>. (See "Building and releasing
2616         packages" above). Then get the Windows setup module:
2617       </para>
2618       <para>
2619       <programlisting>
2620   cvs -z3  -d:pserver:anonymous@ijbswa.cvs.sourceforge.net:/cvsroot/ijbswa co winsetup
2621 </programlisting>
2622       </para>
2623       <para>
2624         Then you can build the package.  This is fully automated, and is
2625         controlled by <filename>winsetup/GNUmakefile</filename>.
2626         All you need to do is:
2627       </para>
2628       <para>
2629       <programlisting>
2630   cd winsetup
2631   make
2632 </programlisting>
2633       </para>
2634       <para>
2635         Now you can manually rename <filename>privoxy_setup.exe</filename> to
2636         <filename>privoxy_setup_X_Y_Z.exe</filename>, and upload it to
2637         SourceForge. When releasing the package on SourceForge, use the release notes
2638         and Change Log from the source tarball package.
2639       </para>
2640     </sect3>
2641
2642     <sect3 id="newrelease-debian"><title>Debian</title>
2643       <para>
2644         First, <emphasis>make sure that you have freshly exported the
2645         right version into an empty directory</emphasis>. (See
2646         "Building and releasing packages" above).  Then add a log
2647         entry to <filename>debian/changelog</filename>, if it is not
2648         already there, for example by running:
2649       </para>
2650       <para>
2651         <programlisting>
2652   debchange -v &p-version;-&p-status;-1 "New upstream version"
2653 </programlisting>
2654       </para>
2655       <para>
2656         Then, run: 
2657       </para>
2658       <para>
2659         <programlisting>
2660   dpkg-buildpackage -rfakeroot -us -uc -b
2661 </programlisting>
2662       </para>
2663       <para>
2664         This will create
2665         <filename>../privoxy_&p-version;-&p-status;-1_i386.deb</filename>
2666         which can be uploaded.  To upload the package to Sourceforge, simply
2667         issue
2668       </para>
2669       <para>
2670         <programlisting>
2671   make debian-upload
2672 </programlisting>
2673       </para>
2674     </sect3>
2675
2676     <sect3 id="newrelease-macosx"><title>Mac OS X</title>
2677       <para>
2678         First, <emphasis>make sure that you have freshly exported the right
2679         version into an empty directory</emphasis>. (See "Building and releasing
2680         packages" above). Then get the Mac OS X setup module:
2681         </para>
2682         <para>
2683         <programlisting>
2684   cvs -z3 -d:pserver:anonymous@ijbswa.cvs.sourceforge.net:/cvsroot/ijbswa co osxsetup
2685 </programlisting>
2686         </para>
2687         <para>
2688         Then run:
2689         </para>
2690         <para>
2691         <programlisting>
2692   cd osxsetup
2693   build
2694 </programlisting>
2695         </para>
2696         <para>
2697         This will run <filename>autoheader</filename>, <filename>autoconf</filename> and
2698         <filename>configure</filename> as well as <filename>make</filename>.
2699         Finally, it will copy over the necessary files to the ./osxsetup/files directory
2700         for further processing by <filename>PackageMaker</filename>.
2701         </para>
2702         <para>
2703         Bring up PackageMaker with the PrivoxyPackage.pmsp definition file, modify the package
2704         name to match the release, and hit the "Create package" button.
2705         If you specify ./Privoxy.pkg as the output package name, you can then create
2706         the distributable zip file with the command:
2707         </para>
2708         <para>
2709         <programlisting>
2710   zip -r privoxyosx_setup_x.y.z.zip Privoxy.pkg
2711 </programlisting>
2712         </para>
2713         <para>
2714         You can then upload <filename>privoxyosx_setup_x.y.z.zip</filename> anonymously to 
2715         <filename>uploads.sourceforge.net/incoming</filename>,
2716         create a release for it, and you're done. Use the release notes
2717         and Change Log from the source tarball package.
2718         </para>
2719     </sect3>
2720
2721     <sect3 id="newrelease-freebsd"><title>FreeBSD</title>
2722       <para>
2723         Login to Sourceforge's compile-farm via ssh:
2724         </para>
2725         <para>
2726         <programlisting>
2727   ssh cf.sourceforge.net
2728 </programlisting>
2729         </para>
2730         <para>
2731         Choose the right operating system.
2732         When logged in, <emphasis>make sure that you have freshly exported the right
2733         version into an empty directory</emphasis>. (See "Building and releasing
2734         packages" above). Then run:
2735         </para>
2736         <para>
2737         <programlisting>
2738   cd current
2739   autoheader && autoconf && ./configure
2740 </programlisting>
2741         </para>
2742         <para>
2743         Then run:
2744         </para>
2745         <para>
2746         <programlisting>
2747   gmake freebsd-dist
2748 </programlisting>
2749         </para>
2750         <para>
2751         which creates a gzip'ed tar archive. Sadly, you cannot use <command>make
2752         freebsd-upload</command> on the Sourceforge machine (no ncftpput). You now have
2753         to manually upload the archive to Sourceforge's ftp server and release
2754         the file publicly. Use the release notes and Change Log from the
2755         source tarball package.
2756         </para>
2757     </sect3>
2758
2759     <sect3 id="newrelease-hpux"><title>HP-UX 11</title>
2760       <para>
2761         First, <emphasis>make sure that you have freshly exported the right
2762         version into an empty directory</emphasis>. (See "Building and releasing
2763         packages" above). Then run:
2764         </para>
2765         <para>
2766         <programlisting>
2767   cd current
2768   autoheader && autoconf && ./configure
2769 </programlisting>
2770         </para>
2771         <para>
2772         Then do FIXME.
2773         </para>
2774     </sect3>
2775
2776     <sect3 id="newrelease-amiga"><title>Amiga OS</title>
2777       <para>
2778         First, <emphasis>make sure that you have freshly exported the right
2779         version into an empty directory</emphasis>. (See "Building and releasing
2780         packages" above). Then run:
2781         </para>
2782         <para>
2783         <programlisting>
2784   cd current
2785   autoheader && autoconf && ./configure
2786 </programlisting>
2787         </para>
2788         <para>
2789         Then do FIXME.
2790         </para>
2791     </sect3>
2792
2793     <sect3 id="newrelease-aix"><title>AIX</title>
2794       <para>
2795         Login to Sourceforge's compilefarm via ssh:
2796         </para>
2797         <para>
2798         <programlisting>
2799   ssh cf.sourceforge.net
2800 </programlisting>
2801         </para>
2802         <para>
2803         Choose the right operating system.
2804         When logged in, <emphasis>make sure that you have freshly exported the right
2805         version into an empty directory</emphasis>. (See "Building and releasing
2806         packages" above). Then run:
2807         </para>
2808         <para>
2809         <programlisting>
2810   cd current
2811   autoheader && autoconf && ./configure
2812 </programlisting>
2813         </para>
2814         <para>
2815         Then run:
2816         </para>
2817         <para>
2818         <programlisting>
2819   make aix-dist
2820 </programlisting>
2821         </para>
2822         <para>
2823         which creates a gzip'ed tar archive. Sadly, you cannot use <command>make
2824         aix-upload</command> on the Sourceforge machine (no ncftpput). You now have
2825         to manually upload the archive to Sourceforge's ftp server and release
2826         the file publicly. Use the release notes and Change Log from the
2827         source tarball package.
2828         </para>
2829     </sect3>
2830    </sect2>
2831
2832    <sect2 id="releasing">
2833    <title>Uploading and Releasing Your Package</title>
2834     <para>
2835       After the package is ready, it is time to upload it 
2836       to SourceForge, and go through the release steps. The upload
2837       is done via FTP:
2838     </para>
2839      <para>
2840       <itemizedlist>
2841        <listitem>
2842         <para>
2843           Upload to: <ulink url="ftp://upload.sourceforge.net/incoming">ftp://upload.sourceforge.net/incoming</ulink>
2844         </para>
2845       </listitem> 
2846       <listitem>
2847        <para>
2848          user: <literal>anonymous</literal>
2849        </para>
2850       </listitem> 
2851       <listitem>
2852        <para>
2853          password: <literal>ijbswa-developers@lists.sourceforge.net</literal>
2854        </para>
2855       </listitem> 
2856      </itemizedlist>
2857     </para> 
2858     <para>
2859      Or use the <command>make</command> targets as described above.
2860     </para>
2861     <para>
2862      Once this done go to <ulink
2863       url="https://sourceforge.net/project/admin/editpackages.php?group_id=11118"
2864       >https://sourceforge.net/project/admin/editpackages.php?group_id=11118</ulink>, 
2865      making sure you are logged in. Find your target platform in the 
2866      second column, and click <literal>Add Release</literal>. You will 
2867      then need to create a new release for your package, using the format 
2868      of <literal>$VERSION ($CODE_STATUS)</literal>, e.g. <emphasis>&p-version;
2869      (beta)</emphasis>.
2870     </para>
2871     <para>
2872      Now just follow the prompts. Be sure to add any appropriate Release
2873      notes. You should see your freshly uploaded packages in 
2874      <quote>Step 2. Add Files To This Release</quote>. Check the 
2875      appropriate box(es). Remember at each step to hit the 
2876      <quote>Refresh/Submit</quote> buttons! You should now see your 
2877      file(s) listed in Step 3. Fill out the forms with the appropriate 
2878      information for your platform, being sure to hit <quote>Update</quote>
2879      for each file. If anyone is monitoring your platform, check the 
2880      <quote>email</quote> box at the very bottom to notify them of 
2881      the new package. This should do it!
2882     </para>
2883     <para>
2884      If you have made errors, or need to make changes, you can go through 
2885      essentially the same steps, but select <literal>Edit Release</literal>, 
2886      instead of <literal>Add Release</literal>.
2887     </para>
2888    </sect2>
2889
2890     <sect2 id="afterrelease">
2891     <title>After the Release</title>
2892      <para>
2893       When all (or: most of the) packages have been uploaded and made available,
2894       send an email to the <ulink url="mailto:ijbswa-announce@lists.sourceforge.net">announce
2895       mailing list</ulink>, Subject: "Version X.Y.Z available for download". Be sure to
2896       include the
2897       <ulink url="http://sourceforge.net/project/showfiles.php?group_id=11118">download
2898       location</ulink>, the release notes and the Changelog. Also, post an
2899       updated News item on the project page Sourceforge, and update the Home 
2900       page and docs linked from the Home page (see below). Other news sites
2901       and release oriented sites, such as Freshmeat, should also be notified.
2902      </para>
2903    </sect2>
2904
2905   </sect1>
2906   
2907   <!--   ~~~~~       New section      ~~~~~     -->
2908   <sect1 id="webserver-update"><title>Update the Webserver</title>
2909    <para>
2910     The webserver should be updated at least with each stable release. When
2911     updating, please follow these steps to make sure that no broken links,
2912     inconsistent contents or permission problems will occur (as it has many 
2913     times in the past!):
2914    </para>
2915    <para>
2916     If you have changed anything in the stable-branch documentation source
2917     SGML files, do:
2918    </para>
2919    <para>
2920     <programlisting>
2921   make dok dok-pdf # (or 'make redhat-dok dok-pdf' if 'make dok' doesn't work for you)
2922 </programlisting>
2923    </para>
2924    <para>
2925     That will generate <filename>doc/webserver/user-manual</filename>,
2926     <filename>doc/webserver/developer-manual</filename>,
2927     <filename>doc/webserver/faq</filename>, 
2928     <filename>doc/pdf/*.pdf</filename> and
2929     <filename>doc/webserver/index.html</filename> automatically.
2930    </para>
2931    <para>
2932     If you changed the manual page sources, generate
2933     <filename>doc/webserver/man-page/privoxy-man-page.html</filename>
2934     by running <quote><command>make man</command></quote>. (This is
2935     a separate target due to dependencies on some obscure perl scripts
2936     [now in CVS, but not well tested]. See comments in <filename>GNUmakefile</filename>.)
2937    </para>
2938    <para>
2939     If you want to add new files to the webserver, create them locally in
2940     the <filename>doc/webserver/*</filename> directory (or
2941     create new directories under <filename>doc/webserver</filename>).
2942    </para>
2943    <para>
2944     Next, commit any changes from the above steps to CVS. All set? 
2945     If these are docs in the stable branch, then do:
2946    </para>
2947    <para>
2948     <programlisting>
2949   make webserver
2950 </programlisting>
2951    </para>
2952    <para>
2953     This will do the upload to <ulink url="http://www.privoxy.org/">the
2954     webserver</ulink> (www.privoxy.org) and ensure all files and directories
2955     there are group writable.
2956    </para>
2957    <para>
2958     Please do <emphasis>NOT</emphasis> use any other means of transferring
2959     files to the webserver to avoid permission problems. Also, please do not
2960     upload docs from development branches or versions. The publicly posted
2961     docs should be in sync with the last official release.
2962    </para>
2963   </sect1>
2964
2965   <!--   ~~~~~       New section      ~~~~~     -->
2966   <sect1 id="contact"><title>Contacting the developers, Bug Reporting and Feature Requests</title>
2967 <!-- Include contacting.sgml  -->
2968  &contacting;
2969 <!-- end contacting -->
2970   </sect1>
2971   
2972
2973 <!--   ~~~~~~~~       New section Header    ~~~~~~~~~     -->
2974 <sect1 id="copyright"><title>Privoxy Copyright, License and History</title>
2975
2976 <!-- Include copyright.sgml -->
2977  &copyright;
2978 <!-- end -->
2979
2980 <!--   ~~~~~       New section      ~~~~~     -->
2981 <sect2><title>License</title>
2982 <!-- Include copyright.sgml: -->
2983  &license;
2984 <!-- end copyright -->
2985 </sect2>
2986 <!--  ~  End section  ~  -->
2987
2988 <!--   ~~~~~       New section      ~~~~~     -->
2989 <sect2><title>History</title>
2990 <!-- Include history.sgml -->
2991  &history;
2992 <!-- end -->
2993 </sect2>
2994
2995 </sect1>
2996   
2997   <!--   ~~~~~       New section      ~~~~~     -->
2998   <sect1 id="seealso"><title>See also</title>
2999 <!-- Include seealso.sgml -->
3000  &seealso;
3001 <!-- end  -->
3002
3003   </sect1>
3004
3005   <!--
3006
3007   This program is free software; you can redistribute it 
3008   and/or modify it under the terms of the GNU General
3009   Public License as published by the Free Software
3010   Foundation; either version 2 of the License, or (at
3011   your option) any later version.
3012
3013   This program is distributed in the hope that it will
3014   be useful, but WITHOUT ANY WARRANTY; without even the
3015   implied warranty of MERCHANTABILITY or FITNESS FOR A
3016   PARTICULAR PURPOSE.  See the GNU General Public
3017   License for more details.
3018
3019   The GNU General Public License should be included with
3020   this file.  If not, you can view it at
3021   http://www.gnu.org/copyleft/gpl.html
3022   or write to the Free Software Foundation, Inc., 59
3023   Temple Place - Suite 330, Boston, MA  02111-1307, USA.
3024
3025   $Log: developer-manual.sgml,v $
3026   Revision 2.23  2008/09/26 17:02:01  fabiankeil
3027   - Break some more CVS substitutions in examples.
3028   - Remove Junkbusters reference in example header
3029     for new files.
3030
3031   Revision 2.22  2008/08/30 15:37:35  fabiankeil
3032   Update entities.
3033
3034   Revision 2.21  2008/08/16 08:51:28  fabiankeil
3035   Update version-related entities.
3036
3037   Revision 2.20  2008/06/14 13:21:24  fabiankeil
3038   Prepare for the upcoming 3.0.9 beta release.
3039
3040   Revision 2.19  2008/05/12 11:13:33  fabiankeil
3041   Clarify that Privoxy is licensed under GPL version 2.
3042
3043   Revision 2.18  2008/02/04 12:14:06  fabiankeil
3044   Change "Edit Packages" URL to use https.
3045
3046   Revision 2.17  2008/02/03 21:37:41  hal9
3047   Apply patch from Mark: s/OSX/OS X/
3048
3049   Revision 2.16  2008/01/19 17:52:38  hal9
3050   Re-commit to fix various minor issues for new release.
3051
3052   Revision 2.15  2008/01/19 15:03:05  hal9
3053   Doc sources tagged for 3.0.8 release.
3054
3055   Revision 2.14  2008/01/17 01:49:51  hal9
3056   Change copyright notice for docs s/2007/2008/. All these will be rebuilt soon
3057   enough.
3058
3059   Revision 2.13  2007/10/30 17:59:31  fabiankeil
3060   - Bump p-version, p-status and copyright date.
3061   - Mention that the manual is out of date.
3062   - Don't use examples with HardToReadCamelCase after
3063     explaining that we actually don't like that.
3064   - Minor cosmetics.
3065
3066   Revision 2.12  2006/11/14 01:57:46  hal9
3067   Dump all docs prior to 3.0.6 release. Various minor changes to faq and user
3068   manual.
3069
3070   Revision 2.11  2006/09/26 02:36:29  hal9
3071   Fix broken link per bug tracker.
3072
3073   Revision 2.10  2006/09/22 01:27:55  hal9
3074   Final commit of probably various minor changes here and there. Unless
3075   something changes this should be ready for pending release.
3076
3077   Revision 2.9  2006/09/14 02:30:07  hal9
3078   Fix ijbswa cvs links. Update notes on release process, and which config files
3079   should be overwritten and which not.
3080
3081   Revision 2.8  2006/08/22 23:35:01  hal9
3082   Fix email address, cvs URI, address branching changes and various other
3083   small updates.
3084
3085   Revision 2.7  2006/07/18 14:48:50  david__schmidt
3086   Reorganizing the repository: swapping out what was HEAD (the old 3.1 branch)
3087   with what was really the latest development (the v_3_0_branch branch)
3088
3089   Revision 1.46.2.11  2002/12/11 13:12:15  hal9
3090   Rewrite cvs write access give-away section.
3091
3092   Revision 1.46.2.10  2002/09/26 21:53:45  hal9
3093   Changes to reflect recent change in stable branch commit policy (hopefully
3094   clearer now).
3095
3096   Revision 1.46.2.9  2002/09/26 01:21:40  hal9
3097   Porting 3.1.1 changes: more on cvs and branches, more on versions and
3098   releases.
3099
3100   Revision 1.46.2.8  2002/08/17 00:16:10  hal9
3101   Add note on updating webserver for User-manual/CGI editor, which is version
3102   dependent (and different from main UM link).
3103
3104   Revision 1.46.2.7  2002/08/14 17:29:25  hal9
3105   Add small notes on post-release steps, and uploading docs to webserver.
3106
3107   Revision 1.46.2.6  2002/08/10 11:40:25  oes
3108   Added disclaimer about probably being out-of-date and two small hints
3109
3110   Revision 1.46.2.5  2002/08/09 01:15:12  hal9
3111   Added some notes on pre-release steps (test builds first, update ChangeLog).
3112
3113   Revision 1.46.2.4  2002/05/29 00:30:59  mal0rd
3114   Fixed a little formatting.  Clarified debian section.
3115
3116   Revision 1.46.2.3  2002/05/28 04:32:45  hal9
3117   Change hints on bundling index.html to privoxy-index.html
3118
3119   Revision 1.46.2.2  2002/05/26 17:04:24  hal9
3120   -Spellcheck, very minor edits, and sync across branches
3121
3122   Revision 1.48  2002/05/26 12:48:31  roro
3123   Add releasing information about Debian.
3124
3125   Revision 1.47  2002/05/26 04:55:11  mal0rd
3126   Added debian-dist and debian-upload targets.  Also documented usage.
3127
3128   Revision 1.46  2002/05/22 17:15:00  oes
3129   Updated intro
3130
3131   Revision 1.45  2002/05/19 23:01:54  hal9
3132   Add small section on general packaging guidelines (e.g. actions files must
3133   be writable).
3134
3135   Revision 1.44  2002/05/15 03:55:17  hal9
3136   Fix ulink -> link, and minor modification to release process section for
3137   clarification.
3138
3139   Revision 1.43  2002/05/10 01:48:19  hal9
3140   This is mostly proposed copyright/licensing additions and changes. Docs
3141   are still GPL, but licensing and copyright are more visible. Also, copyright
3142   changed in doc header comments (eliminate references to JB except FAQ).
3143
3144   Revision 1.42  2002/05/05 20:26:02  hal9
3145   Sorting out license vs copyright in these docs.
3146
3147   Revision 1.41  2002/05/04 08:44:44  swa
3148   bumped version
3149
3150   Revision 1.40  2002/05/04 00:43:43  hal9
3151   -Remove TOC/first page kludge with proper stylesheet fix.
3152   -Combined the two very brief sections: Intro and Quickstart.
3153
3154   Revision 1.39  2002/05/02 15:08:25  oes
3155   Added explanation about version numbers and RPM package revisions
3156
3157   Revision 1.38  2002/04/29 02:20:31  hal9
3158   Add info on steps for uploading and the release process on SF.
3159
3160   Revision 1.37  2002/04/26 17:23:29  swa
3161   bookmarks cleaned, changed structure of user manual, screen and programlisting cleanups, and numerous other changes that I forgot
3162
3163   Revision 1.36  2002/04/26 05:25:23  hal9
3164   Mass commit to catch a few scattered fixes.
3165
3166   Revision 1.35  2002/04/17 15:16:15  oes
3167   Added link to docbook crash course
3168
3169   Revision 1.34  2002/04/15 23:39:32  oes
3170    - Extended & fixed the release section
3171    - Added CVS guideline sections
3172    - Separated webserver section from release section
3173    - Commented out boilerplate inclusion (If you don't know yet what it is,
3174      you shouldn't mess with its code ;-)
3175    - Nits & fixes
3176
3177   Revision 1.33  2002/04/12 03:49:53  hal9
3178   Spell checked. Clarification on where docs are kept.
3179
3180   Revision 1.32  2002/04/11 21:29:58  jongfoster
3181   Documenting Win32 release procedure
3182
3183   Revision 1.31  2002/04/11 09:32:52  oes
3184   more nits
3185
3186   Revision 1.30  2002/04/11 09:24:53  oes
3187   nits
3188
3189   Revision 1.29  2002/04/10 18:45:14  swa
3190   generated
3191
3192   Revision 1.28  2002/04/08 22:59:26  hal9
3193   Version update. Spell chkconfig correctly :)
3194
3195   Revision 1.27  2002/04/08 15:31:18  hal9
3196   Touch ups to documentation section.
3197
3198   Revision 1.26  2002/04/07 23:50:08  hal9
3199   Documentation changes to reflect HTML docs now in CVS, and new generated files
3200   list.
3201
3202   Revision 1.25  2002/04/06 05:07:28  hal9
3203   -Add privoxy-man-page.sgml, for man page.
3204   -Add authors.sgml for AUTHORS (and p-authors.sgml)
3205   -Reworked various aspects of various docs.
3206   -Added additional comments to sub-docs.
3207
3208   Revision 1.24  2002/04/04 21:33:37  hal9
3209   More on documenting the documents.
3210
3211   Revision 1.23  2002/04/04 18:46:47  swa
3212   consistent look. reuse of copyright, history et. al.
3213
3214   Revision 1.22  2002/04/04 17:27:56  swa
3215   more single file to be included at multiple points. make maintaining easier
3216
3217   Revision 1.21  2002/04/04 06:48:37  hal9
3218   Structural changes to allow for conditional inclusion/exclusion of content
3219   based on entity toggles, e.g. 'entity % p-not-stable  "INCLUDE"'. And
3220   definition of internal entities, e.g. 'entity p-version "2.9.13"' that will
3221   eventually be set by Makefile.
3222   More boilerplate text for use across multiple docs.
3223
3224   Revision 1.20  2002/04/04 03:28:27  david__schmidt
3225   Add Mac OS X section
3226
3227   Revision 1.19  2002/04/03 15:09:42  david__schmidt
3228   Add OS/2 build section
3229
3230   Revision 1.18  2002/04/03 03:51:48  hal9
3231   Touch ups.
3232
3233   Revision 1.17  2002/04/03 01:21:17  hal9
3234   Implementing Andreas's suggestions for Release sections.
3235
3236   Revision 1.16  2002/03/31 23:04:40  hal9
3237   Fleshed out the doc section, and added something for an intro so it was not
3238   blank.
3239
3240   Revision 1.15  2002/03/30 22:29:47  swa
3241   wrong make flavour
3242
3243   Revision 1.14  2002/03/30 19:04:08  swa
3244   people release differently. no good.
3245   I want to make parts of the docs only.
3246
3247   Revision 1.13  2002/03/27 01:16:41  hal9
3248   ditto
3249
3250   Revision 1.12  2002/03/27 01:02:51  hal9
3251   Touch up on name change...
3252
3253   Revision 1.11  2002/03/26 22:29:55  swa
3254   we have a new homepage!
3255
3256   Revision 1.10  2002/03/24 12:33:01  swa
3257   more additions.
3258
3259   Revision 1.9  2002/03/24 11:01:05  swa
3260   name change
3261
3262   Revision 1.8  2002/03/23 15:13:11  swa
3263   renamed every reference to the old name with foobar.
3264   fixed "application foobar application" tag, fixed
3265   "the foobar" with "foobar". left junkbustser in cvs
3266   comments and remarks to history untouched.
3267
3268   Revision 1.7  2002/03/11 13:13:27  swa
3269   correct feedback channels
3270
3271   Revision 1.6  2002/02/24 14:25:06  jongfoster
3272   Formatting changes.  Now changing the doctype to DocBook XML 4.1
3273   will work - no other changes are needed.
3274
3275   Revision 1.5  2001/10/31 18:16:51  swa
3276   documentation added: howto generate docs in text and html
3277   format, howto move stuff to the webserver.
3278
3279   Revision 1.4  2001/09/23 10:13:48  swa
3280   upload process established. run make webserver and
3281   the documentation is moved to the webserver. documents
3282   are now linked correctly.
3283
3284   Revision 1.3  2001/09/13 15:27:40  swa
3285   cosmetics
3286
3287   Revision 1.2  2001/09/13 15:20:17  swa
3288   merged standards into developer manual
3289
3290   Revision 1.1  2001/09/12 15:36:41  swa
3291   source files for junkbuster documentation
3292
3293   Revision 1.3  2001/09/10 17:43:59  swa
3294   first proposal of a structure.
3295
3296   Revision 1.2  2001/06/13 14:28:31  swa
3297   docs should have an author.
3298
3299   Revision 1.1  2001/06/13 14:20:37  swa
3300   first import of project's documentation for the webserver.
3301
3302   -->
3303
3304 </article>