45f18d4218f0a1f2a0aa08cd783be1b0e93fe92a
[privoxy.git] / cgi.c
1 const char cgi_rcs[] = "$Id: cgi.c,v 1.79 2006/11/13 19:05:50 fabiankeil Exp $";
2 /*********************************************************************
3  *
4  * File        :  $Source: /cvsroot/ijbswa/current/cgi.c,v $
5  *
6  * Purpose     :  Declares functions to intercept request, generate
7  *                html or gif answers, and to compose HTTP resonses.
8  *                This only contains the framework functions, the
9  *                actual handler functions are declared elsewhere.
10  *                
11  *                Functions declared include:
12  * 
13  *
14  * Copyright   :  Written by and Copyright (C) 2001 the SourceForge
15  *                Privoxy team. http://www.privoxy.org/
16  *
17  *                Based on the Internet Junkbuster originally written
18  *                by and Copyright (C) 1997 Anonymous Coders and 
19  *                Junkbusters Corporation.  http://www.junkbusters.com
20  *
21  *                This program is free software; you can redistribute it 
22  *                and/or modify it under the terms of the GNU General
23  *                Public License as published by the Free Software
24  *                Foundation; either version 2 of the License, or (at
25  *                your option) any later version.
26  *
27  *                This program is distributed in the hope that it will
28  *                be useful, but WITHOUT ANY WARRANTY; without even the
29  *                implied warranty of MERCHANTABILITY or FITNESS FOR A
30  *                PARTICULAR PURPOSE.  See the GNU General Public
31  *                License for more details.
32  *
33  *                The GNU General Public License should be included with
34  *                this file.  If not, you can view it at
35  *                http://www.gnu.org/copyleft/gpl.html
36  *                or write to the Free Software Foundation, Inc., 59
37  *                Temple Place - Suite 330, Boston, MA  02111-1307, USA.
38  *
39  * Revisions   :
40  *    $Log: cgi.c,v $
41  *    Revision 1.79  2006/11/13 19:05:50  fabiankeil
42  *    Make pthread mutex locking more generic. Instead of
43  *    checking for OSX and OpenBSD, check for FEATURE_PTHREAD
44  *    and use mutex locking unless there is an _r function
45  *    available. Better safe than sorry.
46  *
47  *    Fixes "./configure --disable-pthread" and should result
48  *    in less threading-related problems on pthread-using platforms,
49  *    but it still doesn't fix BR#1122404.
50  *
51  *    Revision 1.78  2006/09/21 19:22:07  fabiankeil
52  *    Use CGI_PREFIX to check the referrer.
53  *    The check for "http://config.privoxy.org/" fails
54  *    if the user modified CGI_SITE_2_HOST.
55  *
56  *    Revision 1.77  2006/09/21 15:17:23  fabiankeil
57  *    Adjusted headers for Privoxy's cgi responses:
58  *    Don't set Last-Modified, Expires and Cache-Control
59  *    headers for redirects; always set "Connection: close".
60  *
61  *    Revision 1.76  2006/09/07 14:06:38  fabiankeil
62  *    Only predate the Last-Modified header for cgi responses
63  *    that are delivered with status code 404 or 503.
64  *
65  *    Revision 1.75  2006/09/07 11:56:39  fabiankeil
66  *    Mark cgi_send_user_manual as harmless,
67  *    to fix the access denied problem Hal spotted.
68  *    The manual has no secret content, therefore we
69  *    don't have to care about "secure" referrers.
70  *
71  *    Revision 1.74  2006/09/06 18:45:03  fabiankeil
72  *    Incorporate modified version of Roland Rosenfeld's patch to
73  *    optionally access the user-manual via Privoxy. Closes patch 679075.
74  *
75  *    Formatting changed to Privoxy style, added call to
76  *    cgi_error_no_template if the requested file doesn't
77  *    exist and modified check whether or not Privoxy itself
78  *    should serve the manual. Should work cross-platform now.
79  *
80  *    Revision 1.73  2006/08/03 02:46:41  david__schmidt
81  *    Incorporate Fabian Keil's patch work:\rhttp://www.fabiankeil.de/sourcecode/privoxy/
82  *
83  *    Revision 1.72  2006/07/18 14:48:45  david__schmidt
84  *    Reorganizing the repository: swapping out what was HEAD (the old 3.1 branch)
85  *    with what was really the latest development (the v_3_0_branch branch)
86  *
87  *    Revision 1.70.2.13  2004/02/17 13:30:23  oes
88  *    Moved cgi_error_disabled() from cgiedit.c to
89  *    cgi.c to re-enable build with --disable-editor.
90  *    Fixes Bug #892744. Thanks to Matthew Fischer
91  *    for spotting.
92  *
93  *    Revision 1.70.2.12  2003/12/17 16:33:16  oes
94  *     - Added new function cgi_redirect to handle creation of
95  *       HTTP redirect messages formerly repeated in the code.
96  *     - Send cgi_error_disabled instead of cgi_error_404 when
97  *       referrer check fails
98  *     - Dynamic content now gets Expires header field with date
99  *       in the past
100  *
101  *    Revision 1.70.2.11  2003/10/23 12:29:26  oes
102  *    Bugfix: Transparent PNG was not transparent. Thanks to
103  *    Dan Razzell of Starfish Systems for notice and new PNG.
104  *
105  *    Revision 1.70.2.10  2003/06/06 07:54:25  oes
106  *    Security fix: dspatch_known_cgi no longer considers an empty
107  *    referrer safe for critical CGIs, since malicious links could
108  *    reside on https:// locations which browsers don't advertize as
109  *    referrers. Closes bug #749916, thanks to Jeff Epler for the
110  *    hint. Goodbye One-Click[tm] toggling :-(
111  *
112  *    Revision 1.70.2.9  2003/05/08 15:11:31  oes
113  *    Nit
114  *
115  *    Revision 1.70.2.8  2003/04/29 13:33:51  oes
116  *    Killed a compiler warning on OSX
117  *
118  *    Revision 1.70.2.7  2003/04/03 13:50:58  oes
119  *    - Don't call cgi_error_disabled ifndef FEATURE_CGI_EDIT_ACTIONS
120  *      (fixes bug #710056)
121  *    - Show toggle info only if we have it
122  *
123  *    Revision 1.70.2.6  2003/03/12 01:26:25  david__schmidt
124  *    Move declaration of struct tm dummy outside of a control block so it is
125  *    accessible later on during snprintf in get_http_time.
126  *
127  *    Revision 1.70.2.5  2003/03/11 11:53:58  oes
128  *    Cosmetic: Renamed cryptic variable
129  *
130  *    Revision 1.70.2.4  2003/03/07 03:41:03  david__schmidt
131  *    Wrapping all *_r functions (the non-_r versions of them) with mutex semaphores for OSX.  Hopefully this will take care of all of those pesky crash reports.
132  *
133  *    Revision 1.70.2.3  2002/11/28 18:14:32  oes
134  *    Disable access to critical CGIs via untrusted referrers.
135  *    This prevents users from being tricked by malicious websites
136  *    into making unintentional configuration changes:
137  *
138  *     - Added flag to each cgi_dispatcher that allows or denies
139  *       external linking
140  *     - Introduced proviorical function that greps for the
141  *       referrer header before regular header parsing happens
142  *     - Added safety check to dispatch_known_cgi. CGI is called
143  *       if (cgi harmless || no referrer || we are referrer).
144  *       Else a) toggle calls are modified not to change status and
145  *       b) all other calls are denied.
146  *
147  *    Revision 1.70.2.2  2002/11/12 16:20:37  oes
148  *    Added missing #ifdef FEATURE_TOGGLE around g_bToggleIJB; fixes bug #636651
149  *
150  *    Revision 1.70.2.1  2002/08/05 11:17:46  oes
151  *    Fixed Bug #587820, i.e. added workaround for IE bug that includes fragment identifier in (cgi) query
152  *
153  *    Revision 1.70  2002/05/19 11:33:20  jongfoster
154  *    If a CGI error was not handled, and propogated back to
155  *    dispatch_known_cgi(), then it was assumed to be "out of memory".
156  *    This gave a very misleading error message.
157  *
158  *    Now other errors will cause a simple message giving the error
159  *    number and asking the user to report a bug.
160  *
161  *    Bug report:
162  *    http://sourceforge.net/tracker/index.php?func=detail
163  *    &aid=557905&group_id=11118&atid=111118
164  *
165  *    Revision 1.69  2002/05/14 21:28:40  oes
166  *     - Fixed add_help_link to link to the (now split) actions
167  *       part of the config chapter
168  *     - Renamed helplink export to actions-help-prefix
169  *
170  *    Revision 1.68  2002/05/12 21:36:29  jongfoster
171  *    Correcting function comments
172  *
173  *    Revision 1.67  2002/04/30 12:02:07  oes
174  *    Nit: updated a comment
175  *
176  *    Revision 1.66  2002/04/26 18:32:57  jongfoster
177  *    Fixing a memory leak on error
178  *
179  *    Revision 1.65  2002/04/26 12:53:51  oes
180  *     - New function add_help_link
181  *     - default_exports now exports links to the user manual
182  *       and a prefix for links into the config chapter
183  *
184  *    Revision 1.64  2002/04/24 02:17:21  oes
185  *     - Better descriptions for CGIs
186  *     - Hide edit-actions, more shortcuts
187  *     - Moved get_char_param, get_string_param and get_number_param here
188  *       from cgiedit.c
189  *
190  *    Revision 1.63  2002/04/15 19:06:43  jongfoster
191  *    Typos
192  *
193  *    Revision 1.62  2002/04/10 19:59:46  jongfoster
194  *    Fixes to #include in templates:
195  *    - Didn't close main file if loading an included template fails.
196  *    - I'm paranoid and want to disallow "#include /etc/passwd".
197  *
198  *    Revision 1.61  2002/04/10 13:37:48  oes
199  *    Made templates modular: template_load now recursive with max depth 1
200  *
201  *    Revision 1.60  2002/04/08 20:50:25  swa
202  *    fixed JB spelling
203  *
204  *    Revision 1.59  2002/04/05 15:51:51  oes
205  *     - added send-stylesheet CGI
206  *     - bugfix: error-pages now get correct request protocol
207  *     - fixed
208  *     - kludged CGI descriptions and menu not to break JS syntax
209  *
210  *    Revision 1.58  2002/03/29 03:33:13  david__schmidt
211  *    Fix Mac OSX compiler warnings
212  *
213  *    Revision 1.57  2002/03/26 22:29:54  swa
214  *    we have a new homepage!
215  *
216  *    Revision 1.56  2002/03/24 17:50:46  jongfoster
217  *    Fixing compile error if actions file editor disabled
218  *
219  *    Revision 1.55  2002/03/24 16:55:06  oes
220  *    Making GIF checkerboard transparent
221  *
222  *    Revision 1.54  2002/03/24 16:18:15  jongfoster
223  *    Removing old logo
224  *
225  *    Revision 1.53  2002/03/24 16:06:00  oes
226  *    Correct transparency for checkerboard PNG. Thanks, Magnus!
227  *
228  *    Revision 1.52  2002/03/24 15:23:33  jongfoster
229  *    Name changes
230  *
231  *    Revision 1.51  2002/03/24 13:25:43  swa
232  *    name change related issues
233  *
234  *    Revision 1.50  2002/03/16 23:54:06  jongfoster
235  *    Adding graceful termination feature, to help look for memory leaks.
236  *    If you enable this (which, by design, has to be done by hand
237  *    editing config.h) and then go to http://i.j.b/die, then the program
238  *    will exit cleanly after the *next* request.  It should free all the
239  *    memory that was used.
240  *
241  *    Revision 1.49  2002/03/13 00:27:04  jongfoster
242  *    Killing warnings
243  *
244  *    Revision 1.48  2002/03/08 17:47:07  jongfoster
245  *    Adding comments
246  *
247  *    Revision 1.47  2002/03/08 16:41:33  oes
248  *    Added GIF images again
249  *
250  *    Revision 1.46  2002/03/07 03:48:38  oes
251  *     - Changed built-in images from GIF to PNG
252  *       (with regard to Unisys patent issue)
253  *     - Added a 4x4 pattern PNG which is less intrusive
254  *       than the logo but also clearly marks the deleted banners
255  *
256  *    Revision 1.45  2002/03/06 22:54:35  jongfoster
257  *    Automated function-comment nitpicking.
258  *
259  *    Revision 1.44  2002/03/05 22:43:45  david__schmidt
260  *    - Better error reporting on OS/2
261  *    - Fix double-slash comment (oops)
262  *
263  *    Revision 1.43  2002/03/05 21:33:45  david__schmidt
264  *    - Re-enable OS/2 building after new parms were added
265  *    - Fix false out of memory report when resolving CGI templates when no IP
266  *      address is available of failed attempt (a la no such domain)
267  *
268  *    Revision 1.42  2002/01/21 00:33:20  jongfoster
269  *    Replacing strsav() with the safer string_append() or string_join().
270  *    Adding map_block_keep() to save a few bytes in the edit-actions-list HTML.
271  *    Adding missing html_encode() to error message generators.
272  *    Adding edit-actions-section-swap and many "shortcuts" to the list of CGIs.
273  *
274  *    Revision 1.41  2002/01/17 20:56:22  jongfoster
275  *    Replacing hard references to the URL of the config interface
276  *    with #defines from project.h
277  *
278  *    Revision 1.40  2002/01/09 14:26:46  oes
279  *    Added support for thread-safe gmtime_r call.
280  *
281  *    Revision 1.39  2001/11/16 00:48:13  jongfoster
282  *    Fixing a compiler warning
283  *
284  *    Revision 1.38  2001/11/13 00:31:21  jongfoster
285  *    - Adding new CGIs for use by non-JavaScript browsers:
286  *        edit-actions-url-form
287  *        edit-actions-add-url-form
288  *        edit-actions-remove-url-form
289  *    - Fixing make_menu()'s HTML generation - it now quotes the href parameter.
290  *    - Fixing || bug.
291  *
292  *    Revision 1.37  2001/11/01 14:28:47  david__schmidt
293  *    Show enablement/disablement status in almost all templates.
294  *    There is a little trickiness here: apparent recursive resolution of
295  *    @if-enabled-then@ caused the toggle template to show status out-of-phase with
296  *    the actual enablement status.  So a similar construct,
297  *    @if-enabled-display-then@, is used to resolve the status display on non-'toggle'
298  *    templates.
299  *
300  *    Revision 1.36  2001/10/26 17:33:27  oes
301  *    marginal bugfix
302  *
303  *    Revision 1.35  2001/10/23 21:48:19  jongfoster
304  *    Cleaning up error handling in CGI functions - they now send back
305  *    a HTML error page and should never cause a FATAL error.  (Fixes one
306  *    potential source of "denial of service" attacks).
307  *
308  *    CGI actions file editor that works and is actually useful.
309  *
310  *    Ability to toggle Junkbuster remotely using a CGI call.
311  *
312  *    You can turn off both the above features in the main configuration
313  *    file, e.g. if you are running a multi-user proxy.
314  *
315  *    Revision 1.34  2001/10/18 22:22:09  david__schmidt
316  *    Only show "Local support" on templates conditionally:
317  *      - if either 'admin-address' or 'proxy-info-url' are uncommented in config
318  *      - if not, no Local support section appears
319  *
320  *    Revision 1.33  2001/10/14 22:28:41  jongfoster
321  *    Fixing stupid typo.
322  *
323  *    Revision 1.32  2001/10/14 22:20:18  jongfoster
324  *    - Changes to CGI dispatching method to match CGI names exactly,
325  *      rather than doing a prefix match.
326  *    - No longer need to count the length of the CGI handler names by hand.
327  *    - Adding new handler for 404 error when disptching a CGI, if none of
328  *      the handlers match.
329  *    - Adding new handlers for CGI actionsfile editor.
330  *
331  *    Revision 1.31  2001/10/10 10:56:39  oes
332  *    Failiure to load template now fatal. Before, the user got a hard-to-understand assertion failure from cgi.c
333  *
334  *    Revision 1.30  2001/10/02 15:30:57  oes
335  *    Introduced show-request cgi
336  *
337  *    Revision 1.29  2001/09/20 15:47:44  steudten
338  *
339  *    Fix BUG: Modify int size to size_t size in fill_template()
340  *     - removes big trouble on machines where sizeof(int) != sizeof(size_t).
341  *
342  *    Revision 1.28  2001/09/19 18:00:37  oes
343  *     - Deletef time() FIXME (Can't fail under Linux either, if
344  *       the argument is guaranteed to be in out address space,
345  *       which it is.)
346  *     - Fixed comments
347  *     - Pointer notation cosmetics
348  *     - Fixed a minor bug in template_fill(): Failiure of
349  *       pcrs_execute() now secure.
350  *
351  *    Revision 1.27  2001/09/16 17:08:54  jongfoster
352  *    Moving simple CGI functions from cgi.c to new file cgisimple.c
353  *
354  *    Revision 1.26  2001/09/16 15:47:37  jongfoster
355  *    First version of CGI-based edit interface.  This is very much a
356  *    work-in-progress, and you can't actually use it to edit anything
357  *    yet.  You must #define FEATURE_CGI_EDIT_ACTIONS for these changes
358  *    to have any effect.
359  *
360  *    Revision 1.25  2001/09/16 15:02:35  jongfoster
361  *    Adding i.j.b/robots.txt.
362  *    Inlining add_stats() since it's only ever called from one place.
363  *
364  *    Revision 1.24  2001/09/16 11:38:01  jongfoster
365  *    Splitting fill_template() into 2 functions:
366  *    template_load() loads the file
367  *    template_fill() performs the PCRS regexps.
368  *    This is because the CGI edit interface has a "table row"
369  *    template which is used many times in the page - this
370  *    change means it's only loaded from disk once.
371  *
372  *    Revision 1.23  2001/09/16 11:16:05  jongfoster
373  *    Better error handling in dispatch_cgi() and parse_cgi_parameters()
374  *
375  *    Revision 1.22  2001/09/16 11:00:10  jongfoster
376  *    New function alloc_http_response, for symmetry with free_http_response
377  *
378  *    Revision 1.21  2001/09/13 23:53:03  jongfoster
379  *    Support for both static and dynamically generated CGI pages.
380  *    Correctly setting Last-Modified: and Expires: HTTP headers.
381  *
382  *    Revision 1.20  2001/09/13 23:40:36  jongfoster
383  *    (Cosmetic only) Indentation correction
384  *
385  *    Revision 1.19  2001/09/13 23:31:25  jongfoster
386  *    Moving image data to cgi.c rather than cgi.h.
387  *
388  *    Revision 1.18  2001/08/05 16:06:20  jongfoster
389  *    Modifiying "struct map" so that there are now separate header and
390  *    "map_entry" structures.  This means that functions which modify a
391  *    map no longer need to return a pointer to the modified map.
392  *    Also, it no longer reverses the order of the entries (which may be
393  *    important with some advanced template substitutions).
394  *
395  *    Revision 1.17  2001/08/05 15:57:38  oes
396  *    Adapted finish_http_response to new list_to_text
397  *
398  *    Revision 1.16  2001/08/01 21:33:18  jongfoster
399  *    Changes to fill_template() that reduce memory usage without having
400  *    an impact on performance.  I also renamed some variables so as not
401  *    to clash with the C++ keywords "new" and "template".
402  *
403  *    Revision 1.15  2001/08/01 21:19:22  jongfoster
404  *    Moving file version information to a separate CGI page.
405  *
406  *    Revision 1.14  2001/08/01 00:19:03  jongfoster
407  *    New function: map_conditional() for an if-then-else syntax.
408  *    Changing to use new version of show_defines()
409  *
410  *    Revision 1.13  2001/07/30 22:08:36  jongfoster
411  *    Tidying up #defines:
412  *    - All feature #defines are now of the form FEATURE_xxx
413  *    - Permanently turned off WIN_GUI_EDIT
414  *    - Permanently turned on WEBDAV and SPLIT_PROXY_ARGS
415  *
416  *    Revision 1.12  2001/07/29 18:47:05  jongfoster
417  *    Adding missing #include "loadcfg.h"
418  *
419  *    Revision 1.11  2001/07/18 17:24:37  oes
420  *    Changed to conform to new pcrs interface
421  *
422  *    Revision 1.10  2001/07/13 13:53:13  oes
423  *    Removed all #ifdef PCRS and related code
424  *
425  *    Revision 1.9  2001/06/29 21:45:41  oes
426  *    Indentation, CRLF->LF, Tab-> Space
427  *
428  *    Revision 1.8  2001/06/29 13:21:46  oes
429  *    - Cosmetics: renamed and reordered functions, variables,
430  *      texts, improved comments  etc
431  *
432  *    - Removed ij_untrusted_url() The relevant
433  *      info is now part of the "untrusted" page,
434  *      which is generated by filters.c:trust_url()
435  *
436  *    - Generators of content now call finish_http_response()
437  *      themselves, making jcc.c:chat() a little less
438  *      cluttered
439  *
440  *    - Removed obsolete "Pragma: no-cache" from our headers
441  *
442  *    - http_responses now know their head length
443  *
444  *    - fill_template now uses the new interface to pcrs, so that
445  *       - long jobs (like whole files) no longer have to be assembled
446  *         in a fixed size buffer
447  *       - the new T (trivial) option is used, and the replacement may
448  *         contain Perl syntax backrefs without confusing pcrs
449  *
450  *    - Introduced default_exports() which generates a set of exports
451  *      common to all CGIs and other content generators
452  *
453  *    - Introduced convenience function map_block_killer()
454  *
455  *    - Introduced convenience function make_menu()
456  *
457  *    - Introduced CGI-like function error_response() which generates
458  *      the "No such domain" and "Connect failed" messages using the
459  *      CGI platform
460  *
461  *    - cgi_show_url_info:
462  *      - adapted to new CGI features
463  *      - form and answers now generated from same template
464  *      - http:// prefix in URL now OK
465  *
466  *    - cgi_show_status:
467  *      - adapted to new CGI features
468  *      - no longer uses csp->init_proxy_args
469  *
470  *    - cgi_default:
471  *      - moved menu generation to make_menu()
472  *
473  *    - add_stats now writes single export map entries instead
474  *      of a fixed string
475  *
476  *    - Moved redirect_url() to filters.c
477  *
478  *    - Fixed mem leak in free_http_response(), map_block_killer(),
479  *
480  *    - Removed logentry from cancelled commit
481  *
482  *    Revision 1.7  2001/06/09 10:51:58  jongfoster
483  *    Changing "show URL info" handler to new style.
484  *    Changing BUFSIZ ==> BUFFER_SIZE
485  *
486  *    Revision 1.6  2001/06/07 23:05:19  jongfoster
487  *    Removing code related to old forward and ACL files.
488  *
489  *    Revision 1.5  2001/06/05 19:59:16  jongfoster
490  *    Fixing multiline character string (a GCC-only "feature"), and snprintf (it's _snprintf under VC++).
491  *
492  *    Revision 1.4  2001/06/04 10:41:52  swa
493  *    show version string of cgi.h and cgi.c
494  *
495  *    Revision 1.3  2001/06/03 19:12:16  oes
496  *    introduced new cgi handling
497  *
498  *    No revisions before 1.3
499  *
500  **********************************************************************/
501 \f
502
503 #include "config.h"
504
505 #include <stdio.h>
506 #include <sys/types.h>
507 #include <stdlib.h>
508 #include <ctype.h>
509 #include <string.h>
510 #include <limits.h>
511 #include <assert.h>
512
513 #ifdef _WIN32
514 #define snprintf _snprintf
515 #endif /* def _WIN32 */
516
517 #include "project.h"
518 #include "cgi.h"
519 #include "list.h"
520 #include "encode.h"
521 #include "ssplit.h"
522 #include "errlog.h"
523 #include "miscutil.h"
524 #include "cgisimple.h"
525 #ifdef FEATURE_CGI_EDIT_ACTIONS
526 #include "cgiedit.h"
527 #endif /* def FEATURE_CGI_EDIT_ACTIONS */
528 #include "loadcfg.h"
529 /* loadcfg.h is for global_toggle_state only */
530 #ifdef FEATURE_PTHREAD
531 #include "jcc.h"
532 /* jcc.h is for mutex semaphore globals only */
533 #endif /* def FEATURE_PTHREAD */
534 const char cgi_h_rcs[] = CGI_H_VERSION;
535
536 /*
537  * List of CGI functions: name, handler, description
538  * Note: Do NOT use single quotes in the description;
539  *       this will break the dynamic "blocked" template!
540  */
541 static const struct cgi_dispatcher cgi_dispatchers[] = {
542    { "",
543          cgi_default,
544          "Privoxy main page",
545          TRUE },
546 #ifdef FEATURE_GRACEFUL_TERMINATION
547    { "die", 
548          cgi_die,  
549          "<b>Shut down</b> - <em class=\"warning\">Do not deploy this build in a production environment, "
550         "this is a one click Denial Of Service attack!!!</em>",
551          FALSE }, 
552 #endif
553    { "show-status", 
554          cgi_show_status,  
555 #ifdef FEATURE_CGI_EDIT_ACTIONS
556         "View & change the current configuration",
557 #else
558         "View the current configuration",
559 #endif
560          TRUE }, 
561    { "show-version", 
562          cgi_show_version,  
563          "View the source code version numbers",
564           TRUE }, 
565    { "show-request", 
566          cgi_show_request,  
567          "View the request headers.",
568          TRUE }, 
569    { "show-url-info",
570          cgi_show_url_info, 
571          "Look up which actions apply to a URL and why",
572          TRUE },
573 #ifdef FEATURE_CGI_EDIT_ACTIONS
574    { "toggle",
575          cgi_toggle, 
576          "Toggle Privoxy on or off",
577          FALSE },
578    { "edit-actions", /* Edit the actions list */
579          cgi_edit_actions, 
580          NULL, FALSE },
581    { "eaa", /* Shortcut for edit-actions-add-url-form */
582          cgi_edit_actions_add_url_form, 
583          NULL, FALSE },
584    { "eau", /* Shortcut for edit-actions-url-form */
585          cgi_edit_actions_url_form, 
586          NULL, FALSE },
587    { "ear", /* Shortcut for edit-actions-remove-url-form */
588          cgi_edit_actions_remove_url_form, 
589          NULL, FALSE },
590    { "eal", /* Shortcut for edit-actions-list */
591          cgi_edit_actions_list, 
592          NULL, FALSE },
593    { "eafu", /* Shortcut for edit-actions-for-url */
594          cgi_edit_actions_for_url, 
595          NULL, FALSE },
596    { "eas", /* Shortcut for edit-actions-submit */
597          cgi_edit_actions_submit, 
598          NULL, FALSE },
599    { "easa", /* Shortcut for edit-actions-section-add */
600          cgi_edit_actions_section_add, 
601          NULL, FALSE  },
602    { "easr", /* Shortcut for edit-actions-section-remove */
603          cgi_edit_actions_section_remove, 
604          NULL, FALSE  },
605    { "eass", /* Shortcut for edit-actions-section-swap */
606          cgi_edit_actions_section_swap, 
607          NULL, FALSE  },
608    { "edit-actions-for-url",
609          cgi_edit_actions_for_url, 
610          NULL, FALSE  /* Edit the actions for (a) specified URL(s) */ },
611    { "edit-actions-list",
612          cgi_edit_actions_list, 
613          NULL, TRUE /* Edit the actions list */ },
614    { "edit-actions-submit",
615          cgi_edit_actions_submit, 
616          NULL, FALSE /* Change the actions for (a) specified URL(s) */ },
617    { "edit-actions-url",
618          cgi_edit_actions_url, 
619          NULL, FALSE /* Change a URL pattern in the actionsfile */ },
620    { "edit-actions-url-form",
621          cgi_edit_actions_url_form, 
622          NULL, FALSE /* Form to change a URL pattern in the actionsfile */ },
623    { "edit-actions-add-url",
624          cgi_edit_actions_add_url, 
625          NULL, FALSE /* Add a URL pattern to the actionsfile */ },
626    { "edit-actions-add-url-form",
627          cgi_edit_actions_add_url_form, 
628          NULL, FALSE /* Form to add a URL pattern to the actionsfile */ },
629    { "edit-actions-remove-url",
630          cgi_edit_actions_remove_url, 
631          NULL, FALSE /* Remove a URL pattern from the actionsfile */ },
632    { "edit-actions-remove-url-form",
633          cgi_edit_actions_remove_url_form, 
634          NULL, FALSE /* Form to remove a URL pattern from the actionsfile */ },
635    { "edit-actions-section-add",
636          cgi_edit_actions_section_add, 
637          NULL, FALSE /* Remove a section from the actionsfile */ },
638    { "edit-actions-section-remove",
639          cgi_edit_actions_section_remove, 
640          NULL, FALSE /* Remove a section from the actionsfile */ },
641    { "edit-actions-section-swap",
642          cgi_edit_actions_section_swap, 
643          NULL, FALSE /* Swap two sections in the actionsfile */ },
644 #endif /* def FEATURE_CGI_EDIT_ACTIONS */
645    { "robots.txt", 
646          cgi_robots_txt,  
647          NULL, TRUE /* Sends a robots.txt file to tell robots to go away. */ }, 
648    { "send-banner",
649          cgi_send_banner, 
650          NULL, TRUE /* Send a built-in image */ },
651    { "send-stylesheet",
652          cgi_send_stylesheet, 
653          NULL, TRUE /* Send templates/cgi-style.css */ },
654    { "t",
655          cgi_transparent_image, 
656          NULL, TRUE /* Send a transparent image (short name) */ },
657    { "user-manual",
658           cgi_send_user_manual,
659           NULL, TRUE /* Send user-manual */ },
660    { NULL, /* NULL Indicates end of list and default page */
661          cgi_error_404,
662          NULL, TRUE /* Unknown CGI page */ }
663 };
664
665
666 /*
667  * Built-in images for ad replacement
668  *
669  * Hint: You can encode your own images like this:
670  * cat your-image | perl -e 'while (read STDIN, $c, 1) { printf("\\%.3o", unpack("C", $c)); }'
671  */
672
673 #ifdef FEATURE_NO_GIFS
674
675 /*
676  * Checkerboard pattern, as a PNG.
677  */
678 const char image_pattern_data[] =
679    "\211\120\116\107\015\012\032\012\000\000\000\015\111\110\104"
680    "\122\000\000\000\004\000\000\000\004\010\002\000\000\000\046"
681    "\223\011\051\000\000\000\006\142\113\107\104\000\310\000\310"
682    "\000\310\052\045\225\037\000\000\000\032\111\104\101\124\170"
683    "\332\143\070\161\342\304\377\377\377\041\044\003\234\165\342"
684    "\304\011\006\234\062\000\125\200\052\251\125\174\360\223\000"
685    "\000\000\000\111\105\116\104\256\102\140\202";
686
687 /*
688  * 1x1 transparant PNG.
689  */
690 const char image_blank_data[] =
691  "\211\120\116\107\015\012\032\012\000\000\000\015\111\110\104\122"
692  "\000\000\000\001\000\000\000\001\001\003\000\000\000\045\333\126"
693  "\312\000\000\000\003\120\114\124\105\377\377\377\247\304\033\310"
694  "\000\000\000\001\164\122\116\123\000\100\346\330\146\000\000\000"
695  "\001\142\113\107\104\000\210\005\035\110\000\000\000\012\111\104"
696  "\101\124\170\001\143\140\000\000\000\002\000\001\163\165\001\030"
697  "\000\000\000\000\111\105\116\104\256\102\140\202";
698 #else
699
700 /*
701  * Checkerboard pattern, as a GIF.
702  */
703 const char image_pattern_data[] =
704    "\107\111\106\070\071\141\004\000\004\000\200\000\000\310\310"
705    "\310\377\377\377\041\376\016\111\040\167\141\163\040\141\040"
706    "\142\141\156\156\145\162\000\041\371\004\001\012\000\001\000"
707    "\054\000\000\000\000\004\000\004\000\000\002\005\104\174\147"
708    "\270\005\000\073";
709
710 /*
711  * 1x1 transparant GIF.
712  */
713 const char image_blank_data[] =
714    "GIF89a\001\000\001\000\200\000\000\377\377\377\000\000"
715    "\000!\371\004\001\000\000\000\000,\000\000\000\000\001"
716    "\000\001\000\000\002\002D\001\000;";
717 #endif
718
719 const size_t image_pattern_length = sizeof(image_pattern_data) - 1;
720 const size_t image_blank_length   = sizeof(image_blank_data) - 1;
721
722
723 static struct http_response cgi_error_memory_response[1];
724
725 static struct http_response *dispatch_known_cgi(struct client_state * csp,
726                                                 const char * path);
727 static struct map *parse_cgi_parameters(char *argstring);
728
729
730 /*********************************************************************
731  * 
732  * Function    :  dispatch_cgi
733  *
734  * Description :  Checks if a request URL has either the magical
735  *                hostname CGI_SITE_1_HOST (usually http://p.p/) or
736  *                matches CGI_SITE_2_HOST CGI_SITE_2_PATH (usually
737  *                http://config.privoxy.org/). If so, it passes
738  *                the (rest of the) path onto dispatch_known_cgi, which
739  *                calls the relevant CGI handler function.
740  *
741  * Parameters  :
742  *          1  :  csp = Current client state (buffers, headers, etc...)
743  *
744  * Returns     :  http_response if match, NULL if nonmatch or handler fail
745  *
746  *********************************************************************/
747 struct http_response *dispatch_cgi(struct client_state *csp)
748 {
749    const char *host = csp->http->host;
750    const char *path = csp->http->path;
751
752    /*
753     * Should we intercept ?
754     */
755
756    /* Note: "example.com" and "example.com." are equivalent hostnames. */
757
758    /* Either the host matches CGI_SITE_1_HOST ..*/
759    if (   ( (0 == strcmpic(host, CGI_SITE_1_HOST))
760          || (0 == strcmpic(host, CGI_SITE_1_HOST ".")))
761        && (path[0] == '/') )
762    {
763       /* ..then the path will all be for us.  Remove leading '/' */
764       path++;
765    }
766    /* Or it's the host part CGI_SITE_2_HOST, and the path CGI_SITE_2_PATH */
767    else if ( ( (0 == strcmpic(host, CGI_SITE_2_HOST ))
768             || (0 == strcmpic(host, CGI_SITE_2_HOST ".")) )
769           && (0 == strncmpic(path, CGI_SITE_2_PATH, strlen(CGI_SITE_2_PATH))) )
770    {
771       /* take everything following CGI_SITE_2_PATH */
772       path += strlen(CGI_SITE_2_PATH);
773       if (*path == '/')
774       {
775          /* skip the forward slash after CGI_SITE_2_PATH */
776          path++;
777       }
778       else if (*path != '\0')
779       {
780          /*
781           * weirdness: URL is /configXXX, where XXX is some string
782           * Do *NOT* intercept.
783           */
784          return NULL;
785       }
786    }
787    else
788    {
789       /* Not a CGI */
790       return NULL;
791    }
792
793    /* 
794     * This is a CGI call.
795     */
796
797    return dispatch_known_cgi(csp, path);
798 }
799
800
801 /*********************************************************************
802  *
803  * Function    :  grep_cgi_referrer
804  *
805  * Description :  Ugly provisorical fix that greps the value of the
806  *                referer HTTP header field out of a linked list of
807  *                strings like found at csp->headers. Will disappear
808  *                in Privoxy 3.1.
809  *
810  *                FIXME: csp->headers ought to be csp->http->headers
811  *                FIXME: Parsing all client header lines should
812  *                       happen right after the request is received!
813  *
814  * Parameters  :
815  *          1  :  csp = Current client state (buffers, headers, etc...)
816  *
817  * Returns     :  pointer to value (no copy!), or NULL if none found.
818  *
819  *********************************************************************/
820 char *grep_cgi_referrer(struct client_state *csp)
821 {
822    struct list_entry *p;
823
824    for (p = csp->headers->first; p != NULL; p = p->next)
825    {
826       if (p->str == NULL) continue;
827       if (strncmpic(p->str, "Referer: ", 9) == 0)
828       {
829          return ((p->str) + 9);
830       }
831    }
832    return NULL;
833
834 }
835
836
837 /*********************************************************************
838  * 
839  * Function    :  dispatch_known_cgi
840  *
841  * Description :  Processes a CGI once dispatch_cgi has determined that
842  *                it matches one of the magic prefixes. Parses the path
843  *                as a cgi name plus query string, prepares a map that
844  *                maps CGI parameter names to their values, initializes
845  *                the http_response struct, and calls the relevant CGI
846  *                handler function.
847  *
848  * Parameters  :
849  *          1  :  csp = Current client state (buffers, headers, etc...)
850  *          2  :  path = Path of CGI, with the CGI prefix removed.
851  *                       Should not have a leading "/".
852  *
853  * Returns     :  http_response, or NULL on handler failure or out of
854  *                memory.
855  *
856  *********************************************************************/
857 static struct http_response *dispatch_known_cgi(struct client_state * csp,
858                                                 const char * path)
859 {
860    const struct cgi_dispatcher *d;
861    struct map *param_list;
862    struct http_response *rsp;
863    char *query_args_start;
864    char *path_copy;
865    char *referrer;
866    jb_err err;
867
868    if (NULL == (path_copy = strdup(path)))
869    {
870       return cgi_error_memory();
871    }
872    query_args_start = path_copy;
873    while (*query_args_start && *query_args_start != '?' && *query_args_start != '/')
874    {
875       query_args_start++;
876    }
877    if (*query_args_start == '/') 
878    {
879       *query_args_start++ = '\0';
880       if ((param_list = new_map()))
881       {
882          map(param_list, "file", 1, url_decode(query_args_start), 0);
883       }
884    }
885    else
886    {
887       if (*query_args_start == '?')
888       {
889          *query_args_start++ = '\0';
890       }
891       if (NULL == (param_list = parse_cgi_parameters(query_args_start)))
892       {
893          free(path_copy);
894          return cgi_error_memory();
895       }
896    }
897
898    /*
899     * At this point:
900     * path_copy        = CGI call name
901     * param_list       = CGI params, as map
902     */
903
904    /* Get mem for response or fail*/
905    if (NULL == (rsp = alloc_http_response()))
906    {
907       free(path_copy);
908       free_map(param_list);
909       return cgi_error_memory();
910    }
911
912    log_error(LOG_LEVEL_GPC, "%s%s cgi call", csp->http->hostport, csp->http->path);
913    log_error(LOG_LEVEL_CLF, "%s - - [%T] \"%s\" 200 3", 
914                             csp->ip_addr_str, csp->http->cmd); 
915
916    /* 
917     * Find and start the right CGI function
918     */
919    d = cgi_dispatchers;
920    for (;;)
921    {
922       if ((d->name == NULL) || (strcmp(path_copy, d->name) == 0))
923       {
924          /*
925           * If the called CGI is either harmless, or referred
926           * from a trusted source, start it.
927           */
928          if (d->harmless
929              || ((NULL != (referrer = grep_cgi_referrer(csp)))
930                  && (0 == strncmp(referrer, CGI_PREFIX, sizeof(CGI_PREFIX)-1)))
931              )
932          {
933             err = (d->handler)(csp, rsp, param_list);
934          }
935          else
936          {
937             /*
938              * Else, modify toggle calls so that they only display
939              * the status, and deny all other calls.
940              */
941             if (0 == strcmp(path_copy, "toggle"))
942             {
943                unmap(param_list, "set");
944                err = (d->handler)(csp, rsp, param_list);
945             }
946             else
947             {
948                err = cgi_error_disabled(csp, rsp);
949             }
950          }
951
952          free(path_copy);
953          free_map(param_list);
954
955          if (err == JB_ERR_CGI_PARAMS)
956          {
957             err = cgi_error_bad_param(csp, rsp);
958          }
959          if (err && (err != JB_ERR_MEMORY))
960          {
961             /* Unexpected error! Shouldn't get here */
962             log_error(LOG_LEVEL_ERROR, "Unexpected CGI error %d in top-level handler.  Please file a bug report!", err);
963             err = cgi_error_unknown(csp, rsp, err);
964          }
965          if (!err)
966          {
967             /* It worked */
968             return finish_http_response(rsp);
969          }
970          else
971          {
972             /* Error in handler, probably out-of-memory */
973             free_http_response(rsp);
974             return cgi_error_memory();
975          }
976       }
977       d++;
978    }
979 }
980    
981         
982 /*********************************************************************
983  *
984  * Function    :  parse_cgi_parameters
985  *
986  * Description :  Parse a URL-encoded argument string into name/value
987  *                pairs and store them in a struct map list.
988  *
989  * Parameters  :
990  *          1  :  argstring = string to be parsed.  Will be trashed.
991  *
992  * Returns     :  pointer to param list, or NULL if out of memory.
993  *
994  *********************************************************************/
995 static struct map *parse_cgi_parameters(char *argstring)
996 {
997    char *p;
998    char *vector[BUFFER_SIZE];
999    int pairs, i;
1000    struct map *cgi_params;
1001
1002    if (NULL == (cgi_params = new_map()))
1003    {
1004       return NULL;
1005    }
1006
1007    /* 
1008     * IE 5 does, of course, violate RFC 2316 Sect 4.1 and sends
1009     * the fragment identifier along with the request, so we must
1010     * cut it off here, so it won't pollute the CGI params:
1011     */
1012    if (NULL != (p = strchr(argstring, '#')))
1013    {
1014       *p = '\0';
1015    }
1016
1017    pairs = ssplit(argstring, "&", vector, SZ(vector), 1, 1);
1018
1019    for (i = 0; i < pairs; i++)
1020    {
1021       if ((NULL != (p = strchr(vector[i], '='))) && (*(p+1) != '\0'))
1022       {
1023          *p = '\0';
1024          if (map(cgi_params, url_decode(vector[i]), 0, url_decode(++p), 0))
1025          {
1026             free_map(cgi_params);
1027             return NULL;
1028          }
1029       }
1030    }
1031
1032    return cgi_params;
1033
1034 }
1035
1036
1037 /*********************************************************************
1038  *
1039  * Function    :  get_char_param
1040  *
1041  * Description :  Get a single-character parameter passed to a CGI
1042  *                function.
1043  *
1044  * Parameters  :
1045  *          1  :  parameters = map of cgi parameters
1046  *          2  :  param_name = The name of the parameter to read
1047  *
1048  * Returns     :  Uppercase character on success, '\0' on error.
1049  *
1050  *********************************************************************/
1051 char get_char_param(const struct map *parameters,
1052                     const char *param_name)
1053 {
1054    char ch;
1055
1056    assert(parameters);
1057    assert(param_name);
1058
1059    ch = *(lookup(parameters, param_name));
1060    if ((ch >= 'a') && (ch <= 'z'))
1061    {
1062       ch = ch - 'a' + 'A';
1063    }
1064
1065    return ch;
1066 }
1067
1068
1069 /*********************************************************************
1070  *
1071  * Function    :  get_string_param
1072  *
1073  * Description :  Get a string paramater, to be used as an
1074  *                ACTION_STRING or ACTION_MULTI paramater.
1075  *                Validates the input to prevent stupid/malicious
1076  *                users from corrupting their action file.
1077  *
1078  * Parameters  :
1079  *          1  :  parameters = map of cgi parameters
1080  *          2  :  param_name = The name of the parameter to read
1081  *          3  :  pparam = destination for paramater.  Allocated as
1082  *                part of the map "parameters", so don't free it.
1083  *                Set to NULL if not specified.
1084  *
1085  * Returns     :  JB_ERR_OK         on success, or if the paramater
1086  *                                  was not specified.
1087  *                JB_ERR_MEMORY     on out-of-memory.
1088  *                JB_ERR_CGI_PARAMS if the paramater is not valid.
1089  *
1090  *********************************************************************/
1091 jb_err get_string_param(const struct map *parameters,
1092                         const char *param_name,
1093                         const char **pparam)
1094 {
1095    const char *param;
1096    const char *s;
1097    char ch;
1098
1099    assert(parameters);
1100    assert(param_name);
1101    assert(pparam);
1102
1103    *pparam = NULL;
1104
1105    param = lookup(parameters, param_name);
1106    if (!*param)
1107    {
1108       return JB_ERR_OK;
1109    }
1110
1111    if (strlen(param) >= CGI_PARAM_LEN_MAX)
1112    {
1113       /*
1114        * Too long.
1115        *
1116        * Note that the length limit is arbitrary, it just seems
1117        * sensible to limit it to *something*.  There's no
1118        * technical reason for any limit at all.
1119        */
1120       return JB_ERR_CGI_PARAMS;
1121    }
1122
1123    /* Check every character to see if it's legal */
1124    s = param;
1125    while ((ch = *s++) != '\0')
1126    {
1127       if ( ((unsigned char)ch < (unsigned char)' ')
1128         || (ch == '}') )
1129       {
1130          /* Probable hack attempt, or user accidentally used '}'. */
1131          return JB_ERR_CGI_PARAMS;
1132       }
1133    }
1134
1135    /* Success */
1136    *pparam = param;
1137
1138    return JB_ERR_OK;
1139 }
1140
1141
1142 /*********************************************************************
1143  *
1144  * Function    :  get_number_param
1145  *
1146  * Description :  Get a non-negative integer from the parameters
1147  *                passed to a CGI function.
1148  *
1149  * Parameters  :
1150  *          1  :  csp = Current client state (buffers, headers, etc...)
1151  *          2  :  parameters = map of cgi parameters
1152  *          3  :  name = Name of CGI parameter to read
1153  *          4  :  pvalue = destination for value.
1154  *                         Set to -1 on error.
1155  *
1156  * Returns     :  JB_ERR_OK         on success
1157  *                JB_ERR_MEMORY     on out-of-memory
1158  *                JB_ERR_CGI_PARAMS if the parameter was not specified
1159  *                                  or is not valid.
1160  *
1161  *********************************************************************/
1162 jb_err get_number_param(struct client_state *csp,
1163                         const struct map *parameters,
1164                         char *name,
1165                         unsigned *pvalue)
1166 {
1167    const char *param;
1168    char ch;
1169    unsigned value;
1170
1171    assert(csp);
1172    assert(parameters);
1173    assert(name);
1174    assert(pvalue);
1175
1176    *pvalue = 0; 
1177
1178    param = lookup(parameters, name);
1179    if (!*param)
1180    {
1181       return JB_ERR_CGI_PARAMS;
1182    }
1183
1184    /* We don't use atoi because I want to check this carefully... */
1185
1186    value = 0;
1187    while ((ch = *param++) != '\0')
1188    {
1189       if ((ch < '0') || (ch > '9'))
1190       {
1191          return JB_ERR_CGI_PARAMS;
1192       }
1193
1194       ch -= '0';
1195
1196       /* Note:
1197        *
1198        * <limits.h> defines UINT_MAX
1199        *
1200        * (UINT_MAX - ch) / 10 is the largest number that
1201        *     can be safely multiplied by 10 then have ch added.
1202        */
1203       if (value > ((UINT_MAX - (unsigned)ch) / 10U))
1204       {
1205          return JB_ERR_CGI_PARAMS;
1206       }
1207
1208       value = value * 10 + ch;
1209    }
1210
1211    /* Success */
1212    *pvalue = value;
1213
1214    return JB_ERR_OK;
1215
1216 }
1217
1218
1219 /*********************************************************************
1220  *
1221  * Function    :  error_response
1222  *
1223  * Description :  returns an http_response that explains the reason
1224  *                why a request failed.
1225  *
1226  * Parameters  :
1227  *          1  :  csp = Current client state (buffers, headers, etc...)
1228  *          2  :  templatename = Which template should be used for the answer
1229  *          3  :  sys_err = system error number
1230  *
1231  * Returns     :  A http_response.  If we run out of memory, this
1232  *                will be cgi_error_memory().
1233  *
1234  *********************************************************************/
1235 struct http_response *error_response(struct client_state *csp,
1236                                      const char *templatename,
1237                                      int sys_err)
1238 {
1239    jb_err err;
1240    struct http_response *rsp;
1241    struct map *exports = default_exports(csp, NULL);
1242    char *path = NULL;
1243
1244    if (exports == NULL)
1245    {
1246       return cgi_error_memory();
1247    }
1248
1249    if (NULL == (rsp = alloc_http_response()))
1250    {
1251       free_map(exports);
1252       return cgi_error_memory();
1253    }
1254
1255    if (csp->flags & CSP_FLAG_FORCED)
1256    {
1257       path = strdup(FORCE_PREFIX);
1258    }
1259    else
1260    {
1261       path = strdup("");
1262    }
1263    err = string_append(&path, csp->http->path);
1264
1265    if (!err) err = map(exports, "host", 1, html_encode(csp->http->host), 0);
1266    if (!err) err = map(exports, "hostport", 1, html_encode(csp->http->hostport), 0);
1267    if (!err) err = map(exports, "path", 1, html_encode_and_free_original(path), 0);
1268    if (!err) err = map(exports, "error", 1, html_encode_and_free_original(safe_strerror(sys_err)), 0);
1269    if (!err) err = map(exports, "protocol", 1, csp->http->ssl ? "https://" : "http://", 1); 
1270    if (!err)
1271    {
1272      err = map(exports, "host-ip", 1, html_encode(csp->http->host_ip_addr_str), 0);
1273      if (err)
1274      {
1275        /* Some failures, like "404 no such domain", don't have an IP address. */
1276        err = map(exports, "host-ip", 1, html_encode(csp->http->host), 0);
1277      }
1278    }
1279
1280
1281    if (err)
1282    {
1283       free_map(exports);
1284       free_http_response(rsp);
1285       return cgi_error_memory();
1286    }
1287
1288    if (!strcmp(templatename, "no-such-domain"))
1289    {
1290       rsp->status = strdup("404 No such domain");
1291       if (rsp->status == NULL)
1292       {
1293          free_map(exports);
1294          free_http_response(rsp);
1295          return cgi_error_memory();
1296       }
1297    }
1298    else if (!strcmp(templatename, "connect-failed"))
1299    {
1300       rsp->status = strdup("503 Connect failed");
1301       if (rsp->status == NULL)
1302       {
1303          free_map(exports);
1304          free_http_response(rsp);
1305          return cgi_error_memory();
1306       }
1307    }
1308
1309    err = template_fill_for_cgi(csp, templatename, exports, rsp);
1310    if (err)
1311    {
1312       free_http_response(rsp);
1313       return cgi_error_memory();
1314    }
1315
1316    return finish_http_response(rsp);
1317 }
1318
1319
1320 /*********************************************************************
1321  *
1322  * Function    :  cgi_error_disabled
1323  *
1324  * Description :  CGI function that is called to generate an error
1325  *                response if the actions editor or toggle CGI are
1326  *                accessed despite having being disabled at compile-
1327  *                or run-time.
1328  *
1329  * Parameters  :
1330  *          1  :  csp = Current client state (buffers, headers, etc...)
1331  *          2  :  rsp = http_response data structure for output
1332  *
1333  * CGI Parameters : none
1334  *
1335  * Returns     :  JB_ERR_OK on success
1336  *                JB_ERR_MEMORY on out-of-memory error.
1337  *
1338  *********************************************************************/
1339 jb_err cgi_error_disabled(struct client_state *csp,
1340                           struct http_response *rsp)
1341 {
1342    struct map *exports;
1343
1344    assert(csp);
1345    assert(rsp);
1346
1347    if (NULL == (exports = default_exports(csp, NULL)))
1348    {
1349       return JB_ERR_MEMORY;
1350    }
1351
1352    return template_fill_for_cgi(csp, "cgi-error-disabled", exports, rsp);
1353 }
1354
1355
1356 /*********************************************************************
1357  *
1358  * Function    :  cgi_init_error_messages
1359  *
1360  * Description :  Call at the start of the program to initialize
1361  *                the error message used by cgi_error_memory().
1362  *
1363  * Parameters  :  N/A
1364  *
1365  * Returns     :  N/A
1366  *
1367  *********************************************************************/
1368 void cgi_init_error_messages(void)
1369 {
1370    memset(cgi_error_memory_response, '\0', sizeof(*cgi_error_memory_response));
1371    cgi_error_memory_response->head =
1372       "HTTP/1.0 500 Internal Privoxy Error\r\n"
1373       "Content-Type: text/html\r\n"
1374       "\r\n";
1375    cgi_error_memory_response->body =
1376       "<html>\r\n"
1377       "<head><title>500 Internal Privoxy Error</title></head>\r\n"
1378       "<body>\r\n"
1379       "<h1>500 Internal Privoxy Error</h1>\r\n"
1380       "<p>Privoxy <b>ran out of memory</b> while processing your request.</p>\r\n"
1381       "<p>Please contact your proxy administrator, or try again later</p>\r\n"
1382       "</body>\r\n"
1383       "</html>\r\n";
1384
1385    cgi_error_memory_response->head_length =
1386       strlen(cgi_error_memory_response->head);
1387    cgi_error_memory_response->content_length =
1388       strlen(cgi_error_memory_response->body);
1389 }
1390
1391
1392 /*********************************************************************
1393  *
1394  * Function    :  cgi_error_memory
1395  *
1396  * Description :  Called if a CGI function runs out of memory.
1397  *                Returns a statically-allocated error response.
1398  *
1399  * Parameters  :  N/A
1400  *
1401  * Returns     :  http_response data structure for output.  This is
1402  *                statically allocated, for obvious reasons.
1403  *
1404  *********************************************************************/
1405 struct http_response *cgi_error_memory(void)
1406 {
1407    /* assert that it's been initialized. */
1408    assert(cgi_error_memory_response->head);
1409
1410    return cgi_error_memory_response;
1411 }
1412
1413
1414 /*********************************************************************
1415  *
1416  * Function    :  cgi_error_no_template
1417  *
1418  * Description :  Almost-CGI function that is called if a template
1419  *                cannot be loaded.  Note this is not a true CGI,
1420  *                it takes a template name rather than a map of 
1421  *                parameters.
1422  *
1423  * Parameters  :
1424  *          1  :  csp = Current client state (buffers, headers, etc...)
1425  *          2  :  rsp = http_response data structure for output
1426  *          3  :  template_name = Name of template that could not
1427  *                                be loaded.
1428  *
1429  * Returns     :  JB_ERR_OK on success
1430  *                JB_ERR_MEMORY on out-of-memory error.  
1431  *
1432  *********************************************************************/
1433 jb_err cgi_error_no_template(struct client_state *csp,
1434                              struct http_response *rsp,
1435                              const char *template_name)
1436 {
1437    static const char status[] =
1438       "500 Internal Privoxy Error";
1439    static const char body_prefix[] =
1440       "<html>\r\n"
1441       "<head><title>500 Internal Privoxy Error</title></head>\r\n"
1442       "<body>\r\n"
1443       "<h1>500 Internal Privoxy Error</h1>\r\n"
1444       "<p>Privoxy encountered an error while processing your request:</p>\r\n"
1445       "<p><b>Could not load template file <code>";
1446    static const char body_suffix[] =
1447       "</code> or one of it's included components.</b></p>\r\n"
1448       "<p>Please contact your proxy administrator.</p>\r\n"
1449       "<p>If you are the proxy administrator, please put the required file(s)"
1450       "in the <code><i>(confdir)</i>/templates</code> directory.  The "
1451       "location of the <code><i>(confdir)</i></code> directory "
1452       "is specified in the main Privoxy <code>config</code> "
1453       "file.  (It's typically the Privoxy install directory"
1454 #ifndef _WIN32
1455       ", or <code>/etc/privoxy/</code>"
1456 #endif /* ndef _WIN32 */
1457       ").</p>\r\n"
1458       "</body>\r\n"
1459       "</html>\r\n";
1460
1461    assert(csp);
1462    assert(rsp);
1463    assert(template_name);
1464
1465    /* Reset rsp, if needed */
1466    freez(rsp->status);
1467    freez(rsp->head);
1468    freez(rsp->body);
1469    rsp->content_length = 0;
1470    rsp->head_length = 0;
1471    rsp->is_static = 0;
1472
1473    rsp->body = malloc(strlen(body_prefix) + strlen(template_name) + strlen(body_suffix) + 1);
1474    if (rsp->body == NULL)
1475    {
1476       return JB_ERR_MEMORY;
1477    }
1478    strcpy(rsp->body, body_prefix);
1479    strcat(rsp->body, template_name);
1480    strcat(rsp->body, body_suffix);
1481
1482    rsp->status = strdup(status);
1483    if (rsp->body == NULL)
1484    {
1485       return JB_ERR_MEMORY;
1486    }
1487
1488    return JB_ERR_OK;
1489 }
1490
1491
1492 /*********************************************************************
1493  *
1494  * Function    :  cgi_error_unknown
1495  *
1496  * Description :  Almost-CGI function that is called if an unexpected
1497  *                error occurs in the top-level CGI dispatcher.
1498  *                In this context, "unexpected" means "anything other
1499  *                than JB_ERR_MEMORY or JB_ERR_CGI_PARAMS" - CGIs are
1500  *                expected to handle all other errors internally,
1501  *                since they can give more relavent error messages
1502  *                that way.
1503  *
1504  *                Note this is not a true CGI, it takes an error
1505  *                code rather than a map of parameters.
1506  *
1507  * Parameters  :
1508  *          1  :  csp = Current client state (buffers, headers, etc...)
1509  *          2  :  rsp = http_response data structure for output
1510  *          3  :  error_to_report = Error code to report.
1511  *
1512  * Returns     :  JB_ERR_OK on success
1513  *                JB_ERR_MEMORY on out-of-memory error.  
1514  *
1515  *********************************************************************/
1516 jb_err cgi_error_unknown(struct client_state *csp,
1517                          struct http_response *rsp,
1518                          jb_err error_to_report)
1519 {
1520    static const char status[] =
1521       "500 Internal Privoxy Error";
1522    static const char body_prefix[] =
1523       "<html>\r\n"
1524       "<head><title>500 Internal Privoxy Error</title></head>\r\n"
1525       "<body>\r\n"
1526       "<h1>500 Internal Privoxy Error</h1>\r\n"
1527       "<p>Privoxy encountered an error while processing your request:</p>\r\n"
1528       "<p><b>Unexpected internal error: ";
1529    static const char body_suffix[] =
1530       "</b></p>\r\n"
1531       "<p>Please "
1532       "<a href=\"http://sourceforge.net/tracker/?group_id=11118&atid=111118\">"
1533       "file a bug report</a>.</p>\r\n"
1534       "</body>\r\n"
1535       "</html>\r\n";
1536    char errnumbuf[30];
1537    assert(csp);
1538    assert(rsp);
1539
1540    /* Reset rsp, if needed */
1541    freez(rsp->status);
1542    freez(rsp->head);
1543    freez(rsp->body);
1544    rsp->content_length = 0;
1545    rsp->head_length = 0;
1546    rsp->is_static = 0;
1547
1548    sprintf(errnumbuf, "%d", error_to_report);
1549
1550    rsp->body = malloc(strlen(body_prefix) + strlen(errnumbuf) + strlen(body_suffix) + 1);
1551    if (rsp->body == NULL)
1552    {
1553       return JB_ERR_MEMORY;
1554    }
1555    strcpy(rsp->body, body_prefix);
1556    strcat(rsp->body, errnumbuf);
1557    strcat(rsp->body, body_suffix);
1558
1559    rsp->status = strdup(status);
1560    if (rsp->body == NULL)
1561    {
1562       return JB_ERR_MEMORY;
1563    }
1564
1565    return JB_ERR_OK;
1566 }
1567
1568
1569 /*********************************************************************
1570  *
1571  * Function    :  cgi_error_bad_param
1572  *
1573  * Description :  CGI function that is called if the parameters
1574  *                (query string) for a CGI were wrong.
1575  *               
1576  * Parameters  :
1577  *          1  :  csp = Current client state (buffers, headers, etc...)
1578  *          2  :  rsp = http_response data structure for output
1579  *
1580  * CGI Parameters : none
1581  *
1582  * Returns     :  JB_ERR_OK on success
1583  *                JB_ERR_MEMORY on out-of-memory error.  
1584  *
1585  *********************************************************************/
1586 jb_err cgi_error_bad_param(struct client_state *csp,
1587                            struct http_response *rsp)
1588 {
1589    struct map *exports;
1590
1591    assert(csp);
1592    assert(rsp);
1593
1594    if (NULL == (exports = default_exports(csp, NULL)))
1595    {
1596       return JB_ERR_MEMORY;
1597    }
1598
1599    return template_fill_for_cgi(csp, "cgi-error-bad-param", exports, rsp);
1600 }
1601
1602
1603 /*********************************************************************
1604  *
1605  * Function    :  cgi_redirect 
1606  *
1607  * Description :  CGI support function to generate a HTTP redirect
1608  *                message
1609  *
1610  * Parameters  :
1611  *          1  :  rsp = http_response data structure for output
1612  *          2  :  target = string with the target URL
1613  *
1614  * CGI Parameters : None
1615  *
1616  * Returns     :  JB_ERR_OK on success
1617  *                JB_ERR_MEMORY on out-of-memory error.  
1618  *
1619  *********************************************************************/
1620 jb_err cgi_redirect (struct http_response * rsp, const char *target)
1621 {
1622    jb_err err;
1623
1624    assert(rsp);
1625    assert(target);
1626
1627    err = enlist_unique_header(rsp->headers, "Location", target);
1628
1629    rsp->status = strdup("302 Local Redirect from Privoxy");
1630    if (rsp->status == NULL)
1631    {
1632       return JB_ERR_MEMORY;
1633    }
1634
1635    return err;
1636 }
1637
1638
1639 /*********************************************************************
1640  *
1641  * Function    :  add_help_link
1642  *
1643  * Description :  Produce a copy of the string given as item,
1644  *                embedded in an HTML link to its corresponding
1645  *                section (item name in uppercase) in the actions
1646  *                chapter of the user manual, (whose URL is given in
1647  *                the config and defaults to our web site).
1648  *
1649  *                FIXME: I currently only work for actions, and would
1650  *                       like to be generalized for other topics.
1651  *
1652  * Parameters  :  
1653  *          1  :  item = item (will NOT be free()d.) 
1654  *                       It is assumed to be HTML-safe.
1655  *          2  :  config = The current configuration.
1656  *
1657  * Returns     :  String with item embedded in link, or NULL on
1658  *                out-of-memory
1659  *
1660  *********************************************************************/
1661 char *add_help_link(const char *item,
1662                     struct configuration_spec *config)
1663 {
1664    char *result;
1665
1666    if (!item) return NULL;
1667
1668    result = strdup("<a href=\"");
1669    if (!strncmpic(config->usermanual, "file://", 7) ||
1670        !strncmpic(config->usermanual, "http", 4))
1671    {
1672       string_append(&result, config->usermanual);
1673    }
1674    else
1675    {
1676       string_append(&result, "http://");
1677       string_append(&result, CGI_SITE_2_HOST);
1678       string_append(&result, "/user-manual/");
1679    }
1680    string_append(&result, ACTIONS_HELP_PREFIX);
1681    string_join  (&result, string_toupper(item));
1682    string_append(&result, "\">");
1683    string_append(&result, item);
1684    string_append(&result, "</a> ");
1685
1686    return result;
1687 }
1688
1689
1690 /*********************************************************************
1691  *
1692  * Function    :  get_http_time
1693  *
1694  * Description :  Get the time in a format suitable for use in a
1695  *                HTTP header - e.g.:
1696  *                "Sun, 06 Nov 1994 08:49:37 GMT"
1697  *
1698  * Parameters  :  
1699  *          1  :  time_offset = Time returned will be current time
1700  *                              plus this number of seconds.
1701  *          2  :  buf = Destination for result.  Must be long enough
1702  *                      to hold 29 characters plus a trailing zero.
1703  *
1704  * Returns     :  N/A
1705  *
1706  *********************************************************************/
1707 void get_http_time(int time_offset, char *buf)
1708 {
1709    static const char day_names[7][4] =
1710       { "Sun", "Mon", "Tue", "Wed", "Thu", "Fri", "Sat" };
1711    static const char month_names[12][4] =
1712       { "Jan", "Feb", "Mar", "Apr", "May", "Jun",
1713         "Jul", "Aug", "Sep", "Oct", "Nov", "Dec" };
1714
1715    struct tm *t;
1716    time_t current_time;
1717 #if defined(HAVE_GMTIME_R)
1718    /*
1719     * Declare dummy up here (instead of inside get/set gmt block) so it
1720     * doesn't go out of scope before it's potentially used in snprintf later.
1721     * Wrapping declaration inside HAVE_GMTIME_R keeps the compiler quiet when
1722     * !defined HAVE_GMTIME_R.
1723     */
1724    struct tm dummy; 
1725 #endif
1726
1727    assert(buf);
1728
1729    time(&current_time); /* get current time */
1730
1731    current_time += time_offset;
1732
1733    /* get and save the gmt */
1734    {
1735 #if HAVE_GMTIME_R
1736       t = gmtime_r(&current_time, &dummy);
1737 #elif FEATURE_PTHREAD
1738       pthread_mutex_lock(&gmtime_mutex);
1739       t = gmtime(&current_time);
1740       pthread_mutex_unlock(&gmtime_mutex);
1741 #else
1742       t = gmtime(&current_time);
1743 #endif
1744    }
1745
1746    /* Format: "Sun, 06 Nov 1994 08:49:37 GMT" */
1747    snprintf(buf, 30,
1748       "%s, %02d %s %4d %02d:%02d:%02d GMT",
1749       day_names[t->tm_wday],
1750       t->tm_mday,
1751       month_names[t->tm_mon],
1752       t->tm_year + 1900,
1753       t->tm_hour,
1754       t->tm_min,
1755       t->tm_sec
1756       );
1757
1758 }
1759
1760
1761 /*********************************************************************
1762  *
1763  * Function    :  finish_http_response
1764  *
1765  * Description :  Fill in the missing headers in an http response,
1766  *                and flatten the headers to an http head.
1767  *
1768  * Parameters  :
1769  *          1  :  rsp = pointer to http_response to be processed
1770  *
1771  * Returns     :  A http_response, usually the rsp parameter.
1772  *                On error, free()s rsp and returns cgi_error_memory()
1773  *
1774  *********************************************************************/
1775 struct http_response *finish_http_response(struct http_response *rsp)
1776 {
1777    char buf[BUFFER_SIZE];
1778    jb_err err;
1779
1780    /* Special case - do NOT change this statically allocated response,
1781     * which is ready for output anyway.
1782     */
1783    if (rsp == cgi_error_memory_response)
1784    {
1785       return rsp;
1786    }
1787
1788    /* 
1789     * Fill in the HTTP Status
1790     */
1791    sprintf(buf, "HTTP/1.0 %s", rsp->status ? rsp->status : "200 OK");
1792    err = enlist_first(rsp->headers, buf);
1793
1794    /* 
1795     * Set the Content-Length
1796     */
1797    if (rsp->content_length == 0)
1798    {
1799       rsp->content_length = rsp->body ? strlen(rsp->body) : 0;
1800    }
1801    if (!err)
1802    {
1803       sprintf(buf, "Content-Length: %d", (int)rsp->content_length);
1804       err = enlist(rsp->headers, buf);
1805    }
1806
1807    if (strncmpic(rsp->status, "302", 3))
1808    {
1809      /*
1810       * If it's not a redirect without any content,
1811       * set the Content-Type to text/html if it's
1812       * not already specified.
1813       */
1814      if (!err) err = enlist_unique(rsp->headers, "Content-Type: text/html", 13);
1815    }
1816
1817    /*
1818     * Fill in the rest of the default headers:
1819     *
1820     * Date: set to current date/time.
1821     * Last-Modified: set to date/time the page was last changed.
1822     * Expires: set to date/time page next needs reloading.
1823     * Cache-Control: set to "no-cache" if applicable.
1824     * 
1825     * See http://www.w3.org/Protocols/rfc2068/rfc2068
1826     */
1827    if (rsp->is_static)
1828    {
1829       /*
1830        * Set Expires to about 10 min into the future so it'll get reloaded
1831        * occasionally, e.g. if Privoxy gets upgraded.
1832        */
1833
1834       if (!err)
1835       {
1836          get_http_time(0, buf);
1837          err = enlist_unique_header(rsp->headers, "Date", buf);
1838       }
1839
1840       /* Some date in the past. */
1841       if (!err) err = enlist_unique_header(rsp->headers, "Last-Modified", "Sat, 17 Jun 2000 12:00:00 GMT");
1842
1843       if (!err)
1844       {
1845          get_http_time(10 * 60, buf); /* 10 * 60sec = 10 minutes */
1846          err = enlist_unique_header(rsp->headers, "Expires", buf);
1847       }
1848    }
1849    else if (!strncmpic(rsp->status, "302", 3))
1850    {
1851       get_http_time(0, buf);
1852       if (!err) err = enlist_unique_header(rsp->headers, "Date", buf);
1853    }
1854    else
1855    {
1856       /*
1857        * Setting "Cache-Control" to "no-cache" and  "Expires" to
1858        * the current time doesn't exactly forbid caching, it just
1859        * requires the client to revalidate the cached copy.
1860        *
1861        * If a temporary problem occurs and the user tries again after
1862        * getting Privoxy's error message, a compliant browser may set the
1863        * If-Modified-Since header with the content of the error page's
1864        * Last-Modified header. More often than not, the document on the server
1865        * is older than Privoxy's error message, the server would send status code
1866        * 304 and the browser would display the outdated error message again and again.
1867        *
1868        * For documents delivered with status code 404 or 503 we set "Last-Modified"
1869        * to Tim Berners-Lee's birthday, which predates the age of any page on the web
1870        * and can be safely used to "revalidate" without getting a status code 304.
1871        *
1872        * There is no need to let the useless If-Modified-Since header reach the
1873        * server, it is therefore stripped by client_if_modified_since in parsers.c.
1874        */
1875       if (!err) err = enlist_unique_header(rsp->headers, "Cache-Control", "no-cache");
1876
1877       get_http_time(0, buf);
1878       if (!err) err = enlist_unique_header(rsp->headers, "Date", buf);
1879       if (!strncmpic(rsp->status, "404", 3) || !strncmpic(rsp->status, "503", 3))
1880       {
1881          if (!err) err = enlist_unique_header(rsp->headers, "Last-Modified", "Wed, 08 Jun 1955 12:00:00 GMT");
1882       }
1883       else
1884       {
1885          if (!err) err = enlist_unique_header(rsp->headers, "Last-Modified", buf);
1886       }
1887       if (!err) err = enlist_unique_header(rsp->headers, "Expires", "Sat, 17 Jun 2000 12:00:00 GMT");
1888       if (!err) err = enlist_unique_header(rsp->headers, "Pragma", "no-cache");
1889    }
1890
1891    /*
1892     * Quoting RFC 2616:
1893     *
1894     * HTTP/1.1 applications that do not support persistent connections MUST
1895     * include the "close" connection option in every message.
1896     */
1897    if (!err) err = enlist_unique_header(rsp->headers, "Connection", "close");
1898
1899    /* 
1900     * Write the head
1901     */
1902    if (err || (NULL == (rsp->head = list_to_text(rsp->headers))))
1903    {
1904       free_http_response(rsp);
1905       return cgi_error_memory();
1906    }
1907    rsp->head_length = strlen(rsp->head);
1908
1909    return rsp;
1910
1911 }
1912
1913
1914 /*********************************************************************
1915  *
1916  * Function    :  alloc_http_response
1917  *
1918  * Description :  Allocates a new http_response structure.
1919  *
1920  * Parameters  :  N/A
1921  *
1922  * Returns     :  pointer to a new http_response, or NULL.
1923  *
1924  *********************************************************************/
1925 struct http_response *alloc_http_response(void)
1926 {
1927    return (struct http_response *) zalloc(sizeof(struct http_response));
1928
1929 }
1930
1931
1932 /*********************************************************************
1933  *
1934  * Function    :  free_http_response
1935  *
1936  * Description :  Free the memory occupied by an http_response
1937  *                and its depandant structures.
1938  *
1939  * Parameters  :
1940  *          1  :  rsp = pointer to http_response to be freed
1941  *
1942  * Returns     :  N/A
1943  *
1944  *********************************************************************/
1945 void free_http_response(struct http_response *rsp)
1946 {
1947    /*
1948     * Must special case cgi_error_memory_response, which is never freed.
1949     */
1950    if (rsp && (rsp != cgi_error_memory_response))
1951    {
1952       freez(rsp->status);
1953       freez(rsp->head);
1954       freez(rsp->body);
1955       destroy_list(rsp->headers);
1956       free(rsp);
1957    }
1958
1959 }
1960
1961
1962 /*********************************************************************
1963  *
1964  * Function    :  template_load
1965  *
1966  * Description :  CGI support function that loads a given HTML
1967  *                template from the confdir, ignoring comment
1968  *                lines and following #include statements up to
1969  *                a depth of 1.
1970  *
1971  * Parameters  :
1972  *          1  :  csp = Current client state (buffers, headers, etc...)
1973  *          2  :  template_ptr = Destination for pointer to loaded
1974  *                               template text.
1975  *          3  :  templatename = name of the HTML template to be used
1976  *          4  :  recursive = Flag set if this function calls itself
1977  *                            following an #include statament
1978  *
1979  * Returns     :  JB_ERR_OK on success
1980  *                JB_ERR_MEMORY on out-of-memory error.  
1981  *                JB_ERR_FILE if the template file cannot be read
1982  *
1983  *********************************************************************/
1984 jb_err template_load(struct client_state *csp, char **template_ptr, 
1985                      const char *templatename, int recursive)
1986 {
1987    jb_err err;
1988    char *templates_dir_path;
1989    char *full_path;
1990    char *file_buffer;
1991    char *included_module;
1992    const char *p;
1993    FILE *fp;
1994    char buf[BUFFER_SIZE];
1995
1996    assert(csp);
1997    assert(template_ptr);
1998    assert(templatename);
1999
2000    *template_ptr = NULL;
2001
2002    /* Validate template name.  Paranoia. */
2003    for (p = templatename; *p != 0; p++)
2004    {
2005       if ( ((*p < 'a') || (*p > 'z'))
2006         && ((*p < 'A') || (*p > 'Z'))
2007         && ((*p < '0') || (*p > '9'))
2008         && (*p != '-')
2009         && (*p != '.'))
2010       {
2011          /* Illegal character */
2012          return JB_ERR_FILE;
2013       }
2014    }
2015
2016    /* Generate full path */
2017
2018    templates_dir_path = make_path(csp->config->confdir, "templates");
2019    if (templates_dir_path == NULL)
2020    {
2021       return JB_ERR_MEMORY;
2022    }
2023
2024    full_path = make_path(templates_dir_path, templatename);
2025    free(templates_dir_path);
2026    if (full_path == NULL)
2027    {
2028       return JB_ERR_MEMORY;
2029    }
2030
2031    /* Allocate buffer */
2032
2033    file_buffer = strdup("");
2034    if (file_buffer == NULL)
2035    {
2036       free(full_path);
2037       return JB_ERR_MEMORY;
2038    }
2039
2040    /* Open template file */
2041
2042    if (NULL == (fp = fopen(full_path, "r")))
2043    {
2044       log_error(LOG_LEVEL_ERROR, "Cannot open template file %s: %E", full_path);
2045       free(full_path);
2046       free(file_buffer);
2047       return JB_ERR_FILE;
2048    }
2049    free(full_path);
2050
2051    /* 
2052     * Read the file, ignoring comments, and honoring #include
2053     * statements, unless we're already called recursively.
2054     *
2055     * FIXME: The comment handling could break with lines >BUFFER_SIZE long.
2056     *        This is unlikely in practise.
2057     */
2058    while (fgets(buf, BUFFER_SIZE, fp))
2059    {
2060       if (!recursive && !strncmp(buf, "#include ", 9))
2061       {
2062          if (JB_ERR_OK != (err = template_load(csp, &included_module, chomp(buf + 9), 1)))
2063          {
2064             free(file_buffer);
2065             fclose(fp);
2066             return err;
2067          }
2068
2069          if (string_join(&file_buffer, included_module))
2070          {
2071             fclose(fp);
2072             return JB_ERR_MEMORY;
2073          }
2074
2075          continue;
2076       }
2077
2078       /* skip lines starting with '#' */
2079       if (*buf == '#')
2080       {
2081          continue;
2082       }
2083
2084       if (string_append(&file_buffer, buf))
2085       {
2086          fclose(fp);
2087          return JB_ERR_MEMORY;
2088       }
2089    }
2090    fclose(fp);
2091
2092    *template_ptr = file_buffer;
2093
2094    return JB_ERR_OK;
2095 }
2096
2097
2098 /*********************************************************************
2099  *
2100  * Function    :  template_fill
2101  *
2102  * Description :  CGI support function that fills in a pre-loaded
2103  *                HTML template by replacing @name@ with value using
2104  *                pcrs, for each item in the output map.
2105  *
2106  *                Note that a leading '$' charachter in the export map's
2107  *                values will be stripped and toggle on backreference
2108  *                interpretation.
2109  *
2110  * Parameters  :
2111  *          1  :  template_ptr = IN: Template to be filled out.
2112  *                                   Will be free()d.
2113  *                               OUT: Filled out template.
2114  *                                    Caller must free().
2115  *          2  :  exports = map with fill in symbol -> name pairs
2116  *
2117  * Returns     :  JB_ERR_OK on success
2118  *                JB_ERR_MEMORY on out-of-memory error
2119  *
2120  *********************************************************************/
2121 jb_err template_fill(char **template_ptr, const struct map *exports)
2122 {
2123    struct map_entry *m;
2124    pcrs_job *job;
2125    char buf[BUFFER_SIZE];
2126    char *tmp_out_buffer;
2127    char *file_buffer;
2128    size_t  size;
2129    int error;
2130    const char *flags;
2131
2132    assert(template_ptr);
2133    assert(*template_ptr);
2134    assert(exports);
2135
2136    file_buffer = *template_ptr;
2137    size = strlen(file_buffer) + 1;
2138
2139    /* 
2140     * Assemble pcrs joblist from exports map
2141     */
2142    for (m = exports->first; m != NULL; m = m->next)
2143    {
2144       if (*m->name == '$')
2145       {
2146          /*
2147           * First character of name is '$', so remove this flag
2148           * character and allow backreferences ($1 etc) in the
2149           * "replace with" text.
2150           */
2151          snprintf(buf, BUFFER_SIZE, "%s", m->name + 1);
2152          flags = "sigU";
2153       }
2154       else
2155       {
2156          /*
2157           * Treat the "replace with" text as a literal string - 
2158           * no quoting needed, no backreferences allowed.
2159           * ("Trivial" ['T'] flag).
2160           */
2161          flags = "sigTU";
2162
2163          /* Enclose name in @@ */
2164          snprintf(buf, BUFFER_SIZE, "@%s@", m->name);
2165       }
2166
2167
2168       log_error(LOG_LEVEL_CGI, "Substituting: s/%s/%s/%s", buf, m->value, flags);
2169
2170       /* Make and run job. */
2171       job = pcrs_compile(buf, m->value, flags,  &error);
2172       if (job == NULL) 
2173       {
2174          if (error == PCRS_ERR_NOMEM)
2175          {
2176             free(file_buffer);
2177             *template_ptr = NULL;
2178             return JB_ERR_MEMORY;
2179          }
2180          else
2181          {
2182             log_error(LOG_LEVEL_ERROR, "Error compiling template fill job %s: %d", m->name, error);
2183             /* Hope it wasn't important and silently ignore the invalid job */
2184          }
2185       }
2186       else
2187       {
2188          pcrs_execute(job, file_buffer, size, &tmp_out_buffer, &size);
2189          free(file_buffer);
2190          pcrs_free_job(job);
2191          if (NULL == tmp_out_buffer)
2192          {
2193             *template_ptr = NULL;
2194             return JB_ERR_MEMORY;
2195          }
2196          file_buffer = tmp_out_buffer;
2197       }
2198    }
2199
2200    /*
2201     * Return
2202     */
2203    *template_ptr = file_buffer;
2204    return JB_ERR_OK;
2205 }
2206
2207
2208 /*********************************************************************
2209  *
2210  * Function    :  template_fill_for_cgi
2211  *
2212  * Description :  CGI support function that loads a HTML template
2213  *                and fills it in.  Handles file-not-found errors
2214  *                by sending a HTML error message.  For convenience,
2215  *                this function also frees the passed "exports" map.
2216  *
2217  * Parameters  :
2218  *          1  :  csp = Client state
2219  *          2  :  templatename = name of the HTML template to be used
2220  *          3  :  exports = map with fill in symbol -> name pairs.
2221  *                          Will be freed by this function.
2222  *          4  :  rsp = Response structure to fill in.
2223  *
2224  * Returns     :  JB_ERR_OK on success
2225  *                JB_ERR_MEMORY on out-of-memory error
2226  *
2227  *********************************************************************/
2228 jb_err template_fill_for_cgi(struct client_state *csp,
2229                              const char *templatename,
2230                              struct map *exports,
2231                              struct http_response *rsp)
2232 {
2233    jb_err err;
2234    
2235    assert(csp);
2236    assert(templatename);
2237    assert(exports);
2238    assert(rsp);
2239
2240    err = template_load(csp, &rsp->body, templatename, 0);
2241    if (err == JB_ERR_FILE)
2242    {
2243       free_map(exports);
2244       return cgi_error_no_template(csp, rsp, templatename);
2245    }
2246    else if (err)
2247    {
2248       free_map(exports);
2249       return err; /* JB_ERR_MEMORY */
2250    }
2251    err = template_fill(&rsp->body, exports);
2252    free_map(exports);
2253    return err;
2254 }
2255
2256
2257 /*********************************************************************
2258  *
2259  * Function    :  default_exports
2260  *
2261  * Description :  returns a struct map list that contains exports
2262  *                which are common to all CGI functions.
2263  *
2264  * Parameters  :
2265  *          1  :  csp = Current client state (buffers, headers, etc...)
2266  *          2  :  caller = name of CGI who calls us and which should
2267  *                         be excluded from the generated menu. May be
2268  *                         NULL.
2269  * Returns     :  NULL if no memory, else a new map.  Caller frees.
2270  *
2271  *********************************************************************/
2272 struct map *default_exports(const struct client_state *csp, const char *caller)
2273 {
2274    char buf[20];
2275    jb_err err;
2276    struct map * exports;
2277    int local_help_exists = 0;
2278
2279    assert(csp);
2280
2281    exports = new_map();
2282    if (exports == NULL)
2283    {
2284       return NULL;
2285    }
2286
2287    err = map(exports, "version", 1, html_encode(VERSION), 0);
2288    if (!err) err = map(exports, "my-ip-address", 1, html_encode(csp->my_ip_addr_str ? csp->my_ip_addr_str : "unknown"), 0);
2289    if (!err) err = map(exports, "my-hostname",   1, html_encode(csp->my_hostname ? csp->my_hostname : "unknown"), 0);
2290    if (!err) err = map(exports, "homepage",      1, html_encode(HOME_PAGE_URL), 0);
2291    if (!err) err = map(exports, "default-cgi",   1, html_encode(CGI_PREFIX), 0);
2292    if (!err) err = map(exports, "menu",          1, make_menu(caller), 0);
2293    if (!err) err = map(exports, "code-status",   1, CODE_STATUS, 1);
2294    if (!strncmpic(csp->config->usermanual, "file://", 7) ||
2295        !strncmpic(csp->config->usermanual, "http", 4))
2296    {
2297       if (!err) err = map(exports, "user-manual", 1, csp->config->usermanual ,1);
2298    }
2299    else
2300    {
2301       if (!err) err = map(exports, "user-manual", 1, "http://"CGI_SITE_2_HOST"/user-manual/" ,1);
2302    }
2303    if (!err) err = map(exports, "actions-help-prefix", 1, ACTIONS_HELP_PREFIX ,1);
2304 #ifdef FEATURE_TOGGLE
2305    if (!err) err = map_conditional(exports, "enabled-display", global_toggle_state);
2306 #else
2307    if (!err) err = map_block_killer(exports, "can-toggle");
2308 #endif
2309
2310    snprintf(buf, 20, "%d", csp->config->hport);
2311    if (!err) err = map(exports, "my-port", 1, buf, 1);
2312
2313    if(!strcmp(CODE_STATUS, "stable"))
2314    {
2315       if (!err) err = map_block_killer(exports, "unstable");
2316    }
2317
2318    if (csp->config->admin_address != NULL)
2319    {
2320       if (!err) err = map(exports, "admin-address", 1, html_encode(csp->config->admin_address), 0);
2321       local_help_exists = 1;
2322    }
2323    else
2324    {
2325       if (!err) err = map_block_killer(exports, "have-adminaddr-info");
2326    }
2327
2328    if (csp->config->proxy_info_url != NULL)
2329    {
2330       if (!err) err = map(exports, "proxy-info-url", 1, html_encode(csp->config->proxy_info_url), 0);
2331       local_help_exists = 1;
2332    }
2333    else
2334    {
2335       if (!err) err = map_block_killer(exports, "have-proxy-info");
2336    }
2337
2338    if (local_help_exists == 0)
2339    {
2340       if (!err) err = map_block_killer(exports, "have-help-info");
2341    }
2342
2343    if (err)
2344    {
2345       free_map(exports);
2346       return NULL;
2347    }
2348
2349    return exports;
2350 }
2351
2352
2353 /*********************************************************************
2354  *
2355  * Function    :  map_block_killer
2356  *
2357  * Description :  Convenience function.
2358  *                Adds a "killer" for the conditional HTML-template
2359  *                block <name>, i.e. a substitution of the regex
2360  *                "if-<name>-start.*if-<name>-end" to the given
2361  *                export list.
2362  *
2363  * Parameters  :  
2364  *          1  :  exports = map to extend
2365  *          2  :  name = name of conditional block
2366  *
2367  * Returns     :  JB_ERR_OK on success
2368  *                JB_ERR_MEMORY on out-of-memory error.  
2369  *
2370  *********************************************************************/
2371 jb_err map_block_killer(struct map *exports, const char *name)
2372 {
2373    char buf[1000]; /* Will do, since the names are hardwired */
2374
2375    assert(exports);
2376    assert(name);
2377    assert(strlen(name) < 490);
2378
2379    snprintf(buf, 1000, "if-%s-start.*if-%s-end", name, name);
2380    return map(exports, buf, 1, "", 1);
2381 }
2382
2383
2384 /*********************************************************************
2385  *
2386  * Function    :  map_block_keep
2387  *
2388  * Description :  Convenience function.  Removes the markers used
2389  *                by map-block-killer, to save a few bytes.
2390  *                i.e. removes "@if-<name>-start@" and "@if-<name>-end@"
2391  *
2392  * Parameters  :  
2393  *          1  :  exports = map to extend
2394  *          2  :  name = name of conditional block
2395  *
2396  * Returns     :  JB_ERR_OK on success
2397  *                JB_ERR_MEMORY on out-of-memory error.  
2398  *
2399  *********************************************************************/
2400 jb_err map_block_keep(struct map *exports, const char *name)
2401 {
2402    jb_err err;
2403    char buf[500]; /* Will do, since the names are hardwired */
2404
2405    assert(exports);
2406    assert(name);
2407    assert(strlen(name) < 490);
2408
2409    snprintf(buf, 500, "if-%s-start", name);
2410    err = map(exports, buf, 1, "", 1);
2411
2412    if (err)
2413    {
2414       return err;
2415    }
2416
2417    snprintf(buf, 500, "if-%s-end", name);
2418    return map(exports, buf, 1, "", 1);
2419 }
2420
2421
2422 /*********************************************************************
2423  *
2424  * Function    :  map_conditional
2425  *
2426  * Description :  Convenience function.
2427  *                Adds an "if-then-else" for the conditional HTML-template
2428  *                block <name>, i.e. a substitution of the form:
2429  *                @if-<name>-then@
2430  *                   True text
2431  *                @else-not-<name>@
2432  *                   False text
2433  *                @endif-<name>@
2434  *
2435  *                The control structure and one of the alternatives
2436  *                will be hidden.
2437  *
2438  * Parameters  :  
2439  *          1  :  exports = map to extend
2440  *          2  :  name = name of conditional block
2441  *          3  :  choose_first = nonzero for first, zero for second.
2442  *
2443  * Returns     :  JB_ERR_OK on success
2444  *                JB_ERR_MEMORY on out-of-memory error.  
2445  *
2446  *********************************************************************/
2447 jb_err map_conditional(struct map *exports, const char *name, int choose_first)
2448 {
2449    char buf[1000]; /* Will do, since the names are hardwired */
2450    jb_err err;
2451
2452    assert(exports);
2453    assert(name);
2454    assert(strlen(name) < 480);
2455
2456    snprintf(buf, 1000, (choose_first
2457       ? "else-not-%s@.*@endif-%s"
2458       : "if-%s-then@.*@else-not-%s"),
2459       name, name);
2460
2461    err = map(exports, buf, 1, "", 1);
2462    if (err)
2463    {
2464       return err;
2465    }
2466
2467    snprintf(buf, 1000, (choose_first ? "if-%s-then" : "endif-%s"), name);
2468    return map(exports, buf, 1, "", 1);
2469 }
2470
2471
2472 /*********************************************************************
2473  *
2474  * Function    :  make_menu
2475  *
2476  * Description :  Returns an HTML-formatted menu of the available 
2477  *                unhidden CGIs, excluding the one given in <self>
2478  *
2479  * Parameters  :  self = name of CGI to leave out, can be NULL for
2480  *                complete listing.
2481  *
2482  * Returns     :  menu string, or NULL on out-of-memory error.
2483  *
2484  *********************************************************************/
2485 char *make_menu(const char *self)
2486 {
2487    const struct cgi_dispatcher *d;
2488    char *result = strdup("");
2489
2490    if (self == NULL)
2491    {
2492       self = "NO-SUCH-CGI!";
2493    }
2494
2495    /* List available unhidden CGI's and export as "other-cgis" */
2496    for (d = cgi_dispatchers; d->name; d++)
2497    {
2498       if (d->description && strcmp(d->name, self))
2499       {
2500          string_append(&result, "<li><a href=\"" CGI_PREFIX);
2501          string_append(&result, d->name);
2502          string_append(&result, "\">");
2503          string_append(&result, d->description);
2504          string_append(&result, "</a></li>");
2505       }
2506    }
2507
2508    return result;
2509 }
2510
2511
2512 /*********************************************************************
2513  *
2514  * Function    :  dump_map
2515  *
2516  * Description :  HTML-dump a map for debugging (as table)
2517  *
2518  * Parameters  :
2519  *          1  :  the_map = map to dump
2520  *
2521  * Returns     :  string with HTML
2522  *
2523  *********************************************************************/
2524 char *dump_map(const struct map *the_map)
2525 {
2526    struct map_entry *cur_entry;
2527    char *ret = strdup("");
2528
2529    string_append(&ret, "<table>\n");
2530
2531    for (cur_entry = the_map->first;
2532         (cur_entry != NULL) && (ret != NULL);
2533         cur_entry = cur_entry->next)
2534    {
2535       string_append(&ret, "<tr><td><b>");
2536       string_join  (&ret, html_encode(cur_entry->name));
2537       string_append(&ret, "</b></td><td>");
2538       string_join  (&ret, html_encode(cur_entry->value));
2539       string_append(&ret, "</td></tr>\n");
2540    }
2541
2542    string_append(&ret, "</table>\n");
2543    return ret;
2544 }
2545
2546
2547 /*
2548   Local Variables:
2549   tab-width: 3
2550   end:
2551 */