Document the +fast-redirects{} HTTP response splitting fix
[privoxy.git] / ChangeLog
1 --------------------------------------------------------------------
2 ChangeLog for Privoxy
3 --------------------------------------------------------------------
4 *** Version 3.0.18 Stable ***
5
6 - Bug fixes:
7   - If the redirect URL contains characters RFC 3986 doesn't permit,
8     they are (re)encoded. Not doing this makes Privoxy versions from
9     3.0.5 to 3.0.17 susceptible to HTTP response splitting (CWE-113)
10     attacks if the +fast-redirects{check-decoded-url} action is used.
11   - Fix a logic bug that could cause Privoxy to reuse a server
12     socket after it got tainted by a server-header-tagger-induced
13     block that was triggered before the whole server response had
14     been read. If keep-alive was enabled and the request following
15     the blocked one was to the same host and using the same forwarding
16     settings, Privoxy would send it on the tainted server socket.
17     While the server would simply treat it as a pipelined request,
18     Privoxy would later on fail to properly parse the server's
19     response as it would try to parse the unread data from the
20     first response as server headers for the second one.
21     Regression introduced in 3.0.17.
22   - When implying keep-alive in client_connection(), remember that
23     the client didn't. Fixes a regression introduced in 3.0.13 that
24     would cause Privoxy to wait for additional client requests after
25     receiving a HTTP/1.1 request with "Connection: close" set
26     and connection sharing enabled.
27     With clients which terminates the client connection after detecting
28     that the whole body has been received it doesn't really matter,
29     but with clients that don't the connection would be kept open until
30     it timed out.
31   - Fix a subtle race condition between prepare_csp_for_next_request()
32     and sweep() A thread preparing itself for the next client request
33     could briefly appear to be inactive.
34     If all other threads were already using more recent files,
35     the thread could get its files swept away under its feet.
36     So far this has only been reproduced while stress testing in
37     valgrind while touching action files in a loop. It's unlikely
38     to have caused any actual problems in the real world.
39   - Disable filters if SDCH compression is used unless filtering is forced.
40     If SDCH was combined with a supported compression algorithm, Privoxy
41     previously could try to decompress it and ditch the Content-Encoding
42     header even though the SDCH compression wasn't dealt with.
43     Reported by zebul666 in #3225863.
44   - Make a copy of the --user value and only mess with that when splitting
45     user and group. On some operating systems modifying the value directly
46     is reflected in the output of ps and friends and can be misleading.
47     Reported by zepard in #3292710.
48   - If forwarded-connect-retries is set, only retry if Privoxy is actually
49     forwarding the request. Previously direct connections would be retried
50     as well.
51   - Fixed a small memory leak when retrying connections with IPv6
52     support enabled.
53   - Remove an incorrect assertion in compile_dynamic_pcrs_job_list()
54     It could be triggered by a pcrs job with an invalid pcre
55     pattern (for example one that contains a lone quantifier).
56   - If the --user argument user[.group] contains a dot, always bail out
57     if no group has been specified. Previously the intended, but undocumented
58     (and apparently untested), behaviour was to try interpreting the whole
59     argument as user name, but the detection was flawed and checked for '0'
60     instead of '\0', thus merely preventing group names beginning with a zero.
61   - In html_code_map[], use a numeric character reference instead of '
62     which wasn't standardized before XHTML 1.0.
63   - Fix an invalid free when compiled with FEATURE_GRACEFUL_TERMINATION
64     and shut down through http://config.privoxy.org/die
65   - In get_actions(), fix the "temporary" backwards compatibility hack
66     to accept block actions without reason.
67     It also covered other actions that should be rejected as invalid.
68     Reported by Billy Crook.
69
70 - General improvements:
71   - Privoxy can (re)compress buffered content before delivering
72     it to the client. Disabled by default as most users wouldn't
73     benefit from it.
74   - The +fast-redirects{check-decoded-url} action checks URL
75     segments separately. If there are other parameters behind
76     the redirect URL, this makes it unnecessary to cut them off
77     by additionally using a +redirect{} pcrs command.
78     Initial patch submitted by Jamie Zawinski in #3429848.
79   - When loading action sections, verify that the referenced filters
80     exist. Currently missing filters only result in an error message,
81     but eventually the severity will be upgraded to fatal.
82   - Allow to bind to multiple separate addresses.
83     Patch set submitted by Petr Pisar in #3354485.
84   - Set socket_error to errno if connecting fails in rfc2553_connect_to()
85     Previously rejected direct connections could be incorrectly reported
86     as DNS issues if Privoxy was compiled with IPv6 support.
87   - Adjust url_code_map[] so spaces are replaced with %20 instead of '+'
88     While '+' can be used by client's submitting form data, this is not
89     actually what Privoxy is using the lookups for. This is more of a
90     cosmetic issue and doesn't fix any known problems.
91   - When compiled without FEATURE_FAST_REDIRECTS, do not silently
92     ignore +fast-redirect{} directives
93   - Added a workaround for GNU libc's strptime() reporting negative
94     year values when the parsed year is only specified with two digits.
95     On affected systems cookies with such a date would not be turned
96     into session cookies by the +session-cookies-only action.
97     Reported by Vaeinoe in #3403560
98   - Fixed bind failures with certain GNU libc versions if no non-loopback
99     IP address has been configured on the system. This is mainly an issue
100     if the system is using DHCP and Privoxy is started before the network
101     is completely configured.
102     Reported by Raphael Marichez in #3349356.
103     Additional insight from Petr Pisar.
104   - Privoxy log messages now use the ISO 8601 date format %Y-%m-%d.
105     It's only slightly longer than the old format, but contains
106     the full date including the year and allows sorting by date
107     (when grepping in multiple log files) without hassle.
108   - In get_last_url(), do not bother trying to decode URLs that do
109     not contain at least one '%' sign. It reduces the log noise and
110     a number of unnecessary memory allocations.
111   - In case of SOCKS5 failures, dump the socks response in the log message.
112   - Simplify the signal setup in main()
113   - Streamline socks5_connect() slightly
114   - In socks5_connect(), require a complete socks response from the server
115     Previously Privoxy didn't care how much data the server response
116     contained as long as the first two bytes contained the expected
117     values. While at it, shrink the buffer size so Privoxy can't read
118     more than a whole socks response.
119   - In chat(), do not bother to generate a client request in case of
120     direct CONNECT requests. It will not be used anyway.
121   - Reduce server_last_modified()'s stack size.
122   - Shorten get_http_time() by using strftime().
123   - Constify the known_http_methods pointers in unknown_method().
124   - Constify the time_formats pointers in parse_header_time().
125   - Constify the formerly_valid_actions pointers in action_used_to_be_valid().
126   - Introduce a GNUMakefile MAN_PAGE variable that defaults to privoxy.1.
127     The Debian package uses section 8 for the man page and this
128     should simplify the patch.
129   - Deduplicate the INADDR_NONE definition for Solaris by moving it to jbsockets.h
130   - In block_url(), ditch the obsolete workaround for ancient Netscape versions
131     that supposedly couldn't properly deal with status code 403.
132   - Remove a useless NULL pointer check in load_trustfile().
133   - Remove two useless NULL pointer checks in load_one_re_filterfile().
134   - Change url_code_map[] from an array of pointers to an array of arrays
135     It removes an unnecessary layer of indirection and on 64bit system reduces
136     the size of the binary a bit.
137   - Fix various typos. Fixes taken from Debian's 29_typos.dpatch by Roland Rosenfeld.
138   - Add a dok-tidy GNUMakefile target to clean up the messy HTML
139     generated by the other dok targets.
140   - GNUisms in the GNUMakefile have been removed.
141   - Change the HTTP version in static responses to 1.1
142   - Synced config.sub and config.guess with upstream
143     2011-11-11/386c7218162c145f5f9e1ff7f558a3fbb66c37c5.
144   - Add a dedicated function to parse the values of toggles. Reduces duplicated
145     code in load_config() and provides better error handling. Invalid or missing
146     toggle values are now a fatal error instead of being silently ignored.
147   - Terminate HTML lines in static error messages with \n instead of \r\n.
148   - Simplify cgi_error_unknown() a bit.
149   - In LogPutString(), don't bother looking at pszText when not
150     actually logging anything.
151   - Change ssplit()'s fourth parameter from int to size_t.
152     Fixes a clang complaint.
153   - Add a warning that the statistics currently can't be trusted.
154     Mention Privoxy-Log-Parser's --statistics option as
155     an alternative for the time being.
156   - In rfc2553_connect_to(), start setting cgi->error_message on error
157   - Change the expected status code returned for http://p.p/die depending
158     on whether or not FEATURE_GRACEFUL_TERMINATION is available.
159   - In cgi_die(), mark the client connection for closing.
160     If the client will fetch the style sheet through another connection
161     it gets the main thread out of the accept() state and should thus
162     trigger the actual shutdown.
163   - Add a proper CGI message for cgi_die().
164   - Don't enforce a logical line length limit in read_config_line()
165   - Slightly refactor server_last_modified() to remove useless gmtime*() calls
166   - In get_content_type(), also recognize '.jpeg' as JPEG extension
167   - Add '.png' to the list of recognized file extenstions in get_content_type()
168   - In block_url(), consistently use the block reason "Request blocked by Privoxy"
169     In two places the reason was "Request for blocked URL" which hides the
170     fact that the request got blocked by Privoxy and isn't necessarily
171     correct as the block may be due to tags.
172   - In listen_loop(), reload the configuration files after accepting
173     a new connection instead of before.
174     Previously the first connection that arrived after a configuration
175     change would still be handled with the old configuration.
176   - In chat()'s receive-data loop, skip a client socket check if
177     the socket will be written to right away anyway. This can
178     increase the transfer speed for unfiltered content on fast
179     network connections.
180   - The socket timeout is used for SOCKS negotiations as well which
181     previously couldn't timeout.
182   - Don't keep the client connection alive if any configuration file
183     changed since the time the connection came in. This is closer to
184     Privoxy's behaviour before keep-alive support for client connection
185     has been added and also less confusing in general.
186   - Treat all Content-Type header values containing the pattern
187     'script' as a sign of text. Reported by pribog in #3134970.
188
189
190 - Action file improvements:
191   - Moved the site-specific block pattern section below the one for the
192     generic patterns so for requests that are matched in both, the block
193     reason for the domain is shown which is usually more useful than showing
194     the one for the generic pattern.
195   - Remove -prevent-compression from the fragile alias It's no longer
196     used anywhere by default and isn't known to break stuff anyway.
197   - Add a (disabled) section to block various Facebook tracking URLs
198     Reported by Dan Stahlke in #3421764.
199   - Add a (disabled) section to rewrite and redirect click-tracking
200     URLs used on news.google.com
201     Reported by Dan Stahlke in #3421755.
202   - Unblock linuxcounter.net/
203     Reported by Dan Stahlke in #3422612.
204   - Block 'www91.intel.com/' which is used by Omniture.
205     Reported by Adam Piggott in #3167370.
206   - Disable the handle-as-empty-doc-returns-ok option and mark it as deprecated.
207     Reminded by tceverling in #2790091.
208   - Add ".ivwbox.de/" to the "Cross-site user tracking" section.
209     Reported by Nettozahler in #3172525.
210   - Unblock and fast-redirect ".awin1.com/.*=http://"
211     Reported by Adam Piggott in #3170921.
212   - Block "b.collective-media.net/".
213   - Widen the Debian popcon exception to "qa.debian.org/popcon".
214     Seen in Debian's 05_default_action.dpatch by Roland Rosenfeld.
215   - Block ".gemius.pl/" which only seems to be used for user tracking.
216     Reported by johnd16 in #3002731. Additional input from Lee and movax.
217   - Disable banners-by-size filters for '.thinkgeek.com/'
218     The filter only seems to catch pictures of the inventory.
219   - Block requests for 'go.idmnet.bbelements.com/please/showit/'
220     Reported by kacperdominik in #3372959.
221   - Unblock adainitiative.org/
222   - Add a fast-redirects exception for '.googleusercontent.com/.*=cache'
223   - Add a fast-redirects exception for webcache.googleusercontent.com/
224   - Unblock http://adassier.wordpress.com/ and http://adassier.files.wordpress.com/
225
226 - Filter file improvements:
227   - Let the yahoo filter hide '.ads'
228   - Let the msn filter hide overlay ads for Facebook 'likes' in search
229     results and elements with the id 's_notf_div'. They only seem to be
230     used to advertise site 'enhancements'.
231   - Let the js-events filter additionally disarm setInterval()
232     Suggested by dg1727 in #3423775.
233
234 - Documentation improvements:
235   - Clarify the effect of compiling Privoxy with zlib support
236     Suggested by dg1727 in #3423782.
237   - Point out that the SourceForge messaging system works like a black
238     hole and should thus not be used to contact individual developers.
239   - Mention some of the problems one can experience when not explicitly
240     configuring an IP addresses as listen address.
241   - Explicitly mention that hostnames can be used instead of IP addresses
242     for the listen-address, that only the first address returned will be
243     used and what happens if the address is invalid.
244     Requested by Calestyo in #3302213.
245
246 - Log message improvements:
247   - If only the server connection is kept alive, do not pretent to
248     wait for a new client request.
249   - Remove a superfluos log message in forget_connection()
250   - In chat(), properly report missing server responses as such
251     instead of calling them empty
252   - In forwarded_connect(), fix a log message nobody should ever see
253   - Fix a log message in socks5_connect(), a failed write operation
254     was logged as failed read operation
255   - Let load_one_actions_file() properly complain about a missing
256     '{' at the beginning of the file
257     Simply stating that a line is invalid isn't particularly helpful.
258   - Do not claim to listen on a socket until Privoxy actually does.
259     Patch submitted by Petr Pisar #3354485
260   - Prevent a duplicated LOG_LEVEL_CLF message when sending out
261     the "no-server-data" response
262   - Also log the client socket when dropping a connection.
263   - Include the destination host in the 'Request ... marked for
264     blocking. limit-connect{...} doesn't allow CONNECT ...' message
265     Patch submitted by Saperski in #3296250.
266   - Prevent a duplicated log message if none of the resolved IP
267     addresses were reachable
268   - In connect_to(), do not pretend to retry if forwarded-connect-retries
269     is zero or unset.
270   - When a specified user or group can't be found, put the name in
271     single-quotes when logging it.
272   - In rfc2553_connect_to(), explain getnameinfo() errors better.
273   - Remove a useless log message in chat()
274   - When retrying to connect, also log the maximum number of connection
275     attempts
276   - Rephrase a log message in compile_dynamic_pcrs_job_list().
277     Divide the error code and its meaning with a colon. Call the pcrs
278     job dynamic and not the filter. Filters may contain dynamic and
279     non-dynamic pcrs jobs at the same time. Only mention the name of
280     the filter or tagger, but don't claim it's a filter when it could
281     be a tagger.
282   - In a fatal error message in load_one_actions_file(), cover both
283     URL and TAG patterns.
284   - In pcrs_strerror(), properly report unknown positive error code
285     values as such. Previously they were handled like 0 (no error).
286   - In compile_dynamic_pcrs_job_list(), also log the actual error code as
287     pcrs_strerror() doesn't handle all errors reported by pcre
288   - Don't bother trying to continue chatting if the client didn't ask for it.
289     Reduces log noise a bit.
290   - Make two fatal error message in load_one_actions_file() more descriptive
291   - In cgi_send_user_manual(), log when rejecting a file name due to '/' or '..'
292   - In load_file(), log a message if opening a file failed
293     The CGI error message alone isn't too helpful.
294   - In connection_destination_matches(), improve two log messages
295     to help understand why the destinations don't match.
296   - Rephrase a log message in serve(). Client request arrival
297     should be differentiated from closed client connections now.
298   - In serve(), log if a client connection isn't reused due to a
299     configuration file change.
300   - Let mark_server_socket_tainted() always mark the server socket tainted,
301     just don't talk about it in cases where it has no effect. It doesn't change
302     Privoxy's behaviour, but makes understanding the log file easier.
303
304 - configure:
305   - Added a --disable-ipv6-support switch for platforms where support
306     is detected but doesn't actually work.
307   - Do not check for the existence of strerror() and memmove() twice
308   - Remove a useless test for setpgrp(2). Privoxy doesn't need it and
309     it can cause problems when cross-compiling.
310   - Rename the --disable-acl-files switch to --disable-acl-support.
311     Since about 2001, ACL directives are specified in the standard
312     config file.
313   - Update the URL of the 'Removing outdated PCRE version after the
314     next stable release' posting. The old URL stopped working after
315     one of SF's recent site "optimizations". Reported by Han Liu.
316
317 - Privoxy-Regression-Test:
318   - Added --shuffle-tests option to increase the chances of detection race conditions.
319   - Added a --local-test-file option that allows to use Privoxy-Regression-Test without Privoxy
320   - Added tests for missing socks4 and socks4a forwarders
321   - The --privoxy-address option now works with IPv6 addresses containing brackets, too
322   - Perform limited sanity checks for parameters that are supposed to have numerical values.
323   - Added a --sleep-time option to specify a number of seconds to
324     sleep between tests, defaults to 0.
325   - Disable the range-requests tagger for tests that break if it's enabled
326   - Log messages use the ISO 8601 date format %Y-%m-%d.
327   - Fix spelling in two error messages.
328   - In the --help output, include a list of supported tests and their default levels.
329   - Adjust the tests to properly deal with FEATURE_TOGGLE being disabled.
330
331 - Privoxy-Log-Parser:
332   - Perform limited sanity checks for command line parameters that
333     are supposed to have numerical values.
334   - Implement a --unbreak-lines-only option to try to revert MUA breakage.
335   - Accept and highlight: Added header: Content-Encoding: deflate
336   - Accept and highlight: Compressed content from 29258 to 8630 bytes.
337   - Accept and highlight: Client request arrived in time on socket 21.
338   - Highlight: Didn't receive data in time: a.fsdn.com:443
339   - Accept log messages with ISO 8601 time stamps, too
340
341 - uagen:
342   - Bump generated Firefox version to 8.0
343   - Only randomize the release date if the new --randomize-release-date
344     option is enabled. Firefox versions after 4 use a fixed date string
345     without meaning.
346
347
348 *** Version 3.0.17 Stable ***
349
350 - Fixed last-chunk-detection for responses where the body was small
351   enough to be read with the headers, causing Privoxy to wait for the
352   end of the content until the server closed the connection or the
353   request timed out. Reported by "Karsten" in #3028326.
354 - Responses with status code 204 weren't properly detected as body-less
355   like RFC2616 mandates. Like the previous bug, this caused Privoxy to
356   wait for the end of the content until the server closed the connection
357   or the request timed out. Fixes #3022042 and #3025553, reported by a
358   user with no visible name. Most likely also fixes a bunch of other
359   AJAX-related problem reports that got closed in the past due to
360   insufficient information and lack of feedback.
361 - Fixed an ACL bug that made it impossible to build a blacklist.
362   Usually the ACL directives are used in a whitelist, which worked
363   as expected, but blacklisting is still useful for public proxies
364   where one only needs to deny known abusers access.
365 - Added LOG_LEVEL_RECEIVED to log the not-yet-parsed data read from the
366   network. This should make debugging various parsing issues a lot easier.
367 - The IPv6 code is enabled by default on Windows versions that support it.
368   Patch submitted by oCameLo in #2942729.
369 - In mingw32 versions, the user.filter file is reachable through the
370   GUI, just like default.filter is. Feature request 3040263.
371 - Added the configure option --enable-large-file-support to set a few
372   defines that are required by platforms like GNU/Linux to support files
373   larger then 2GB. Mainly interesting for users without proper logfile
374   management.
375 - Logging with "debug 16" no longer stops at the first nul byte which is
376   pretty useless. Non-printable characters are replaced with their hex value
377   so the result can't span multiple lines making parsing them harder then
378   necessary.
379 - Privoxy logs when reading an action, filter or trust file.
380 - Fixed incorrect regression test markup which caused a test in
381   3.0.16 to fail while Privoxy itself was working correctly.
382   While Privoxy accepts hide-referer, too, the action name is actually
383   hide-referrer which is also the name used one the final results page,
384   where the test expected the alias.
385
386 - CGI interface improvements:
387   - In finish_http_response(), continue to add the 'Connection: close'
388     header if the client connection will not be kept alive.
389     Anonymously pointed out in #2987454.
390   - Apostrophes in block messages no longer cause parse errors
391     when the blocked page is viewed with JavaScript enabled.
392     Reported by dg1727 in #3062296.
393   - Fix a bunch of anchors that used underscores instead of dashes.
394   - Allow to keep the client connection alive after crunching the previous request.
395     Already opened server connections can be kept alive, too.
396   - In cgi_show_url_info(), don't forget to prefix URLs that only contain
397     http:// or https:// in the path. Fixes #2975765 reported by Adam Piggott.
398   - Show the 404 CGI page if cgi_send_user_manual() is called while
399     local user manual delivery is disabled.
400
401 - Action file improvements:
402   - Enable user.filter by default. Suggested by David White in #3001830.
403   - Block .sitestat.com/. Reported by johnd16 in #3002725.
404   - Block .atemda.com/. Reported by johnd16 in #3002723.
405   - Block js.adlink.net/. Reported by johnd16 in #3002720.
406   - Block .analytics.yahoo.com/. Reported by johnd16 in #3002713.
407   - Block sb.scorecardresearch.com, too. Reported by dg1727 in #2992652.
408   - Fix problems noticed on Yahoo mail and news pages.
409   - Remove the too broad yahoo section, only keeping the
410     fast-redirects exception as discussed on ijbswa-devel@.
411   - Don't block adesklets.sourceforge.net. Reported in #2974204.
412   - Block chartbeat ping tracking. Reported in #2975895.
413   - Tag CSS and image requests with cautious and medium settings, too.
414   - Don't handle view.atdmt.com as image. It's used for click-throughs
415     so users should be able to "go there anyway".
416     Reported by Adam Piggott in #2975927.
417   - Also let the refresh-tags filter remove invalid refresh tags where
418     the 'url=' part is missing. Anonymously reported in #2986382.
419     While at it, update the description to mention the fact that only
420     refresh tags with refresh times above 9 seconds are covered.
421   - javascript needs to be blocked with +handle-as-empty-document to
422     work around Firefox bug 492459.  So move .js blockers from
423     +block{Might be a web-bug.} -handle-as-empty-document to
424     +block{Might be a web-bug.} +handle-as-empty-document.
425   - ijbswa-Feature Requests-3006719 - Block 160x578 Banners.
426   - Block another omniture tracking domain.
427   - Added a range-requests tagger.
428   - Added two sections to get Flickr's Ajax interface working with
429     default pre-settings. If you change the configuration to block
430     cookies by default, you'll need additional exceptions.
431     Reported by Mathias Homann in #3101419 and by Patrick on ijbswa-users@.
432
433 - Documentation improvements:
434   - Explicitly mention how to match all URLs.
435   - Consistently recommend socks5 in the Tor FAQ entry and mention
436     its advantage compared to socks4a. Reported by David in #2960129.
437   - Slightly improve the explanation of why filtering may appear
438     slower than it is.
439   - Grammar fixes for the ACL section.
440   - Fixed a link to the 'intercepting' entry and add another one.
441   - Rename the 'Other' section to 'Mailing Lists' and reword it
442     to make it clear that nobody is forced to use the trackers
443   - Note that 'anonymously' posting on the trackers may not always
444     be possible.
445   - Suggest to enable debug 32768 when suspecting parsing problems.
446
447 - Privoxy-Log-Parser improvements:
448   - Gather statistics for ressources, methods, and HTTP versions
449     used by the client.
450   - Also gather statistics for blocked and redirected requests.
451   - Provide the percentage of keep-alive offers the client accepted.
452   - Add a --url-statistics-threshold option.
453   - Add a --host-statistics-threshold option to also gather
454     statistics about how many request where made per host.
455   - Fix a bug in handle_loglevel_header() where a 'scan: ' got lost.
456   - Add a --shorten-thread-ids option to replace the thread id with
457     a decimal number.
458   - Accept and ignore: Looks like we got the last chunk together
459     with the server headers. We better stop reading.
460   - Accept and ignore: Continue hack in da house.
461   - Accept and higlight: Rejecting connection from 10.0.0.2.
462     Maximum number of connections reached.
463   - Accept and highlight: Loading actions file: /usr/local/etc/privoxy/default.action
464   - Accept and highlight: Loading filter file: /usr/local/etc/privoxy/default.filter
465   - Accept and highlight: Killed all-caps Host header line: HOST: bestproxydb.com
466   - Accept and highlight: Reducing expected bytes to 0. Marking
467     the server socket tainted after throwing 4 bytes away.
468   - Accept: Merged multiple header lines to: 'X-FORWARDED-PROTO: http X-HOST: 127.0.0.1'
469
470 - Code cleanups:
471   - Remove the next member from the client_state struct. Only the main
472     thread needs access to all client states so give it its own struct.
473   - Garbage-collect request_contains_null_bytes().
474   - Ditch redundant code in unload_configfile().
475   - Ditch LogGetURLUnderCursor() which doesn't seem to be used anywhere.
476   - In write_socket(), remove the write-only variable write_len in
477     an ifdef __OS2__ block. Spotted by cppcheck.
478   - In connect_to(), don't declare the variable 'flags' on OS/2 where
479     it isn't used. Spotted by cppcheck.
480   - Limit the scope of various variables. Spotted by cppcheck.
481   - In add_to_iob(), turn an interestingly looking for loop into a
482     boring while loop.
483   - Code cleanup in preparation for external filters.
484   - In listen_loop(), mention the socket on which we accepted the
485     connection, not just the source IP address.
486   - In write_socket(), also log the socket we're writing to.
487   - In log_error(), assert that escaped characters get logged
488     completely or not at all.
489   - In log_error(), assert that ival and sval have reasonable values.
490     There's no reason not to abort() if they don't.
491   - Remove an incorrect cgi_error_unknown() call in a
492     cannot-happen-situation in send_crunch_response().
493   - Clean up white-space in http_response definition and
494     move the crunch_reason to the beginning.
495   - Turn http_response.reason into an enum and rename it
496     to http_response.crunch_reason.
497   - Silence a 'gcc (Debian 4.3.2-1.1) 4.3.2' warning on i686 GNU/Linux.
498   - Fix white-space in a log message in remove_chunked_transfer_coding().
499     While at it, add a note that the message doesn't seem to
500     be entirely correct and should be improved later on.
501
502 - GNUmakefile improvements:
503   - Use $(SSH) instead of ssh, so one only needs to specify a username once.
504   - Removed references to the action feedback thingy that hasn't been
505     working for years.
506   - Consistently use shell.sourceforge.net instead of shell.sf.net so
507     one doesn't need to check server fingerprints twice.
508   - Removed GNUisms in the webserver and webactions targets so they
509     work with standard tar.
510
511 *** Version 3.0.16 Stable ***
512
513 - Added the config file option handle-as-empty-doc-returns-ok to
514   work around Firefox bug #492459, which causes Firefox to hang
515   if JavaScripts are blocked in certain situations. The option is
516   enabled in the default config file.
517 - Added the config file option default-server-timeout to control the
518   assumed default server timeout. Since Privoxy no longer returns
519   an error message for connection resets on reused client connections,
520   assuming larger server timeout values appears to actually work
521   pretty well as long as connections aren't shared.
522 - Added optional support for FreeBSD's accf_http(9). Use the
523   configure option --enable-accept-filter to enable it.
524 - Added fancier Privoxy icons for win32. Contributed by Jeff H.
525 - In daemon mode, fd 0, 1 and 2 are bound to /dev/null.
526 - Resolve localhost using whatever address family the operating
527   system feels like. Previous betas would try to use IPv4 as this
528   is what most users expect, but this didn't work reliably on
529   GNU/Linux systems.
530 - In the action lists on CGI pages, actions and their parameters are
531   no longer separated with a space. The action file parser doesn't
532   actually allow this and will throw an invalid syntax error if actions
533   and parameters in the action files are separated. Not adding the
534   spaces means copy and pasting CGI output into the action files works.
535 - The default keep-alive timeout has been reduced to 5 seconds to work
536   around hangs in clients that treat the proxy like any other host and
537   stop allowing any new connections if the "maximum number of
538   connections per host" is reached.
539 - Several webbug URLs that look like they are leading to images are now
540   blocked as image instead of empty documents. Doing the latter causes
541   WebKit-based clients to show a "missing image" icon which may mess up
542   the layout.
543 - The no-such-domain template is used for DNS resolution
544   problems with FEATURE_IPV6_SUPPORT enabled. Previously the
545   connect-failed template was used. Reported by 'zebul666'.
546 - Accepts quoted expiration dates even though RFC 2109 10.1.2
547   doesn't seem to allow them. Reported anonymously.
548 - Don't try to forget connections if connection sharing is disabled.
549   This wasn't a real problem but caused an unnecessary log message.
550 - The still undocumented --enable-extended-host-patterns configure
551   option has a better description.
552 - Fixed an error message that would claim a write to the server
553   failed when actually writing to the client failed.
554 - Log the crunch reason before trying to write to the client.
555   The log is easier to read that way.
556 - Several log messages about client connections also mention
557   the socket number.
558 - handle-as-empty-document no longer depends on the image blocking
559   code being enabled.
560 - Privoxy-Log-Parser is roughly 40% faster in highlighting mode.
561 - uagen, a Firefox User-Agent generator for Privoxy and Mozilla
562   browsers has been imported and is available in the tarball's
563   tools directory.
564 - The scripts in the tools directory treat unknown parameters
565   as fatal errors.
566
567 *** Version 3.0.15 Beta ***
568
569 - In case of missing server data, no error message is send to the
570   client if the request arrived on a reused connection. The client
571   is then supposed to silently retry the request without bothering
572   the user. This should significantly reduce the frequency of the
573   "No server or forwarder data received" error message many users
574   reported.
575 - More reliable detection of prematurely closed client sockets
576   with keep-alive enabled.
577 - FEATURE_CONNECTION_KEEP_ALIVE is decoupled from
578   FEATURE_CONNECTION_SHARING and now available on
579   all platforms.
580 - Improved handling of POST requests on reused connections.
581   Should fix problems with stalled connections after submitting
582   form data with some browser configurations.
583 - Fixed various latency calculation issues.
584 - Allows the client to pass NTLM authentication requests to a
585   forwarding proxy. This was already assumed and hinted to work
586   in 3.0.13 beta but actually didn't. Now it's confirmed to work
587   with IE, Firefox and Chrome.
588   Thanks to Francois Botha and Wan-Teh Chang
589 - Fixed a calculation problem if receiving the server headers
590   takes more than two reads, that could cause Privoxy to terminate
591   the connection prematurely. Reported by Oliver.
592 - Compiles again on platforms such as OpenBSD and systems
593   using earlier glibc version that don't support AI_ADDRCONFIG.
594   Anonymously submitted in #2872591.
595 - A bunch of MS VC project files and Suse and Redhat RPM spec
596   files have been removed as they were no longer maintained for
597   quite some time.
598 - Overly long action lines are properly rejected with a proper
599   error message. Previously they would be either rejected as
600   invalid or cause a core dump through abort().
601 - Already timed-out connections are no longer temporarily remembered.
602   They weren't reused anyway, but wasted a socket slot.
603 - len refers to the number of bytes actually read which might
604   differ from the ones received. Adjust log messages accordingly.
605 - The optional JavaScript on the CGI page uses encodeURIComponent()
606   instead of escape() which doesn't encode all characters that matter.
607   Anonymously reported in #2832722.
608 - Fix gcc45 warnings in decompress_iob().
609 - Various log message improvements.
610 - Privoxy-Regression-Test supports redirect tests.
611 - Privoxy-Log-Parser can gather some connection statistics.
612
613 *** Version 3.0.14 Beta ***
614
615 - The latency is taken into account when evaluating whether or not to
616   reuse a connection. This should significantly reduce the number of
617   connections problems several users reported.
618 - If the server doesn't specify how long the connection stays alive,
619   Privoxy errs on the safe side of caution and assumes it's only a second.
620 - The error pages for connection timeouts or missing server data use a
621   Last-Modified date in the past. Retry attempts are detected and Privoxy
622   removes the If-Modified-Since header to prevent the server from responding
623   with status code 304 in which case the client would reuse the error message.
624 - Setting keep-alive-timeout to 0 disables keep-alive support. Previously
625   Privoxy would claim to allow persistence but not reuse the connection.
626 - Pipelined requests are less likely to be mistaken for the request
627   body of the previous request. Note that Privoxy still has no real
628   pipeline support and will either serialize pipelined requests or
629   drop them in which case the client has to resent them.
630 - Fixed a crash on some Windows versions when header randomization
631   is enabled and the date couldn't be parsed.
632 - Privoxy's keep-alive timeout for the current connection is reduced
633   to the one specified in the client's Keep-Alive header.
634 - For HTTP/1.1 requests, Privoxy implies keep-alive support by not
635   setting any Connection header instead of using 'Connection: keep-alive'.
636 - If the socket isn't reusable, Privoxy doesn't temporarily waste
637   a socket slot to remember the connection.
638 - If keep-alive support is disabled but compiled in, the client's
639   Keep-Alive header is removed.
640 - Fixed a bug on mingw32 where downloading large files failed if
641   keep-alive support was enabled.
642 - Fixed a bug that (at least theoretically) could cause log
643   timestamps to be occasionally off by about a second.
644 - No Proxy-Connection header if added if there already is one.
645 - The configure script respects the $PATH variable when searching
646   for groups and id.
647
648 *** Version 3.0.13 Beta ***
649
650 - Added IPv6 support. Thanks to Petr Pisar who not only provided
651   the initial patch but also helped a lot with the integration.
652 - Added client-side keep-alive support.
653 - The connection sharing code is only used if the connection-sharing
654   option is enabled.
655 - The max-client-connections option has been added to restrict
656   the number of client connections below a value enforced by
657   the operating system.
658 - Fixed a regression reintroduced in 3.0.12 that could cause
659   crashes on mingw32 if header date randomization was enabled.
660 - Compressed content with extra fields couldn't be decompressed
661   and would get passed to the client unfiltered. This problem
662   has only be detected through statical analysis with clang as
663   nobody seems to be using extra fields anyway.
664 - If the server resets the Connection after sending only the headers
665   Privoxy forwards what it got to the client. Previously Privoxy
666   would deliver an error message instead.
667 - Error messages in case of connection timeouts use the right
668   HTTP status code.
669 - If spawning a child to handle a request fails, the client
670   gets an error message and Privoxy continues to listen for
671   new requests right away.
672 - The error messages in case of server-connection timeouts or
673   prematurely closed server connections are now template-based.
674 - If zlib support isn't compiled in, Privoxy no longer tries to
675   filter compressed content unless explicitly asked to do so.
676 - In case of connections that are denied based on ACL directives,
677   the memory used for the client IP is no longer leaked.
678 - Fixed another small memory leak if the client request times out
679   while waiting for client headers other than the request line.
680 - The client socket is kept open until the server socket has
681   been marked as unused. This should increase the chances that
682   the still-open connection will be reused for the client's next
683   request to the same destination. Note that this only matters
684   if connection-sharing is enabled.
685 - A TODO list has been added to the source tarball to give potential
686   volunteers a better idea of what the current goals are. Donations
687   are still welcome too: http://www.privoxy.org/faq/general.html#DONATE
688
689 *** Version 3.0.12 ***
690
691 - The socket-timeout option now also works on platforms whose
692   select() implementation modifies the timeout structure.
693   Previously the timeout was triggered even if the connection
694   didn't stall. Reported by cyberpatrol.
695 - The Connection: keep-alive code properly deals with files
696   larger than 2GB. Previously the connection was closed too
697   early.
698 - The content length for files above 2GB is logged correctly.
699 - The user-manual directive on the show-status page links to
700   the documentation location specified with the directive,
701   not to the Privoxy website.
702 - When running in daemon mode, Privoxy doesn't log anything
703   to the console unless there are errors before the logfile
704   has been opened.
705 - The show-status page prints warnings about invalid directives
706   on the same line as the directives themselves.
707 - Fixed several justified (but harmless) compiler warnings,
708   mostly on 64 bit platforms.
709 - The mingw32 version explicitly requests the default charset
710   to prevent display problems with some fonts available on more
711   recent Windows versions. Patch by Burberry.
712 - The mingw32 version uses the Privoxy icon in the alt-tab
713   windows. Patch by Burberry.
714 - The timestamp and the thread id is omitted in the "Fatal error"
715   message box on mingw32.
716 - Fixed two related mingw32-only buffer overflows. Triggering
717   them required control over the configuration file, therefore
718   this isn't seen as a security issue.
719 - In verbose mode, or if the new option --show-skipped-tests
720   is used, Privoxy-Regression-Test logs skipped tests and the
721   skip reason.
722
723 *** Version 3.0.11 ***
724
725 - On most platforms, outgoing connections can be kept alive and
726   reused if the server supports it. Whether or not this improves
727   things depends on the connection.
728 - When dropping privileges, membership in supplementary groups
729   is given up as well. Not doing that can lead to Privoxy running
730   with more rights than necessary and violates the principle of
731   least privilege. Users of the --user option are advised to update.
732   Thanks to Matthias Drochner for reporting the problem,
733   providing the initial patch and testing the final version.
734 - Passing invalid users or groups with the --user option
735   didn't lead to program exit. Regression introduced in 3.0.7.
736 - The match all section has been moved from default.action
737   to a new file called match-all.action. As a result the
738   default.action no longer needs to be touched by the user
739   and can be safely overwritten by updates.
740 - The standard.action file has been removed. Its content
741   is now part of the default.action file.
742 - In some situations the logged content length was slightly too low.
743 - Crunched requests are logged with their own log level.
744   If you used "debug 1" in the past, you'll probably want
745   to additionally enable "debug 1024", otherwise only passed
746   requests will be logged. If you only care about crunched
747   requests, simply replace "debug 1" with "debug 1024".
748 - The crunch reason has been moved to the beginning of the
749   crunch message. For HTTP URLs, the protocol is logged as well.
750 - Log messages are shortened by printing the thread id on its
751   own (as opposed to putting it inside the string "Privoxy()").
752 - The config option socket-timeout has been added to control
753   the time Privoxy waits for data to arrive on a socket.
754 - Support for remote toggling is controlled by the configure
755   option --disable-toggle only. In previous versions it also
756   depended on the action editor and thus configuring with the
757   --disable-editor option would disable remote toggling support
758   as well.
759 - Requests with invalid HTTP versions are rejected.
760 - The template symbol @date@ can be used to include a date(1)-like
761   time string. Initial patch submitted by Endre Szabo.
762 - Responses from shoutcast servers are accepted again.
763   Problem reported and fix suggested by Stefan.
764 - The hide-forwarded-for-headers action has been replaced with
765   the change-x-forwarded-for{} action which can also be used to
766   add X-Forwarded-For headers. The latter functionality already
767   existed in Privoxy versions prior to 3.0.7 but has been removed
768   as it was often used unintentionally (by not using the
769   hide-forwarded-for-headers action).
770 - A "clear log" view option was added to the mingw32 version
771   to clear out all of the lines in the Privoxy log window.
772   Based on a patch submitted by T Ford.
773 - The mingw32 version uses "critical sections" now, which prevents
774   log message corruption under load. As a side effect, the
775   "no thread-safe PRNG" warning could be removed as well.
776 - The mingw32 version's task bar icon is crossed out and
777   the color changed to gray if Privoxy is toggled off.
778
779 *** Version 3.0.10 ***
780
781 - Ordinary configuration file changes no longer cause program
782   termination on OS/2 if the name of the logfile hasn't been
783   changed as well. This regression probably crept in with the
784   logging improvements in 3.0.7. Reported by Maynard.
785 - The img-reorder filter is less likely to mess up JavaScript code in
786   img tags. Problem and solution reported by Glenn Washburn in #2014552.
787 - The source tar ball now includes Privoxy-Log-Parser,
788   a syntax-highlighter for Privoxy logs. For fancy screenshots see:
789   http://www.fabiankeil.de/sourcecode/privoxy-log-parser/
790   Documentation is available through perldoc(1).
791
792 *** Version 3.0.9 Beta ***
793
794 - Added SOCKS5 support (with address resolution done by
795   the SOCKS5 server). Patch provided by Eric M. Hopper.
796 - The "blocked" CGI pages include a block reason that was
797   provided as argument to the last-applying block action.
798 - If enable-edit-actions is disabled (the default since 3.0.7 beta)
799   the show-status page hides the edit buttons and explains why.
800   Previously the user would get the "this feature has been disabled"
801   message after using the edit button.
802 - Forbidden CONNECT requests are treated like blocks by default.
803   The now-pointless treat-forbidden-connects-like-blocks action
804   has been removed.
805 - Not enabling limit-connect now allows CONNECT requests to all ports.
806   In previous versions it would only allow CONNECT requests to port 443.
807   Use +limit-connect{443} if you think you need the old default behaviour.
808 - The CGI editor gets turned off after three edit requests with invalid
809   file modification timestamps. This makes life harder for attackers
810   who can leverage browser bugs to send fake Referers and intend to
811   brute-force edit URLs.
812 - Action settings for multiple patterns in the same section are
813   shared in memory. As a result these sections take up less space
814   (and are loaded slightly faster). Problem reported by Franz Schwartau.
815 - Linear white space in HTTP headers will be normalized to single
816   spaces before parsing the header's content, headers split across
817   multiple lines get merged first. This should prevent problems like:
818    * letting the session-cookies-only action slip
819      some Cookies through unmodified,
820    * only suppressing the first line of a header,
821      thus creating an invalid one, and
822    * to incorrectly block headers with valid timestamps
823      that weren't properly recognized.
824   Headers that could trigger these problems are unlikely to appear
825   in "normal" web traffic, but could be intentionally generated to
826   fool some of Privoxy's header parsers.
827 - Host information is gathered outside the main thread so it's less
828   likely to delay other incoming connections if the host is misconfigured.
829 - New config option "hostname" to use a hostname other than
830   the one returned by the operating system. Useful to speed-up responses
831   for CGI requests on misconfigured systems. Requested by Max Khon.
832 - The CGI editor supports the "disable all filters of this type"
833   directives "-client-header-filter", "-server-header-filter",
834   "-client-header-tagger" and "-server-header-tagger".
835 - Fixed false-positives with the link-by-url filter and URLs that
836   contain the pattern "/jump/".
837 - The less-download-windows filter no longer messes
838   "Content-Type: application/x-shockwave-flash" headers up.
839 - In the show-url-info page's "Final results" section active and
840   inactive actions are listed separately. Patch provided by Lee.
841 - The GNUmakefile supports the DESTDIR variable. Patch for
842   the install target submitted by Radoslaw Zielinski.
843 - Embedding the content of configuration files in the show-status
844   page is significantly faster now. For a largish action file (1 MB)
845   a speedup of about 2450 times has been measured. This is mostly
846   interesting if you are using large action files or regularly use
847   Privoxy-Regression-Test while running Privoxy through Valgrind,
848   for stock configuration files it doesn't really matter.
849 - If zlib support is unavailable and there are content
850   filters active but the prevent-compression action is disabled,
851   the show-url-info page includes a warning that compression
852   might prevent filtering.
853 - The show-url-info page provides an OpenSearch Description that
854   allows to access the page through browser search plugins.
855 - Custom client-header filters that rewrite the request line
856   incorrectly no longer cause Privoxy to crash. Reported by din_a4.
857 - The obsolete kill-popups action has been removed as the
858   PCRS-based popup filters can do the same and are slightly
859   less unreliable.
860 - The inspect-jpegs action has been removed.
861 - The send-wafer and send-vanilla-wafer actions have been removed.
862   They weren't particular useful and their behaviour could be emulated
863   with add-header anyway.
864 - Privoxy-Regression-Test has been significantly improved.
865 - Most sections in the default.action file contain tests for
866   Privoxy-Regression-Test to verify that they are working as intended.
867 - Parts of Privoxy have been refactored to increase maintainability.
868 - Building with zlib (if available) is done by default.
869
870 *** Version 3.0.8 ***
871
872 - Fixed a small memory leak when listen-address only specifies the port.
873 - The source tar balls now include Privoxy-Regression-Test which
874   (upon other things) can be used to automatically detect some
875   packaging problems. Packagers are welcome to give it a try.
876 - Reverted a change in 3.0.7 that caused path patterns to be checked
877   even if the host pattern match already failed. While this doesn't
878   noticeable affect the performance, it makes it less likely to run
879   out of stack space with overly-complex path patterns the user might
880   have added.
881 - Updated the msn, yahoo and google filters to work as advertised again.
882 - The warning message shown by the show-status CGI page is easier to
883   understand. Previously it wasn't clear that the error message
884   is shown below the invalid directive. (Reported by Lee)
885 - When regenerating Content-Disposition headers the more common
886   spelling is used for the name. Previously it was written without caps.
887 - Less confusing log message if the content type isn't overwritten
888   because force-text-type wasn't used but the old type doesn't look
889   like content that would be filtered normally.
890 - Better log messages if the user tries to execute filters that
891   don't exist.
892 - Treat the non-standard Request-Range headers like standard range
893   headers and suppress them if content filtering is enabled.
894 - Prevent the log messages for CONNECT requests to unacceptable
895   ports from printing the limit-connect argument as [null] if
896   limit-connect hasn't been explicitly enabled.
897 - Don't disable the mingw32 log window if the logfile directive
898   isn't used. While it was an intentional change in 3.0.7 at least
899   one user perceived it as a regression and the same effect can
900   be achieved by disabling all debug directives.
901 - Fixed two minor problems related to the win32 build process: a css
902   file was not being in the installer and the trustfile comment in the
903   config.txt referenced a nonexisting file
904 - Minor documentation fixes.
905
906 *** Version 3.0.7 Beta ***
907
908 - Added zlib support to filter content with gzip and deflate
909   encoding. (Patch provided by Wil Mahan)
910 - Dedicated filters and actions are used for header filtering.
911   "filter-client-headers" and "filter-client-headers" are no longer
912   supported, use server-header-filter{} and client-header-filter{}
913   instead.
914 - Tags can be used to change actions based on HTTP headers.
915 - New server-header filter: less-download-windows.
916 - New client-header taggers: css-requests, image-requests,
917   client-ip-address, http-method, allow-post, complete-url,
918   user-agent and privoxy-control.
919 - New server-header taggers: content-type and privoxy-control.
920 - The forward-override{} action allows to change the forwarding
921   settings through the action files, for example based on client
922   headers like the User-Agent, or the request origin.
923 - Socks errors are no longer handled by the CGI page for
924   DNS resolution failures.
925 - CGI pages use favicons to signal whether they are error
926   or control pages. This is useful if you rely heavily on
927   browser tabs.
928 - The show-url-info CGI page shows the forwarding settings.
929 - "Crunch!" log messages (used when Privoxy answers requests
930   by itself) now also contain the reason.
931 - Allow to rewrite the request destination behind the client's back.
932 - Fix socks requests on big-endian platforms. Patch provided by Song Weijia.
933 - Fixes possible deadlocks and crashes on OpenBSD.
934   Patch provided by Ralf Horstmann.
935 - The CGI action editor allows to edit actionfiles with previously
936   forbidden characters like dots.
937 - New trust entries are saved with a comment that contains the
938   trusted referring URL (Suggested by Daniel Griscom).
939 - Filter descriptions are HTML encoded automatically.
940 - New config option "split-large-forms" to work
941   around a browser bug that caused IE6 and IE7 to ignore
942   the Submit button on the edit-actions-for-url CGI page.
943 - New config option "allow-cgi-request-crunching" to allow
944   requests for Privoxy's CGI pages to be blocked, redirected
945   or (un)trusted like ordinary requests.
946 - Empty filter files no longer interrupt the filtering process
947   prematurely and are correctly listed on the show-status CGI page.
948 - New config option "accept-intercepted-requests" to combine
949   Privoxy with any packet filter to build an intercepting proxy
950   for HTTP/1.1 requests (and for HTTP/1.0 requests with Host header set).
951 - fast-redirects{} catch redirects to https URLs as well.
952 - redirect{s@foo@bar@} can be used to redirect to a rewritten
953   version of the original URL.
954 - Trap unsupported gopher proxy requests.
955 - Fixed a bug in the User Manual delivery on Windows
956   (mingw32 only). Images now show up correctly and HTML
957   pages are no longer padded with garbage data.
958 - Fixed several minor memory leaks, most of them discovered with Valgrind.
959 - Only unlink the pidfile if it's actually used.
960 - Retries after connection problems with forced requests
961   aren't blocked again.
962 - On Unix SIGABRT causes a core dump as expected and is no
963   longer treated as normal shutdown signal.
964 - The "access denied" CGI page is more descriptive and
965   allows retries to circumvent the referrer check.
966 - Updated PCRS to handle unexpected PCRE errors properly.
967   Fixed crashes that could occur if Privoxy was build
968   with external PCRE versions newer than Privoxy's internal
969   one. (Reported by Chung-chieh Shan)
970 - Fixed crashes with null bytes in PCRS replacement strings
971   (Patch provided by Felix Gröbert).
972 - Fixed crashes with header time randomization on mingw32.
973 - The CGI style sheet is no longer delivered if the referring
974   page isn't a Privoxy CGI page. This prevents a JavaScript-based
975   Privoxy detection "attack". Note that detecting Privoxy is
976   still possible through other ways and Privoxy was never intended
977   to be invisible anyway.
978 - Added support for AmigaOS 4, fixed build for AmigaOS 3.x.
979 - The show-url-info CGI page displays a warning if Privoxy
980   is currently toggled off.
981 - The show-status CGI page suppresses the edit button
982   for action files if Privoxy has no write access.
983 - Most CGI error pages react properly to HEAD requests.
984 - Requests with RFC 3253 HTTP methods (used by Subversion)
985   are accepted. (Patch provided by Petr Kadlec)
986 - New config option "templdir" to change the location
987   of the CGI templates to make sure customized templates
988   aren't "updated".
989 - Better handling of "HTTP/1.1 100 Continue" responses.
990 - The background of the PNG pattern is transparent.
991 - Fixed XML syntax errors caused by banners-by-size and banners-by-url.
992 - Fixed crashes and possible action file corruptions
993   when lines containing hashes are written through the CGI editor.
994 - Supports dynamic filters which can contain variables.
995 - Supports tags to change the actions based on client or server headers.
996 - Incorrect actions are logged before program termination.
997 - The "actionsfile" syntax in the configuration file is consistent
998   with the rest of the configuration options and requires the
999   whole file name. This is an incompatible change, if you use
1000   an old configuration file you might have to append ".action"
1001   to your "actionsfile" directives.
1002 - With the configuration file option "enforce-blocks" the
1003   "go there anyway" mechanism can be disabled without recompiling
1004   Privoxy.
1005 - More precise error messages in case of incorrect acl syntax.
1006 - Logs a warning if filtering is enabled but impossible due
1007   to lack of zlib support or use of the prevent-compression action.
1008 - Less noisy handling of Cookie:" and "Connection:" headers.
1009 - Improved error messages in case of connection problems.
1010 - Fix a command-line-parsing bug that was introduced before 3.0.5
1011   beta and caused Privoxy to treat the last argument as configuration
1012   file if no configuration file was specified.
1013 - Treat unknown command line options as fatal errors instead
1014   of silently ignoring them.
1015 - Use string functions with length checks more often.
1016 - Don't log CONNECT requests twice.
1017 - Allow to log the source address for ACL-related connection drops.
1018 - Don't ignore applying filters if the server didn't
1019   specify a Content-Type. Bug reported by Amuro Namie.
1020 - Rejected CONNECT requests are logged with log level info
1021   (enabled by default) and the reason for the block.
1022 - New command line option "--pre-chroot-nslookup hostname" to
1023   intialize the resolver library before chroot'ing. On some systems this
1024   reduces the number of files that must be copied into the chroot tree.
1025   (Patch provided by Stephen Gildea)
1026 - Fix a long-standing memory corruption bug that could cause
1027   Privoxy to overwrite a single byte in memory it didn't explicitly
1028   allocate (but that probably was allocated anyway due to bucket size).
1029 - Send template-based CGI pages as HTTP/1.1 unless the client
1030   asked for HTTP/1.0.
1031 - Let the first line in connection established responses
1032   end in \r\n as required by RFC1945. Reported by Bert van Leeuwen.
1033 - If no log file has been specified, disable logging instead of logging
1034   to stderr.
1035 - Don't block stderr when in daemon mode.
1036 - Ignore missing zero-chunks when filtering chunk-encoded content.
1037   Earlier Privoxy versions would buffer and then forward the content
1038   unmodified which caused some browsers to simply show empty pages.
1039 - Fix double free in cgi_edit_actions_list(). Reported by Venustech AD-LAB.
1040 - The code to add X-Forwarded-For headers when the hide-forwarded-for-headers
1041   action isn't being used has been removed.
1042 - Fixed trustfile feature which previously didn't work without FEATURE_TOGGLE.
1043   Reported by Lee.
1044 - Minor code clean-ups, filter and action file updates.
1045   (Some of them reported by Davide Alberani, Markus Elfring,
1046    Stefan Huehner and Adam Piggott)
1047
1048 *** Version 3.0.6 ***
1049
1050 - New content filters: no-ping, google, msn, yahoo and blogspot.
1051 - New header filters:  x-httpd-php-to-html, html-to-xml, xml-to-html
1052                        and hide-tor-exit-notation.
1053 - The special header "X-Filter: No" now disables header filtering as well.
1054 - Improved the filters img-reorder, js-annoyances, webbugs,
1055   banners-by-size, banners-by-link and ie-exploits to make them
1056   less likely to break anything.
1057 - Removed outdated URL patterns in default.action and added new ones.
1058 - Added redirection from http://p.p/user-manual to http://p.p/user-manual/
1059 - Changed webinterface default values for hide-user-agent, hide-referrer
1060   and set-image-blocker.
1061
1062 *** Version 3.0.5 Beta ***
1063
1064 - Windows version can be installed/started as a service.
1065 - Windows icon stays blue when Privoxy is idle, green when busy.
1066 - Integrated Fabian Keil's extensive patch.  See:
1067   http://www.fabiankeil.de/sourcecode/privoxy/. Includes the
1068   following new or significantly improved actions (among many
1069   other improvements):
1070
1071      content-type-overwrite{}
1072      crunch-client-header{string}
1073      crunch-if-none-match
1074      crunch-server-header{string}
1075      fast-redirects{check-decoded-url}
1076      filter-client-headers
1077      filter-server-headers
1078      force-text-mode
1079      handle-as-empty-document
1080      hide-accept-language{}
1081      hide-content-disposition{}
1082      hide-if-modified-since
1083      hide-referrer{conditional-block}
1084      overwrite-last-modified{}
1085      redirect{URL}
1086      treat-forbidden-connects-like-blocks
1087
1088 - Standard-compliant clients are prevented from displaying cached
1089   copies of Privoxy's error messages after the cause of the problem
1090   has gone.
1091 - Improved DNS error handling.
1092 - Multiple filter files can now be specified in config.
1093 - Added jpeg filtering to defend against MS jpeg vulnerability MS04-028
1094   with the new inspect-jpegs action.
1095 - Removed the "arbitrary" 1000 filter limit - addresses tracker #911950
1096 - Thanks to Jindrich Makovicka for a race condition fix for the log
1097   file.  The race condition remains for non-pthread implementations.
1098   Reference patch #1175720. Various other logging enhancements.
1099 - A pile of assorted bug fixes, memory leaks, enhancements, etc.
1100 - Moved Actions file reporting mechanism to SF tracker.
1101 - Two new options for config: enable-remote-http-toggle and
1102   forwarded-connect-retries.
1103 - Trap unsupported FTP requests.
1104 - Let text/xml be filtered.
1105 - Numerous updates to default.action
1106 - Increase the compiled in limit of trusted referrers from 64 to 512
1107   (for trustfile users).
1108
1109 *** Version 3.0.3 ***
1110
1111 - Fixed yet another two memory leaks. Process growth seems stopped now.
1112 - Further tightened security against malicious toggle-off links.
1113 - Excluded text/plain MIME types from filtering. This fixes a
1114   couple of client-crashing, download corruption and
1115   Privoxy performance issues, whose root cause lies in
1116   web servers labelling content of unknown type as text/plain.
1117 - Assorted fixes for POSIX compliance, signal handling, graceful
1118   termination, compiler warnings, OSX support, Win32 systray,
1119   error logging, hostname wildcards, correct detection of NetBSD.
1120 - Workarounds for client (iTunes etc) and server (PHP < 4.2.3) bugs
1121   including the notorious "blank page" problem.
1122 - Various filter improvements; most notably the unsolicited-popups
1123   filter became less destructive
1124 - Major revamp of the actions file
1125
1126 *** Version 3.0.2 ***
1127
1128 - Fixed two memory leaks, one serious
1129 - Fixed bug in pcrs which could cause crashes with user-defined filters
1130 - Fixed bug in domain name matching
1131 - Assorted small fixes (Win32 menu, CGI URL editor, ..)
1132 - Added basic support for the OPTIONS and TRACE http methods
1133 - Added workaround for Bug in Mac OSX that made Privoxy crash occasionally
1134 - Refined the default action file through >400 items of user feedback
1135 - Filter changes:
1136   - Assorted refinements, optimizations and fixes in the js-annoyances,
1137     img-reorder, banners-by-size, banners-by-link, webbugs, refresh-tags,
1138     html-annoyances, content-cookies and fun filters
1139   - Replaced filter "popups" by choice between two modes:
1140     - "unsolicited-popups" tries to catch only the unsolicited ones
1141     - "all-popups" tries to kill them all (as before)
1142   - New filter "tiny-textforms" Help those tiny or hard-wrap textareas.
1143   - New filter "jumping-windows" that prevents windows from resizing
1144     and moving themselves
1145   - New filter "demoronizer" which fixes MS's abuse of std charsets
1146     (common cases anyway).
1147   - Replaced "nimda" with more general "ie-exploits" filter in which
1148     all filters for exploits shall be collected
1149 - Improved cookie logging
1150 - Rewrote make install target. Added uninstall and install-strip
1151   targets.
1152 - Fixed a potential (application-level, NOT OS-level!) security
1153   problem involving remote toggling and action file manipulation
1154   by mailicious websites.
1155 - Added ability to chroot (thanks to Sviatoslav Sviridov)
1156 - Added more action aliases for prehistoric action names
1157 - Add Slackware support to Makefile.
1158
1159 *** Version 3.0  ***
1160
1161 - Fixed Windows startmenu items, log window and tray icon menus.
1162 - Added warning for bogus install target
1163 - Added quicktime-kioskmode filter and improved frameset-borders
1164 - Updated default.action based on latest feedback
1165 - New PDF doc build process
1166 - Add a user contrib module to cvs:
1167   http://cvs.sourceforge.net/cgi-bin/viewcvs.cgi/ijbswa/contrib/
1168
1169 *** Version 2.9.18  ***
1170
1171 - Added workaround for IE bug that broke CGI interface
1172 - Bugfix: String actions now reliably editable through CGI interface
1173 - Three filters fixed (again!)
1174 - Assorted small fixes and doc enhancements
1175
1176 *** Version 2.9.16  ***
1177
1178 - Major revamp of default.action to get rid of years of cruft.
1179 - Same for default.filter
1180 - Re-design and major improvements to the CGI editor interface.
1181 - Address spurious 'out of memory' error due to incorrect file permissions.
1182 - Impose buffer limits while reading client and server headers.
1183 - Better memory and CPU optimization.
1184 - Add Conectiva Linux package.
1185 - user-manual directive added to config for help links from within CGI
1186   editor.
1187 - Multiple actions files can now be specified in config.
1188 - Actions files are changed to: default.action, standard.action, and
1189   user.action. user.action is for personal/local configuration.
1190 - The usual many small and miscellaneous bug and security fixes.
1191
1192 *** Version 2.9.14 Beta ***
1193
1194 - Fix Solaris compile problem (gateway.h and filters.h)
1195 - Makefile fixes for Solaris, FreeBSD (?)
1196 - Fix build failure where certain features were disabled.
1197 - 'blocked-compact' template is removed. Various CGI improvements,
1198   including an adaptive 'blocked' template.
1199 - Various tweaks for actions file to get ready for stable 3.0
1200 - Included a 'Bookmarklet' and PHP scripts for reporting actions file
1201   problems via web interface at privoxy.org. Accessed via internal CGIs.
1202 - Include cgi-style.css for templates.
1203 - #include mechansim for common text in templates
1204 - Various other minor fixes.
1205
1206 *** Version 2.9.13 Beta ***
1207
1208 - *NEWS*: The project has been renamed to Privoxy! The new name is
1209   reflected throughout (file locations, etc).
1210 - ijb.action is now default.action. re_filterfile is now
1211   default.filter.
1212 - http://i.j.b/ is now http://p.p/
1213 - The 'logo' option for replacing ad iamges is removed now. 'Pattern'
1214   (checkerboard) is now the default.
1215 - RPM spec file make over.
1216
1217
1218 *** Version 2.9.12 Beta ***
1219
1220 - **READ**: The default listening PORT is NOW 8118!!! Changed from
1221   8000 due to conflict with NAS (Network Audio Server, whatever that
1222   is.)
1223 - More CGI actions editor fixes and improvements.
1224 - Win32 command line fix ups.
1225 - re_filterfile now has modular sections that can be activated on a
1226   per site basis. Some new goodies there too.
1227 - +filter now takes arguments to match FILTER sections in re_filterfile
1228   for even more flexibility.
1229 - Added a new image blocker option: +image-blocker{pattern}, which
1230   displays a checkerboard patthern and scales better than the logo.
1231 - PNG images will be used in place of GIF for JB built-in images
1232   if configured with --enable-no-gif.
1233 - Clean up compiler warnings (mostly).
1234 - Improved handling of failed DNS lookups & diagnostics for failed bind
1235   to listen socket
1236 - Made --no-daemon mode log to tty instead of logfile.
1237 - Various spec file and init script cleanups and improvements (Redhat and
1238   SuSE).
1239 - CGI Editor works on OS/2 now.
1240 - Fix restart failure where sockets were in TIME_WAIT.
1241 - Fixes for actions cgi editor, make sure we have right file.
1242 - A --pidfile command line option now, in addition to --help,
1243   --version, --no-daemon, --user and configfile. --no-daemon replaces
1244   the former -d option and _DEBUG define. --user will drop privileges
1245   to the specified user.
1246 - Signal handling cleanups (*nix).
1247 - CGI actions editor improvements and fixes.
1248 - Error handling improvements, especially out of memory.
1249 - Default re_filterfile fix that caused spurious IJB logos
1250   (instead of 'blank').
1251 - configure.in threading fixes for Solaris.
1252 - Various other minor fixes.
1253
1254
1255 *** Version 2.9.11 Beta Changes ***
1256
1257 - Add "session" cookie concept where cookies exist for the life
1258   of that browser session only (ie never goes to disk).
1259 - Checks for correct header length.
1260 - Fix user:pass@host.domain.com auth bug.
1261 - Better signal handling on *nix.
1262 - Fix CFLAGS hard-coded in configure.in
1263 - Fix threading bug re: gethostbyname() that caused random
1264   URLs to fail in some cases.
1265
1266
1267 *** Version 2.9.11 Alpha Changes ***
1268
1269 - A web-based editor for the actions file is included (go to http://i.j.b/).
1270 - Web-based toggle IJB on/off support.
1271 - Cookie handling has changed - the new +no-cookies-keep feature is now the
1272 default.
1273 - actionsfile is renamed to ijb.action.
1274 - junkbstr.txt is now config.txt on Win32.
1275 - Support for running IJB as a UNIX daemon process has improved.
1276 - Unix daemon now returns error code on failed start.
1277 - Timestamps in logfile and jarfile now.
1278 - Fix for the Netscape bug reintroduced in 2.9.9.
1279 - make should now abort if gmake (GNU make) not present.
1280 - Many other minor bugfixes
1281 - Start a ChangeLog :)
1282
1283
1284
1285 *** Version 2.9.3 pre-Alpha Changes ***
1286
1287 - Amiga support (completely untested by me - I don't have an Amiga)
1288 - "tinygif 3" support (redirects blocked images to a specified URL, so
1289 the browser doesn't have to load and cache many copies of the same
1290 image).
1291 - one case where there were both local and global "referrer" variables
1292 (yuck!) clarified by renaming the local one to "refer".
1293 - Fixed some places where close() was used instead of close_socket().
1294 Thanks to Jörg Strohmayer (joergs at users.sourceforge.net) for these.
1295 - Temporary hack to get FORCE_LOAD to work with IE.  I just lowercased the
1296 FORCE_LOAD_PREFIX.  Needs fixing properly.
1297 - Most URLs hardcoded into Junkbuster were changed to go through a script
1298 e.g. http://ijbswa.sourceforge.net/redirect.php?v=2.9.3&to=faq
1299 The only other URLs left are the GNU GPL:
1300   http://www.fsf.org/copyleft/gpl.html
1301 and the home page:
1302   http://ijbswa.sourceforge.net/
1303 ... and various URLs which will be intercepted by Junkbuster anyway.
1304 TODO: Still need to do something with the URLs in Junkbuster Corp's
1305 copyright/trademark notice on the bottom of the show-proxy-args page.
1306 - PCRE or GNU Regex is now a #define option.
1307
1308
1309 *** Version 2.9.2 pre-Alpha Changes ***
1310
1311 - Andreas applied the latest version of the FORCE patch.
1312
1313
1314 *** Version 2.9.1 pre-Alpha Changes ***
1315
1316 - in parsers.c, fixed two #ifdef FORCE to #ifdef FORCE_LOAD
1317 (BTW: I think FORCE is precise enough, since loading remote
1318 data is the whole purpose of a proxy..)
1319 - Set the FORCE_PREFIX (back) to 'IJB-FORCE-LOAD-'. While 'noijb.'
1320 is more elegant and looks like a hostname in the URL, it doesn't
1321 make clear to the inexperienced user that the proxy is bypassed. It
1322 also has a higher name collision risk.
1323 - Filled in the function header templates for my functions in
1324 parsers.c (again). They obviously got lost in our current
1325 patch war ;-)
1326 - Cut the credit for the §-referrer-option from the config file,
1327 that Stefan had placed there.
1328 - Improved the re_filterfile
1329
1330
1331 *** Version 2.9.0 pre-Alpha Changes ***
1332
1333 -  Now use PCRE, not GNU REGEX.  I have not yet had chance to check the
1334 syntax of the block/image/cookie file to ensure that they match what
1335 is expected - however they seem to work.
1336 -  Replaced "configure" script with one generated by "autoconf".  Also
1337 use a header "config.h" (was ijbconfig.h in my previous release) for
1338 the #defines.  "config.h" is now generated with "autoheader" from
1339 "acconfig.h" and "configure.in".  (Note that to install you do not
1340 need autoconf or autoheader - just run "./configure".)
1341 To see command-line options, run "./configure --help".
1342 This is my first ever autoconf script, so it has some rough edges
1343 (how PCRE is handled is the roughest).
1344 -  Error logging code replaced with new module errlog.c, based on the
1345 one from JunkbusterMT (but with the threading code removed).
1346 -  Most of Rodney's 0.21 and 0.21A patches applied. (Marked *).  I did not
1347 apply all of these, since I had already independently done conditional
1348 popup file, conditional image file, and integration of popup code.
1349 - ACL, Jar and trust files conditionally compiled.
1350 - New source file headers.
1351 - Various cosmetic changes.  (But I have not consistently ordered the
1352 config files - I think that's worthwhile, but it's 1am and I want to
1353 get this released!)
1354 - RCS tags on .h files.
1355 -  RCS tags are const char[] rather than const char *.  (Saves 4 bytes
1356 per tag ;-)
1357 - VC++ project files renamed to vc_junkbuster.*.
1358 - show-proxy-args now shows status of all conditionals, not just REGEX
1359 - Various functions moved around.  Most notably all the system-specific
1360 sockets code which was spread between jcc.c, bind.c, and connect.c,
1361 has been moved to "jbsockets.c".  The non-system-specific code from
1362 connect.c and socks4.c has been movet to "gateway.c".  Also, the
1363 config file loader and the global variables it writes to have been
1364 moved to "loadcfg.c".  (Maybe this should go into loaders.c?)
1365 And candidate for the "worst filename ever" award is "miscutil.c",
1366 which contains, well, miscellaneous utility functions like zalloc.
1367 (Suggestions for a better name for this file are welcome!)
1368 - Loaders now use a common function to read a line and skip comments,
1369 and this function also stores the proxy_args.
1370 - Added ./junkbuster --help     (Not for Win32 GUI)
1371 - Added ./junkbuster --version  (Not for Win32 GUI)
1372 - Win32 resources are now all marked as "U.S. English", rather than
1373 being a mix of "U.S. English", "U.K. English" and "Irish English".
1374 - Version number changes to 2.9.0
1375
1376
1377 ----------------------------------------------------------------------
1378 Copyright   :  Written by and Copyright (C) 2001-2010 the
1379                Privoxy team. http://www.privoxy.org/
1380
1381                Based on the Internet Junkbuster originally written
1382                by and Copyright (C) 1997 Anonymous Coders and
1383                Junkbusters Corporation.  http://www.junkbusters.com/
1384
1385                This program is free software; you can redistribute it
1386                and/or modify it under the terms of the GNU General
1387                Public License as published by the Free Software
1388                Foundation; either version 2 of the License, or (at
1389                your option) any later version.
1390
1391                This program is distributed in the hope that it will
1392                be useful, but WITHOUT ANY WARRANTY; without even the
1393                implied warranty of MERCHANTABILITY or FITNESS FOR A
1394                PARTICULAR PURPOSE.  See the GNU General Public
1395                License for more details.
1396
1397                The GNU General Public License should be included with
1398                this file.  If not, you can view it at
1399                http://www.gnu.org/copyleft/gpl.html
1400                or write to the Free Software Foundation, Inc., 59
1401                Temple Place - Suite 330, Boston, MA  02111-1307, USA.