ChangeLog: Add entries for the security fixes
[privoxy.git] / ChangeLog
1 --------------------------------------------------------------------
2 ChangeLog for Privoxy
3 --------------------------------------------------------------------
4 *** Version 3.0.33 stable ***
5 - Security/Reliability:
6   - cgi_error_no_template(): Encode the template name to prevent
7     XSS (cross-side scripting) when Privoxy is configured to servce
8     the user-manual itself.
9     Commit 0e668e9409c. OVE-20211102-0001. CVE-2021-44543.
10     Reported by: Artem Ivanov
11   - get_url_spec_param(): Free memory of compiled pattern spec
12     before bailing.
13     Reported by Joshua Rogers (Opera) who also provided the fix.
14     Commit 652b4b7cb0. OVE-20211201-0003. CVE-2021-44540.
15   - process_encrypted_request_headers(): Free header memory when
16     failing to get the request destination.
17     Reported by Joshua Rogers (Opera) who also provided the fix.
18     Commit 0509c58045. OVE-20211201-0002. CVE-2021-44541.
19   - send_http_request(): Prevent memory leaks when handling errors
20     Reported by Joshua Rogers (Opera) who also provided the fix.
21     Commit c48d1d6d08. OVE-20211201-0001. CVE-2021-44542.
22
23 - Bug fixes:
24   - handle_established_connection(): Skip the poll()/select() calls
25     if TLS data is pending on the server socket. The TLS library may
26     have already consumed all the data from the server response in
27     which case poll() and select() will not detect that data is
28     available to be read.
29     Fixes SF bug #926 reported by Wen Yue.
30   - continue_https_chat(): Update csp->server_connection.request_sent
31     after sending the request to make sure the latency is calculated
32     correctly. Previously https connections were not reused after
33     timeout seconds after the first request made on the connection.
34   - free_pattern_spec(): Don't try to free an invalid pointer
35     when unloading an action file with a TAG pattern while
36     Privoxy has been compiled without FEATURE_PCRE_HOST_PATTERNS.
37     Closes: SF patch request #147. Patch by Maxim Antonov.
38   - Establish the TLS connection with the client earlier and decide
39     how to route the request afterwards. This allows to change the
40     forwarding settings based on information from the https-inspected
41     request, for example the path.
42   - Adjust build_request_line() to create a CONNECT request line when
43     https-inspecting and forwarding to a HTTP proxy.
44     Fixes SF bug #925 reported by Wen Yue.
45   - load_config(): Add a space that was missing in a log message.
46
47 - General improvements:
48   - serve(): Close the client socket as well if the server socket
49     for an inspected connection has been closed. Privoxy currently
50     can't establish a new server connection when the client socket
51     is reused and would drop the connection in continue_https_chat()
52     anyway.
53   - Don't disable redirect checkers in redirect_url()
54     Disable them in handle_established_connection() instead.
55     Doing it in redirect_url() prevented the +redirect{} and
56     +fast-redirects{} actions from being logged with LOG_LEVEL_ACTIONS.
57   - handle_established_connection(): Slightly improve a comment
58   - handle_established_connection(): Fix a comment
59   - socks5_connect(): Fix indentation.
60   - handle_established_connection(): Improve an error message
61   - create_pattern_spec(): Fix ifdef indentation
62   - Fix comment typos
63   - Add a CGI handler for /wpad.dat that returns a
64     Proxy Auto-Configuration (PAC) file.
65     Among other things, it can be used to instruct clients
66     through DHCP to use Privoxy as proxy.
67     For example with the dnsmasq option:
68     dhcp-option=252,http://config.privoxy.org/wpad.dat
69     Initial patch by Richard Schneidt.
70   - listen_loop(): When shutting down gracefully, close listening ports
71     before waiting for the threads to exit.
72     Allows to start a second Privoxy with the same config file
73     while the first Privoxy is still running.
74   - Allow to edit the add-header action through the CGI editor by
75     generalizing the code that got added with the suppress-tag action.
76     Closes SF patch request #146. Patch by Maxim Antonov.
77   - process_encrypted_request(): Improve a log message
78     The function only processes request headers and there
79     may still be unread request body data left to process.
80   - read_http_request_body(): Fix two error messages that used an incorrect variable.
81   - chat(): Log the applied actions before deciding how to forward the request.
82   - parse_time_header(): Silence a coverity complaint when building without assertions.
83   - receive_encrypted_request_headers(): Improve a log message
84   - mbedTLS get_ciphersuites_from_string(): Use strlcpy() instead of strncpy().
85     Previously the terminating NUL wasn't copied which resulted
86     in a compiler warning. This didn't cause actual problems as
87     the target buffer was initialized by zalloc_or_die() so the
88     last byte of the target buffer was NUL already.
89     Actually copying the terminating NUL seems clearer, though.
90   - Remove compiler warnings. "log_error(LOG_LEVEL_FATAL, ..." doesn't return
91     but apparently the compiler doesn't know that.
92     Get rid of several "this statement may fall through [-Wimplicit-fallthrough=]" warnings.
93   - If the the response is chunk-encoded, ignore the Content-Length
94     header sent by the server.
95     Allows to load https://redmine.lighttpd.net/ with filtering enabled.
96   - Store the PEM certificate in a dynamically allocated buffer
97     when https-inspecting. Should prevent errors like:
98     2021-03-16 22:36:19.148 7f47bbfff700 Error: X509 PEM cert len 16694 is larger than buffer len 16383
99     As a bonus it should slightly reduce the memory usage as most
100     certificates are smaller than the previously used fixed buffer.
101     Reported by: Wen Yue
102   - Don't log the applied actions in process_encrypted_request()
103     Log them in continue_https_chat() instead to mirror chat().
104     Prevents the applied actions from getting logged twice
105     for the first request on an https-inspected connection.
106   - OpenSSL generate_host_certificate(): Use config.privoxy.org as Common Name
107     Org and Org Unit if the real host name is too long to get accepted by OpenSSL.
108     Clients should only care about the Subject Alternative Name
109     anyway and we can continue to use the real host name for it.
110     Reported by Miles Wen on privoxy-users@.
111   - OpenSSL generate_host_certificate(): Fix two error messsages.
112   - Improve description of handle_established_connection()
113   - OpenSSL ssl_store_cert(): Translate EVP_PKEY_EC to a string.
114   - OpenSSL ssl_store_cert(): Remove pointless variable initialization.
115   - OpenSSL ssl_store_cert(): Initialize pointer with NULL instead of 0.
116
117 - Action file improvements:
118   - Disable fast-redirects for .microsoftonline.com/.
119   - Disable fast-redirects for idp.springer.com/.
120   - Disable fast-redirects for .zeit.de/zustimmung
121   - Unblock adv-archiv.dfn-cert.de/
122   - Block requests to eu-tlp01.kameleoon.eu/
123   - Block requests to fpa-events.arstechnica.com/
124   - Unblock nlnet.nl/.
125   - Unblock adguard.com/.
126
127 - Privoxy-Log-Parser:
128   - Highlight 'Socket timeout 3 reached: http://127.0.0.1:20000/no-filter/chunked-content/36'
129   - Improve documentation for inactivity-detection mode
130   - Detect date changes when looking for inactivity
131   - Add a --passed-request-statistics-threshold option
132     That can be set to get statistics for requests that
133     were passed.
134   - Add a "inactivity detection" mode
135     Which can be useful for debugging purposes.
136   - Bump version to 0.9.4
137   - Only run print_intro() and print_outro() when syntax highlighting
138   - Rephrase a sentence in the documentation
139   - Highlight 'Client socket 7 is no longer usable. The server socket has been closed.'
140   - Clarify --statistics output
141     by explicitly mentioning that the status codes
142     sent by the server may differ from the ones in
143     "debug 512" messages.
144   - Fix typo in the --statistics output
145   - Remove an unused variable
146   - Highlight 'The peer notified us that the connection on socket 11 is going to be closed'
147
148 - Privoxy-Regression-Test:
149   - Remove duplicated word in a comment.
150
151 - regression-tests.action:
152   - Add fetch test for http://p.p/wpad.dat.
153   - Bump for-privoxy-version to 3.0.33 which introduced the wpad.dat support.
154   - Add more tests for the '/send-banner' code.
155   - Add test for OVE-20210203-0001.
156   - Add a test for CVE-2021-20217.
157
158 - uagen:
159   - Bump generated Firefox version to 91 (ESR)
160   - Bump version to 1.2.3
161   - Bump copyright
162
163 - Build system:
164   - configure: Bump SOURCE_DATE_EPOCH.
165   - GNUmakefile.in: Fix typo.
166   - configure: Add another warning in case --disable-pthread is used
167     while POSIX threads are available.
168     Various features don't even compile when not using threads.
169   - Add configure option to enable MemorySanitizer.
170   - Add configure option to enable UndefinedBehaviorSanitizer.
171   - Add configure option to enable AddressSanitizer.
172   - Bump copyright
173   - Add a configure option to disable pcre JIT compilation.
174     While JIT compilation makes filtering faster it can
175     cause false-positive valgrind complaints.
176     As reported by Gwyn Ciesla in SF bug 924 it also can
177     cause problems when the SELinux policy does not grant
178     Privoxy "execmem" privileges.
179   - configure: Remove obsolete RPM_BASE check
180
181 - Windows build system:
182   - Update the build script to use mbed tls version 2.6.11.
183   - Update build script to use the final 8.45 pcre library.
184   - Put all the '--enable-xxx' options in the configure call together.
185
186 - macOS build system:
187   - The OSXPackageBuilder repository has been updated and
188     can be used to create macOS packages.
189
190 - Documentation:
191   - contacting: Remove obsolete reference to announce.sgml.
192   - contacting: Request that the browser cache is cleared before
193     producing a log file for submission.
194   - Sponsor FAQ: Note that Privoxy users may follow sponsor links
195     without Referer header set.
196   - newfeatures: Clarify that https inspection also allows to
197     filter https responses.
198   - developer-manual: Mention that announce.txt should be updated
199     when doing a release.
200   - config: Explicitly mention that the CGI pages disclosing the
201     ca-password can be blocked and upgrade the disclosure paragraphs
202     to a warning.
203   - Put all the requested debug options in the config file.
204     Section 11.1 of the Privoxy user manual lists all the debug
205     options that should be enabled when reporting problems or requesting support.
206     Make it easier for users to do the right thing by having all those
207     options present in the config.
208   - Update TODO list item #184 to note that WolfSSL support will
209     (hopefully) appear after the 3.0.34 release
210   - Update max-client-connections's description.
211     On modern systems other than Windows Privoxy should
212     use poll() in which case the FD_SETSIZE value isn't
213     releveant.
214   - Add a warning that the socket-timeout does not apply
215     to operations done by TLS libraries
216   - Make documentation slightly less "offensive" for some people
217     by avoiding the word "hell".
218
219 *** Version 3.0.32 stable ***
220
221 - Security/Reliability:
222   - ssplit(): Remove an assertion that could be triggered with a
223     crafted CGI request.
224     Commit 2256d7b4d67. OVE-20210203-0001. CVE-2021-20272.
225     Reported by: Joshua Rogers (Opera)
226   - cgi_send_banner(): Overrule invalid image types. Prevents a
227     crash with a crafted CGI request if Privoxy is toggled off.
228     Commit e711c505c48. OVE-20210206-0001. CVE-2021-20273.
229     Reported by: Joshua Rogers (Opera)
230   - socks5_connect(): Don't try to send credentials when none are
231     configured. Fixes a crash due to a NULL-pointer dereference
232     when the socks server misbehaves.
233     Commit 85817cc55b9. OVE-20210207-0001. CVE-2021-20274.
234     Reported by: Joshua Rogers (Opera)
235   - chunked_body_is_complete(): Prevent an invalid read of size two.
236     Commit a912ba7bc9c. OVE-20210205-0001. CVE-2021-20275.
237     Reported by: Joshua Rogers (Opera)
238   - Obsolete pcre: Prevent invalid memory accesses with an invalid
239     pattern passed to pcre_compile(). Note that the obsolete pcre code
240     is scheduled to be removed before the 3.0.33 release. There has been
241     a warning since 2008 already.
242     Commit 28512e5b624. OVE-20210222-0001. CVE-2021-20276.
243     Reported by: Joshua Rogers (Opera)
244
245 - Bug fixes:
246   - Properly parse the client-tag-lifetime directive. Previously it was
247     not accepted as an obsolete hash value was being used.
248     Reported by: Joshua Rogers (Opera)
249   - decompress_iob(): Prevent reading of uninitialized data.
250     Reported by: Joshua Rogers (Opera).
251   - decompress_iob(): Don't advance cur past eod when looking
252     for the end of the file name and comment.
253   - decompress_iob(): Cast value to unsigned char before shifting.
254     Prevents a left-shift of a negative value which is undefined behaviour.
255     Reported by: Joshua Rogers (Opera)
256   - gif_deanimate(): Confirm that that we have enough data before doing
257     any work. Fixes a crash when fuzzing with an empty document.
258     Reported by: Joshua Rogers (Opera).
259   - buf_copy(): Fail if there's no data to write or nothing to do.
260     Prevents undefined behaviour "applying zero offset to null pointer".
261     Reported by: Joshua Rogers (Opera)
262   - log_error(): Treat LOG_LEVEL_FATAL as fatal even when --stfu is
263     being used while fuzzing.
264     Reported by: Joshua Rogers (Opera).
265   - Respect DESTDIR when considering whether or not to install
266     config files with ".new" extension.
267   - OpenSSL ssl_store_cert(): Fix two error messages.
268   - Fix a couple of format specifiers.
269   - Silence compiler warnings when compiling with NDEBUG.
270   - fuzz_server_header(): Fix compiler warning.
271   - fuzz_client_header(): Fix compiler warning.
272   - cgi_send_user_manual(): Also reject requests if the user-manual
273     directive specifies a https:// URL. Previously Privoxy would try and
274     fail to open a local file.
275
276 - General improvements:
277   - Log the TLS version and the the cipher when debug 2 is enabled.
278   - ssl_send_certificate_error(): Respect HEAD requests by not sending a body.
279   - ssl_send_certificate_error(): End the body with a single new line.
280   - serve(): Increase the chances that the host is logged when closing
281     a server socket.
282   - handle_established_connection(): Add parentheses to clarify an expression
283     Suggested by: David Binderman
284   - continue_https_chat(): Explicitly unset CSP_FLAG_CLIENT_CONNECTION_KEEP_ALIVE
285     if process_encrypted_request() fails. This makes it more obvious that the
286     connection will not be reused. Previously serve() relied on
287     CSP_FLAG_SERVER_CONTENT_LENGTH_SET and CSP_FLAG_CHUNKED being unset.
288     Inspired by a patch from Joshua Rogers (Opera).
289   - decompress_iob(): Add periods to a couple of log messages
290   - Terminate the body of the HTTP snipplets with a single new line
291     instead of "\r\n".
292   - configure: Add --with-assertions option and only enable assertions
293     when it is used
294   - windows build: Use --with-brotli and --with-mbedtls by default and
295     enable dynamic error checking.
296   - gif_deanimate(): Confirm we've got an image before trying to write it
297     Saves a pointless buf_copy() call.
298   - OpenSSL ssl_store_cert(): Remove a superfluous space before the serial number.
299
300 - Action file improvements:
301   - Disable fast-redirects for .golem.de/
302   - Unblock requests to adri*.
303   - Block requests for trc*.taboola.com/
304   - Disable fast-redirects for .linkedin.com/
305
306 - Filter file improvements:
307   - Make the second pcrs job of the img-reorder filter greedy again.
308     The ungreedy version broke the img tags on:
309     https://bulk.fefe.de/scalability/.
310
311 - Privoxy-Log-Parser:
312   - Highlight a few more messages.
313   - Clarify the --statistics output. The shown "Reused connections"
314     are server connections so name them appropriately.
315   - Bump version to 0.9.3.
316
317 - Privoxy-Regression-Test:
318   - Add the --check-bad-ssl option to the --help output.
319   - Bump version to 0.7.3.
320
321 - Documentation:
322   - Add pushing the created tag to the release steps in the developer manual.
323   - Clarify that 'debug 32768' should be used in addition to the other debug
324     directives when reporting problems.
325   - Add a 'Third-party licenses and copyrights' section to the user manual.
326
327 *** Version 3.0.31 stable ***
328
329 - Security/Reliability:
330   - Prevent an assertion from getting triggered by a crafted CGI request.
331     Commit 5bba5b89193fa. OVE-20210130-0001. CVE-2021-20217.
332     Reported by: Joshua Rogers (Opera)
333   - Fixed a memory leak when decompression fails "unexpectedly".
334     Commit f431d61740cc0. OVE-20210128-0001. CVE-2021-20216.
335
336 - Bug fixes:
337   - Fixed detection of insufficient data for decompression.
338     Previously Privoxy could try to decompress a partly
339     uninitialized buffer.
340
341 *** Version 3.0.30 stable ***
342
343 - Bug fixes:
344   - Check the actual URL for redirects when https inspecting requests.
345     Previously Privoxy would only check the path which resulted in
346     rewrite results being rejected as invalid URLs.
347     Reported by withoutname in #1736.
348   - Let the hide-referrer code tolerate Referer headers with https:// URLs.
349     Previously they would always be treated like a changed host.
350   - Use the https headers if the show-request handler is reached through
351     https://. Previously Privoxy would use the http headers which
352     may be empty on a reused connection.
353   - Make CGI_PREFIX protocol-relative when building with FEATURE_HTTPS_INSPECTION.
354     This unbreaks (at least) https://config.privoxy.org/client-tags whose
355     buttons would previously use a http:// URL resulting in browser warnings.
356   - Support using https-inspection and client-header-order at the same time.
357     Previously Privoxy would crash.
358     Reported by: Kai Raven
359   - Properly reject rewrites from http to https as they currently
360     aren't supported. Previously Privoxy would wait for the client
361     to establish an encrypted connection which obviously would not happen.
362   - When https inspection is enabled and Privoxy has been compiled with
363     FEATURE_GRACEFUL_TERMINATION (not recommended for production builds),
364     the TLS backend resources are free'd later on and only if no active
365     connections are left. Prevents crashes when exiting "gracefully" at the
366     wrong time.
367   - Let the uninstall target remove the config file even if DESTDIR
368     is set and properly announce the deletion of the configuration files.
369
370 - General improvements:
371   - Allow to rewrite the request destination for https-inspected
372     requests behind the client's back. The documentation already sort
373     of claimed that it was supported by not especially mentioning that
374     it didn't work for https-inspected requests.
375     Fixes SF bug #923 reported by withoutname.
376   - Add support for filtering client request bodies by using
377     CLIENT-BODY-FILTER filters which can be enabled with the
378     client-body-filter action.
379     Patch submitted by Maxim Antonov.
380     Sponsored by: Robert Klemme
381   - Add the new action suppress-tag{} which can be used to prevent
382     a tagger from adding a tag. Patch submitted by Maxim Antonov.
383     Sponsored by: Robert Klemme
384   - Gracefully handle existing website keys without matching certificates.
385     This can happen if Privoxy was previously running with an invalid
386     TLS configuration that didn't allow it to create a certificate.
387   - Recycle debug bit 4 for Tagging-related messages.
388   - Improve the message shown when the client-tags CGI page
389     is requested with no tags configured.
390   - Shorten the 'donate' and 'participate' links used by templates
391     using redirects. Currently the redirects lead to the FAQ entries
392     but in the future we may want to relocate the content and using
393     redirects makes this more convenient.
394   - Log an error when a PCRE-HOST-PATTERN is used with
395     FEATURE_PCRE_HOST_PATTERNS disabled. Don't treat this a
396     fatal error so the regression tests can be used with and
397     without FEATURE_PCRE_HOST_PATTERNS.
398   - The code compiles with older C compilers again.
399   - The chdir() return code is checked to fix a compiler warning.
400   - The packages feed has been removed from the source tarball.
401     It's usually out of date when the source tarball is generated
402     for the release.
403   - Fixed harmless compiler warnings from GCC9 with -D_FORTIFY_SOURCE=2.
404   - windows: Remove obsolete '$(DEST)/doc/images' target.
405   - windows: Install the images referenced in the user manual.
406   - Remove obsolete 'gnu_regex.@OBJEXT@' target.
407   - When installing from the GNUMAkefile, don't create an 'images'
408     directory which is no longer used. The images were relocated to
409     the user-manual directory years ago.
410   - Add new FEATURES to the show-status page and resort list.
411   - Remove unused variable in the OpenSSL-specific code.
412   - Update bug tracker URL in cgi_error_unknown().
413   - Saved a couple of memory allocations when sorting client headers.
414   - Improved a couple of error messages.
415   - Saved memory allocations when using OpenSSL and checking if a
416     key already exists.
417   - The configure script will bail out if OpenSSL and mbedTLS are
418     enabled at the same time.
419   - Log a message right before exiting gracefully.
420   - A couple of structures have been rearranged to require slightly
421     less memory.
422   - When https inspection is enabled and the certificate is invalid
423     the error message is now sent with status code 403 instead of 200.
424   - The Slackware rc script template has been renamed to
425     slackware/rc.privoxy.in to silence complaints when building
426     Debian packages.
427   - When building with MbedTLS support, mbedtls_md5_ret() is used
428     instead of mbedtls_md5() which is deprecated and causes a warning
429     on Debian GNU/Linux.
430
431 - Action file improvements:
432   - Block requests to eu-tlp03.kameleoon.com/.
433   - Unblock metrics.sr.ht/.
434   - Disable fast-redirects for .fsf.org/.
435   - Disable fast-redirects for .gravater.com/.
436   - Disable fast-redirects for .ksta.de/.
437   - Block requests to tag.crsspxl.com/.
438   - Block requests to analytics.slashdotmedia.com/.
439   - Block requests to ml314.com/.
440   - Block requests to .adroll.com/.
441   - Block requests to fastlane.rubiconproject.com/.
442   - Block requests to api.theadex.com/.
443   - Block requests to ih.adscale.de/.
444   - Block requests to .s400.meetrics.net/.
445   - Block requests for pp.lp4.io/.
446   - Block requests for trc-events.taboola.com/.
447
448 - Filter file improvements:
449   - A allow-autocompletion filter has been added which changes
450     autocomplete="off" to "on" on input fields to allow autocompletion.
451     Requested by Jamie Zawinski in #370.
452     Filter based on a submission by Aaron Linville.
453   - Added an imdb filter.
454   - Added a sourceforge filter that reduces the amount of ads
455     for proprietary software.
456   - Added a github filter that removes the annoying "Sign-Up"
457     banner and the Cookie disclaimer.
458   - Removed a duplicated pcrs command from the js-annoyances filter.
459   - The crude-parental filter now provides a short reason when blocking,
460     inserts a link to Privoxy's webinterface and adds a new line at
461     the end of the generated page.
462
463 - Privoxy-Log-Parser:
464   - Highlight a few more messages.
465   - Add a handler for tagging messages.
466   - Properly deal with 'Certificate error' crunches
467     Previously the error description was highlighted as 'host'.
468   - Log truncated LOG_LEVEL_CLF messages more gracefully
469     and note that the statistics will be imprecise.
470   - Fixed perldoc typo.
471   - Bump version to 0.9.2.
472
473 - Privoxy-Regression-Test:
474   - Use http://127.0.0.1:8118/ as default Privoxy address
475     unless http_proxy is set through the environment.
476   - Add a --privoxy-cgi-prefix option that specifies the prefix
477     to use when building URLs that are supposed to reach Privoxy's
478     CGI interface. If it's not set, http://p.p/ is used, which is
479     supposed to work with the default Privoxy configuration.
480     If Privoxy has been built with FEATURE_HTTPS_INSPECTION enabled,
481     and if https inspection is activated with the +https-inspection
482     action, this option can be used with "https://p.p/" provided the
483     system running Privoxy-Regression-Test has been configured to
484     trust the certificate used by Privoxy.
485     Note that there are currently two tests in the official
486     regression-tests.action file that are expected to fail
487     when using "https://p.p/" as privoxy-cgi-prefix.
488   - Skip the connection-established response in get_status_code()
489     when looking for the status code with a CGI prefix
490     that starts with https://. We care about the status code
491     sent by the impersonated web server.
492   - Use --proxy-header when using a CGI prefix with https://
493     and a "Host:" header.
494   - Allow '|' in tokens and values to allow tag patterns like
495     "TAG:^(application|text)/(x-)?javascript$".
496   - When get_cgi_page_or_else() fails, include the URL of the
497     requested page in the log message.
498   - Added a --check-bad-ssl option that can be used to verify that
499     Privoxy detects certificate problems when accessing the test
500     sites from badssl.com.
501   - Bumped version to 0.7.2
502
503 - uagen:
504   - Update example output.
505   - Recommend the use of the https-inspection action in the documentation.
506   - Upgrade a couple of URLs to https://.
507   - Add ElectroBSD to the list of operating systems.
508   - Bumped generated Firefox version to 78 (ESR).
509   - Bumped version to 1.2.2.
510
511  - User documentation:
512   - Remove reference to 'How to Report Bugs Effectively'.
513     It was only rendered as text without URL in the README anyway
514     and there's no indication that users read it ...
515   - Let the dok-readme target fix the location embedded into the
516     README file. This used to be done by CVS but since the git migration
517     it has to be done through other means.
518   - Remove 'experimental' warning for client-specific-tag-related directives.
519     They seem to work reliably and there is no obvious reason
520     why we would change the syntax in the near future.
521   - Describe how to check if Privoxy has been built with
522     FEATURE_HTTPS_INSPECTION.
523   - Add a link to the trusted-cas-file documentation
524     that explains how the user can create the file herself.
525   - Don't explicitly mention the license for the code coming from
526     'Anonymous Coders' and Junkbusters. It's obviously licensed under
527     the GNU GPL like the rest of Privoxy or we wouldn't be allowed to
528     distribute it.
529   - Update the +hide-user-agent example with uagen output.
530   - Slightly improve the wording of the ca-key-file documentation.
531   - Explicitly mention Windows 10 as supported so search engines and
532     users looking for it can find it.
533   - Import a bunch of contributors from the ChangeLog.
534   - Remove obsolete doc/gpl.html.
535   - Upgrade a couple of links to https://.
536   - Don't prefer the SourceForge patch tracker over the
537     privoxy-devel mailing list. While at it, link to the
538     SourceForge patch tracker.
539   - Mention http-inspection in the 'my browser warns me about
540     unauthenticated content' FAQ entry.
541   - Simplify the 'Is there is a license or fee?' FAQ entry.
542   - Add another +redirect{} example.
543   - Explicitly mention that interested sponsors should include
544     the link target in their first mail.
545   - Clarify that only Privoxy team members can object to new sponsors
546     and link to the list of current team members.
547   - Note that sponsor URLs may not contain keyword spam.
548   - Garbage collect doc/webserver/images which isn't referenced anymore.
549   - Update the method to reach the proxy settings in Firefox.
550   - Update proxy_setup.jpg description to refer to Firefox.
551   - Regenerate proxy_setup.jpg with a more recent Firefox (78.0).
552   - Regenerate files-in-use.jpg without obsolete standard.action
553     with modern colors and a slightly better quality.
554   - Update URL to the actionsfile tracker.
555   - Update a support request URL.
556   - Rephrase the 'Can Privoxy run as service' FAQ entry and
557     remove an obsolete paragraph.
558   - Let the 'Where can I get updated Actions Files?' entry link to
559     the gitweb version of default.action.master.
560   - Update a link to the default.action file.
561   - Update URLs for trackers and mailing lists.
562   - Replace CVS reference with git.
563   - Mention regression-tests.action in the config file.
564   - Explicitly mention in the config file that access to the
565     CA key should be limited to Privoxy.
566   - List more client-specific-tag examples for inspiration.
567   - Add additional headers to the client-header-order example.
568   - Note that actions aren't updated after rewrites.
569   - Explicitly mention that upgrading from http to https with
570     a client-header filter is not supported
571   - Note that protocol and host have to be added when rewriting
572     the destination host for https-inspected requests.
573   - Explicitly mention that the CA key is used to sign certificates.
574   - Put openssl command in 'command' tags.
575   - The man page has been moved from section 1 to man section 8.
576
577 - Developer manual:
578   - Flesh out the build instructions for Debian.
579   - Remove the packaging instructions for RPM-based systems.
580     They don't work and we don't release RPM packages anymore anyway.
581   - Remove the packaging instructions for Solaris.
582     They don't work and we don't release Solaris packages anymore anyway.
583   - Update the suggested subject for the announce mails.
584   - Update upload instructions.
585     ftp://upload.sourceforge.net is no longer functional.
586   - Remove a couple of package-dependent upload instructions
587     that don't actually work.
588   - Remove 'cd current' that no longer works.
589   - Add regression-tests.action to the list of files that should be installed.
590   - Stop claiming that there are text versions of the manuals.
591     We stopped building them in 2008 (9ed36a3c5e6f12).
592   - Note that the 'webserver' target creates the link needed for the user-manual.
593   - Suggest to use the master branch as reference when creating
594     the ChangeLog so the steps work when the current branch differs
595     from master which is likely as the developer manual
596     suggests to use a local branch for development.
597   - Add the -s flag to the suggested 'git tag' command.  We prefer signed tags.
598   - Mention that merges into 'master' should be avoided.
599   - Add git commands that should result in a merge-free history.
600   - Mention Privoxy-Regression-Test.
601   - Add a section id to reduce link churn.
602   - Recommend the dok-tidy target when building docs for the webserver.
603   - Add another plug for the privoxy-devel mailing list.
604   - Let the intro link the copyright section in the user manual instead
605     of giving an incomplete summary of the license status.
606   - Clarify that the webserver target uploads to the SourceForge webserver.
607   - Mark the documentation for the Mac OS X installers as out of date and
608     change the SCM name back to CVS.
609   - Fix the location of the installer modules for Mac OS X.
610     They are not actually available through git (yet).
611   - Don't speak of Privoxy version 3 in the past tense.
612   - Update the list of programs required for the release process.
613   - Update description of the webserver target which uses ssh, not scp.
614   - Remove obsolete reference to config.new.
615
616 - Tests:
617   - Add another hide-referrer{conditional-block} test.
618   - Add another hide-referrer{conditional-forge} test.
619   - Fix a hide-referrer{conditional-forge} test
620     that expected an acceptable header to be forged.
621   - Fix a hide-referrer{conditional-block} test
622     that expected an acceptable Referer to be removed.
623   - Explain why the "Set Header = Host: whatever.example.org" test is
624     expected to fail when using a CGI prefix that starts with "https://".
625   - Explain why a connection-sharing test is known to fail
626     when using "https://p.p/" as CGI prefix.
627   - Add a link to Privoxy-Regression-Test to regression-tests.action
628     in case it isn't packaged.
629   - Add regression tests for pcre host patterns.
630   - Fixed a regression test that is executed when
631     FEATURE_GRACEFUL_TERMINATION is enabled.
632
633 - Privoxy infrastructure:
634   - Import a Privoxy logo for the website.
635   - Update Tor onion service to HiddenServiceVersion 3.
636   - Display the "model" photos in a single row and remove placeholder images.
637   - Regenerate homepage with updated sponsor list.
638   - Use the '/sponsor' redirect for the link to the sponsor page.
639   - Git commit messages are sent to the Privoxy-commits mailing list.
640
641 *** Version 3.0.29 stable ***
642
643 - Security/Reliability:
644   - Fixed memory leaks when a response is buffered and the buffer
645     limit is reached or Privoxy is running out of memory.
646     Commits bbd53f1010b and 4490d451f9b. OVE-20201118-0001.
647     CVE-2020-35502.
648     Sponsored by: Robert Klemme
649   - Fixed a memory leak in the show-status CGI handler when
650     no action files are configured. Commit c62254a686.
651     OVE-20201118-0002. CVE-2021-20209.
652     Sponsored by: Robert Klemme
653   - Fixed a memory leak in the show-status CGI handler when
654     no filter files are configured. Commit 1b1370f7a8a.
655     OVE-20201118-0003. CVE-2021-20210.
656     Sponsored by: Robert Klemme
657   - Fixes a memory leak when client tags are active.
658     Commit 245e1cf32. OVE-20201118-0004. CVE-2021-20211.
659     Sponsored by: Robert Klemme
660   - Fixed a memory leak if multiple filters are executed
661     and the last one is skipped due to a pcre error.
662     Commit 5cfb7bc8fe. OVE-20201118-0005. CVE-2021-20212.
663   - Prevent an unlikely dereference of a NULL-pointer that
664     could result in a crash if accept-intercepted-requests
665     was enabled, Privoxy failed to get the request destination
666     from the Host header and a memory allocation failed.
667     Commit 7530132349. CID 267165. OVE-20201118-0006. CVE-2021-20213.
668   - Fixed memory leaks in the client-tags CGI handler when
669     client tags are configured and memory allocations fail.
670     Commit cf5640eb2a. CID 267168. OVE-20201118-0007. CVE-2021-20214.
671   - Fixed memory leaks in the show-status CGI handler when memory
672     allocations fail. Commit 064eac5fd0 and commit fdee85c0bf3.
673     CID 305233. OVE-20201118-0008. CVE-2021-20215.
674
675 - General improvements:
676   - Added experimental https inspection support which allows to filter
677     https traffic. To enable it, install MbedTLS and configure with
678     --with-mbedtls, or install OpenSSL or LibreSSL and configure
679     with --with-openssl.
680     Afterwards configure the directives in section 7 of the
681     config file and enable the +https-inspection action.
682     Initial MbedTLS-based code contributed by Vaclav Svec,
683     initial OpenSSL support contributed by Maxim Antonov.
684     With help from Nedzad Hrnjica and Ho+ Ho+ Ho+.
685     Integration and improvements sponsored by Robert Klemme.
686   - pcrs: Request JIT compilation if it's supported and
687     the filter isn't dynamic. This can speed up filtering.
688   - Added support for Brotli decompression.
689     Sponsored by: Robert Klemme
690   - Added FEATURE_EXTENDED_STATISTICS to gather statistics for
691     block reasons and filter executions. To enable it, configure
692     with --enable-extended-statistics and visit
693     http://config.privoxy.org/show-status.
694     Sponsored by: Robert Klemme
695   - Use the IP_FREEBIND socket option, if defined. This allows
696     Privoxy to bind to not-yet assigned IP addresses which is
697     useful in failover environments.
698     Patch by Sam Varshavchik.
699   - Allow to use extended host patterns and vanilla host patterns
700     at the same time by prefixing extended host patterns with
701     "PCRE-HOST-PATTERN:". To enable this, configure with
702     --enable-pcre-host-patterns.
703     Sponsored by: Robert Klemme
704   - Added "Cross-origin resource sharing" (CORS) support.
705     This allows to access Privoxy's CGI interface via JavaScript from
706     another domain (white-listed with the new cors-allowed-origin directive).
707     Based on a patch by Nedzad Hrnjica.
708     Sponsored by: Robert Klemme.
709   - Add SOCKS5 username/password support.
710     Based on a patch by Sam, improved by Ivan Romanov.
711     Closes Patch#141 and solves TODO#105.
712   - Bump the maximum number of action and filter files
713     to 100 each.
714     Sponsored by: Robert Klemme
715   - Fixed handling of filters with "split-large-forms 1"
716     when using the CGI editor.
717     Reported by withoutname in #921.
718   - Better detect a mismatch of connection details when
719     figuring out whether or not a connection can be reused.
720   - Don't send a "Connection failure" message instead of the
721     "DNS failure" message.
722     Sponsored by: Robert Klemme
723   - Let LOG_LEVEL_REQUEST log all requests. Previously unencrypted
724     requests were only logged with LOG_LEVEL_REQUEST when they weren't
725     crunched (in which case they were logged with LOG_LEVEL_CRUNCH).
726     This was documented behaviour, but logging all requests seems more useful.
727   - Fixed locking around localtime() and gmtime().
728   - Removed OS/2 support. We haven't provided OS/2 packages in years,
729     it complicated the code and it depended on a fallback snprintf()
730     implementation which is GPLv2 only.
731   - Remove the fallback snprintf() implementation
732     Now that OS/2 support is gone we no longer need it.
733   - Fixed a bunch of format specifiers log messages.
734   - Added a missing apostrophe in the 'More Privoxy' menu.
735   - Explicitly prevent use of FEATURE_CONNECTION_SHARING
736     without FEATURE_CONNECTION_KEEP_ALIVE. It makes no sense
737     and does not compile anyway.
738     Sponsored by: Robert Klemme
739   - Fix build without FEATURE_CONNECTION_KEEP_ALIVE.
740     Sponsored by: Robert Klemme
741   - Downgrade the 'Graceful termination requested' message
742     to LOG_LEVEL_INFO as it isn't an error.
743     Sponsored by: Robert Klemme
744   - decompress_iob(): Downgrade the no-content message to LOG_LEVEL_RE_FILTER
745     While at it, fix a typo in a comment.
746     Sponsored by: Robert Klemme
747   - Fixed a couple of cppcheck warnings.
748   - Rename LOG_LEVEL_GPC to LOG_LEVEL_REQUEST.
749     Only the shadow knows what "GPC" is supposed to stand for.
750   - Remove SourceForge references in copyright headers.
751   - Upgrade a bunch of links to the homepage to https://.
752   - Add 'no-brotli-accepted' filter which prevents the
753     use of Brotli compression.
754   - Changed license for pcrs to GPLv2+ after getting the
755     permission from Andreas. This allows to redistribute
756     Privoxy under the GPLv3 which is required when linking
757     to future mbedTLS versions which are expected to be
758     licensed under the Apache 2.0 license only.
759   - Updated a bunch of tests that have to expect status code 403
760     now after r1.168/070e904afa5.
761   - Lowercase the host name in the request line.
762   - Only set SOURCE_DATE_EPOCH if it's not already set so
763     distributions can overwrite it through the environment.
764
765 - Documentation changes:
766   - Explain that Privoxy has to be distributed under the
767     GPLv3 (or later) when linked with an MbedTLS version
768     that is licensed under the Apache 2.0 license.
769   - Import the GNU GPLv3 and include it the user manual.
770   - Clarify FEATURE_FORCE_LOAD's description. It allows to bypass
771     blocking not filtering and only does it if blocks aren't enforced.
772     Reported by: Robert Klemme
773   - FAQ: Remove Zwiebelfreunde e.V. from the list of fiduciary sponsors
774     As of 2021 they no longer handle donations for foreign organisations
775     due to lack of resources.
776   - FAQ: Remove an obsolete comment with a link to the long-gone PDF manual.
777   - FAQ: Add a link to the TODO list.
778   - FAQ: Change the sponsor amounts to USD slightly rounding the
779     converted amounts up to get simple numbers.
780     Receiving USD is apparently easier for SPI and SPI is
781     preferred by sponsors as they can send invoices.
782   - Advertise the client-tags CGI page in the user manual.
783   - Stop advertising the show-version CGI page which no longer exists.
784   - Add yet another reason why +prevent-compression may cause problems.
785   - Don't claim that contributors need ssh. It's only needed for committers.
786   - Replace obsolete CVS instructions with Git instructions.
787   - Remove an obsolete comment
788
789 - Config file changes:
790   - Change the suggested default-server-timeout to 5 to match the
791     suggested keep-alive-timeout. Otherwise using the defaults would
792     result in Privoxy reducing the default-server-timeout and logging
793     an error message.
794     Sponsored by: Robert Klemme
795   - Update the 'debug 1' description.
796   - Add a missing 'client-specific-tag' directive.
797   - Comment out trusted-cgi-referer pointing to example.org.
798
799 - Action file improvements:
800   - Block requests to /(.*/)?piwik\.php
801   - Block requests to .connectaserver.de/
802   - Block requests to pixel.inforsea.com/
803   - Block requests to t.vi-serve.com/
804   - Block requests to .ioam.de/
805   - Block requests to t.9gag.com/img.gif
806   - Block requests to .pixel.parsely.com/ as image
807   - Block requests to pixel.wp.com/
808   - Disable fast-redirects for .librarything.com/
809   - Disable fast-redirects for issue.freebsdfoundation.org/
810   - Disable fast-redirects for .twitter.com/.*origin=http
811   - Unblock belco24.de/
812   - Add fast-redirects exception for .wikipedia.org/
813   - Add fast-redirects exception for oss-fuzz.com/
814   - Disable fast-redirects for .consensu.org/delivery/pixel\.php
815     and block the requests as image instead
816   - Unblock .adbinstaller.com/
817     Reported by lvm in #942.
818   - Unblock .adbshell.com
819     Reported by lvm in #942.
820   - Unblock .tagesschau.de/
821   - Disable fast-redirects for collector.githubapp.com/
822     and block requests to it as image instead
823   - Unblock 'ada*.'
824   - Add fast-redirects{} exception for sourcepoint.vice.com/
825   - Unblock adaway.org/
826     Reported by DRS David Soft in AF#945.
827   - Change two block reasons that previously were the same.
828     Sponsored by: Robert Klemme
829   - Added a +delay-response{} test.
830   - Updated the location of the development version
831     of default.action.master.
832
833 - Privoxy-Log-Parser:
834   - Added a --keep-date option to keep the date in highlighted messages.
835   - Highlight new log messages.
836   - Make gather_loglevel_clf_stats() more tolerant. While at it,
837     count all CLF messages as requests, even if the request is invalid.
838   - Only show HTTP version distribution if at least one version has been detected.
839   - Only show crunch statistics if crunches were detected.
840   - Warn if the request counts differ.
841   - Generate statistics if the log only contains LOG_LEVEL_CLF messages
842     so it can be used with vanilla webserver logs.
843     Previously Privoxy-specific "Request:" messages were required.
844   - Align the client-HTTP-version distribution like other distributions
845   - Bump version to 0.9.1
846   - Include status code distribution in the stats.
847   - Let the statistics include the size of the content Privoxy
848     transferred excluding HTTP headers.
849   - Get with the program and expect all requests to be logged with LOG_LEVEL_REQUEST.
850     It's no longer necessary to count both LOG_LEVEL_REQUEST and
851     LOG_LEVEL_CRUNCH messages to get the total number of requests.
852   - Leverage the LOG_LEVEL_CLF message to gather statistics that where
853     previously taken from LOG_LEVEL_HEADER lines. This results in less
854     confusing results if https inspection is enabled in which case there
855     are two LOG_LEVEL_HEADER lines with request lines.
856     Sponsored by: Robert Klemme
857   - Properly highlight the filter results message. Previously a brace got lost.
858   - Prefer the number of CLF lines to get the total number of requests
859     as it works with older Privoxy versions as well.
860
861 - Privoxy-Regression-Test:
862   - Turn curl's globbing mode off so we can allow more characters in URLs.
863   - Allow '[' and ']' in URLs.
864   - Include the action file when complaining about missing Sticky Actions.
865   - Fix a sentence in the documentation.
866   - Bump version to 0.7.1
867
868 - url-pattern-translator:
869   - Detect a couple of pattern prefixes case-insensitively.
870     Sponsored by: Robert Klemme
871   - Skip CLIENT-TAG patterns.
872     Sponsored by: Robert Klemme
873   - Skip patterns that have already been converted.
874     It should now be safe to "convert" a file multiple times.
875     Sponsored by: Robert Klemme
876   - Add the new 'PCRE-HOST-PATTERN:' prefix.
877     Sponsored by: Robert Klemme
878
879 *** Version 3.0.28 stable ***
880
881 - Bug fixes for regressions in 3.0.27:
882   - Fixed misplaced parentheses.
883     Reported by David Binderman.
884   - Changed two regression tests to depend on config directive
885     enable-remote-toggle instead of FEATURE_TOGGLE.
886
887 *** Version 3.0.27 stable ***
888
889 - General improvements:
890   - Add a receive-buffer-size directive which can be used to
891     set the size of the previously statically allocated buffer
892     in handle_established_connection().
893     Increasing the buffer size increases Privoxy's memory usage but
894     can lower the number of context switches and thereby reduce the
895     CPU usage and potentially increase the throughput.
896     This is mostly relevant for fast network connections and
897     large downloads that don't require filtering.
898     Sponsored by: Robert Klemme
899   - Add a listen-backlog directive which specifies the backlog
900     value passed to listen().
901     Sponsored by: Robert Klemme
902   - Add an enable-accept-filter directive which allows to
903     toggle accept filter support at run time when compiled
904     with FEATURE_ACCEPT_FILTER support.
905     It makes testing more convenient and now that it's
906     optional we can emit an error message if enabling
907     the accept filter fails.
908     Sponsored by: Robert Klemme
909   - Add a delay-response{} action.
910     This is useful to tar pit JavaScript requests that
911     are endlessly retried in case of blocks. It can also
912     be used to simulate a slow Internet connection.
913     Sponsored by: Robert Klemme
914   - Add a 'trusted-cgi-referrer' directive.
915     It allows to configure another page or site that can be used
916     to reach sensitive CGI resources.
917     Sponsored by: Robert Klemme
918   - Add a --fuzz mode which exposes Privoxy internals to input
919     from files or stdout.
920     Mainly tested with American Fuzzy Lop. For details see:
921     https://www.fabiankeil.de/talks/fuzzing-on-freebsd/
922     This work was partially funded with donations and done
923     as part of the Privoxy month in 2015.
924   - Consistently use the U(ngreedy) flag in the 'img-reorder' filter.
925   - listen_loop(): Reuse a single thread attribute object
926     The object doesn't change and creating a new one for
927     every thread is a waste of (CPU) time.
928     Sponsored by: Robert Klemme
929   - Free csp resources in the thread that belongs to the csp instead
930     of the main thread which has enough on its plate already.
931     Sponsored by: Robert Klemme
932   - Improve 'socket timeout reached' message.
933     Log the timeout that was triggered and downgrade the
934     log level to LOG_LEVEL_CONNECT to reduce the log noise
935     with common debug settings.
936     The timeout isn't necessary the result of an error and
937     usually merely indicates that Privoxy's socket timeout
938     is lower than the relevant timeouts used by client and
939     server.
940     Sponsored by: Robert Klemme
941   - Explicitly taint the server socket in case of CONNECT requests.
942     This doesn't fix any known problems, but makes
943     some log messages less confusing.
944   - Let write_pid_file() terminate if the pid file can't be opened.
945     Logging the issue at info level is unlikely to help.
946   - log_error(): Reduce the mutex-protected area by not using a
947     heap-allocated buffer that is shared between all threads.
948     This increases performance and reduces the latency with
949     verbose debug settings and multiple concurrent connections.
950     Sponsored by: Robert Klemme
951   - Let zalloc() use calloc() if it's available.
952     In some situations using calloc() can be faster than
953     malloc() + memset() and it should never be slower.
954     In the real world the impact of this change is not
955     expected to be noticeable.
956     Sponsored by: Robert Klemme
957   - Never use select() when poll() is available.
958     On most platforms select() is limited by FD_SETSIZE while
959     poll() is not. This was a scaling issue for multi-user setups.
960     Using poll() has no downside other than the usual risk
961     that code modifications may introduce new bugs that have
962     yet to be found and fixed.
963     At least in theory this commit could also reduce the latency
964     when there are lots of connections and select() would use
965     "bit fields in arrays of integers" to store file descriptors.
966     Another side effect is that Privoxy no longer has to stop
967     monitoring the client sockets when pipelined requests are
968     waiting but can't be read yet.
969     This code keeps the select()-based code behind ifdefs for
970     now but hopefully it can be removed soonish to make the
971     code more readable.
972     Sponsored by: Robert Klemme
973   - Add a 'reproducible-tarball-dist' target.
974     It's currently separate from the "tarball-dist" target
975     because it requires a tar implementation with mtree spec
976     support.
977     It's far from being perfect and does not enforce a
978     reproducible mode, but it's better than nothing.
979   - Use arc4random() if it's available.
980     While Privoxy doesn't need high quality pseudo-random numbers
981     there's no reason not to use them when we can and this silences
982     a warning emitted by code checkers that can't tell whether or not
983     the quality matters.
984   - Show the FEATURE_EXTERNAL_FILTERS status on the status page.
985     Better late than never. Previously a couple of tests weren't
986     executed as Privoxy-Regression-Test couldn't detect that the
987     FEATURE_EXTERNAL_FILTERS dependency was satisfied.
988   - Ditch FEATURE_IMAGE_DETECT_MSIE.
989     It's an obsolete workaround we inherited from Junkbuster
990     and was already disabled by default.
991     Users that feel the urge to work around issues with
992     image requests coming from an Internet Explorer version
993     from more than 15 years ago can still do this using tags.
994   - Consistently use strdup_or_die() instead of strdup() in
995     cases where allocation failures aren't expected.
996     Using strdup_or_die() allows to remove a couple of explicit
997     error checks which slightly reduces the size of the binary.
998   - Insert a refresh tag into the /client-tags CGI page when
999     serving it while a client-specific tag is temporarily enabled.
1000     This makes it less likely that the user ends up
1001     looking at tag state that is out of date.
1002   - Use absolute URLs in the client-tag forms.
1003     It's more consistent with the rest of the CGI page
1004     URLs and makes it more convenient to copy the forms
1005     to external pages.
1006   - cgi_error_disabled(): Use status code 403 and an appropriate response line
1007   - Use a dedicated CGI handler to deal with tag-toggle requests
1008     As a result the /client-tags page is now safe to reach without
1009     trusted Referer header which makes bookmarking or linking to
1010     it more convenient.
1011     Finally, refreshing the /client-tags page to show the
1012     current state can no longer unintentionally repeat the
1013     previous toggle request.
1014   - Don't add a "Connection" header for CONNECT requests.
1015     Explicitly sending "Connection: close" is not necessary and
1016     apparently it causes problems with some forwarding proxies
1017     that will close the connection prematurely.
1018     Reported by Marc Thomas.
1019   - Fix compiler warnings.
1020
1021 - Bug fixes:
1022   - rfc2553_connect_to(): Properly detect and log when poll()
1023     reached the time out. Previously this was logged as:
1024     Could not connect to [...]: No error: 0.
1025     which isn't very helpful.
1026     Sponsored by: Robert Klemme
1027   - add_tag_for_client(): Set time_to_live properly.
1028     Previously the time_to_live was always set for the first tag.
1029     Attempts to temporarily enable a tag would result in enabling
1030     it permanently unless no tag was enabled already.
1031   - Revert r1.165 which didn't perform as advertised.
1032     While the idea was to use "https:// when creating links
1033     for the user manual on the website", the actual effect
1034     was to use "https://" when Privoxy was supposed to serve
1035     the user manual itself.
1036     Reported by Yossi Zahn on Privoxy-devel@.
1037   - socks5_connect(): Fail in case of unsupported address types.
1038     Previously they would not be detected right away and
1039     Privoxy would fail later on with an error message that
1040     didn't make it obvious that the problem was socks-related.
1041     So far, no such problems have actually been reported.
1042   - socks5_connect(): Properly deal with socks replies that
1043     contain IPv6 addresses.
1044     Previously parts of the reply were left unread and
1045     later on treated as invalid HTTP response data.
1046     Fixes #904 reported by Danny Goossen who also provided
1047     the initial version of this patch.
1048
1049 - Action file improvements:
1050   - Unblock 'msdn.microsoft.com/'.
1051     It (presumably) isn't used to serve the kind of ads Privoxy should
1052     block by default but happens to serve lots of pages with URLs that
1053     are likely to result in false positives.
1054     Reported by bugreporter1694 in AF#939.
1055   - Disable gif deanimation for requests tagged with CSS-REQUEST.
1056     The action will ignore content that isn't considered text
1057     anyway and explicitly disabling it makes this more obvious
1058     if "action" debugging (debug 65536) is enabled while
1059     "gif deanimation" debugging (debug 256) isn't.
1060   - Explicitly disable HTML filters for requests with CSS-REQUEST tag.
1061     The filters are unlikely to break CSS files but executing
1062     them without (intentionally) getting any hits is a waste of
1063     cpu time and makes the log more noisy when running with
1064     "debug 64".
1065   - Unblock 'adventofcode.com/'.
1066     Reported by Clint Adams in Debian bug #848211.
1067     Fixes Roland's AF#937.
1068   - Unblock 'adlibris.com'.
1069     Reported by Wyrex in #935
1070   - Unblock .golang.org/
1071   - Add fast-redirects exception for '.youtube.com/.*origin=http'
1072
1073 - Privoxy-Log-Parser:
1074   - Don't gather host and resource statistics if they aren't requested.
1075     While the performance impact seems negligible this significantly
1076     reduces the memory usage if there are lots of requests.
1077   - Bump version as the behaviour (slightly) changed.
1078   - Count connection failures as well in statistics mode.
1079     Sponsored by: Robert Klemme
1080   - Count connection timeouts as well in statistics mode.
1081     Sponsored by: Robert Klemme
1082   - Fix an 'uninitialized value' warning when generating
1083     statistics for a log file without response headers.
1084     While privoxy-log-parser was supposed to detect this already,
1085     the check was flawed and the message the user didn't see was
1086     somewhat confusing anyway.
1087     Now the message is less confusing, more helpful and actually printed.
1088     Reported by: Robert Klemme
1089
1090 - Documentation improvements:
1091   - Refer to the git sources instead of CVS.
1092   - Use GNU/Linux when referring to the OS instead of the kernel.
1093   - Add FAQ entry for what to do if editing the config file is access denied.
1094   - Add brief HTTP/2 FAQ.
1095   - Add a small fuzzing section to the developer documentation.
1096   - Add a client-header-tagger{client-ip-address} example.
1097   - Stop suggesting that Privoxy is an anonymizing proxy.
1098     The term could lead to Privoxy users overestimating
1099     what it can do on its own (without Tor).
1100   - Make it more obvious that SPI accepts Paypal, too.
1101     Currently most donations are made through the Paypal account
1102     managed by Zwiebelfreunde e.V. and a more even distribution
1103     would be useful.
1104   - Suggest to log applying actions as well when reproducing problems.
1105   - Explicitly mention that Privoxy binaries are built by individuals
1106     on their own systems. Buyer beware!
1107   - Mention the release feed on the homepage.
1108   - Remove a mysterious comment with a GNU FDL link as it isn't
1109     useful and could confuse license scanners.
1110     In May 2002 it was briefly claimed that "this document" was covered
1111     by the GNU FDL. The commit message (r1.5) doesn't explain the motivation
1112     or whether all copyright holders were actually asked and agreed to the
1113     declared license change.
1114     It's thus hard to tell whether or not the license change was legit,
1115     but luckily two days later the "doc license" was "put" "back to GPL"
1116     anyway (r1.6).
1117     At the same time the offending comment with a link to the FDL
1118     (not the GPL) was added for no obvious reason.
1119     Now it's gone again.
1120
1121 - Regression tests:
1122   - Bump for-privoxy-version to 3.0.27 as we now rely on untrusted
1123     CGI request being rejected with status code 403 (instead of 200).
1124   - Update test for /send-stylesheet and add another one
1125
1126 - Templates:
1127   - Consistently use https:// when linking to the Privoxy website.
1128   - Remove SourceForge references in Copyright header.
1129   - Remove a couple of SourceForge references in a comment.
1130     While at it, fix the grammar.
1131   - Move the site-specific documentation block before the generic one.
1132     While most Privoxy installations don't have a site-specific
1133     documentation block, in cases were it exists it's likely to
1134     be more relevant than the generic one.
1135     Showing it first makes it less likely that users stop reading
1136     before they reach it, especially on pages that don't fit on
1137     the screen.
1138
1139 - Build system improvements:
1140   - Prefer openjade to jade. On some systems Jade produces
1141     HTML with unescaped ampersands in URLs.
1142   - Prefer OpenSP to SP to be consistent.
1143   - Have Docbook generated HTML files be straight ASCII.
1144     Dealing with a mixture of ISO-8859 and UTF-8 files is problematic.
1145   - Echo the filename to stderr for 'make dok-tidy'.
1146     Make it a bit easier to find errors in docbook generated HTML.
1147   - Warn when still using select().
1148   - Warn when compiling without calloc().
1149   - Make it more obvious that the --with-fdsetsize configure switch
1150     is pointless if poll() is available.
1151   - Remove support for AmigaOS.
1152   - Update windows build system to use supported software.
1153     The cygwin gcc -mno-cygwin option is no longer supported, so
1154     convert the windows build system to use the cygwin cross-compiler
1155     to build "native" code.
1156   - Add --enable-static-linking option for configure
1157     does the same thing as LDFLAGS=-static; ./configure
1158     but nicer than mixing evars and configure options.
1159
1160 *** Version 3.0.26 stable ***
1161
1162 - Bug fixes:
1163   - Fixed crashes with "listen-addr :8118" (SF Bug #902).
1164     The regression was introduced in 3.0.25 beta and reported
1165     by Marvin Renich in Debian bug #834941.
1166
1167 - General improvements:
1168   - Log when privoxy is toggled on or off via cgi interface.
1169   - Highlight the "Info: Now toggled " on/off log message
1170     in the Windows log viewer.
1171   - Highlight the loading actions/filter file log message
1172     in the Windows log viewer.
1173   - Mention client-specific tags on the toggle page as a
1174     potentionally more appropriate alternative.
1175
1176 - Documentation improvements:
1177   - Update download section on the homepage.
1178     The downloads are available from the website now.
1179   - Add sponsor FAQ.
1180   - Remove obsolete reference to mailing lists hosted at SourceForge.
1181   - Update the "Before the Release" section of the developer manual.
1182
1183 - Infrastructure improvements:
1184   - Add perl script to generate an RSS feed for the packages
1185     Submitted by "Unknown".
1186
1187 - Build system improvements:
1188   - strptime.h: fix a compiler warning about ambiguous else.
1189   - configure.in: Check for Docbook goo on the BSDs as well.
1190   - GNUMakefile.in: Let the dok-user target remove temporary files.
1191
1192 *** Version 3.0.25 beta ***
1193
1194 - Bug fixes:
1195   - Always use the current toggle state for new requests.
1196     Previously new requests on reused connections inherited
1197     the toggle state from the previous request even though
1198     the toggle state could have changed.
1199     Reported by Robert Klemme.
1200   - Fixed two buffer-overflows in the (deprecated) static
1201     pcre code. These bugs are not considered security issues
1202     as the input is trusted.
1203     Found with afl-fuzz and ASAN.
1204
1205 - General improvements:
1206   - Added support for client-specific tags which allow Privoxy
1207     admins to pre-define tags that are set for all requests from
1208     clients that previously opted in through the CGI interface.
1209     They are useful in multi-user setups where admins may
1210     want to allow users to disable certain actions and filters
1211     for themselves without affecting others.
1212     In single-user setups they are useful to allow more fine-grained
1213     toggling. For example to disable request blocking while still
1214     crunching cookies, or to disable experimental filters only.
1215     This is an experimental feature, the syntax and behaviour may
1216     change in future versions.
1217     Sponsored by Robert Klemme.
1218   - Dynamic filters and taggers now support a $listen-address variable
1219     which contains the address the request came in on.
1220     For external filters the variable is called $PRIVOXY_LISTEN_ADDRESS.
1221     Original patch contributed by pursievro.
1222   - Add client-header-tagger 'listen-address'.
1223   - Include the listen-address in the log message when logging new requests.
1224     Patch contributed by pursievro.
1225   - Turn invalid max-client-connections values into fatal errors.
1226   - The show-status page now shows whether or not dates before 1970
1227     and after 2038 are expected to be handled properly.
1228     This is mainly useful for Privoxy-Regression-Test but could
1229     also come handy when dealing with time-related support requests.
1230   - On Mac OS X the thread id in log messages are more likely to
1231     be unique now.
1232   - When complaining about missing filters, the filter type is logged
1233     as well.
1234   - A couple of harmless coverity warnings were silenced
1235     (CID #161202, CID #161203, CID #161211).
1236
1237 - Action file improvements:
1238   - Filtering is disabled for Range requests to let download resumption
1239     and Windows updates work with the default configuration.
1240   - Unblock ".ardmediathek.de/".
1241     Reported by ThTomate in #932.
1242
1243 - Documentation improvements:
1244   - Add FAQ entry for crashes caused by memory limits.
1245   - Remove obsolete FAQ entry about a bug in PHP 4.2.3.
1246   - Mention the new mailing lists were appropriate.
1247     As the archives have not been migrated, continue to
1248     mention the archives at SF in the contacting section
1249     for now.
1250   - Note that the templates should be adjusted if Privoxy is
1251     running as intercepting proxy without getting all requests.
1252   - A bunch of links were converted to https://.
1253   - Rephrase onion service paragraph to make it more obvious
1254     that Tor is involved and that the whole website (and not
1255     just the homepage) is available as onion service.
1256   - Streamline the "More information" section on the homepage further
1257     by additionally ditching the link to the 'See also' section
1258     of the user manual. The section contains mostly links that are
1259     directly reachable from the homepage already and the rest is
1260     not significant enough to get a link from the homepage.
1261   - Change the add-header{} example to set the DNT header
1262     and use a complete section to make copy and pasting
1263     more convenient.
1264     Add a comment to make it obvious that adding the
1265     header is not recommended for obvious reasons.
1266     Using the DNT header as example was suggested by
1267     Leo Wzukw.
1268   - Streamline the support-and-service template
1269     Instead of linking to the various support trackers
1270     (whose URLs hopefully change soon), link to the
1271     contact section of the user manual to increase the
1272     chances that users actually read it.
1273   - Add a FAQ entry for tainted sockets.
1274   - More sections in the documentation have stable URLs now.
1275   - FAQ: Explain why 'ping config.privoxy.org' is not expected
1276     to reach a local Privoxy installation.
1277   - Note that donations done through Zwiebelfreunde e.V. currently
1278     can't be checked automatically.
1279   - Updated section regarding starting Privoxy under OS X.
1280   - Use dedicated start instructions for FreeBSD and ElectroBSD.
1281   - Removed release instructions for AIX. They haven't been working
1282     for years and unsurprisingly nobody seems to care.
1283   - Removed obsolete reference to the solaris-dist target.
1284   - Updated the release instructions for FreeBSD.
1285   - Removed unfinished release instructions for Amiga OS and HP-UX 11.
1286   - Added a pointer to the Cygwin Time Machine for getting the last release of
1287     Cygwin version 1.5 to use for building Privoxy on Windows.
1288   - Various typos have been fixed.
1289
1290 - Infrastructure improvements:
1291   - The website is no longer hosted at SourceForge and
1292     can be reached through https now.
1293   - The mailing lists at SourceForge have been deprecated,
1294     you can subscribe to the new ones at: https://lists.privoxy.org/
1295   - Migrating the remaining services from SourceForge is
1296     work in progress (TODO list item #53).
1297
1298 - Build system improvements:
1299   - Add configure argument to optimistically redefine FD_SETSIZE
1300     with the intent to change the maximum number of client
1301     connections Privoxy can handle. Only works with some libcs.
1302     Sponsored by Robert Klemme.
1303   - Let the tarball-dist target skip files in ".git".
1304   - Let the tarball-dist target work in cwds other than current.
1305   - Make the 'clean' target faster when run from a git repository.
1306   - Include tools in the generic distribution.
1307   - Let the gen-dist target work in cwds other than current.
1308   - Sort find output that is used for distribution tarballs
1309     to get reproducible results.
1310   - Don't add '-src' to the name of the tar ball generated by the
1311     gen-dist target. The package isn't a source distribution but a
1312     binary package.
1313     While at it, use a variable for the name to reduce the chances
1314     that the various references get out of sync and fix the gen-upload
1315     target which was looking in the wrong directory.
1316   - Add regression-tests.action to the files that are distributed.
1317   - The gen-dist target which was broken since 2002 (r1.92) has been fixed.
1318   - Remove genclspec.sh which has been obsolete since 2009.
1319   - Remove obsolete reference to Redhat spec file.
1320   - Remove the obsolete announce target which has been commented out years ago.
1321   - Let rsync skip files if the checksums match.
1322
1323 - Privoxy-Regression-Test:
1324   - Add a "Default level offset" directive which can be used to
1325     change the default level by a given value.
1326     This directive affects all tests located after it until the end
1327     of the file or a another "Default level offset" directive is reached.
1328     The purpose of this directive is to make it more convenient to skip
1329     similar tests in a given file without having to remove or disable
1330     the tests completely.
1331   - Let test level 17 depend on FEATURE_64_BIT_TIME_T
1332     instead of FEATURE_PTHREAD which has no direct connection
1333     to the time_t size.
1334   - Fix indentation in perldoc examples.
1335   - Don't overlook directives in the first line of the action file.
1336   - Bump version to 0.7.
1337   - Fix detection of the Privoxy version now that https://
1338     is used for the website.
1339
1340 *** Version 3.0.24 stable ***
1341
1342 - Security fixes (denial of service):
1343   - Prevent invalid reads in case of corrupt chunk-encoded content.
1344     CVE-2016-1982. Bug discovered with afl-fuzz and AddressSanitizer.
1345   - Remove empty Host headers in client requests.
1346     Previously they would result in invalid reads. CVE-2016-1983.
1347     Bug discovered with afl-fuzz and AddressSanitizer.
1348
1349 - Bug fixes:
1350   - When using socks5t, send the request body optimistically as well.
1351     Previously the request body wasn't guaranteed to be sent at all
1352     and the error message incorrectly blamed the server.
1353     Fixes #1686 reported by Peter Müller and G4JC.
1354   - Fixed buffer scaling in execute_external_filter() that could lead
1355     to crashes. Submitted by Yang Xia in #892.
1356   - Fixed crashes when executing external filters on platforms like
1357     Mac OS X. Reported by Jonathan McKenzie on ijbswa-users@.
1358   - Properly parse ACL directives with ports when compiled with HAVE_RFC2553.
1359     Previously the port wasn't removed from the host and in case of
1360     'permit-access 127.0.0.1 example.org:80' Privoxy would try (and fail)
1361     to resolve "example.org:80" instead of example.org.
1362     Reported by Pak Chan on ijbswa-users@.
1363   - Check requests more carefully before serving them forcefully
1364     when blocks aren't enforced. Privoxy always adds the force token
1365     at the beginning of the path, but would previously accept it anywhere
1366     in the request line. This could result in requests being served that
1367     should be blocked. For example in case of pages that were loaded with
1368     force and contained JavaScript to create additionally requests that
1369     embed the origin URL (thus inheriting the force prefix).
1370     The bug is not considered a security issue and the fix does not make
1371     it harder for remote sites to intentionally circumvent blocks if
1372     Privoxy isn't configured to enforce them.
1373     Fixes #1695 reported by Korda.
1374   - Normalize the request line in intercepted requests to make rewriting
1375     the destination more convenient. Previously rewrites for intercepted
1376     requests were expected to fail unless $hostport was being used, but
1377     they failed "the wrong way" and would result in an out-of-memory
1378     message (vanilla host patterns) or a crash (extended host patterns).
1379     Reported by "Guybrush Threepwood" in #1694.
1380   - Enable socket lingering for the correct socket.
1381     Previously it was repeatedly enabled for the listen socket
1382     instead of for the accepted socket. The bug was found by
1383     code inspection and did not cause any (reported) issues.
1384   - Detect and reject parameters for parameter-less actions.
1385     Previously they were silently ignored.
1386   - Fixed invalid reads in internal and outdated pcre code.
1387     Found with afl-fuzz and AddressSanitizer.
1388   - Prevent invalid read when loading invalid action files.
1389     Found with afl-fuzz and AddressSanitizer.
1390   - Windows build: Use the correct function to close the event handle.
1391     It's unclear if this bug had a negative impact on Privoxy's behaviour.
1392     Reported by Jarry Xu in #891.
1393   - In case of invalid forward-socks5(t) directives, use the
1394     correct directive name in the error messages. Previously they
1395     referred to forward-socks4t failures.
1396     Reported by Joel Verhagen in #889.
1397
1398 - General improvements:
1399   - Set NO_DELAY flag for the accepting socket. This significantly reduces
1400     the latency if the operating system is not configured to set the flag
1401     by default. Reported by Johan Sintorn in #894.
1402   - Allow to build with mingw x86_64. Submitted by Rustam Abdullaev in #135.
1403   - Introduce the new forwarding type 'forward-webserver'.
1404     Currently it is only supported by the forward-override{} action and
1405     there's no config directive with the same name. The forwarding type
1406     is similar to 'forward', but the request line only contains the path
1407     instead of the complete URL.
1408   - The CGI editor no longer treats 'standard.action' special.
1409     Nowadays the official "standards" are part of default.action
1410     and there's no obvious reason to disallow editing them through
1411     the cgi editor anyway (if the user decided that the lack of
1412     authentication isn't an issue in her environment).
1413   - Improved error messages when rejecting intercepted requests
1414     with unknown destination.
1415   - A couple of log messages now include the number of active threads.
1416   - Removed non-standard Proxy-Agent headers in HTTP snipplets
1417     to make testing more convenient.
1418   - Include the error code for pcre errors Privoxy does not recognize.
1419   - Config directives with numerical arguments are checked more carefully.
1420   - Privoxy's malloc() wrapper has been changed to prevent zero-size
1421     allocations which should only occur as the result of bugs.
1422   - Various cosmetic changes.
1423
1424 - Action file improvements:
1425   - Unblock ".deutschlandradiokultur.de/".
1426     Reported by u302320 in #924.
1427   - Add two fast-redirect exceptions for "yandex.ru".
1428   - Disable filter{banners-by-size} for ".plasmaservice.de/".
1429   - Unblock "klikki.fi/adv/".
1430   - Block requests for "resources.infolinks.com/".
1431     Reported by "Black Rider" on ijbswa-users@.
1432   - Block a bunch of criteo domains.
1433     Reported by Black Rider.
1434   - Block "abs.proxistore.com/abe/".
1435     Reported by Black Rider.
1436   - Disable filter{banners-by-size} for ".black-mosquito.org/".
1437   - Disable fast-redirects for "disqus.com/".
1438
1439 - Documentation improvements:
1440   - FAQ: Explicitly point fingers at ASUS as an example of a
1441     company that has been reported to force malware based on
1442     Privoxy upon its customers.
1443   - Correctly document the action type for a bunch of "multi-value"
1444     actions that were incorrectly documented to be "parameterized".
1445     Reported by Gregory Seidman on ijbswa-users@.
1446   - Fixed the documented type of the forward-override{} action
1447     which is obviously 'parameterized'.
1448
1449 - Website improvements:
1450   - Users who don't trust binaries served by SourceForge
1451     can get them from a mirror. Migrating away from SourceForge
1452     is planned for 2016 (TODO list item #53).
1453   - The website is now available as onion service
1454     (http://jvauzb4sb3bwlsnc.onion/).
1455
1456 *** Version 3.0.23 stable ***
1457
1458 - Bug fixes:
1459   - Fixed a DoS issue in case of client requests with incorrect
1460     chunk-encoded body. When compiled with assertions enabled
1461     (the default) they could previously cause Privoxy to abort().
1462     Reported by Matthew Daley. CVE-2015-1380.
1463   - Fixed multiple segmentation faults and memory leaks in the
1464     pcrs code. This fix also increases the chances that an invalid
1465     pcrs command is rejected as such. Previously some invalid commands
1466     would be loaded without error. Note that Privoxy's pcrs sources
1467     (action and filter files) are considered trustworthy input and
1468     should not be writable by untrusted third-parties. CVE-2015-1381.
1469   - Fixed an 'invalid read' bug which could at least theoretically
1470     cause Privoxy to crash. So far, no crashes have been observed.
1471     CVE-2015-1382.
1472   - Compiles with --disable-force again. Reported by Kai Raven.
1473   - Client requests with body that can't be delivered no longer
1474     cause pipelined requests behind them to be rejected as invalid.
1475     Reported by Basil Hussain.
1476
1477 - General improvements:
1478   - If a pcrs command is rejected as invalid, Privoxy now logs
1479     the cause of the problem as text. Previously the pcrs error
1480     code was logged.
1481   - The tests are less likely to cause false positives.
1482
1483 - Action file improvements:
1484   - '.sify.com/' is no longer blocked. Apparently it is not actually
1485     a pure tracking site (anymore?). Reported by Andrew on ijbswa-users@.
1486   - Unblock banners on .amnesty.de/ which aren't ads.
1487
1488 - Documentation improvements:
1489   - The 'Would you like to donate?' section now also contains
1490     a "Paypal" address.
1491   - The list of supported operating systems has been updated.
1492   - The existence of the SF support and feature trackers has been
1493     deemphasized because they have been broken for months.
1494     Most of the time the mailing lists still work.
1495   - The claim that default.action updates are sometimes released
1496     on their own has been removed. It hasn't happened in years.
1497   - Explicitly mention that Tor's port may deviate from the default
1498     when using a bundle. Requested by Andrew on ijbswa-users@.
1499
1500 *** Version 3.0.22 stable ***
1501
1502 - Bug fixes:
1503   - Fixed a memory leak when rejecting client connections due to
1504     the socket limit being reached (CID 66382). This affected
1505     Privoxy 3.0.21 when compiled with IPv6 support (on most
1506     platforms this is the default). CVE-2015-1030.
1507   - Fixed an immediate-use-after-free bug (CID 66394) and two
1508     additional unconfirmed use-after-free complaints made by
1509     Coverity scan (CID 66391, CID 66376). CVE-2015-1031.
1510   - Actually show the FORCE_PREFIX value on the show-status page.
1511   - Properly deal with Keep-Alive headers with timeout= parameters
1512     If the timeout still can't be parsed, use the configured
1513     timeout instead of preventing the client from keeping the
1514     connection alive. Fixes #3615312/#870 reported by Bernard Guillot.
1515   - Not using any filter files no longer results in warning messages
1516     unless an action file is referencing header taggers or filters.
1517     Reported by Stefan Kurtz in #3614835.
1518   - Fixed a bug that prevented Privoxy from reusing some reusable
1519     connections. Two bit masks with different purpose unintentionally
1520     shared the same bit.
1521   - A couple of additional bugs were discovered by Coverity Scan.
1522     The fixes that are not expected to affect users are not explicitly
1523     mentioned here, for details please have a look at the CVS logs.
1524
1525 - General improvements:
1526   - Introduced negative tag patterns NO-REQUEST-TAG and NO-RESPONSE-TAG.
1527     They apply if no matching tag is found after parsing client or
1528     server headers.
1529   - Add support for external filters which allow to process the
1530     response body with a script or program written in any language
1531     the platform supports. External filters are enabled with
1532     +external-filter{} after they have been defined in one of the
1533     filter files with a header line starting with "EXTERNAL-FILTER:".
1534     External filter support is experimental, not compiled by default
1535     and known not to work on all platforms.
1536   - Add support for the 'PATCH' method as defined in RFC5789.
1537   - Reject requests with unsupported Expect header values.
1538     Fixes a couple of Co-Advisor tests.
1539   - Normalize the HTTP-version in forwarded requests and responses.
1540     This is an explicit RFC 2616 MUST and RFC 7230 mandates that
1541     intermediaries send their own HTTP-version in forwarded
1542     messages.
1543   - Server 'Keep-Alive' headers are no longer forwarded. From a user's
1544     point of view it doesn't really matter, but RFC 2616 (obsolete)
1545     mandates that the header is removed and this fixes a Co-Advisor
1546     complaint.
1547   - Change declared template file encoding to UTF-8. The templates
1548     already used a subset of UTF-8 anyway and changing the declaration
1549     allows to properly display UTF-8 characters used in the action files.
1550     This change may require existing action files with ISO-8859-1
1551     characters that aren't valid UTF-8 to be converted to UTF-8.
1552     Requested by Sam Chen in #582.
1553   - Do not pass rejected keep-alive timeouts to the server. It might
1554     not have caused any problems (we know of), but doing the right
1555     thing shouldn't hurt either.
1556   - Let log_error() use its own buffer size #define to make changing
1557     the log buffer size slightly less inconvenient.
1558   - Turned single-threaded into a "proper" toggle directive with arguments.
1559   - CGI templates no longer enforce new windows for some links.
1560   - Remove an undocumented workaround ('HOST' header removal) for
1561     an Apple iTunes bug that according to #729900 got fixed in 2003.
1562
1563 - Action file improvements:
1564   - The pattern 'promotions.' is no longer being blocked.
1565     Reported by rakista in #3608540.
1566   - Disable fast-redirects for .microsofttranslator.com/.
1567   - Disable filter{banners-by-size} for .dgb-tagungszentren.de/.
1568   - Add adn.speedtest.net as a site-specific unblocker.
1569     Support request #3612908.
1570   - Disable filter{banners-by-size} for creativecommons.org/.
1571   - Block requests to data.gosquared.com/. Reported by cbug in #3613653.
1572   - Unblock .conrad./newsletter/. Reported by David Bo in #3614238.
1573   - Unblock .bundestag.de/.
1574   - Unblock .rote-hilfe.de/.
1575   - Disable fast-redirects for .facebook.com/plugins/like.php.
1576   - Unblock Stackexchange popup URLs that aren't used to serve ads.
1577     Reported by David Wagner in #3615179.
1578   - Disable fast-redirects for creativecommons.org/.
1579   - Unblock .stopwatchingus.info/.
1580   - Block requests for .adcash.com/script/.
1581     Reported by Tyrexionibus in #3615289.
1582   - Disable HTML filters if the response was tagged as JavaScript.
1583     Filtering JavaScript code with filters intended to deal with HTML
1584     is usually a waste of time and, more importantly, may break stuff.
1585   - Use a custom redirect{} for .washingtonpost.com/wp-apps/imrs\.php\?src=
1586     Previously enabling the 'Advanced' settings (or manually enabling
1587     +fast-redirects{}) prevented some images from being loaded properly.
1588   - Unblock "adina*." Fixes #919 reported by Morton A. Goldberg.
1589   - Block '/.*DigiAd'.
1590   - Unblock 'adele*.'. Reported by Adele Lime in #1663.
1591   - Disable banners-by-size for kggp.de/.
1592
1593 - Filter file improvements & bug fixes:
1594   - Decrease the chances that js-annoyances creates invalid JavaScript.
1595     Submitted by John McGowan on ijbswa-users@.
1596   - Let the msn filter hide 'related' ads again.
1597   - Remove a stray '1' in the 'html-annoyances' filter.
1598   - Prevent img-reorder from messing up img tags with empty src
1599     attributes. Fixes #880 reported by Duncan.
1600
1601 - Documentation improvements:
1602   - Updated the 'Would you like to donate?' section.
1603   - Note that invalid forward-override{} parameter syntax isn't
1604     detected until the parameter is used.
1605   - Add another +redirect{} example: a shortcut for illumos bugs.
1606   - Make it more obvious that many operating systems support log
1607     rotation out of the box.
1608   - Fixed dead links. Reported by Mark Nelson in #3614557.
1609   - Rephrased the 'Why is the configuration so complicated?' answer
1610     to be slightly less condescending. Anonymously suggested in #3615122.
1611   - Be more explicit about accept-intercepted-requests's lack of MITM support.
1612   - Make 'demoronizer' FAQ entries more generic.
1613   - Add an example hostname to the --pre-chroot-nslookup description.
1614   - Add an example for a host pattern that matches an IP address.
1615   - Rename the 'domain pattern' to 'host pattern' as it may
1616     contain IP addresses as well.
1617   - Recommend forward-socks5t when using Tor. It seems to work fine and
1618     modifying the Tor configuration to profit from it hasn't been necessary
1619     for a while now.
1620   - Add another redirect{} example to stress that redirect loops can
1621     and should be avoided.
1622   - The usual spelling and grammar fixes. Parts of them were
1623     reported by Reuben Thomas in #3615276.
1624   - Mention the PCRS option letters T and D in the filter section.
1625   - Clarify that handle-as-empty-doc-returns-ok is still useful
1626     and will not be removed without replacement.
1627   - Note that security issues shouldn't be reported using the bug tracker.
1628   - Clarify what Privoxy does if both +block{} and +redirect{} apply.
1629   - Removed the obsolete bookmarklets section.
1630
1631 - Build system improvements:
1632   - Let --with-group properly deal with secondary groups.
1633     Patch submitted by Anatoly Arzhnikov in #3615187.
1634   - Fix web-actions target.
1635   - Add a web-faq target that only updates the FAQ on the webserver.
1636   - Remove already-commented-out non-portable DOSFILTER alternatives.
1637   - Remove the obsolete targets dok-put and dok-get.
1638   - Add a sf-shell target.
1639
1640 *** Version 3.0.21 stable ***
1641
1642 - Bug fixes:
1643   - On POSIX-like platforms, network sockets with file descriptor
1644     values above FD_SETSIZE are properly rejected. Previously they
1645     could cause memory corruption in configurations that allowed
1646     the limit to be reached.
1647   - Proxy authentication headers are removed unless the new directive
1648     enable-proxy-authentication-forwarding is used. Forwarding the
1649     headers potentially allows malicious sites to trick the user
1650     into providing them with login information.
1651     Reported by Chris John Riley.
1652   - Compiles on OS/2 again now that unistd.h is only included
1653     on platforms that have it.
1654
1655 - General improvements:
1656   - The show-status page shows the FEATURE_STRPTIME_SANITY_CHECKS status.
1657   - A couple of assert()s that could theoretically dereference
1658     NULL pointers in debug builds have been relocated.
1659   - Added an LSB info block to the generic start script.
1660     Based on a patch from Natxo Asenjo.
1661   - The max-client-connections default has been changed to 128
1662     which should be more than enough for most setups.
1663
1664 - Action file improvements:
1665   - Block rover.ebay./ar.*\&adtype= instead of "/.*\&adtype=" which
1666     caused too man false positives.
1667     Reported by u302320 in #360284, additional feedback from Adam Piggott.
1668   - Unblock '.advrider.com/' and '/.*ADVrider'.
1669     Anonymously reported in #3603636.
1670   - Stop blocking '/js/slider\.js'.
1671     Reported by Adam Piggott in #3606635 and _lvm in #2791160.
1672
1673 - Filter file improvements:
1674   - Added an iframes filter.
1675
1676 - Documentation improvements:
1677   - The whole GPLv2 text is included in the user manual now,
1678     so Privoxy can serve it itself and the user can read it
1679     without having to wade through GPLv3 ads first.
1680   - Properly numbered and underlined a couple of section titles
1681     in the config that where previously overlooked due to a flaw
1682     in the conversion script. Reported by Ralf Jungblut.
1683   - Improved the support instruction to hopefully make it harder to
1684     unintentionally provide insufficient information when requesting
1685     support. Previously it wasn't obvious that the information we need
1686     in bug reports is usually also required in support requests.
1687   - Removed documentation about packages that haven't been provided
1688     in years.
1689
1690 - Privoxy-Regression-Test:
1691   - Only log the test number when not running in verbose mode
1692     The position of the test is rarely relevant and it previously
1693     wasn't exactly obvious which one of the numbers was useful to
1694     repeat the test with --test-number.
1695
1696 - GNUmakefile improvements:
1697   - Factor generate-config-file out of config-file to make testing
1698     more convenient.
1699   - The clean target now also takes care of patch leftovers.
1700
1701 *** Version 3.0.20 beta ***
1702
1703 - Bug fixes:
1704   - Client sockets are now properly shutdown and drained before being
1705     closed. This fixes page truncation issues with clients that aggressively
1706     pipeline data on platforms that otherwise discard already written data.
1707     The issue mainly affected Opera users and was initially reported
1708     by Kevin in #3464439, szotsaki provided additional information to track
1709     down the cause.
1710   - Fix latency calculation for shared connections (disabled by default).
1711     It was broken since their introduction in 2009. The calculated latency
1712     for most connections would be 0 in which case the timeout detection
1713     failed to account for the real latency.
1714   - Reject URLs with invalid port. Previously they were parsed incorrectly and
1715     characters between the port number and the first slash were silently
1716     dropped as shown by curl test 187.
1717   - The default-server-timeout and socket-timeout directives accept 0 as
1718     valid value.
1719   - Fix a race condition on Windows that could cause Privoxy to become
1720     unresponsive after toggling it on or off through the taskbar icon.
1721     Reported by Tim H. in #3525694.
1722   - Fix the compilation on Windows when configured without IPv6 support.
1723   - Fix an assertion that could cause debug builds to abort() in case of
1724     socks5 connection failures with "debug 2" enabled.
1725   - Fix an assertion that could cause debug builds to abort() if a filter
1726     contained nul bytes in the replacement text.
1727
1728 - General improvements:
1729   - Significantly improved keep-alive support for both client and server
1730     connections.
1731   - New debug log level 65536 which logs all actions that were applied to
1732     the request.
1733   - New directive client-header-order to forward client headers in a
1734     different order than the one in which they arrived.
1735   - New directive tolerate-pipelining to allow client-side pipelining.
1736     If enabled (3.0.20 beta enables it by default), Privoxy will keep
1737     pipelined client requests around to deal with them once the current
1738     request has been served.
1739   - New --config-test option to let Privoxy exit after checking whether or not
1740     the configuration seems valid. The limitations noted in TODO #22 and #23
1741     still apply. Based on a patch by Ramkumar Chinchani.
1742   - New limit-cookie-lifetime{} action to let cookies expire before the end
1743     of the session. Suggested by Rick Sykes in #1049575.
1744   - Increase the hard-coded maximum number of actions and filter files from
1745     10 to 30 (each). It doesn't significantly affect Privoxy's memory usage
1746     and recompiling wasn't an option for all Privoxy users that reached the
1747     limit.
1748   - Add support for chunk-encoded client request bodies. Previously
1749     chunk-encoded request bodies weren't guaranteed to be forwarded correctly,
1750     so this can also be considered a bug fix although chunk-encoded request
1751     bodies aren't commonly used in the real world.
1752   - Add support for Tor's optimistic-data SOCKS extension, which can reduce the
1753     latency for requests on newly created connections. Currently only the
1754     headers are sent optimistically and only if the client request has already
1755     been read completely which rules out requests with large bodies.
1756   - After preventing the client from pipelining, don't signal keep-alive
1757     intentions. When looking at the response headers alone, it previously
1758     wasn't obvious from the client's perspective that no additional responses
1759     should be expected.
1760   - Stop considering client sockets tainted after receiving a request with body.
1761     It hasn't been necessary for a while now and unnecessarily causes test
1762     failures when using curl's test suite.
1763   - Allow HTTP/1.0 clients to signal interest in keep-alive through the
1764     Proxy-Connection header. While such client are rare in the real world, it
1765     doesn't hurt and couple of curl tests rely on it.
1766   - Only remove duplicated Content-Type headers when filters are enabled.
1767     If they are not it doesn't cause ill effects and the user might not want it.
1768     Downgrade the removal message to LOG_LEVEL_HEADER to clarify that it's not
1769     an error in Privoxy and is unlikely to cause any problems in general.
1770     Anonymously reported in #3599335.
1771   - Set the socket option SO_LINGER for the client socket.
1772   - Move several variable declarations to the beginning of their code block.
1773     It's required when compiling with gcc 2.95 which is still used on some
1774     platforms. Initial patch submitted by Simon South in #3564815.
1775   - Optionally try to sanity-check strptime() results before trusting them.
1776     Broken strptime() implementations have caused problems in the past and
1777     the most recent offender seems to be FreeBSD's libc (standards/173421).
1778   - When filtering is enabled, let Range headers pass if the range starts at
1779     the beginning. This should work around (or at least reduce) the video
1780     playback issues with various Apple clients as reported by Duc in #3426305.
1781   - Do not confuse a client hanging up with a connection time out. If a client
1782     closes its side of the connection without sending a request line, do not
1783     send the CLIENT_CONNECTION_TIMEOUT_RESPONSE, but report the condition
1784     properly.
1785   - Allow closing curly braces as part of action values as long as they are
1786     escaped.
1787   - On Windows, the logfile is now written before showing the GUI error
1788     message which blocks until the user acknowledges it.
1789     Reported by Adriaan in #3593603.
1790   - Remove an unreasonable parameter limit in the CGI interface. The new
1791     parameter limit depends on the memory available and is currently unlikely
1792     to be reachable, due to other limits in both Privoxy and common clients.
1793     Reported by Andrew on ijbswa-users@.
1794   - Decrease the chances of parse failures after requests with unsupported
1795     methods were sent to the CGI interface.
1796
1797 - Action file improvements:
1798   - Remove the comment that indicated that updated default.action versions
1799     are released on their own.
1800   - Block 'optimize.indieclick.com/' and 'optimized-by.rubiconproject.com/'
1801   - Unblock 'adjamblog.wordpress.com/' and 'adjamblog.files.wordpress.com/'.
1802     Reported by Ryan Farmer in #3496116.
1803   - Unblock '/.*Bugtracker'. Reported by pwhk in #3522341.
1804   - Add test URLs for '.freebsd.org' and '.watson.org'.
1805   - Unblock '.urbandictionary.com/popular'.
1806   - Block '.adnxs.com/'.
1807   - Block 'farm.plista.com/widgetdata.php'.
1808   - Block 'rotation.linuxnewmedia.com/'.
1809   - Block 'reklamy.sfd.pl/'. Reported by kacperdominik in #3399948.
1810   - Block 'g.adspeed.net/'.
1811   - Unblock 'websupport.wdc.com/'. Reported by Adam Piggot in #3577851.
1812   - Block '/openx/www/delivery/'.
1813   - Disable fast-redirects for '.googleapis.com/'.
1814   - Block 'imp.double.net/'. Reported by David Bo in #3070411.
1815   - Block 'gm-link.com/' which is used for email tracking.
1816     Reported by David Bo in #1812733.
1817   - Verify that requests to "bwp." are blocked. URL taken from #1736879
1818     submitted by Francois Marier.
1819   - Block '/.*bannerid='. Reported by Adam Piggott in #2975779.
1820   - Block 'cltomedia.info/delivery/' and '.adexprt.com/'.
1821     Anonymously reported in #2965254.
1822   - Block 'de17a.com/'. Reported by David Bo in #3061472.
1823   - Block 'oskar.tradera.com/'. Reported by David Bo in #3060596.
1824   - Block '/scripts/webtrends\.js'. Reported by johnd16 in #3002729.
1825   - Block requests for 'pool.*.adhese.com/'. Reported by johnd16 in #3002716.
1826   - Update path pattern for Coremetrics and add tests.
1827     Pattern and URLs submitted by Adam Piggott #3168443.
1828   - Enable +fast-redirects{check-decoded-url} for 'tr.anp.se/'.
1829     Reported by David Bo in #3268832.
1830   - Unblock '.conrad.se/newsletter/banners/'. Reported by David Bo in #3413824.
1831   - Block '.tynt.com/'. Reported by Dan Stahlke in #3421767.
1832   - Unblock '.bbci.co.uk/radio/'. Reported by Adam Piggott in #3569603.
1833   - Block requests to 'service.maxymiser.net/'.
1834     Reported by johnd16 in #3118401 (with a previous URL).
1835   - Disable fast-redirects for Google's "let's pretend your computer is
1836     infected" page.
1837   - Unblock '/.*download' to resolve actionsfile feedback #3498129.
1838     Submitted by Steven Kolins (soundcloud.com not working).
1839   - Unblock '.wlxrs.com/' which is required by hotmail.com.
1840     Fixes #3413827 submitted by David Bo.
1841   - Add two unblock patterns for popup radio and TV players.
1842     Submitted by Adam Piggott in #3596089.
1843
1844 - Filter file improvements & bug fixes:
1845   - Add a referer tagger.
1846   - Reduce the likelihood that the google filter messes up HTML-generating
1847     JavaScript. Reported by Zeno Kugy in #3520260.
1848
1849 - Documentation improvements:
1850   - Revised all OS X sections due to new packaging module (OSXPackageBuilder).
1851   - Update the list of supported operating systems to clarify that all Windows
1852     versions after 95 are expected to work and note that the platform-specific
1853     code for AmigaOS and QNX currently isn't maintained.
1854   - Update 'Signals' section, the only explicitly handled signals are SIGINT,
1855     SIGTERM and SIGHUP.
1856   - Add Haiku to the list of operating systems on which Privoxy is known to
1857     run.
1858   - Add DragonFly to the list of BSDs on which Privoxy is known to run.
1859   - Removed references to redhat-specific documentation set since it no longer
1860     exists.
1861   - Removed references to building PDFs since we no longer do so.
1862   - Multiple listen-address directives are supported since 3.0.18, correct the
1863     documentation to say so.
1864   - Remove bogus section about long and short being preferable to int.
1865   - Corrected some Internet JunkBuster references to Privoxy.
1866   - Removed references to www.junkbusters.com since it is no longer
1867     maintained. Reported by Angelina Matson.
1868   - Various grammar and spelling corrections
1869   - Add a client-header-tagger{} example for disabling filtering for range
1870     requests.
1871   - Correct a URL in the "Privoxy with Tor" FAQ.
1872   - Spell 'refresh-tags' correctly. Reported by Don in #3571927.
1873   - Sort manpage options alphabetically.
1874   - Remove an incorrect sentence in the toggle section. The toggle state
1875     doesn't affect whether or not the Windows version uses the tray icon.
1876     Reported by Zeno Kugy in #3596395.
1877   - Add new contributors since 3.0.19.
1878
1879 - Log message improvements:
1880   - When stopping to watch a client socket due to pipelining, additionally log
1881     the socket number.
1882   - Log the client socket and its condition before closing it. This makes it
1883     more obvious that the socket actually gets closed and should help when
1884     diagnosing problems like #3464439.
1885   - In case of SOCKS5 failures, do not explicitly log the server's response.
1886     It hasn't helped so far and the response can already be logged by enabling
1887     "debug 32768" anyway. This reverts v1.81 and the follow-up bug fix v1.84.
1888   - Relocate the connection-accepted message from listen_loop() to serve().
1889     This way it's printed by the thread that is actually serving the
1890     connection which is nice when grepping for thread ids in log files.
1891
1892 - Code cleanups:
1893   - Remove compatibility layer for versions prior to 3.0 since it has been
1894     obsolete for more than 10 years now.
1895   - Remove the ijb_isupper() and ijb_tolower() macros from parsers.c since
1896     they aren't used in this file.
1897   - Removed the 'Functions declared include:' comment sections since they tend
1898     to be incomplete, incorrect and out of date and the benefit seems
1899     questionable.
1900   - Various comment grammar and comprehensibility improvements.
1901   - Remove a pointless fflush() call in chat(). Flushing all streams pretty
1902     much all the time for no obvious reason is ridiculous.
1903   - Relocate ijb_isupper()'s definition to project.h and get the ijb_tolower()
1904     definition from there, too.
1905   - Relocate ijb_isdigit()'s definition to project.h.
1906   - Rename ijb_foo macros to privoxy_foo.
1907   - Add malloc_or_die() which will allow to simplify code paths where malloc()
1908     failures don't need to be handled gracefully.
1909   - Add strdup_or_die() which will allow to simplify code paths where strdup()
1910     failures don't need to be handled gracefully.
1911   - Replace strdup() calls with strdup_or_die() calls where it's safe and
1912     simplifies the code.
1913   - Fix white-space around parentheses.
1914   - Add missing white-space behind if's and the following parentheses.
1915   - Unwrap a memcpy() call in resolve_hostname_to_ip().
1916   - Declare pcrs_get_delimiter()'s delimiters[] static const.
1917   - Various optimisations to remove dead code and merge inefficient code
1918     structures for improved clarity, performance or code compactness.
1919   - Various data type corrections.
1920   - Change visibility of several code segments when compiling without
1921     FEATURE_CONNECTION_KEEP_ALIVE enabled for clarity.
1922   - In pcrs_get_delimiter(), do not use delimiters outside the ASCII range.
1923     Fixes a clang complaint.
1924   - Fix an error message in get_last_url() nobody is supposed to see.
1925     Reported by Matthew Fischer in #3507301.
1926   - Fix a typo in the no-zlib-support complaint. Patch submitted by Matthew
1927     Fischer in #3507304.
1928   - Shorten ssplit()'s prototype by removing the last two arguments. We always
1929     want to skip empty fields and ignore leading delimiters, so having
1930     parameters for this only complicates the API.
1931   - Use an enum for the type of the action value.
1932   - Rename action_name's member takes_value to value_type as it isn't used as
1933     boolean.
1934   - Turn family mismatches in match_sockaddr() into fatal errors.
1935   - Let enlist_unique_header() verify that the caller didn't pass a header
1936     containing either \r or \n.
1937   - Change the hashes used in load_config() to unsigned int. That's what
1938     hash_string() actually returns and using a potentially larger type
1939     is at best useless.
1940   - Use privoxy_tolower() instead of vanilla tolower() with manual casting of
1941     the argument.
1942   - Catch ssplit() failures in parse_cgi_parameters().
1943
1944 - Privoxy-Regression-Test:
1945   - Add an 'Overwrite condition' directive to skip any matching tests before
1946     it. As it has a global scope, using it is more convenient than clowning
1947     around with the Ignore directive.
1948   - Log to STDOUT instead of STDERR.
1949   - Include the Privoxy version in the output.
1950   - Various grammar and spelling corrections in documentation and code.
1951   - Additional tests for range requests with filtering enabled.
1952   - Tests with mostly invalid range request.
1953   - Add a couple of hide-if-modified-since{} tests with different date formats.
1954   - Cleaned up the format of the regression-tests.action file to match the
1955     format of default.action.
1956   - Remove the "Copyright" line from print_version(). When using --help, every
1957     line of screen space matters and thus shouldn't be wasted on things the
1958     user doesn't care about.
1959
1960 - Privoxy-Log-Parser:
1961   - Improve the --statistics performance by skipping sanity checks for input
1962     that shouldn't affect the results anyway. Add a --strict-checks option
1963     that enables some of the checks again, just in case anybody cares.
1964   - The distribution of client requests per connection is included in
1965     the --statistic output.
1966   - The --accept-unknown-messages option has been removed and the behavior
1967     is now the default.
1968   - Accept and (mostly) highlight new log messages introduced with
1969     Privoxy 3.0.20.
1970
1971 - uagen:
1972   - Bump generated Firefox version to 17.
1973
1974 - GNUmakefile improvements:
1975   - The dok-tidy target no longer taints documents with a tidy-mark
1976   - Change RA_MODE from 0664 to 0644. Suggested by Markus Dittrich in
1977     #3505445.
1978   - Remove tidy's clean flag as it changes the scope of attributes.
1979     Link-specific colors end up being applied to all text. Reported by Adam
1980     Piggott in #3569551.
1981   - Leave it up to the user whether or not smart tags are inserted.
1982   - Let w3m itself do the line wrapping for the config file. It works better
1983     than fmt as it can honour pre tags causing less unintentional line breaks.
1984   - Ditch a pointless '-r' passed to rm to delete files.
1985   - The config-file target now requires less manual intervention and updates
1986     the original config.
1987   - Change WDUMP to generate ASCII. Add WDUMP_UTF8 to allow UTF-8 in the
1988     AUTHORS file so the names are right.
1989   - Stop pretending that lynx and links are supported for the documentation.
1990
1991 - configure improvements:
1992   - On Haiku, do not pass -lpthread to the compiler. Haiku's pthreads
1993     implementation is contained in its system library, libroot, so no
1994     additional library needs to be searched.
1995     Patch submitted by Simon South in #3564815.
1996   - Additional Haiku-specific improvements. Disable checks intended for
1997     multi-user systems as Haiku is presently single-user. Group Haiku-specific
1998     settings in their own section, following the pattern for Solaris, OS/2 and
1999     AmigaOS. Add additional library-related settings to remove the need for
2000     providing configure with custom LDFLAGS.
2001     Submitted by Simon South in #3574538.
2002
2003 *** Version 3.0.19 Stable ***
2004
2005 - Bug fixes:
2006   - Prevent a segmentation fault when de-chunking buffered content.
2007     It could be triggered by malicious web servers if Privoxy was
2008     configured to filter the content and running on a platform
2009     where SIZE_T_MAX isn't larger than UINT_MAX, which probably
2010     includes most 32-bit systems. On those platforms, all Privoxy
2011     versions before 3.0.19 appear to be affected.
2012     To be on the safe side, this bug should be presumed to allow
2013     code execution as proving that it doesn't seems unrealistic.
2014   - Do not expect a response from the SOCKS4/4A server until it
2015     got something to respond to. This regression was introduced
2016     in 3.0.18 and prevented the SOCKS4/4A negotiation from working.
2017     Reported by qqqqqw in #3459781.
2018
2019 - General improvements:
2020   - Fix an off-by-one in an error message about connect failures.
2021   - Use a GNUMakefile variable for the webserver root directory and
2022     update the path. Sourceforge changed it which broke various
2023     web-related targets.
2024   - Update the CODE_STATUS description.
2025
2026 *** Version 3.0.18 Stable ***
2027
2028 - Bug fixes:
2029   - If a generated redirect URL contains characters RFC 3986 doesn't
2030     permit, they are (re)encoded. Not doing this makes Privoxy versions
2031     from 3.0.5 to 3.0.17 susceptible to HTTP response splitting (CWE-113)
2032     attacks if the +fast-redirects{check-decoded-url} action is used.
2033   - Fix a logic bug that could cause Privoxy to reuse a server
2034     socket after it got tainted by a server-header-tagger-induced
2035     block that was triggered before the whole server response had
2036     been read. If keep-alive was enabled and the request following
2037     the blocked one was to the same host and using the same forwarding
2038     settings, Privoxy would send it on the tainted server socket.
2039     While the server would simply treat it as a pipelined request,
2040     Privoxy would later on fail to properly parse the server's
2041     response as it would try to parse the unread data from the
2042     first response as server headers for the second one.
2043     Regression introduced in 3.0.17.
2044   - When implying keep-alive in client_connection(), remember that
2045     the client didn't. Fixes a regression introduced in 3.0.13 that
2046     would cause Privoxy to wait for additional client requests after
2047     receiving a HTTP/1.1 request with "Connection: close" set
2048     and connection sharing enabled.
2049     With clients which terminates the client connection after detecting
2050     that the whole body has been received it doesn't really matter,
2051     but with clients that don't the connection would be kept open until
2052     it timed out.
2053   - Fix a subtle race condition between prepare_csp_for_next_request()
2054     and sweep(). A thread preparing itself for the next client request
2055     could briefly appear to be inactive.
2056     If all other threads were already using more recent files,
2057     the thread could get its files swept away under its feet.
2058     So far this has only been reproduced while stress testing in
2059     valgrind while touching action files in a loop. It's unlikely
2060     to have caused any actual problems in the real world.
2061   - Disable filters if SDCH compression is used unless filtering is forced.
2062     If SDCH was combined with a supported compression algorithm, Privoxy
2063     previously could try to decompress it and ditch the Content-Encoding
2064     header even though the SDCH compression wasn't dealt with.
2065     Reported by zebul666 in #3225863.
2066   - Make a copy of the --user value and only mess with that when splitting
2067     user and group. On some operating systems modifying the value directly
2068     is reflected in the output of ps and friends and can be misleading.
2069     Reported by zepard in #3292710.
2070   - If forwarded-connect-retries is set, only retry if Privoxy is actually
2071     forwarding the request. Previously direct connections would be retried
2072     as well.
2073   - Fixed a small memory leak when retrying connections with IPv6
2074     support enabled.
2075   - Remove an incorrect assertion in compile_dynamic_pcrs_job_list()
2076     It could be triggered by a pcrs job with an invalid pcre
2077     pattern (for example one that contains a lone quantifier).
2078   - If the --user argument user[.group] contains a dot, always bail out
2079     if no group has been specified. Previously the intended, but undocumented
2080     (and apparently untested), behaviour was to try interpreting the whole
2081     argument as user name, but the detection was flawed and checked for '0'
2082     instead of '\0', thus merely preventing group names beginning with a zero.
2083   - In html_code_map[], use a numeric character reference instead of '
2084     which wasn't standardized before XHTML 1.0.
2085   - Fix an invalid free when compiled with FEATURE_GRACEFUL_TERMINATION
2086     and shut down through http://config.privoxy.org/die
2087   - In get_actions(), fix the "temporary" backwards compatibility hack
2088     to accept block actions without reason.
2089     It also covered other actions that should be rejected as invalid.
2090     Reported by Billy Crook.
2091
2092 - General improvements:
2093   - Privoxy can (re)compress buffered content before delivering
2094     it to the client. Disabled by default as most users wouldn't
2095     benefit from it.
2096   - The +fast-redirects{check-decoded-url} action checks URL
2097     segments separately. If there are other parameters behind
2098     the redirect URL, this makes it unnecessary to cut them off
2099     by additionally using a +redirect{} pcrs command.
2100     Initial patch submitted by Jamie Zawinski in #3429848.
2101   - When loading action sections, verify that the referenced filters
2102     exist. Currently missing filters only result in an error message,
2103     but eventually the severity will be upgraded to fatal.
2104   - Allow to bind to multiple separate addresses.
2105     Patch set submitted by Petr Pisar in #3354485.
2106   - Set socket_error to errno if connecting fails in rfc2553_connect_to().
2107     Previously rejected direct connections could be incorrectly reported
2108     as DNS issues if Privoxy was compiled with IPv6 support.
2109   - Adjust url_code_map[] so spaces are replaced with %20 instead of '+'
2110     While '+' can be used by client's submitting form data, this is not
2111     actually what Privoxy is using the lookups for. This is more of a
2112     cosmetic issue and doesn't fix any known problems.
2113   - When compiled without FEATURE_FAST_REDIRECTS, do not silently
2114     ignore +fast-redirect{} directives
2115   - Added a workaround for GNU libc's strptime() reporting negative
2116     year values when the parsed year is only specified with two digits.
2117     On affected systems cookies with such a date would not be turned
2118     into session cookies by the +session-cookies-only action.
2119     Reported by Vaeinoe in #3403560
2120   - Fixed bind failures with certain GNU libc versions if no non-loopback
2121     IP address has been configured on the system. This is mainly an issue
2122     if the system is using DHCP and Privoxy is started before the network
2123     is completely configured.
2124     Reported by Raphael Marichez in #3349356.
2125     Additional insight from Petr Pisar.
2126   - Privoxy log messages now use the ISO 8601 date format %Y-%m-%d.
2127     It's only slightly longer than the old format, but contains
2128     the full date including the year and allows sorting by date
2129     (when grepping in multiple log files) without hassle.
2130   - In get_last_url(), do not bother trying to decode URLs that do
2131     not contain at least one '%' sign. It reduces the log noise and
2132     a number of unnecessary memory allocations.
2133   - In case of SOCKS5 failures, dump the socks response in the log message.
2134   - Simplify the signal setup in main().
2135   - Streamline socks5_connect() slightly.
2136   - In socks5_connect(), require a complete socks response from the server.
2137     Previously Privoxy didn't care how much data the server response
2138     contained as long as the first two bytes contained the expected
2139     values. While at it, shrink the buffer size so Privoxy can't read
2140     more than a whole socks response.
2141   - In chat(), do not bother to generate a client request in case of
2142     direct CONNECT requests. It will not be used anyway.
2143   - Reduce server_last_modified()'s stack size.
2144   - Shorten get_http_time() by using strftime().
2145   - Constify the known_http_methods pointers in unknown_method().
2146   - Constify the time_formats pointers in parse_header_time().
2147   - Constify the formerly_valid_actions pointers in action_used_to_be_valid().
2148   - Introduce a GNUMakefile MAN_PAGE variable that defaults to privoxy.1.
2149     The Debian package uses section 8 for the man page and this
2150     should simplify the patch.
2151   - Deduplicate the INADDR_NONE definition for Solaris by moving it to jbsockets.h
2152   - In block_url(), ditch the obsolete workaround for ancient Netscape versions
2153     that supposedly couldn't properly deal with status code 403.
2154   - Remove a useless NULL pointer check in load_trustfile().
2155   - Remove two useless NULL pointer checks in load_one_re_filterfile().
2156   - Change url_code_map[] from an array of pointers to an array of arrays
2157     It removes an unnecessary layer of indirection and on 64bit system reduces
2158     the size of the binary a bit.
2159   - Fix various typos. Fixes taken from Debian's 29_typos.dpatch by Roland Rosenfeld.
2160   - Add a dok-tidy GNUMakefile target to clean up the messy HTML
2161     generated by the other dok targets.
2162   - GNUisms in the GNUMakefile have been removed.
2163   - Change the HTTP version in static responses to 1.1
2164   - Synced config.sub and config.guess with upstream
2165     2011-11-11/386c7218162c145f5f9e1ff7f558a3fbb66c37c5.
2166   - Add a dedicated function to parse the values of toggles. Reduces duplicated
2167     code in load_config() and provides better error handling. Invalid or missing
2168     toggle values are now a fatal error instead of being silently ignored.
2169   - Terminate HTML lines in static error messages with \n instead of \r\n.
2170   - Simplify cgi_error_unknown() a bit.
2171   - In LogPutString(), don't bother looking at pszText when not
2172     actually logging anything.
2173   - Change ssplit()'s fourth parameter from int to size_t.
2174     Fixes a clang complaint.
2175   - Add a warning that the statistics currently can't be trusted.
2176     Mention Privoxy-Log-Parser's --statistics option as
2177     an alternative for the time being.
2178   - In rfc2553_connect_to(), start setting cgi->error_message on error.
2179   - Change the expected status code returned for http://p.p/die depending
2180     on whether or not FEATURE_GRACEFUL_TERMINATION is available.
2181   - In cgi_die(), mark the client connection for closing.
2182     If the client will fetch the style sheet through another connection
2183     it gets the main thread out of the accept() state and should thus
2184     trigger the actual shutdown.
2185   - Add a proper CGI message for cgi_die().
2186   - Don't enforce a logical line length limit in read_config_line().
2187   - Slightly refactor server_last_modified() to remove useless gmtime*() calls.
2188   - In get_content_type(), also recognize '.jpeg' as JPEG extension.
2189   - Add '.png' to the list of recognized file extensions in get_content_type().
2190   - In block_url(), consistently use the block reason "Request blocked by Privoxy"
2191     In two places the reason was "Request for blocked URL" which hides the
2192     fact that the request got blocked by Privoxy and isn't necessarily
2193     correct as the block may be due to tags.
2194   - In listen_loop(), reload the configuration files after accepting
2195     a new connection instead of before.
2196     Previously the first connection that arrived after a configuration
2197     change would still be handled with the old configuration.
2198   - In chat()'s receive-data loop, skip a client socket check if
2199     the socket will be written to right away anyway. This can
2200     increase the transfer speed for unfiltered content on fast
2201     network connections.
2202   - The socket timeout is used for SOCKS negotiations as well which
2203     previously couldn't timeout.
2204   - Don't keep the client connection alive if any configuration file
2205     changed since the time the connection came in. This is closer to
2206     Privoxy's behaviour before keep-alive support for client connection
2207     has been added and also less confusing in general.
2208   - Treat all Content-Type header values containing the pattern
2209     'script' as a sign of text. Reported by pribog in #3134970.
2210
2211 - Action file improvements:
2212   - Moved the site-specific block pattern section below the one for the
2213     generic patterns so for requests that are matched in both, the block
2214     reason for the domain is shown which is usually more useful than showing
2215     the one for the generic pattern.
2216   - Remove -prevent-compression from the fragile alias. It's no longer
2217     used anywhere by default and isn't known to break stuff anyway.
2218   - Add a (disabled) section to block various Facebook tracking URLs.
2219     Reported by Dan Stahlke in #3421764.
2220   - Add a (disabled) section to rewrite and redirect click-tracking
2221     URLs used on news.google.com.
2222     Reported by Dan Stahlke in #3421755.
2223   - Unblock linuxcounter.net/.
2224     Reported by Dan Stahlke in #3422612.
2225   - Block 'www91.intel.com/' which is used by Omniture.
2226     Reported by Adam Piggott in #3167370.
2227   - Disable the handle-as-empty-doc-returns-ok option and mark it as deprecated.
2228     Reminded by tceverling in #2790091.
2229   - Add ".ivwbox.de/" to the "Cross-site user tracking" section.
2230     Reported by Nettozahler in #3172525.
2231   - Unblock and fast-redirect ".awin1.com/.*=http://".
2232     Reported by Adam Piggott in #3170921.
2233   - Block "b.collective-media.net/".
2234   - Widen the Debian popcon exception to "qa.debian.org/popcon".
2235     Seen in Debian's 05_default_action.dpatch by Roland Rosenfeld.
2236   - Block ".gemius.pl/" which only seems to be used for user tracking.
2237     Reported by johnd16 in #3002731. Additional input from Lee and movax.
2238   - Disable banners-by-size filters for '.thinkgeek.com/'.
2239     The filter only seems to catch pictures of the inventory.
2240   - Block requests for 'go.idmnet.bbelements.com/please/showit/'.
2241     Reported by kacperdominik in #3372959.
2242   - Unblock adainitiative.org/.
2243   - Add a fast-redirects exception for '.googleusercontent.com/.*=cache'.
2244   - Add a fast-redirects exception for webcache.googleusercontent.com/.
2245   - Unblock http://adassier.wordpress.com/ and http://adassier.files.wordpress.com/.
2246
2247 - Filter file improvements:
2248   - Let the yahoo filter hide '.ads'.
2249   - Let the msn filter hide overlay ads for Facebook 'likes' in search
2250     results and elements with the id 's_notf_div'. They only seem to be
2251     used to advertise site 'enhancements'.
2252   - Let the js-events filter additionally disarm setInterval().
2253     Suggested by dg1727 in #3423775.
2254
2255 - Documentation improvements:
2256   - Clarify the effect of compiling Privoxy with zlib support.
2257     Suggested by dg1727 in #3423782.
2258   - Point out that the SourceForge messaging system works like a black
2259     hole and should thus not be used to contact individual developers.
2260   - Mention some of the problems one can experience when not explicitly
2261     configuring an IP addresses as listen address.
2262   - Explicitly mention that hostnames can be used instead of IP addresses
2263     for the listen-address, that only the first address returned will be
2264     used and what happens if the address is invalid.
2265     Requested by Calestyo in #3302213.
2266
2267 - Log message improvements:
2268   - If only the server connection is kept alive, do not pretend to
2269     wait for a new client request.
2270   - Remove a superfluous log message in forget_connection().
2271   - In chat(), properly report missing server responses as such
2272     instead of calling them empty.
2273   - In forwarded_connect(), fix a log message nobody should ever see.
2274   - Fix a log message in socks5_connect(), a failed write operation
2275     was logged as failed read operation.
2276   - Let load_one_actions_file() properly complain about a missing
2277     '{' at the beginning of the file.
2278     Simply stating that a line is invalid isn't particularly helpful.
2279   - Do not claim to listen on a socket until Privoxy actually does.
2280     Patch submitted by Petr Pisar #3354485
2281   - Prevent a duplicated LOG_LEVEL_CLF message when sending out
2282     the "no-server-data" response.
2283   - Also log the client socket when dropping a connection.
2284   - Include the destination host in the 'Request ... marked for
2285     blocking. limit-connect{...} doesn't allow CONNECT ...' message
2286     Patch submitted by Saperski in #3296250.
2287   - Prevent a duplicated log message if none of the resolved IP
2288     addresses were reachable.
2289   - In connect_to(), do not pretend to retry if forwarded-connect-retries
2290     is zero or unset.
2291   - When a specified user or group can't be found, put the name in
2292     single-quotes when logging it.
2293   - In rfc2553_connect_to(), explain getnameinfo() errors better.
2294   - Remove a useless log message in chat().
2295   - When retrying to connect, also log the maximum number of connection
2296     attempts.
2297   - Rephrase a log message in compile_dynamic_pcrs_job_list().
2298     Divide the error code and its meaning with a colon. Call the pcrs
2299     job dynamic and not the filter. Filters may contain dynamic and
2300     non-dynamic pcrs jobs at the same time. Only mention the name of
2301     the filter or tagger, but don't claim it's a filter when it could
2302     be a tagger.
2303   - In a fatal error message in load_one_actions_file(), cover both
2304     URL and TAG patterns.
2305   - In pcrs_strerror(), properly report unknown positive error code
2306     values as such. Previously they were handled like 0 (no error).
2307   - In compile_dynamic_pcrs_job_list(), also log the actual error code as
2308     pcrs_strerror() doesn't handle all errors reported by pcre.
2309   - Don't bother trying to continue chatting if the client didn't ask for it.
2310     Reduces log noise a bit.
2311   - Make two fatal error message in load_one_actions_file() more descriptive.
2312   - In cgi_send_user_manual(), log when rejecting a file name due to '/' or '..'.
2313   - In load_file(), log a message if opening a file failed.
2314     The CGI error message alone isn't too helpful.
2315   - In connection_destination_matches(), improve two log messages
2316     to help understand why the destinations don't match.
2317   - Rephrase a log message in serve(). Client request arrival
2318     should be differentiated from closed client connections now.
2319   - In serve(), log if a client connection isn't reused due to a
2320     configuration file change.
2321   - Let mark_server_socket_tainted() always mark the server socket tainted,
2322     just don't talk about it in cases where it has no effect. It doesn't change
2323     Privoxy's behaviour, but makes understanding the log file easier.
2324
2325 - configure:
2326   - Added a --disable-ipv6-support switch for platforms where support
2327     is detected but doesn't actually work.
2328   - Do not check for the existence of strerror() and memmove() twice
2329   - Remove a useless test for setpgrp(2). Privoxy doesn't need it and
2330     it can cause problems when cross-compiling.
2331   - Rename the --disable-acl-files switch to --disable-acl-support.
2332     Since about 2001, ACL directives are specified in the standard
2333     config file.
2334   - Update the URL of the 'Removing outdated PCRE version after the
2335     next stable release' posting. The old URL stopped working after
2336     one of SF's recent site "optimizations". Reported by Han Liu.
2337
2338 - Privoxy-Regression-Test:
2339   - Added --shuffle-tests option to increase the chances of detection race conditions.
2340   - Added a --local-test-file option that allows to use Privoxy-Regression-Test without Privoxy.
2341   - Added tests for missing socks4 and socks4a forwarders.
2342   - The --privoxy-address option now works with IPv6 addresses containing brackets, too.
2343   - Perform limited sanity checks for parameters that are supposed to have numerical values.
2344   - Added a --sleep-time option to specify a number of seconds to
2345     sleep between tests, defaults to 0.
2346   - Disable the range-requests tagger for tests that break if it's enabled.
2347   - Log messages use the ISO 8601 date format %Y-%m-%d.
2348   - Fix spelling in two error messages.
2349   - In the --help output, include a list of supported tests and their default levels.
2350   - Adjust the tests to properly deal with FEATURE_TOGGLE being disabled.
2351
2352 - Privoxy-Log-Parser:
2353   - Perform limited sanity checks for command line parameters that
2354     are supposed to have numerical values.
2355   - Implement a --unbreak-lines-only option to try to revert MUA breakage.
2356   - Accept and highlight: Added header: Content-Encoding: deflate
2357   - Accept and highlight: Compressed content from 29258 to 8630 bytes.
2358   - Accept and highlight: Client request arrived in time on socket 21.
2359   - Highlight: Didn't receive data in time: a.fsdn.com:443
2360   - Accept log messages with ISO 8601 time stamps, too.
2361
2362 - uagen:
2363   - Bump generated Firefox version to 8.0.
2364   - Only randomize the release date if the new --randomize-release-date
2365     option is enabled. Firefox versions after 4 use a fixed date string
2366     without meaning.
2367
2368 *** Version 3.0.17 Stable ***
2369
2370 - Fixed last-chunk-detection for responses where the body was small
2371   enough to be read with the headers, causing Privoxy to wait for the
2372   end of the content until the server closed the connection or the
2373   request timed out. Reported by "Karsten" in #3028326.
2374 - Responses with status code 204 weren't properly detected as body-less
2375   like RFC2616 mandates. Like the previous bug, this caused Privoxy to
2376   wait for the end of the content until the server closed the connection
2377   or the request timed out. Fixes #3022042 and #3025553, reported by a
2378   user with no visible name. Most likely also fixes a bunch of other
2379   AJAX-related problem reports that got closed in the past due to
2380   insufficient information and lack of feedback.
2381 - Fixed an ACL bug that made it impossible to build a blacklist.
2382   Usually the ACL directives are used in a whitelist, which worked
2383   as expected, but blacklisting is still useful for public proxies
2384   where one only needs to deny known abusers access.
2385 - Added LOG_LEVEL_RECEIVED to log the not-yet-parsed data read from the
2386   network. This should make debugging various parsing issues a lot easier.
2387 - The IPv6 code is enabled by default on Windows versions that support it.
2388   Patch submitted by oCameLo in #2942729.
2389 - In mingw32 versions, the user.filter file is reachable through the
2390   GUI, just like default.filter is. Feature request 3040263.
2391 - Added the configure option --enable-large-file-support to set a few
2392   defines that are required by platforms like GNU/Linux to support files
2393   larger then 2GB. Mainly interesting for users without proper logfile
2394   management.
2395 - Logging with "debug 16" no longer stops at the first nul byte which is
2396   pretty useless. Non-printable characters are replaced with their hex value
2397   so the result can't span multiple lines making parsing them harder then
2398   necessary.
2399 - Privoxy logs when reading an action, filter or trust file.
2400 - Fixed incorrect regression test markup which caused a test in
2401   3.0.16 to fail while Privoxy itself was working correctly.
2402   While Privoxy accepts hide-referer, too, the action name is actually
2403   hide-referrer which is also the name used one the final results page,
2404   where the test expected the alias.
2405
2406 - CGI interface improvements:
2407   - In finish_http_response(), continue to add the 'Connection: close'
2408     header if the client connection will not be kept alive.
2409     Anonymously pointed out in #2987454.
2410   - Apostrophes in block messages no longer cause parse errors
2411     when the blocked page is viewed with JavaScript enabled.
2412     Reported by dg1727 in #3062296.
2413   - Fix a bunch of anchors that used underscores instead of dashes.
2414   - Allow to keep the client connection alive after crunching the previous request.
2415     Already opened server connections can be kept alive, too.
2416   - In cgi_show_url_info(), don't forget to prefix URLs that only contain
2417     http:// or https:// in the path. Fixes #2975765 reported by Adam Piggott.
2418   - Show the 404 CGI page if cgi_send_user_manual() is called while
2419     local user manual delivery is disabled.
2420
2421 - Action file improvements:
2422   - Enable user.filter by default. Suggested by David White in #3001830.
2423   - Block .sitestat.com/. Reported by johnd16 in #3002725.
2424   - Block .atemda.com/. Reported by johnd16 in #3002723.
2425   - Block js.adlink.net/. Reported by johnd16 in #3002720.
2426   - Block .analytics.yahoo.com/. Reported by johnd16 in #3002713.
2427   - Block sb.scorecardresearch.com, too. Reported by dg1727 in #2992652.
2428   - Fix problems noticed on Yahoo mail and news pages.
2429   - Remove the too broad yahoo section, only keeping the
2430     fast-redirects exception as discussed on ijbswa-devel@.
2431   - Don't block adesklets.sourceforge.net. Reported in #2974204.
2432   - Block chartbeat ping tracking. Reported in #2975895.
2433   - Tag CSS and image requests with cautious and medium settings, too.
2434   - Don't handle view.atdmt.com as image. It's used for click-throughs
2435     so users should be able to "go there anyway".
2436     Reported by Adam Piggott in #2975927.
2437   - Also let the refresh-tags filter remove invalid refresh tags where
2438     the 'url=' part is missing. Anonymously reported in #2986382.
2439     While at it, update the description to mention the fact that only
2440     refresh tags with refresh times above 9 seconds are covered.
2441   - javascript needs to be blocked with +handle-as-empty-document to
2442     work around Firefox bug 492459.  So move .js blockers from
2443     +block{Might be a web-bug.} -handle-as-empty-document to
2444     +block{Might be a web-bug.} +handle-as-empty-document.
2445   - ijbswa-Feature Requests-3006719 - Block 160x578 Banners.
2446   - Block another omniture tracking domain.
2447   - Added a range-requests tagger.
2448   - Added two sections to get Flickr's Ajax interface working with
2449     default pre-settings. If you change the configuration to block
2450     cookies by default, you'll need additional exceptions.
2451     Reported by Mathias Homann in #3101419 and by Patrick on ijbswa-users@.
2452
2453 - Documentation improvements:
2454   - Explicitly mention how to match all URLs.
2455   - Consistently recommend socks5 in the Tor FAQ entry and mention
2456     its advantage compared to socks4a. Reported by David in #2960129.
2457   - Slightly improve the explanation of why filtering may appear
2458     slower than it is.
2459   - Grammar fixes for the ACL section.
2460   - Fixed a link to the 'intercepting' entry and add another one.
2461   - Rename the 'Other' section to 'Mailing Lists' and reword it
2462     to make it clear that nobody is forced to use the trackers
2463   - Note that 'anonymously' posting on the trackers may not always
2464     be possible.
2465   - Suggest to enable debug 32768 when suspecting parsing problems.
2466
2467 - Privoxy-Log-Parser improvements:
2468   - Gather statistics for ressources, methods, and HTTP versions
2469     used by the client.
2470   - Also gather statistics for blocked and redirected requests.
2471   - Provide the percentage of keep-alive offers the client accepted.
2472   - Add a --url-statistics-threshold option.
2473   - Add a --host-statistics-threshold option to also gather
2474     statistics about how many request where made per host.
2475   - Fix a bug in handle_loglevel_header() where a 'scan: ' got lost.
2476   - Add a --shorten-thread-ids option to replace the thread id with
2477     a decimal number.
2478   - Accept and ignore: Looks like we got the last chunk together
2479     with the server headers. We better stop reading.
2480   - Accept and ignore: Continue hack in da house.
2481   - Accept and higlight: Rejecting connection from 10.0.0.2.
2482     Maximum number of connections reached.
2483   - Accept and highlight: Loading actions file: /usr/local/etc/privoxy/default.action
2484   - Accept and highlight: Loading filter file: /usr/local/etc/privoxy/default.filter
2485   - Accept and highlight: Killed all-caps Host header line: HOST: bestproxydb.com
2486   - Accept and highlight: Reducing expected bytes to 0. Marking
2487     the server socket tainted after throwing 4 bytes away.
2488   - Accept: Merged multiple header lines to: 'X-FORWARDED-PROTO: http X-HOST: 127.0.0.1'
2489
2490 - Code cleanups:
2491   - Remove the next member from the client_state struct. Only the main
2492     thread needs access to all client states so give it its own struct.
2493   - Garbage-collect request_contains_null_bytes().
2494   - Ditch redundant code in unload_configfile().
2495   - Ditch LogGetURLUnderCursor() which doesn't seem to be used anywhere.
2496   - In write_socket(), remove the write-only variable write_len in
2497     an ifdef __OS2__ block. Spotted by cppcheck.
2498   - In connect_to(), don't declare the variable 'flags' on OS/2 where
2499     it isn't used. Spotted by cppcheck.
2500   - Limit the scope of various variables. Spotted by cppcheck.
2501   - In add_to_iob(), turn an interestingly looking for loop into a
2502     boring while loop.
2503   - Code cleanup in preparation for external filters.
2504   - In listen_loop(), mention the socket on which we accepted the
2505     connection, not just the source IP address.
2506   - In write_socket(), also log the socket we're writing to.
2507   - In log_error(), assert that escaped characters get logged
2508     completely or not at all.
2509   - In log_error(), assert that ival and sval have reasonable values.
2510     There's no reason not to abort() if they don't.
2511   - Remove an incorrect cgi_error_unknown() call in a
2512     cannot-happen-situation in send_crunch_response().
2513   - Clean up white-space in http_response definition and
2514     move the crunch_reason to the beginning.
2515   - Turn http_response.reason into an enum and rename it
2516     to http_response.crunch_reason.
2517   - Silence a 'gcc (Debian 4.3.2-1.1) 4.3.2' warning on i686 GNU/Linux.
2518   - Fix white-space in a log message in remove_chunked_transfer_coding().
2519     While at it, add a note that the message doesn't seem to
2520     be entirely correct and should be improved later on.
2521
2522 - GNUmakefile improvements:
2523   - Use $(SSH) instead of ssh, so one only needs to specify a username once.
2524   - Removed references to the action feedback thingy that hasn't been
2525     working for years.
2526   - Consistently use shell.sourceforge.net instead of shell.sf.net so
2527     one doesn't need to check server fingerprints twice.
2528   - Removed GNUisms in the webserver and webactions targets so they
2529     work with standard tar.
2530
2531 *** Version 3.0.16 Stable ***
2532
2533 - Added the config file option handle-as-empty-doc-returns-ok to
2534   work around Firefox bug #492459, which causes Firefox to hang
2535   if JavaScripts are blocked in certain situations. The option is
2536   enabled in the default config file.
2537 - Added the config file option default-server-timeout to control the
2538   assumed default server timeout. Since Privoxy no longer returns
2539   an error message for connection resets on reused client connections,
2540   assuming larger server timeout values appears to actually work
2541   pretty well as long as connections aren't shared.
2542 - Added optional support for FreeBSD's accf_http(9). Use the
2543   configure option --enable-accept-filter to enable it.
2544 - Added fancier Privoxy icons for win32. Contributed by Jeff H.
2545 - In daemon mode, fd 0, 1 and 2 are bound to /dev/null.
2546 - Resolve localhost using whatever address family the operating
2547   system feels like. Previous betas would try to use IPv4 as this
2548   is what most users expect, but this didn't work reliably on
2549   GNU/Linux systems.
2550 - In the action lists on CGI pages, actions and their parameters are
2551   no longer separated with a space. The action file parser doesn't
2552   actually allow this and will throw an invalid syntax error if actions
2553   and parameters in the action files are separated. Not adding the
2554   spaces means copy and pasting CGI output into the action files works.
2555 - The default keep-alive timeout has been reduced to 5 seconds to work
2556   around hangs in clients that treat the proxy like any other host and
2557   stop allowing any new connections if the "maximum number of
2558   connections per host" is reached.
2559 - Several webbug URLs that look like they are leading to images are now
2560   blocked as image instead of empty documents. Doing the latter causes
2561   WebKit-based clients to show a "missing image" icon which may mess up
2562   the layout.
2563 - The no-such-domain template is used for DNS resolution
2564   problems with FEATURE_IPV6_SUPPORT enabled. Previously the
2565   connect-failed template was used. Reported by 'zebul666'.
2566 - Accepts quoted expiration dates even though RFC 2109 10.1.2
2567   doesn't seem to allow them. Reported anonymously.
2568 - Don't try to forget connections if connection sharing is disabled.
2569   This wasn't a real problem but caused an unnecessary log message.
2570 - The still undocumented --enable-extended-host-patterns configure
2571   option has a better description.
2572 - Fixed an error message that would claim a write to the server
2573   failed when actually writing to the client failed.
2574 - Log the crunch reason before trying to write to the client.
2575   The log is easier to read that way.
2576 - Several log messages about client connections also mention
2577   the socket number.
2578 - handle-as-empty-document no longer depends on the image blocking
2579   code being enabled.
2580 - Privoxy-Log-Parser is roughly 40% faster in highlighting mode.
2581 - uagen, a Firefox User-Agent generator for Privoxy and Mozilla
2582   browsers has been imported and is available in the tarball's
2583   tools directory.
2584 - The scripts in the tools directory treat unknown parameters
2585   as fatal errors.
2586
2587 *** Version 3.0.15 beta ***
2588
2589 - In case of missing server data, no error message is send to the
2590   client if the request arrived on a reused connection. The client
2591   is then supposed to silently retry the request without bothering
2592   the user. This should significantly reduce the frequency of the
2593   "No server or forwarder data received" error message many users
2594   reported.
2595 - More reliable detection of prematurely closed client sockets
2596   with keep-alive enabled.
2597 - FEATURE_CONNECTION_KEEP_ALIVE is decoupled from
2598   FEATURE_CONNECTION_SHARING and now available on
2599   all platforms.
2600 - Improved handling of POST requests on reused connections.
2601   Should fix problems with stalled connections after submitting
2602   form data with some browser configurations.
2603 - Fixed various latency calculation issues.
2604 - Allows the client to pass NTLM authentication requests to a
2605   forwarding proxy. This was already assumed and hinted to work
2606   in 3.0.13 beta but actually didn't. Now it's confirmed to work
2607   with IE, Firefox and Chrome.
2608   Thanks to Francois Botha and Wan-Teh Chang
2609 - Fixed a calculation problem if receiving the server headers
2610   takes more than two reads, that could cause Privoxy to terminate
2611   the connection prematurely. Reported by Oliver.
2612 - Compiles again on platforms such as OpenBSD and systems
2613   using earlier glibc version that don't support AI_ADDRCONFIG.
2614   Anonymously submitted in #2872591.
2615 - A bunch of MS VC project files and Suse and Redhat RPM spec
2616   files have been removed as they were no longer maintained for
2617   quite some time.
2618 - Overly long action lines are properly rejected with a proper
2619   error message. Previously they would be either rejected as
2620   invalid or cause a core dump through abort().
2621 - Already timed-out connections are no longer temporarily remembered.
2622   They weren't reused anyway, but wasted a socket slot.
2623 - len refers to the number of bytes actually read which might
2624   differ from the ones received. Adjust log messages accordingly.
2625 - The optional JavaScript on the CGI page uses encodeURIComponent()
2626   instead of escape() which doesn't encode all characters that matter.
2627   Anonymously reported in #2832722.
2628 - Fix gcc45 warnings in decompress_iob().
2629 - Various log message improvements.
2630 - Privoxy-Regression-Test supports redirect tests.
2631 - Privoxy-Log-Parser can gather some connection statistics.
2632
2633 *** Version 3.0.14 beta ***
2634
2635 - The latency is taken into account when evaluating whether or not to
2636   reuse a connection. This should significantly reduce the number of
2637   connections problems several users reported.
2638 - If the server doesn't specify how long the connection stays alive,
2639   Privoxy errs on the safe side of caution and assumes it's only a second.
2640 - The error pages for connection timeouts or missing server data use a
2641   Last-Modified date in the past. Retry attempts are detected and Privoxy
2642   removes the If-Modified-Since header to prevent the server from responding
2643   with status code 304 in which case the client would reuse the error message.
2644 - Setting keep-alive-timeout to 0 disables keep-alive support. Previously
2645   Privoxy would claim to allow persistence but not reuse the connection.
2646 - Pipelined requests are less likely to be mistaken for the request
2647   body of the previous request. Note that Privoxy still has no real
2648   pipeline support and will either serialize pipelined requests or
2649   drop them in which case the client has to resent them.
2650 - Fixed a crash on some Windows versions when header randomization
2651   is enabled and the date couldn't be parsed.
2652 - Privoxy's keep-alive timeout for the current connection is reduced
2653   to the one specified in the client's Keep-Alive header.
2654 - For HTTP/1.1 requests, Privoxy implies keep-alive support by not
2655   setting any Connection header instead of using 'Connection: keep-alive'.
2656 - If the socket isn't reusable, Privoxy doesn't temporarily waste
2657   a socket slot to remember the connection.
2658 - If keep-alive support is disabled but compiled in, the client's
2659   Keep-Alive header is removed.
2660 - Fixed a bug on mingw32 where downloading large files failed if
2661   keep-alive support was enabled.
2662 - Fixed a bug that (at least theoretically) could cause log
2663   timestamps to be occasionally off by about a second.
2664 - No Proxy-Connection header if added if there already is one.
2665 - The configure script respects the $PATH variable when searching
2666   for groups and id.
2667
2668 *** Version 3.0.13 beta ***
2669
2670 - Added IPv6 support. Thanks to Petr Pisar who not only provided
2671   the initial patch but also helped a lot with the integration.
2672 - Added client-side keep-alive support.
2673 - The connection sharing code is only used if the connection-sharing
2674   option is enabled.
2675 - The max-client-connections option has been added to restrict
2676   the number of client connections below a value enforced by
2677   the operating system.
2678 - Fixed a regression reintroduced in 3.0.12 that could cause
2679   crashes on mingw32 if header date randomization was enabled.
2680 - Compressed content with extra fields couldn't be decompressed
2681   and would get passed to the client unfiltered. This problem
2682   has only be detected through statical analysis with clang as
2683   nobody seems to be using extra fields anyway.
2684 - If the server resets the Connection after sending only the headers
2685   Privoxy forwards what it got to the client. Previously Privoxy
2686   would deliver an error message instead.
2687 - Error messages in case of connection timeouts use the right
2688   HTTP status code.
2689 - If spawning a child to handle a request fails, the client
2690   gets an error message and Privoxy continues to listen for
2691   new requests right away.
2692 - The error messages in case of server-connection timeouts or
2693   prematurely closed server connections are now template-based.
2694 - If zlib support isn't compiled in, Privoxy no longer tries to
2695   filter compressed content unless explicitly asked to do so.
2696 - In case of connections that are denied based on ACL directives,
2697   the memory used for the client IP is no longer leaked.
2698 - Fixed another small memory leak if the client request times out
2699   while waiting for client headers other than the request line.
2700 - The client socket is kept open until the server socket has
2701   been marked as unused. This should increase the chances that
2702   the still-open connection will be reused for the client's next
2703   request to the same destination. Note that this only matters
2704   if connection-sharing is enabled.
2705 - A TODO list has been added to the source tarball to give potential
2706   volunteers a better idea of what the current goals are. Donations
2707   are still welcome too: https://www.privoxy.org/faq/general.html#DONATE
2708
2709 *** Version 3.0.12 ***
2710
2711 - The socket-timeout option now also works on platforms whose
2712   select() implementation modifies the timeout structure.
2713   Previously the timeout was triggered even if the connection
2714   didn't stall. Reported by cyberpatrol.
2715 - The Connection: keep-alive code properly deals with files
2716   larger than 2GB. Previously the connection was closed too
2717   early.
2718 - The content length for files above 2GB is logged correctly.
2719 - The user-manual directive on the show-status page links to
2720   the documentation location specified with the directive,
2721   not to the Privoxy website.
2722 - When running in daemon mode, Privoxy doesn't log anything
2723   to the console unless there are errors before the logfile
2724   has been opened.
2725 - The show-status page prints warnings about invalid directives
2726   on the same line as the directives themselves.
2727 - Fixed several justified (but harmless) compiler warnings,
2728   mostly on 64 bit platforms.
2729 - The mingw32 version explicitly requests the default charset
2730   to prevent display problems with some fonts available on more
2731   recent Windows versions. Patch by Burberry.
2732 - The mingw32 version uses the Privoxy icon in the alt-tab
2733   windows. Patch by Burberry.
2734 - The timestamp and the thread id is omitted in the "Fatal error"
2735   message box on mingw32.
2736 - Fixed two related mingw32-only buffer overflows. Triggering
2737   them required control over the configuration file, therefore
2738   this isn't seen as a security issue.
2739 - In verbose mode, or if the new option --show-skipped-tests
2740   is used, Privoxy-Regression-Test logs skipped tests and the
2741   skip reason.
2742
2743 *** Version 3.0.11 ***
2744
2745 - On most platforms, outgoing connections can be kept alive and
2746   reused if the server supports it. Whether or not this improves
2747   things depends on the connection.
2748 - When dropping privileges, membership in supplementary groups
2749   is given up as well. Not doing that can lead to Privoxy running
2750   with more rights than necessary and violates the principle of
2751   least privilege. Users of the --user option are advised to update.
2752   Thanks to Matthias Drochner for reporting the problem,
2753   providing the initial patch and testing the final version.
2754 - Passing invalid users or groups with the --user option
2755   didn't lead to program exit. Regression introduced in 3.0.7.
2756 - The match all section has been moved from default.action
2757   to a new file called match-all.action. As a result the
2758   default.action no longer needs to be touched by the user
2759   and can be safely overwritten by updates.
2760 - The standard.action file has been removed. Its content
2761   is now part of the default.action file.
2762 - In some situations the logged content length was slightly too low.
2763 - Crunched requests are logged with their own log level.
2764   If you used "debug 1" in the past, you'll probably want
2765   to additionally enable "debug 1024", otherwise only passed
2766   requests will be logged. If you only care about crunched
2767   requests, simply replace "debug 1" with "debug 1024".
2768 - The crunch reason has been moved to the beginning of the
2769   crunch message. For HTTP URLs, the protocol is logged as well.
2770 - Log messages are shortened by printing the thread id on its
2771   own (as opposed to putting it inside the string "Privoxy()").
2772 - The config option socket-timeout has been added to control
2773   the time Privoxy waits for data to arrive on a socket.
2774 - Support for remote toggling is controlled by the configure
2775   option --disable-toggle only. In previous versions it also
2776   depended on the action editor and thus configuring with the
2777   --disable-editor option would disable remote toggling support
2778   as well.
2779 - Requests with invalid HTTP versions are rejected.
2780 - The template symbol @date@ can be used to include a date(1)-like
2781   time string. Initial patch submitted by Endre Szabo.
2782 - Responses from shoutcast servers are accepted again.
2783   Problem reported and fix suggested by Stefan.
2784 - The hide-forwarded-for-headers action has been replaced with
2785   the change-x-forwarded-for{} action which can also be used to
2786   add X-Forwarded-For headers. The latter functionality already
2787   existed in Privoxy versions prior to 3.0.7 but has been removed
2788   as it was often used unintentionally (by not using the
2789   hide-forwarded-for-headers action).
2790 - A "clear log" view option was added to the mingw32 version
2791   to clear out all of the lines in the Privoxy log window.
2792   Based on a patch submitted by T Ford.
2793 - The mingw32 version uses "critical sections" now, which prevents
2794   log message corruption under load. As a side effect, the
2795   "no thread-safe PRNG" warning could be removed as well.
2796 - The mingw32 version's task bar icon is crossed out and
2797   the color changed to gray if Privoxy is toggled off.
2798
2799 *** Version 3.0.10 ***
2800
2801 - Ordinary configuration file changes no longer cause program
2802   termination on OS/2 if the name of the logfile hasn't been
2803   changed as well. This regression probably crept in with the
2804   logging improvements in 3.0.7. Reported by Maynard.
2805 - The img-reorder filter is less likely to mess up JavaScript code in
2806   img tags. Problem and solution reported by Glenn Washburn in #2014552.
2807 - The source tar ball now includes Privoxy-Log-Parser,
2808   a syntax-highlighter for Privoxy logs. For fancy screenshots see:
2809   http://www.fabiankeil.de/sourcecode/privoxy-log-parser/
2810   Documentation is available through perldoc(1).
2811
2812 *** Version 3.0.9 beta ***
2813
2814 - Added SOCKS5 support (with address resolution done by
2815   the SOCKS5 server). Patch provided by Eric M. Hopper.
2816 - The "blocked" CGI pages include a block reason that was
2817   provided as argument to the last-applying block action.
2818 - If enable-edit-actions is disabled (the default since 3.0.7 beta)
2819   the show-status page hides the edit buttons and explains why.
2820   Previously the user would get the "this feature has been disabled"
2821   message after using the edit button.
2822 - Forbidden CONNECT requests are treated like blocks by default.
2823   The now-pointless treat-forbidden-connects-like-blocks action
2824   has been removed.
2825 - Not enabling limit-connect now allows CONNECT requests to all ports.
2826   In previous versions it would only allow CONNECT requests to port 443.
2827   Use +limit-connect{443} if you think you need the old default behaviour.
2828 - The CGI editor gets turned off after three edit requests with invalid
2829   file modification timestamps. This makes life harder for attackers
2830   who can leverage browser bugs to send fake Referers and intend to
2831   brute-force edit URLs.
2832 - Action settings for multiple patterns in the same section are
2833   shared in memory. As a result these sections take up less space
2834   (and are loaded slightly faster). Problem reported by Franz Schwartau.
2835 - Linear white space in HTTP headers will be normalized to single
2836   spaces before parsing the header's content, headers split across
2837   multiple lines get merged first. This should prevent problems like:
2838    * letting the session-cookies-only action slip
2839      some Cookies through unmodified,
2840    * only suppressing the first line of a header,
2841      thus creating an invalid one, and
2842    * to incorrectly block headers with valid timestamps
2843      that weren't properly recognized.
2844   Headers that could trigger these problems are unlikely to appear
2845   in "normal" web traffic, but could be intentionally generated to
2846   fool some of Privoxy's header parsers.
2847 - Host information is gathered outside the main thread so it's less
2848   likely to delay other incoming connections if the host is misconfigured.
2849 - New config option "hostname" to use a hostname other than
2850   the one returned by the operating system. Useful to speed-up responses
2851   for CGI requests on misconfigured systems. Requested by Max Khon.
2852 - The CGI editor supports the "disable all filters of this type"
2853   directives "-client-header-filter", "-server-header-filter",
2854   "-client-header-tagger" and "-server-header-tagger".
2855 - Fixed false-positives with the link-by-url filter and URLs that
2856   contain the pattern "/jump/".
2857 - The less-download-windows filter no longer messes
2858   "Content-Type: application/x-shockwave-flash" headers up.
2859 - In the show-url-info page's "Final results" section active and
2860   inactive actions are listed separately. Patch provided by Lee.
2861 - The GNUmakefile supports the DESTDIR variable. Patch for
2862   the install target submitted by Radoslaw Zielinski.
2863 - Embedding the content of configuration files in the show-status
2864   page is significantly faster now. For a largish action file (1 MB)
2865   a speedup of about 2450 times has been measured. This is mostly
2866   interesting if you are using large action files or regularly use
2867   Privoxy-Regression-Test while running Privoxy through Valgrind,
2868   for stock configuration files it doesn't really matter.
2869 - If zlib support is unavailable and there are content
2870   filters active but the prevent-compression action is disabled,
2871   the show-url-info page includes a warning that compression
2872   might prevent filtering.
2873 - The show-url-info page provides an OpenSearch Description that
2874   allows to access the page through browser search plugins.
2875 - Custom client-header filters that rewrite the request line
2876   incorrectly no longer cause Privoxy to crash. Reported by din_a4.
2877 - The obsolete kill-popups action has been removed as the
2878   PCRS-based popup filters can do the same and are slightly
2879   less unreliable.
2880 - The inspect-jpegs action has been removed.
2881 - The send-wafer and send-vanilla-wafer actions have been removed.
2882   They weren't particular useful and their behaviour could be emulated
2883   with add-header anyway.
2884 - Privoxy-Regression-Test has been significantly improved.
2885 - Most sections in the default.action file contain tests for
2886   Privoxy-Regression-Test to verify that they are working as intended.
2887 - Parts of Privoxy have been refactored to increase maintainability.
2888 - Building with zlib (if available) is done by default.
2889
2890 *** Version 3.0.8 ***
2891
2892 - Fixed a small memory leak when listen-address only specifies the port.
2893 - The source tar balls now include Privoxy-Regression-Test which
2894   (upon other things) can be used to automatically detect some
2895   packaging problems. Packagers are welcome to give it a try.
2896 - Reverted a change in 3.0.7 that caused path patterns to be checked
2897   even if the host pattern match already failed. While this doesn't
2898   noticeable affect the performance, it makes it less likely to run
2899   out of stack space with overly-complex path patterns the user might
2900   have added.
2901 - Updated the msn, yahoo and google filters to work as advertised again.
2902 - The warning message shown by the show-status CGI page is easier to
2903   understand. Previously it wasn't clear that the error message
2904   is shown below the invalid directive. (Reported by Lee)
2905 - When regenerating Content-Disposition headers the more common
2906   spelling is used for the name. Previously it was written without caps.
2907 - Less confusing log message if the content type isn't overwritten
2908   because force-text-type wasn't used but the old type doesn't look
2909   like content that would be filtered normally.
2910 - Better log messages if the user tries to execute filters that
2911   don't exist.
2912 - Treat the non-standard Request-Range headers like standard range
2913   headers and suppress them if content filtering is enabled.
2914 - Prevent the log messages for CONNECT requests to unacceptable
2915   ports from printing the limit-connect argument as [null] if
2916   limit-connect hasn't been explicitly enabled.
2917 - Don't disable the mingw32 log window if the logfile directive
2918   isn't used. While it was an intentional change in 3.0.7 at least
2919   one user perceived it as a regression and the same effect can
2920   be achieved by disabling all debug directives.
2921 - Fixed two minor problems related to the win32 build process: a css
2922   file was not being in the installer and the trustfile comment in the
2923   config.txt referenced a nonexisting file
2924 - Minor documentation fixes.
2925
2926 *** Version 3.0.7 beta ***
2927
2928 - Added zlib support to filter content with gzip and deflate
2929   encoding. (Patch provided by Wil Mahan)
2930 - Dedicated filters and actions are used for header filtering.
2931   "filter-client-headers" and "filter-client-headers" are no longer
2932   supported, use server-header-filter{} and client-header-filter{}
2933   instead.
2934 - Tags can be used to change actions based on HTTP headers.
2935 - New server-header filter: less-download-windows.
2936 - New client-header taggers: css-requests, image-requests,
2937   client-ip-address, http-method, allow-post, complete-url,
2938   user-agent and privoxy-control.
2939 - New server-header taggers: content-type and privoxy-control.
2940 - The forward-override{} action allows to change the forwarding
2941   settings through the action files, for example based on client
2942   headers like the User-Agent, or the request origin.
2943 - Socks errors are no longer handled by the CGI page for
2944   DNS resolution failures.
2945 - CGI pages use favicons to signal whether they are error
2946   or control pages. This is useful if you rely heavily on
2947   browser tabs.
2948 - The show-url-info CGI page shows the forwarding settings.
2949 - "Crunch!" log messages (used when Privoxy answers requests
2950   by itself) now also contain the reason.
2951 - Allow to rewrite the request destination behind the client's back.
2952 - Fix socks requests on big-endian platforms. Patch provided by Song Weijia.
2953 - Fixes possible deadlocks and crashes on OpenBSD.
2954   Patch provided by Ralf Horstmann.
2955 - The CGI action editor allows to edit actionfiles with previously
2956   forbidden characters like dots.
2957 - New trust entries are saved with a comment that contains the
2958   trusted referring URL (Suggested by Daniel Griscom).
2959 - Filter descriptions are HTML encoded automatically.
2960 - New config option "split-large-forms" to work
2961   around a browser bug that caused IE6 and IE7 to ignore
2962   the Submit button on the edit-actions-for-url CGI page.
2963 - New config option "allow-cgi-request-crunching" to allow
2964   requests for Privoxy's CGI pages to be blocked, redirected
2965   or (un)trusted like ordinary requests.
2966 - Empty filter files no longer interrupt the filtering process
2967   prematurely and are correctly listed on the show-status CGI page.
2968 - New config option "accept-intercepted-requests" to combine
2969   Privoxy with any packet filter to build an intercepting proxy
2970   for HTTP/1.1 requests (and for HTTP/1.0 requests with Host header set).
2971 - fast-redirects{} catch redirects to https URLs as well.
2972 - redirect{s@foo@bar@} can be used to redirect to a rewritten
2973   version of the original URL.
2974 - Trap unsupported gopher proxy requests.
2975 - Fixed a bug in the User Manual delivery on Windows
2976   (mingw32 only). Images now show up correctly and HTML
2977   pages are no longer padded with garbage data.
2978 - Fixed several minor memory leaks, most of them discovered with Valgrind.
2979 - Only unlink the pidfile if it's actually used.
2980 - Retries after connection problems with forced requests
2981   aren't blocked again.
2982 - On Unix SIGABRT causes a core dump as expected and is no
2983   longer treated as normal shutdown signal.
2984 - The "access denied" CGI page is more descriptive and
2985   allows retries to circumvent the referrer check.
2986 - Updated PCRS to handle unexpected PCRE errors properly.
2987   Fixed crashes that could occur if Privoxy was build
2988   with external PCRE versions newer than Privoxy's internal
2989   one. (Reported by Chung-chieh Shan)
2990 - Fixed crashes with null bytes in PCRS replacement strings
2991   (Patch provided by Felix Gröbert).
2992 - Fixed crashes with header time randomization on mingw32.
2993 - The CGI style sheet is no longer delivered if the referring
2994   page isn't a Privoxy CGI page. This prevents a JavaScript-based
2995   Privoxy detection "attack". Note that detecting Privoxy is
2996   still possible through other ways and Privoxy was never intended
2997   to be invisible anyway.
2998 - Added support for AmigaOS 4, fixed build for AmigaOS 3.x.
2999 - The show-url-info CGI page displays a warning if Privoxy
3000   is currently toggled off.
3001 - The show-status CGI page suppresses the edit button
3002   for action files if Privoxy has no write access.
3003 - Most CGI error pages react properly to HEAD requests.
3004 - Requests with RFC 3253 HTTP methods (used by Subversion)
3005   are accepted. (Patch provided by Petr Kadlec)
3006 - New config option "templdir" to change the location
3007   of the CGI templates to make sure customized templates
3008   aren't "updated".
3009 - Better handling of "HTTP/1.1 100 Continue" responses.
3010 - The background of the PNG pattern is transparent.
3011 - Fixed XML syntax errors caused by banners-by-size and banners-by-url.
3012 - Fixed crashes and possible action file corruptions
3013   when lines containing hashes are written through the CGI editor.
3014 - Supports dynamic filters which can contain variables.
3015 - Supports tags to change the actions based on client or server headers.
3016 - Incorrect actions are logged before program termination.
3017 - The "actionsfile" syntax in the configuration file is consistent
3018   with the rest of the configuration options and requires the
3019   whole file name. This is an incompatible change, if you use
3020   an old configuration file you might have to append ".action"
3021   to your "actionsfile" directives.
3022 - With the configuration file option "enforce-blocks" the
3023   "go there anyway" mechanism can be disabled without recompiling
3024   Privoxy.
3025 - More precise error messages in case of incorrect acl syntax.
3026 - Logs a warning if filtering is enabled but impossible due
3027   to lack of zlib support or use of the prevent-compression action.
3028 - Less noisy handling of Cookie:" and "Connection:" headers.
3029 - Improved error messages in case of connection problems.
3030 - Fix a command-line-parsing bug that was introduced before 3.0.5
3031   beta and caused Privoxy to treat the last argument as configuration
3032   file if no configuration file was specified.
3033 - Treat unknown command line options as fatal errors instead
3034   of silently ignoring them.
3035 - Use string functions with length checks more often.
3036 - Don't log CONNECT requests twice.
3037 - Allow to log the source address for ACL-related connection drops.
3038 - Don't ignore applying filters if the server didn't
3039   specify a Content-Type. Bug reported by Amuro Namie.
3040 - Rejected CONNECT requests are logged with log level info
3041   (enabled by default) and the reason for the block.
3042 - New command line option "--pre-chroot-nslookup hostname" to
3043   intialize the resolver library before chroot'ing. On some systems this
3044   reduces the number of files that must be copied into the chroot tree.
3045   (Patch provided by Stephen Gildea)
3046 - Fix a long-standing memory corruption bug that could cause
3047   Privoxy to overwrite a single byte in memory it didn't explicitly
3048   allocate (but that probably was allocated anyway due to bucket size).
3049 - Send template-based CGI pages as HTTP/1.1 unless the client
3050   asked for HTTP/1.0.
3051 - Let the first line in connection established responses
3052   end in \r\n as required by RFC1945. Reported by Bert van Leeuwen.
3053 - If no log file has been specified, disable logging instead of logging
3054   to stderr.
3055 - Don't block stderr when in daemon mode.
3056 - Ignore missing zero-chunks when filtering chunk-encoded content.
3057   Earlier Privoxy versions would buffer and then forward the content
3058   unmodified which caused some browsers to simply show empty pages.
3059 - Fix double free in cgi_edit_actions_list(). Reported by Venustech AD-LAB.
3060 - The code to add X-Forwarded-For headers when the hide-forwarded-for-headers
3061   action isn't being used has been removed.
3062 - Fixed trustfile feature which previously didn't work without FEATURE_TOGGLE.
3063   Reported by Lee.
3064 - Minor code clean-ups, filter and action file updates.
3065   (Some of them reported by Davide Alberani, Markus Elfring,
3066    Stefan Huehner and Adam Piggott)
3067
3068 *** Version 3.0.6 ***
3069
3070 - New content filters: no-ping, google, msn, yahoo and blogspot.
3071 - New header filters:  x-httpd-php-to-html, html-to-xml, xml-to-html
3072                        and hide-tor-exit-notation.
3073 - The special header "X-Filter: No" now disables header filtering as well.
3074 - Improved the filters img-reorder, js-annoyances, webbugs,
3075   banners-by-size, banners-by-link and ie-exploits to make them
3076   less likely to break anything.
3077 - Removed outdated URL patterns in default.action and added new ones.
3078 - Added redirection from http://p.p/user-manual to http://p.p/user-manual/
3079 - Changed webinterface default values for hide-user-agent, hide-referrer
3080   and set-image-blocker.
3081
3082 *** Version 3.0.5 beta ***
3083
3084 - Windows version can be installed/started as a service.
3085 - Windows icon stays blue when Privoxy is idle, green when busy.
3086 - Integrated Fabian Keil's extensive patch.  See:
3087   http://www.fabiankeil.de/sourcecode/privoxy/. Includes the
3088   following new or significantly improved actions (among many
3089   other improvements):
3090
3091      content-type-overwrite{}
3092      crunch-client-header{string}
3093      crunch-if-none-match
3094      crunch-server-header{string}
3095      fast-redirects{check-decoded-url}
3096      filter-client-headers
3097      filter-server-headers
3098      force-text-mode
3099      handle-as-empty-document
3100      hide-accept-language{}
3101      hide-content-disposition{}
3102      hide-if-modified-since
3103      hide-referrer{conditional-block}
3104      overwrite-last-modified{}
3105      redirect{URL}
3106      treat-forbidden-connects-like-blocks
3107
3108 - Standard-compliant clients are prevented from displaying cached
3109   copies of Privoxy's error messages after the cause of the problem
3110   has gone.
3111 - Improved DNS error handling.
3112 - Multiple filter files can now be specified in config.
3113 - Added jpeg filtering to defend against MS jpeg vulnerability MS04-028
3114   with the new inspect-jpegs action.
3115 - Removed the "arbitrary" 1000 filter limit - addresses tracker #911950
3116 - Thanks to Jindrich Makovicka for a race condition fix for the log
3117   file.  The race condition remains for non-pthread implementations.
3118   Reference patch #1175720. Various other logging enhancements.
3119 - A pile of assorted bug fixes, memory leaks, enhancements, etc.
3120 - Moved Actions file reporting mechanism to SF tracker.
3121 - Two new options for config: enable-remote-http-toggle and
3122   forwarded-connect-retries.
3123 - Trap unsupported FTP requests.
3124 - Let text/xml be filtered.
3125 - Numerous updates to default.action
3126 - Increase the compiled in limit of trusted referrers from 64 to 512
3127   (for trustfile users).
3128
3129 *** Version 3.0.3 ***
3130
3131 - Fixed yet another two memory leaks. Process growth seems stopped now.
3132 - Further tightened security against malicious toggle-off links.
3133 - Excluded text/plain MIME types from filtering. This fixes a
3134   couple of client-crashing, download corruption and
3135   Privoxy performance issues, whose root cause lies in
3136   web servers labelling content of unknown type as text/plain.
3137 - Assorted fixes for POSIX compliance, signal handling, graceful
3138   termination, compiler warnings, OSX support, Win32 systray,
3139   error logging, hostname wildcards, correct detection of NetBSD.
3140 - Workarounds for client (iTunes etc) and server (PHP < 4.2.3) bugs
3141   including the notorious "blank page" problem.
3142 - Various filter improvements; most notably the unsolicited-popups
3143   filter became less destructive
3144 - Major revamp of the actions file
3145
3146 *** Version 3.0.2 ***
3147
3148 - Fixed two memory leaks, one serious
3149 - Fixed bug in pcrs which could cause crashes with user-defined filters
3150 - Fixed bug in domain name matching
3151 - Assorted small fixes (Win32 menu, CGI URL editor, ..)
3152 - Added basic support for the OPTIONS and TRACE http methods
3153 - Added workaround for Bug in Mac OSX that made Privoxy crash occasionally
3154 - Refined the default action file through >400 items of user feedback
3155 - Filter changes:
3156   - Assorted refinements, optimizations and fixes in the js-annoyances,
3157     img-reorder, banners-by-size, banners-by-link, webbugs, refresh-tags,
3158     html-annoyances, content-cookies and fun filters
3159   - Replaced filter "popups" by choice between two modes:
3160     - "unsolicited-popups" tries to catch only the unsolicited ones
3161     - "all-popups" tries to kill them all (as before)
3162   - New filter "tiny-textforms" Help those tiny or hard-wrap textareas.
3163   - New filter "jumping-windows" that prevents windows from resizing
3164     and moving themselves
3165   - New filter "demoronizer" which fixes MS's abuse of std charsets
3166     (common cases anyway).
3167   - Replaced "nimda" with more general "ie-exploits" filter in which
3168     all filters for exploits shall be collected
3169 - Improved cookie logging
3170 - Rewrote make install target. Added uninstall and install-strip
3171   targets.
3172 - Fixed a potential (application-level, NOT OS-level!) security
3173   problem involving remote toggling and action file manipulation
3174   by mailicious websites.
3175 - Added ability to chroot (thanks to Sviatoslav Sviridov)
3176 - Added more action aliases for prehistoric action names
3177 - Add Slackware support to Makefile.
3178
3179 *** Version 3.0  ***
3180
3181 - Fixed Windows startmenu items, log window and tray icon menus.
3182 - Added warning for bogus install target
3183 - Added quicktime-kioskmode filter and improved frameset-borders
3184 - Updated default.action based on latest feedback
3185 - New PDF doc build process
3186 - Add a user contrib module to cvs:
3187   http://cvs.sourceforge.net/cgi-bin/viewcvs.cgi/ijbswa/contrib/
3188
3189 *** Version 2.9.18  ***
3190
3191 - Added workaround for IE bug that broke CGI interface
3192 - Bugfix: String actions now reliably editable through CGI interface
3193 - Three filters fixed (again!)
3194 - Assorted small fixes and doc enhancements
3195
3196 *** Version 2.9.16  ***
3197
3198 - Major revamp of default.action to get rid of years of cruft.
3199 - Same for default.filter
3200 - Re-design and major improvements to the CGI editor interface.
3201 - Address spurious 'out of memory' error due to incorrect file permissions.
3202 - Impose buffer limits while reading client and server headers.
3203 - Better memory and CPU optimization.
3204 - Add Conectiva Linux package.
3205 - user-manual directive added to config for help links from within CGI
3206   editor.
3207 - Multiple actions files can now be specified in config.
3208 - Actions files are changed to: default.action, standard.action, and
3209   user.action. user.action is for personal/local configuration.
3210 - The usual many small and miscellaneous bug and security fixes.
3211
3212 *** Version 2.9.14 beta ***
3213
3214 - Fix Solaris compile problem (gateway.h and filters.h)
3215 - Makefile fixes for Solaris, FreeBSD (?)
3216 - Fix build failure where certain features were disabled.
3217 - 'blocked-compact' template is removed. Various CGI improvements,
3218   including an adaptive 'blocked' template.
3219 - Various tweaks for actions file to get ready for stable 3.0
3220 - Included a 'Bookmarklet' and PHP scripts for reporting actions file
3221   problems via web interface at privoxy.org. Accessed via internal CGIs.
3222 - Include cgi-style.css for templates.
3223 - #include mechansim for common text in templates
3224 - Various other minor fixes.
3225
3226 *** Version 2.9.13 beta ***
3227
3228 - *NEWS*: The project has been renamed to Privoxy! The new name is
3229   reflected throughout (file locations, etc).
3230 - ijb.action is now default.action. re_filterfile is now
3231   default.filter.
3232 - http://i.j.b/ is now http://p.p/
3233 - The 'logo' option for replacing ad iamges is removed now. 'Pattern'
3234   (checkerboard) is now the default.
3235 - RPM spec file make over.
3236
3237
3238 *** Version 2.9.12 beta ***
3239
3240 - **READ**: The default listening PORT is NOW 8118!!! Changed from
3241   8000 due to conflict with NAS (Network Audio Server, whatever that
3242   is.)
3243 - More CGI actions editor fixes and improvements.
3244 - Win32 command line fix ups.
3245 - re_filterfile now has modular sections that can be activated on a
3246   per site basis. Some new goodies there too.
3247 - +filter now takes arguments to match FILTER sections in re_filterfile
3248   for even more flexibility.
3249 - Added a new image blocker option: +image-blocker{pattern}, which
3250   displays a checkerboard patthern and scales better than the logo.
3251 - PNG images will be used in place of GIF for JB built-in images
3252   if configured with --enable-no-gif.
3253 - Clean up compiler warnings (mostly).
3254 - Improved handling of failed DNS lookups & diagnostics for failed bind
3255   to listen socket
3256 - Made --no-daemon mode log to tty instead of logfile.
3257 - Various spec file and init script cleanups and improvements (Redhat and
3258   SuSE).
3259 - CGI Editor works on OS/2 now.
3260 - Fix restart failure where sockets were in TIME_WAIT.
3261 - Fixes for actions cgi editor, make sure we have right file.
3262 - A --pidfile command line option now, in addition to --help,
3263   --version, --no-daemon, --user and configfile. --no-daemon replaces
3264   the former -d option and _DEBUG define. --user will drop privileges
3265   to the specified user.
3266 - Signal handling cleanups (*nix).
3267 - CGI actions editor improvements and fixes.
3268 - Error handling improvements, especially out of memory.
3269 - Default re_filterfile fix that caused spurious IJB logos
3270   (instead of 'blank').
3271 - configure.in threading fixes for Solaris.
3272 - Various other minor fixes.
3273
3274
3275 *** Version 2.9.11 beta Changes ***
3276
3277 - Add "session" cookie concept where cookies exist for the life
3278   of that browser session only (ie never goes to disk).
3279 - Checks for correct header length.
3280 - Fix user:pass@host.domain.com auth bug.
3281 - Better signal handling on *nix.
3282 - Fix CFLAGS hard-coded in configure.in
3283 - Fix threading bug re: gethostbyname() that caused random
3284   URLs to fail in some cases.
3285
3286
3287 *** Version 2.9.11 Alpha Changes ***
3288
3289 - A web-based editor for the actions file is included (go to http://i.j.b/).
3290 - Web-based toggle IJB on/off support.
3291 - Cookie handling has changed - the new +no-cookies-keep feature is now the
3292 default.
3293 - actionsfile is renamed to ijb.action.
3294 - junkbstr.txt is now config.txt on Win32.
3295 - Support for running IJB as a UNIX daemon process has improved.
3296 - Unix daemon now returns error code on failed start.
3297 - Timestamps in logfile and jarfile now.
3298 - Fix for the Netscape bug reintroduced in 2.9.9.
3299 - make should now abort if gmake (GNU make) not present.
3300 - Many other minor bugfixes
3301 - Start a ChangeLog :)
3302
3303
3304
3305 *** Version 2.9.3 pre-Alpha Changes ***
3306
3307 - Amiga support (completely untested by me - I don't have an Amiga)
3308 - "tinygif 3" support (redirects blocked images to a specified URL, so
3309 the browser doesn't have to load and cache many copies of the same
3310 image).
3311 - one case where there were both local and global "referrer" variables
3312 (yuck!) clarified by renaming the local one to "refer".
3313 - Fixed some places where close() was used instead of close_socket().
3314 Thanks to Jörg Strohmayer (joergs at users.sourceforge.net) for these.
3315 - Temporary hack to get FORCE_LOAD to work with IE.  I just lowercased the
3316 FORCE_LOAD_PREFIX.  Needs fixing properly.
3317 - Most URLs hardcoded into Junkbuster were changed to go through a script
3318 e.g. http://ijbswa.sourceforge.net/redirect.php?v=2.9.3&to=faq
3319 The only other URLs left are the GNU GPL:
3320   http://www.fsf.org/copyleft/gpl.html
3321 and the home page:
3322   http://ijbswa.sourceforge.net/
3323 ... and various URLs which will be intercepted by Junkbuster anyway.
3324 TODO: Still need to do something with the URLs in Junkbuster Corp's
3325 copyright/trademark notice on the bottom of the show-proxy-args page.
3326 - PCRE or GNU Regex is now a #define option.
3327
3328
3329 *** Version 2.9.2 pre-Alpha Changes ***
3330
3331 - Andreas applied the latest version of the FORCE patch.
3332
3333
3334 *** Version 2.9.1 pre-Alpha Changes ***
3335
3336 - in parsers.c, fixed two #ifdef FORCE to #ifdef FORCE_LOAD
3337 (BTW: I think FORCE is precise enough, since loading remote
3338 data is the whole purpose of a proxy..)
3339 - Set the FORCE_PREFIX (back) to 'IJB-FORCE-LOAD-'. While 'noijb.'
3340 is more elegant and looks like a hostname in the URL, it doesn't
3341 make clear to the inexperienced user that the proxy is bypassed. It
3342 also has a higher name collision risk.
3343 - Filled in the function header templates for my functions in
3344 parsers.c (again). They obviously got lost in our current
3345 patch war ;-)
3346 - Cut the credit for the §-referrer-option from the config file,
3347 that Stefan had placed there.
3348 - Improved the re_filterfile
3349
3350
3351 *** Version 2.9.0 pre-Alpha Changes ***
3352
3353 -  Now use PCRE, not GNU REGEX.  I have not yet had chance to check the
3354 syntax of the block/image/cookie file to ensure that they match what
3355 is expected - however they seem to work.
3356 -  Replaced "configure" script with one generated by "autoconf".  Also
3357 use a header "config.h" (was ijbconfig.h in my previous release) for
3358 the #defines.  "config.h" is now generated with "autoheader" from
3359 "acconfig.h" and "configure.in".  (Note that to install you do not
3360 need autoconf or autoheader - just run "./configure".)
3361 To see command-line options, run "./configure --help".
3362 This is my first ever autoconf script, so it has some rough edges
3363 (how PCRE is handled is the roughest).
3364 -  Error logging code replaced with new module errlog.c, based on the
3365 one from JunkbusterMT (but with the threading code removed).
3366 -  Most of Rodney's 0.21 and 0.21A patches applied. (Marked *).  I did not
3367 apply all of these, since I had already independently done conditional
3368 popup file, conditional image file, and integration of popup code.
3369 - ACL, Jar and trust files conditionally compiled.
3370 - New source file headers.
3371 - Various cosmetic changes.  (But I have not consistently ordered the
3372 config files - I think that's worthwhile, but it's 1am and I want to
3373 get this released!)
3374 - RCS tags on .h files.
3375 -  RCS tags are const char[] rather than const char *.  (Saves 4 bytes
3376 per tag ;-)
3377 - VC++ project files renamed to vc_junkbuster.*.
3378 - show-proxy-args now shows status of all conditionals, not just REGEX
3379 - Various functions moved around.  Most notably all the system-specific
3380 sockets code which was spread between jcc.c, bind.c, and connect.c,
3381 has been moved to "jbsockets.c".  The non-system-specific code from
3382 connect.c and socks4.c has been movet to "gateway.c".  Also, the
3383 config file loader and the global variables it writes to have been
3384 moved to "loadcfg.c".  (Maybe this should go into loaders.c?)
3385 And candidate for the "worst filename ever" award is "miscutil.c",
3386 which contains, well, miscellaneous utility functions like zalloc.
3387 (Suggestions for a better name for this file are welcome!)
3388 - Loaders now use a common function to read a line and skip comments,
3389 and this function also stores the proxy_args.
3390 - Added ./junkbuster --help     (Not for Win32 GUI)
3391 - Added ./junkbuster --version  (Not for Win32 GUI)
3392 - Win32 resources are now all marked as "U.S. English", rather than
3393 being a mix of "U.S. English", "U.K. English" and "Irish English".
3394 - Version number changes to 2.9.0
3395
3396
3397 ----------------------------------------------------------------------
3398 Copyright   :  Written by and Copyright (C) 2001-2021 the
3399                Privoxy team. https://www.privoxy.org/
3400
3401                Based on the Internet Junkbuster originally written
3402                by and Copyright (C) 1997 Anonymous Coders and
3403                Junkbusters Corporation.  http://www.junkbusters.com/
3404
3405                This program is free software; you can redistribute it
3406                and/or modify it under the terms of the GNU General
3407                Public License as published by the Free Software
3408                Foundation; either version 2 of the License, or (at
3409                your option) any later version.
3410
3411                This program is distributed in the hope that it will
3412                be useful, but WITHOUT ANY WARRANTY; without even the
3413                implied warranty of MERCHANTABILITY or FITNESS FOR A
3414                PARTICULAR PURPOSE.  See the GNU General Public
3415                License for more details.
3416
3417                The GNU General Public License should be included with
3418                this file.  If not, you can view it at
3419                http://www.gnu.org/copyleft/gpl.html
3420                or write to the Free Software Foundation, Inc., 59
3421                Temple Place - Suite 330, Boston, MA  02111-1307, USA.