Fix a hide-referrer{conditional-forge} test

... that expected an acceptable header to be forged.

Fix a hide-referrer{conditional-block} test

... that expected an acceptable Referer to be removed.

Let the hide-referrer code tolerate Referer headers with https:// URLs

Previously they would always be treated like a changed host.

redirect_url(): Check the actual URL when https inspecting requests

Previously we would only check the path which resulted
in rewrite results being rejected as invalid URLs.

Before:
19:37:29.494 014 Error: pcrs command "s@/test@/@" changed "/test" to "/" (1 hit), but the result doesn't look like a valid URL and will be ignored.

After:
19:40:57.857 002 Redirect: pcrs command s@/test@/@ changed https://www.electrobsd.org/test to https://www.electrobsd.org/ (1 hit).

Reported by withoutname in #1736.

Regenerate developer-manual

developer-manual: Remove the packaging instructions for RPM-based systems

They don't work and we don't release RPM packages anymore anyway.

developer-manual: Remove the packaging instructions for Solaris

They don't work and we don't release Solaris packages anymore anyway.

developer-manual: Update the suggested subject for the announce mails

developer-manual: Update upload instructions

ftp://upload.sourceforge.net is no longer functional.

developer-manual: Remove a couple of package-dependend upload instructions

... that don't actually work.

developer-manual: Remove 'cd current' that no longer works

developer-manual: Add regression-tests.action to the list of files that should be installed

developer-manual: Stop claiming that there are text versions of the manuals

We stopped building them in 2008 (9ed36a3c5e6f12).

developer-manual: Note that the 'webserver' target creates the link needed for the user-manual

developer-manual: Suggest to use the master branch as reference when creating the ChangeLog

... so the steps work when the current branch differs
from master which is likely as the developer manual
suggests to use a local branch for development.

Add #173: Document Privoxy's governance model

developer-manual: Add the -s flag to the suggested 'git tag' command

We prefer signed tags.

developer-manual: Regenerate with git steps

developer-manual: Add git commands that should result in a merge-free history

developer-manual: Regenerate

developer-manual: Simplify privoxy-regression-test.pl command in the example

The --debug parameter adds bits without overriding default
flags so it's sufficient to add 4 (LL_PAGE_FETCHING).

developer-manual: Fix typo

Rebuild developer-manual

developer-manual: Add privoxy-regression-test.pl example output

fix compiler warnings about including winsock2.h before windows.h

getting plenty too many of these warnings:
i686-w64-mingw32-gcc -c -pipe -O2 -Wshadow -DWINVER=0x501   -mwindows -Wall -Ipcre  actions.c -o actions.o
In file included from /usr/i686-w64-mingw32/sys-root/mingw/include/ws2tcpip.h:17,
                 from project.h:95,
                 from actions.c:46:
/usr/i686-w64-mingw32/sys-root/mingw/include/winsock2.h:15:2: warning: #warning Please include winsock2.h before windows.h [-Wcpp]
   15 | #warning Please include winsock2.h before windows.h
      |  ^~~~~~~
i686-w64-mingw32-gcc -c -pipe -O2 -Wshadow -DWINVER=0x501   -mwindows -Wall -Ipcre  cgi.c -o cgi.o
In file included from /usr/i686-w64-mingw32/sys-root/mingw/include/ws2tcpip.h:17,
                 from project.h:95,
                 from cgi.c:52:
/usr/i686-w64-mingw32/sys-root/mingw/include/winsock2.h:15:2: warning: #warning Please include winsock2.h before windows.h [-Wcpp]
   15 | #warning Please include winsock2.h before windows.h
      |  ^~~~~~~
i686-w64-mingw32-gcc -c -pipe -O2 -Wshadow -DWINVER=0x501   -mwindows -Wall -Ipcre  cgiedit.c -o cgiedit.o
In file included from /usr/i686-w64-mingw32/sys-root/mingw/include/ws2tcpip.h:17,
                 from project.h:95,
                 from cgiedit.c:57:
/usr/i686-w64-mingw32/sys-root/mingw/include/winsock2.h:15:2: warning: #warning Please include winsock2.h before windows.h [-Wcpp]
   15 | #warning Please include winsock2.h before windows.h
      |  ^~~~~~~

Merge branch 'master' of ssh://git.privoxy.org:23/git/privoxy

Bring back the select()-based fallback code

As reported by Lee it's stille needed on Windows.

This reverts commit 9126f0c935e4bb64a87be7c3a1855b7768791142.

Merge branch 'master' of ssh://git.privoxy.org:23/git/privoxy

Regenerate docs

Add the new action suppress-tag{}

Usage:
in user.filters:
--begin--
CLIENT-HEADER-TAGGER: maximum-url-length Tag for URLS longer than 600 characters.

s@(^GET\s+\/.{600,}\s+HTTP\/\d\.\d\s*$)@MAXIMUM-URL-LENGTH@i
--end--

in user.actions:
--begin--
{+client-header-tagger{maximum-url-length}}
/

{+block{Maximum URL length of 600 bytes reached.}}
TAG:^MAXIMUM-URL-LENGTH

{+suppress-tag{MAXIMUM-URL-LENGTH}}
.google.*
 --end--

will block all URLs with length > 600 bytes except for google.

Currently the online action editor supports modification/removal of any
number of existing tags and the creation of a single suppress tag per
one submit. The submit scheme that is used is similar to the existing
filter one but:

1. It uses 'string_filter[_r|_n|_o|_t][hex_index]' keys for existing
string filter values (id/name(value)/old_name(old value)/filter type)
and 'new_string_filter[_r|_n|_t][hex_index]' for new string filter
values. 'String filter values' here are parameters of the suppress-tag
action that are simple strings rather than parameters of, for example,
the client-header-tagger action that must be described in filters file.

2. String filter values are accessed by the value rather by the
index. Indexes must start from 0 and when there is no key with index+1
in parameters - we've done with existing or new string filters
processing.

Possible further improvements:

1. Extend suppress-tag action edit scheme to add-header action
   edit that is not supported now.
2. If needed, multiple suppress-tag addition can be added with
   some browser JS code.

Sponsored by: Robert Klemme

Rebuild docs for 3.0.29 UNRELEASED

developer-manual: Mention Privoxy-Regression-Test

developer-manual: Add a section id to reduce link churn

developer-manual: Recommend the dok-tidy target when building docs for the webserver

developer-manual: Add another plug for the privoxy-devel mailing list

developer-manual: Mention that merges into 'master' should be avoided

developer-manual: Let the intro link the copyright section in the user manual instead of giving an incomplete summary of the license status

privoxy-regression-test: Replace an XXX comment with a better one

Bump SMGL entities for 3.0.30 UNRELEASED

privoxy-regression-test: Skip the connection-established response in get_status_code()

... when looking for the status code with a CGI prefix
that starts with https://. We care about the status code
sent by the impersonated web server.

privoxy-regression-test: Use --proxy-header when using a CGI prefix with https://

... and a "Host:" header.

privoxy-regression-parser: Allow '|' in tokens and values

... to allow tag patterns like:
TAG:^(application|text)/(x-)?javascript$

Explain why the "Set Header = Host: whatever.example.org" test is expected to fail

... when using a CGI prefix that starts with "https://".

Explain why a connection-sharing test is known to fail

... when using "https://p.p/" as CGI prefix.

privoxy-regression-test: When get_cgi_page_or_else() fails, include the URL of the requested page in the log message

privoxy-regression-test: Add a --privoxy-cgi-prefix option

... that specifies the prefix to use when building URLs that are
supposed to reach Privoxy's CGI interface. If it's not set,
http://p.p/ is used, which is supposed to work with the default
Privoxy configuration.

If Privoxy has been built with FEATURE_HTTPS_INSPECTION enabled,
and if https inspection is activated with the +https-inspection
action, this option can be used with "https://p.p/" provided the
system running Privoxy-Regression-Test has been configured to
trust the certificate used by Privoxy.

Note that there are currently two tests in the official
regression-tests.action file that are expected to fail
when using "https://p.p/" as privoxy-cgi-prefix.

regression-tests.action: Clarify sentence

regression-tests.action: Add a link to Privoxy-Regression-Test in case it isn't packaged

privoxy-regression-test: Bump version to 0.7.2

privoxy-regression-test: Consistently use '$privoxy_cgi_url'

Shorten the 'donate' and 'participate' links used by templates

... using redirects.

Currently the redirects lead to the FAQ entries but
in the future we may want to relocate the content
and using redirects makes this more convenient.

Shorten the 'donate' and 'participate' links by using redirects

Currently the redirects lead to the FAQ entries but
in the future we may want to relocate the content
and using redirects makes this more convenient.

Explicitly mention Windows 10 as supported

... so search engines and users looking for it can find it.

Add #172: Create a public git repository for Privoxy-Filter-Test

Add #171: Create a "view page using Privoxy" website

Unconditionally use CGI_PREFIX where possible

Make CGI_PREFIX protocol-relative when building with FEATURE_HTTPS_INSPECTION

This unbreaks (at least) https://config.privoxy.org/client-tags whose
buttons would previously use a http:// URL resulting in browser warnings.

Add and use new CGI_PREFIX_HTTP define in the one case we actually
need a http:// URL.

Add (optional) parens in an if condition in chat()

Add #170: Serve the ca-cert-file through the CGI interface

Log an error when a PCRE-HOST-PATTERN is used with FEATURE_PCRE_HOST_PATTERNS disabled

Don't treat this a fatal error so the regression tests
can be used with and without FEATURE_PCRE_HOST_PATTERNS.

Add regression tests for pcre host patterns

Update a link to the libcurl mailinglist archive

Add #169: Preserve all relevant copyright and license statements in binary packages

Update the +hide-user-agent example with uagen output

Slightly improve the wording of the ca-key-file documentation

cgi_show_request(): Use the https headers if the page is reached through https://

Previously Privoxy would use the http headers which
may be empty on a reused connection.

Let the crude-parental filter insert a link to Privoxy's webinterface

Unblock metrics.sr.ht/

Display the model photos in a single row and remove placeholder images

Add an alt text for the Privoxy logo shown on the homepage

Remove --with-fdsetsize as select() is no longer supported

Make poll() non-optional and remove select()-based fallback code

Bump copyright

Remove the packages feed from the source tarball

It's usually out of date when the source tarball is generated
for the release.

Merge branch 'master' of ssh://git.privoxy.org:23/git/privoxy

Regenerate homepage with the new logo

Let the dok-webserver target inject the new logo into the homepage

Import a Privoxy logo for the website

License: CC0

Add 168: Add a privacy policy

Add #167: Set up a public Privoxy-Filter-Test instance.

Remove #141 as CloudABI is unmaintained

Disable fast-redirects for .fsf.org/

Regenerate docs

Import a bunch of contributors from the ChangeLog

windows: Remove obsolete references to doc/gpl.html

Remove obsolete doc/gpl.html

Update link to the Polipo website

Upgrade SourceForge URL to https://

uagen: Update example output

uagen: Bump copyright

uagen: Recommend the use of the https-inspection action in the documentation

uagen: Upgrade a couple of URLs to https://

uagen: Add ElectroBSD to the list of operating systems

uagen: Bump version to 1.2.2

uagen: Bump generated Firefox version to 78 (ESR)

Add missing www in a website link

Rebuild documentation

Clarify that the webserver target uploads to the SourceForge webserver

Mark the documentation for the Mac OS X installers as out of date and change the SCM name back to CVS

Fix the location of the installer modules for Mac OS X

They are not actually available through git (yet).