Add: 92) The statistics currently aren't calculated correctly by Privoxy
[privoxy.git] / jbsockets.c
1 const char jbsockets_rcs[] = "$Id: jbsockets.c,v 1.101 2011/05/03 09:55:35 fabiankeil Exp $";
2 /*********************************************************************
3  *
4  * File        :  $Source: /cvsroot/ijbswa/current/jbsockets.c,v $
5  *
6  * Purpose     :  Contains wrappers for system-specific sockets code,
7  *                so that the rest of Junkbuster can be more
8  *                OS-independent.  Contains #ifdefs to make this work
9  *                on many platforms.
10  *
11  * Copyright   :  Written by and Copyright (C) 2001-2011 the
12  *                Privoxy team. http://www.privoxy.org/
13  *
14  *                Based on the Internet Junkbuster originally written
15  *                by and Copyright (C) 1997 Anonymous Coders and 
16  *                Junkbusters Corporation.  http://www.junkbusters.com
17  *
18  *                This program is free software; you can redistribute it 
19  *                and/or modify it under the terms of the GNU General
20  *                Public License as published by the Free Software
21  *                Foundation; either version 2 of the License, or (at
22  *                your option) any later version.
23  *
24  *                This program is distributed in the hope that it will
25  *                be useful, but WITHOUT ANY WARRANTY; without even the
26  *                implied warranty of MERCHANTABILITY or FITNESS FOR A
27  *                PARTICULAR PURPOSE.  See the GNU General Public
28  *                License for more details.
29  *
30  *                The GNU General Public License should be included with
31  *                this file.  If not, you can view it at
32  *                http://www.gnu.org/copyleft/gpl.html
33  *                or write to the Free Software Foundation, Inc., 59
34  *                Temple Place - Suite 330, Boston, MA  02111-1307, USA.
35  *
36  *********************************************************************/
37
38
39 #include "config.h"
40
41 #include <stdlib.h>
42 #include <stdio.h>
43 #include <string.h>
44 #include <errno.h>
45 #include <fcntl.h>
46 #include <sys/types.h>
47
48 #ifdef _WIN32
49
50 #ifndef STRICT
51 #define STRICT
52 #endif
53 #include <windows.h>
54 #include <sys/timeb.h>
55 #include <io.h>
56
57 #else
58
59 #ifndef __OS2__
60 #include <unistd.h>
61 #endif
62 #include <sys/time.h>
63 #include <netinet/in.h>
64 #include <sys/ioctl.h>
65 #include <netdb.h>
66 #include <sys/socket.h>
67
68 #ifndef __BEOS__
69 #include <netinet/tcp.h>
70 #ifndef __OS2__
71 #include <arpa/inet.h>
72 #endif
73 #else
74 #include <socket.h>
75 #endif
76
77 #if defined(__EMX__) || defined (__OS2__)
78 #include <sys/select.h>  /* OS/2/EMX needs a little help with select */
79 #ifdef __OS2__
80 #include <nerrno.h>
81 #endif
82 #endif
83
84 #endif
85
86 #ifdef FEATURE_CONNECTION_KEEP_ALIVE
87 #ifdef HAVE_POLL
88 #ifdef __GLIBC__
89 #include <sys/poll.h>
90 #else
91 #include <poll.h>
92 #endif /* def __GLIBC__ */
93 #endif /* HAVE_POLL */
94 #endif /* def FEATURE_CONNECTION_KEEP_ALIVE */
95
96 #include "project.h"
97
98 /* For mutex semaphores only */
99 #include "jcc.h"
100
101 #include "jbsockets.h"
102 #include "filters.h"
103 #include "errlog.h"
104
105 /* Mac OSX doesn't define AI_NUMERICSESRV */
106 #ifndef AI_NUMERICSERV
107 #define AI_NUMERICSERV 0
108 #endif
109
110 const char jbsockets_h_rcs[] = JBSOCKETS_H_VERSION;
111
112 /*
113  * Maximum number of gethostbyname(_r) retries in case of
114  * soft errors (TRY_AGAIN).
115  * XXX: Does it make sense to make this a config option?
116  */
117 #define MAX_DNS_RETRIES 10
118
119 #define MAX_LISTEN_BACKLOG 128
120
121 #ifdef HAVE_RFC2553
122 static jb_socket rfc2553_connect_to(const char *host, int portnum, struct client_state *csp);
123 #else
124 static jb_socket no_rfc2553_connect_to(const char *host, int portnum, struct client_state *csp);
125 #endif
126
127 /*********************************************************************
128  *
129  * Function    :  connect_to
130  *
131  * Description :  Open a socket and connect to it.  Will check
132  *                that this is allowed according to ACL.
133  *
134  * Parameters  :
135  *          1  :  host = hostname to connect to
136  *          2  :  portnum = port to connent on (XXX: should be unsigned)
137  *          3  :  csp = Current client state (buffers, headers, etc...)
138  *
139  * Returns     :  JB_INVALID_SOCKET => failure, else it is the socket
140  *                file descriptor.
141  *
142  *********************************************************************/
143 jb_socket connect_to(const char *host, int portnum, struct client_state *csp)
144 {
145    jb_socket fd;
146    int forwarded_connect_retries = 0;
147
148    do
149    {
150       /*
151        * XXX: The whole errno overloading is ridiculous and should
152        *      be replaced with something sane and thread safe
153        */
154       /* errno = 0;*/
155 #ifdef HAVE_RFC2553
156       fd = rfc2553_connect_to(host, portnum, csp);
157 #else
158       fd = no_rfc2553_connect_to(host, portnum, csp);
159 #endif
160       if ((fd != JB_INVALID_SOCKET) || (errno == EINVAL)
161          || (csp->fwd == NULL)
162          || ((csp->fwd->forward_host == NULL) && (csp->fwd->type == SOCKS_NONE)))
163       {
164          break;
165       }
166       forwarded_connect_retries++;
167       if (csp->config->forwarded_connect_retries != 0)
168       {
169          log_error(LOG_LEVEL_ERROR,
170             "Attempt %d of %d to connect to %s failed. Trying again.",
171             forwarded_connect_retries, csp->config->forwarded_connect_retries, host);
172       }
173
174    } while (forwarded_connect_retries < csp->config->forwarded_connect_retries);
175
176    return fd;
177 }
178
179 #ifdef HAVE_RFC2553
180 /* Getaddrinfo implementation */
181 static jb_socket rfc2553_connect_to(const char *host, int portnum, struct client_state *csp)
182 {
183    struct addrinfo hints, *result, *rp;
184    char service[6];
185    int retval;
186    jb_socket fd;
187    fd_set wfds;
188    struct timeval timeout;
189 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
190    int   flags;
191 #endif
192    int connect_failed;
193    /*
194     * XXX: Initializeing it here is only necessary
195     *      because not all situations are properly
196     *      covered yet.
197     */
198    int socket_error = 0;
199
200 #ifdef FEATURE_ACL
201    struct access_control_addr dst[1];
202 #endif /* def FEATURE_ACL */
203
204    /* Don't leak memory when retrying. */
205    freez(csp->error_message);
206    freez(csp->http->host_ip_addr_str);
207
208    retval = snprintf(service, sizeof(service), "%d", portnum);
209    if ((-1 == retval) || (sizeof(service) <= retval))
210    {
211       log_error(LOG_LEVEL_ERROR,
212          "Port number (%d) ASCII decimal representation doesn't fit into 6 bytes",
213          portnum);
214       csp->error_message = strdup("Invalid port number");
215       csp->http->host_ip_addr_str = strdup("unknown");
216       return(JB_INVALID_SOCKET);
217    }
218
219    memset((char *)&hints, 0, sizeof(hints));
220    hints.ai_family = AF_UNSPEC;
221    hints.ai_socktype = SOCK_STREAM;
222    hints.ai_flags = AI_NUMERICSERV; /* avoid service look-up */
223 #ifdef AI_ADDRCONFIG
224    hints.ai_flags |= AI_ADDRCONFIG;
225 #endif
226    if ((retval = getaddrinfo(host, service, &hints, &result)))
227    {
228       log_error(LOG_LEVEL_INFO,
229          "Can not resolve %s: %s", host, gai_strerror(retval));
230       /* XXX: Should find a better way to propagate this error. */
231       errno = EINVAL;
232       csp->error_message = strdup(gai_strerror(retval));
233       csp->http->host_ip_addr_str = strdup("unknown");
234       return(JB_INVALID_SOCKET);
235    }
236
237    csp->http->host_ip_addr_str = malloc(NI_MAXHOST);
238    if (NULL == csp->http->host_ip_addr_str)
239    {
240       freeaddrinfo(result);
241       log_error(LOG_LEVEL_ERROR,
242          "Out of memory while getting the server IP address.");
243       return JB_INVALID_SOCKET;
244    }
245
246    for (rp = result; rp != NULL; rp = rp->ai_next)
247    {
248
249 #ifdef FEATURE_ACL
250       memcpy(&dst->addr, rp->ai_addr, rp->ai_addrlen);
251
252       if (block_acl(dst, csp))
253       {
254 #ifdef __OS2__
255          socket_error = errno = SOCEPERM;
256 #else
257          socket_error = errno = EPERM;
258 #endif
259          continue;
260       }
261 #endif /* def FEATURE_ACL */
262
263       retval = getnameinfo(rp->ai_addr, rp->ai_addrlen,
264          csp->http->host_ip_addr_str, NI_MAXHOST, NULL, 0, NI_NUMERICHOST);
265       if (retval)
266       {
267          log_error(LOG_LEVEL_ERROR,
268             "Failed to get the host name from the socket structure: %s",
269             gai_strerror(retval));
270          continue;
271       }
272
273       fd = socket(rp->ai_family, rp->ai_socktype, rp->ai_protocol);
274 #ifdef _WIN32
275       if (fd == JB_INVALID_SOCKET)
276 #else
277       if (fd < 0)
278 #endif
279       {
280          continue;
281       }
282
283 #ifdef TCP_NODELAY
284       {  /* turn off TCP coalescence */
285          int mi = 1;
286          setsockopt(fd, IPPROTO_TCP, TCP_NODELAY, (char *) &mi, sizeof (int));
287       }
288 #endif /* def TCP_NODELAY */
289
290 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
291       if ((flags = fcntl(fd, F_GETFL, 0)) != -1)
292       {
293          flags |= O_NDELAY;
294          fcntl(fd, F_SETFL, flags);
295       }
296 #endif /* !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__) */
297
298       connect_failed = 0;
299       while (connect(fd, rp->ai_addr, rp->ai_addrlen) == JB_INVALID_SOCKET)
300       {
301 #ifdef __OS2__
302          errno = sock_errno();
303 #endif /* __OS2__ */
304
305 #ifdef _WIN32
306          if (errno == WSAEINPROGRESS)
307 #else /* ifndef _WIN32 */
308          if (errno == EINPROGRESS)
309 #endif /* ndef _WIN32 || __OS2__ */
310          {
311             break;
312          }
313
314          if (errno != EINTR)
315          {
316             close_socket(fd);
317             connect_failed = 1;
318             break;
319          }
320       }
321       if (connect_failed)
322       {
323          continue;
324       }
325
326 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
327       if (flags != -1)
328       {
329          flags &= ~O_NDELAY;
330          fcntl(fd, F_SETFL, flags);
331       }
332 #endif /* !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__) */
333
334       /* wait for connection to complete */
335       FD_ZERO(&wfds);
336       FD_SET(fd, &wfds);
337
338       memset(&timeout, 0, sizeof(timeout));
339       timeout.tv_sec  = 30;
340
341       /* MS Windows uses int, not SOCKET, for the 1st arg of select(). Weird! */
342       if ((select((int)fd + 1, NULL, &wfds, NULL, &timeout) > 0)
343          && FD_ISSET(fd, &wfds))
344       {
345          socklen_t optlen = sizeof(socket_error);
346          if (!getsockopt(fd, SOL_SOCKET, SO_ERROR, &socket_error, &optlen))
347          {
348             if (!socket_error)
349             {
350                /* Connection established, no need to try other addresses. */
351                break;
352             }
353             if (rp->ai_next != NULL)
354             {
355                /*
356                 * There's another address we can try, so log that this
357                 * one didn't work out. If the last one fails, too,
358                 * it will get logged outside the loop body so we don't
359                 * have to mention it here.
360                 */
361                log_error(LOG_LEVEL_CONNECT, "Could not connect to [%s]:%s: %s.",
362                   csp->http->host_ip_addr_str, service, strerror(socket_error));
363             }
364          }
365          else
366          {
367             socket_error = errno;
368             log_error(LOG_LEVEL_ERROR, "Could not get the state of "
369                "the connection to [%s]:%s: %s; dropping connection.",
370                csp->http->host_ip_addr_str, service, strerror(errno));
371          }
372       }
373
374       /* Connection failed, try next address */
375       close_socket(fd);
376    }
377
378    freeaddrinfo(result);
379    if (!rp)
380    {
381       log_error(LOG_LEVEL_CONNECT, "Could not connect to [%s]:%s: %s.",
382          host, service, strerror(socket_error));
383       csp->error_message = strdup(strerror(socket_error));
384       return(JB_INVALID_SOCKET);
385    }
386    log_error(LOG_LEVEL_CONNECT, "Connected to %s[%s]:%s.",
387       host, csp->http->host_ip_addr_str, service);
388
389    return(fd);
390
391 }
392
393 #else /* ndef HAVE_RFC2553 */
394 /* Pre-getaddrinfo implementation */
395
396 static jb_socket no_rfc2553_connect_to(const char *host, int portnum, struct client_state *csp)
397 {
398    struct sockaddr_in inaddr;
399    jb_socket fd;
400    unsigned int addr;
401    fd_set wfds;
402    struct timeval tv[1];
403 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
404    int   flags;
405 #endif
406
407 #ifdef FEATURE_ACL
408    struct access_control_addr dst[1];
409 #endif /* def FEATURE_ACL */
410
411    /* Don't leak memory when retrying. */
412    freez(csp->http->host_ip_addr_str);
413
414    memset((char *)&inaddr, 0, sizeof inaddr);
415
416    if ((addr = resolve_hostname_to_ip(host)) == INADDR_NONE)
417    {
418       csp->http->host_ip_addr_str = strdup("unknown");
419       return(JB_INVALID_SOCKET);
420    }
421
422 #ifdef FEATURE_ACL
423    dst->addr = ntohl(addr);
424    dst->port = portnum;
425
426    if (block_acl(dst, csp))
427    {
428 #ifdef __OS2__
429       errno = SOCEPERM;
430 #else
431       errno = EPERM;
432 #endif
433       return(JB_INVALID_SOCKET);
434    }
435 #endif /* def FEATURE_ACL */
436
437    inaddr.sin_addr.s_addr = addr;
438    inaddr.sin_family      = AF_INET;
439    csp->http->host_ip_addr_str = strdup(inet_ntoa(inaddr.sin_addr));
440
441 #ifndef _WIN32
442    if (sizeof(inaddr.sin_port) == sizeof(short))
443 #endif /* ndef _WIN32 */
444    {
445       inaddr.sin_port = htons((unsigned short) portnum);
446    }
447 #ifndef _WIN32
448    else
449    {
450       inaddr.sin_port = htonl((unsigned long)portnum);
451    }
452 #endif /* ndef _WIN32 */
453
454    fd = socket(inaddr.sin_family, SOCK_STREAM, 0);
455 #ifdef _WIN32
456    if (fd == JB_INVALID_SOCKET)
457 #else
458    if (fd < 0)
459 #endif
460    {
461       return(JB_INVALID_SOCKET);
462    }
463
464 #ifdef TCP_NODELAY
465    {  /* turn off TCP coalescence */
466       int mi = 1;
467       setsockopt(fd, IPPROTO_TCP, TCP_NODELAY, (char *) &mi, sizeof (int));
468    }
469 #endif /* def TCP_NODELAY */
470
471 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
472    if ((flags = fcntl(fd, F_GETFL, 0)) != -1)
473    {
474       flags |= O_NDELAY;
475       fcntl(fd, F_SETFL, flags);
476    }
477 #endif /* !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__) */
478
479    while (connect(fd, (struct sockaddr *) & inaddr, sizeof inaddr) == JB_INVALID_SOCKET)
480    {
481 #ifdef _WIN32
482       if (errno == WSAEINPROGRESS)
483 #elif __OS2__ 
484       if (sock_errno() == EINPROGRESS)
485 #else /* ifndef _WIN32 */
486       if (errno == EINPROGRESS)
487 #endif /* ndef _WIN32 || __OS2__ */
488       {
489          break;
490       }
491
492 #ifdef __OS2__ 
493       if (sock_errno() != EINTR)
494 #else
495       if (errno != EINTR)
496 #endif /* __OS2__ */
497       {
498          close_socket(fd);
499          return(JB_INVALID_SOCKET);
500       }
501    }
502
503 #if !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__)
504    if (flags != -1)
505    {
506       flags &= ~O_NDELAY;
507       fcntl(fd, F_SETFL, flags);
508    }
509 #endif /* !defined(_WIN32) && !defined(__BEOS__) && !defined(AMIGA) && !defined(__OS2__) */
510
511    /* wait for connection to complete */
512    FD_ZERO(&wfds);
513    FD_SET(fd, &wfds);
514
515    tv->tv_sec  = 30;
516    tv->tv_usec = 0;
517
518    /* MS Windows uses int, not SOCKET, for the 1st arg of select(). Weird! */
519    if (select((int)fd + 1, NULL, &wfds, NULL, tv) <= 0)
520    {
521       close_socket(fd);
522       return(JB_INVALID_SOCKET);
523    }
524    return(fd);
525
526 }
527 #endif /* ndef HAVE_RFC2553 */
528
529
530 /*********************************************************************
531  *
532  * Function    :  write_socket
533  *
534  * Description :  Write the contents of buf (for n bytes) to socket fd.
535  *
536  * Parameters  :
537  *          1  :  fd = file descriptor (aka. handle) of socket to write to.
538  *          2  :  buf = pointer to data to be written.
539  *          3  :  len = length of data to be written to the socket "fd".
540  *
541  * Returns     :  0 on success (entire buffer sent).
542  *                nonzero on error.
543  *
544  *********************************************************************/
545 #ifdef AMIGA
546 int write_socket(jb_socket fd, const char *buf, ssize_t len)
547 #else
548 int write_socket(jb_socket fd, const char *buf, size_t len)
549 #endif
550 {
551    if (len == 0)
552    {
553       return 0;
554    }
555
556    if (len < 0) /* constant condition - size_t isn't ever negative */ 
557    {
558       return 1;
559    }
560
561    log_error(LOG_LEVEL_WRITING, "to socket %d: %N", fd, len, buf);
562
563 #if defined(_WIN32)
564    return (send(fd, buf, (int)len, 0) != (int)len);
565 #elif defined(__BEOS__) || defined(AMIGA)
566    return (send(fd, buf, len, 0) != len);
567 #elif defined(__OS2__)
568    /*
569     * Break the data up into SOCKET_SEND_MAX chunks for sending...
570     * OS/2 seemed to complain when the chunks were too large.
571     */
572 #define SOCKET_SEND_MAX 65000
573    {
574       int send_len, send_rc = 0, i = 0;
575       while ((i < len) && (send_rc != -1))
576       {
577          if ((i + SOCKET_SEND_MAX) > len)
578             send_len = len - i;
579          else
580             send_len = SOCKET_SEND_MAX;
581          send_rc = send(fd,(char*)buf + i, send_len, 0);
582          if (send_rc == -1)
583             return 1;
584          i = i + send_len;
585       }
586       return 0;
587    }
588 #else
589    return (write(fd, buf, len) != len);
590 #endif
591
592 }
593
594
595 /*********************************************************************
596  *
597  * Function    :  read_socket
598  *
599  * Description :  Read from a TCP/IP socket in a platform independent way.
600  *
601  * Parameters  :
602  *          1  :  fd = file descriptor of the socket to read
603  *          2  :  buf = pointer to buffer where data will be written
604  *                Must be >= len bytes long.
605  *          3  :  len = maximum number of bytes to read
606  *
607  * Returns     :  On success, the number of bytes read is returned (zero
608  *                indicates end of file), and the file position is advanced
609  *                by this number.  It is not an error if this number is
610  *                smaller than the number of bytes requested; this may hap-
611  *                pen for example because fewer bytes are actually available
612  *                right now (maybe because we were close to end-of-file, or
613  *                because we are reading from a pipe, or from a terminal,
614  *                or because read() was interrupted by a signal).  On error,
615  *                -1 is returned, and errno is set appropriately.  In this
616  *                case it is left unspecified whether the file position (if
617  *                any) changes.
618  *
619  *********************************************************************/
620 int read_socket(jb_socket fd, char *buf, int len)
621 {
622    int ret;
623
624    if (len <= 0)
625    {
626       return(0);
627    }
628
629 #if defined(_WIN32)
630    ret = recv(fd, buf, len, 0);
631 #elif defined(__BEOS__) || defined(AMIGA) || defined(__OS2__)
632    ret = recv(fd, buf, (size_t)len, 0);
633 #else
634    ret = (int)read(fd, buf, (size_t)len);
635 #endif
636
637    if (ret > 0)
638    {
639       log_error(LOG_LEVEL_RECEIVED, "from socket %d: %N", fd, ret, buf);
640    }
641
642    return ret;
643 }
644
645
646 /*********************************************************************
647  *
648  * Function    :  data_is_available
649  *
650  * Description :  Waits for data to arrive on a socket.
651  *
652  * Parameters  :
653  *          1  :  fd = file descriptor of the socket to read
654  *          2  :  seconds_to_wait = number of seconds after which we give up.
655  *
656  * Returns     :  TRUE if data arrived in time,
657  *                FALSE otherwise.
658  *
659  *********************************************************************/
660 int data_is_available(jb_socket fd, int seconds_to_wait)
661 {
662    char buf[10];
663    fd_set rfds;
664    struct timeval timeout;
665    int n;
666
667    memset(&timeout, 0, sizeof(timeout));
668    timeout.tv_sec = seconds_to_wait;
669
670 #ifdef __OS2__
671    /* Copy and pasted from jcc.c ... */
672    memset(&rfds, 0, sizeof(fd_set));
673 #else
674    FD_ZERO(&rfds);
675 #endif
676    FD_SET(fd, &rfds);
677
678    n = select(fd+1, &rfds, NULL, NULL, &timeout);
679
680    /*
681     * XXX: Do we care about the different error conditions?
682     */
683    return ((n == 1) && (1 == recv(fd, buf, 1, MSG_PEEK)));
684 }
685
686
687 /*********************************************************************
688  *
689  * Function    :  close_socket
690  *
691  * Description :  Closes a TCP/IP socket
692  *
693  * Parameters  :
694  *          1  :  fd = file descriptor of socket to be closed
695  *
696  * Returns     :  void
697  *
698  *********************************************************************/
699 void close_socket(jb_socket fd)
700 {
701 #if defined(_WIN32) || defined(__BEOS__)
702    closesocket(fd);
703 #elif defined(AMIGA)
704    CloseSocket(fd); 
705 #elif defined(__OS2__)
706    soclose(fd);
707 #else
708    close(fd);
709 #endif
710
711 }
712
713
714 /*********************************************************************
715  *
716  * Function    :  bind_port
717  *
718  * Description :  Call socket, set socket options, and listen.
719  *                Called by listen_loop to "boot up" our proxy address.
720  *
721  * Parameters  :
722  *          1  :  hostnam = TCP/IP address to bind/listen to
723  *          2  :  portnum = port to listen on
724  *          3  :  pfd = pointer used to return file descriptor.
725  *
726  * Returns     :  if success, returns 0 and sets *pfd.
727  *                if failure, returns -3 if address is in use,
728  *                                    -2 if address unresolvable,
729  *                                    -1 otherwise
730  *********************************************************************/
731 int bind_port(const char *hostnam, int portnum, jb_socket *pfd)
732 {
733 #ifdef HAVE_RFC2553
734    struct addrinfo hints;
735    struct addrinfo *result, *rp;
736    /*
737     * XXX: portnum should be a string to allow symbolic service
738     * names in the configuration file and to avoid the following
739     * int2string.
740     */
741    char servnam[6];
742    int retval;
743 #else
744    struct sockaddr_in inaddr;
745 #endif /* def HAVE_RFC2553 */
746    jb_socket fd;
747 #ifndef _WIN32
748    int one = 1;
749 #endif /* ndef _WIN32 */
750
751    *pfd = JB_INVALID_SOCKET;
752
753 #ifdef HAVE_RFC2553
754    retval = snprintf(servnam, sizeof(servnam), "%d", portnum);
755    if ((-1 == retval) || (sizeof(servnam) <= retval))
756    {
757       log_error(LOG_LEVEL_ERROR,
758          "Port number (%d) ASCII decimal representation doesn't fit into 6 bytes",
759          portnum);
760       return -1;
761    }
762
763    memset(&hints, 0, sizeof(struct addrinfo));
764    if (hostnam == NULL)
765    {
766       /*
767        * XXX: This is a hack. The right thing to do
768        * would be to bind to both AF_INET and AF_INET6.
769        * This will also fail if there is no AF_INET
770        * version available.
771        */
772       hints.ai_family = AF_INET;
773    }
774    else
775    {
776       hints.ai_family = AF_UNSPEC;
777    }
778    hints.ai_socktype = SOCK_STREAM;
779    hints.ai_flags = AI_PASSIVE;
780 #ifdef AI_ADDRCONFIG
781    hints.ai_flags |= AI_ADDRCONFIG;
782 #endif
783    hints.ai_protocol = 0; /* Really any stream protocol or TCP only */
784    hints.ai_canonname = NULL;
785    hints.ai_addr = NULL;
786    hints.ai_next = NULL;
787
788    if ((retval = getaddrinfo(hostnam, servnam, &hints, &result)))
789    {
790       log_error(LOG_LEVEL_ERROR,
791          "Can not resolve %s: %s", hostnam, gai_strerror(retval));
792       return -2;
793    }
794 #else
795    memset((char *)&inaddr, '\0', sizeof inaddr);
796
797    inaddr.sin_family      = AF_INET;
798    inaddr.sin_addr.s_addr = resolve_hostname_to_ip(hostnam);
799
800    if (inaddr.sin_addr.s_addr == INADDR_NONE)
801    {
802       return(-2);
803    }
804
805 #ifndef _WIN32
806    if (sizeof(inaddr.sin_port) == sizeof(short))
807 #endif /* ndef _WIN32 */
808    {
809       inaddr.sin_port = htons((unsigned short) portnum);
810    }
811 #ifndef _WIN32
812    else
813    {
814       inaddr.sin_port = htonl((unsigned long) portnum);
815    }
816 #endif /* ndef _WIN32 */
817 #endif /* def HAVE_RFC2553 */
818
819 #ifdef HAVE_RFC2553
820    for (rp = result; rp != NULL; rp = rp->ai_next)
821    {
822       fd = socket(rp->ai_family, rp->ai_socktype, rp->ai_protocol);
823 #else
824    fd = socket(AF_INET, SOCK_STREAM, 0);
825 #endif /* def HAVE_RFC2553 */
826
827 #ifdef _WIN32
828    if (fd == JB_INVALID_SOCKET)
829 #else
830    if (fd < 0)
831 #endif
832    {
833 #ifdef HAVE_RFC2553
834       continue;
835 #else
836       return(-1);
837 #endif
838    }
839
840 #ifndef _WIN32
841    /*
842     * This is not needed for Win32 - in fact, it stops
843     * duplicate instances of Privoxy from being caught.
844     *
845     * On UNIX, we assume the user is sensible enough not
846     * to start Privoxy multiple times on the same IP.
847     * Without this, stopping and restarting Privoxy
848     * from a script fails.
849     * Note: SO_REUSEADDR is meant to only take over
850     * sockets which are *not* in listen state in Linux,
851     * e.g. sockets in TIME_WAIT. YMMV.
852     */
853    setsockopt(fd, SOL_SOCKET, SO_REUSEADDR, (char *)&one, sizeof(one));
854 #endif /* ndef _WIN32 */
855
856 #ifdef HAVE_RFC2553
857    if (bind(fd, rp->ai_addr, rp->ai_addrlen) < 0)
858 #else
859    if (bind(fd, (struct sockaddr *)&inaddr, sizeof(inaddr)) < 0)
860 #endif
861    {
862 #ifdef _WIN32
863       errno = WSAGetLastError();
864       if (errno == WSAEADDRINUSE)
865 #else
866       if (errno == EADDRINUSE)
867 #endif
868       {
869 #ifdef HAVE_RFC2553
870          freeaddrinfo(result);
871 #endif
872          close_socket(fd);
873          return(-3);
874       }
875       else
876       {
877          close_socket(fd);
878 #ifndef HAVE_RFC2553
879          return(-1);
880       }
881    }
882 #else
883       }
884    }
885    else
886    {
887       /* bind() succeeded, escape from for-loop */
888       /*
889        * XXX: Support multiple listening sockets (e.g. localhost
890        * resolves to AF_INET and AF_INET6, but only the first address
891        * is used
892        */
893       break;
894    }
895    }
896
897    freeaddrinfo(result);
898    if (rp == NULL)
899    {
900       /* All bind()s failed */
901       return(-1);
902    }
903 #endif /* ndef HAVE_RFC2553 */
904
905    while (listen(fd, MAX_LISTEN_BACKLOG) == -1)
906    {
907       if (errno != EINTR)
908       {
909          return(-1);
910       }
911    }
912
913    *pfd = fd;
914    return 0;
915
916 }
917
918
919 /*********************************************************************
920  *
921  * Function    :  get_host_information
922  *
923  * Description :  Determines the IP address the client used to
924  *                reach us and the hostname associated with it.
925  *
926  *                XXX: Most of the code has been copy and pasted
927  *                from accept_connection() and not all of the
928  *                ifdefs paths have been tested afterwards.
929  *
930  * Parameters  :
931  *          1  :  afd = File descriptor returned from accept().
932  *          2  :  ip_address = Pointer to return the pointer to
933  *                             the ip address string.
934  *          3  :  hostname =   Pointer to return the pointer to
935  *                             the hostname or NULL if the caller
936  *                             isn't interested in it.
937  *
938  * Returns     :  void.
939  *
940  *********************************************************************/
941 void get_host_information(jb_socket afd, char **ip_address, char **hostname)
942 {
943 #ifdef HAVE_RFC2553
944    struct sockaddr_storage server;
945    int retval;
946 #else
947    struct sockaddr_in server;
948    struct hostent *host = NULL;
949 #endif /* HAVE_RFC2553 */
950 #if defined(_WIN32) || defined(__OS2__) || defined(__APPLE_CC__) || defined(AMIGA)
951    /* according to accept_connection() this fixes a warning. */
952    int s_length, s_length_provided;
953 #else
954    socklen_t s_length, s_length_provided;
955 #endif
956 #ifndef HAVE_RFC2553
957 #if defined(HAVE_GETHOSTBYADDR_R_8_ARGS) ||  defined(HAVE_GETHOSTBYADDR_R_7_ARGS) || defined(HAVE_GETHOSTBYADDR_R_5_ARGS)
958    struct hostent result;
959 #if defined(HAVE_GETHOSTBYADDR_R_5_ARGS)
960    struct hostent_data hdata;
961 #else
962    char hbuf[HOSTENT_BUFFER_SIZE];
963    int thd_err;
964 #endif /* def HAVE_GETHOSTBYADDR_R_5_ARGS */
965 #endif /* def HAVE_GETHOSTBYADDR_R_(8|7|5)_ARGS */
966 #endif /* ifndef HAVE_RFC2553 */
967    s_length = s_length_provided = sizeof(server);
968
969    if (NULL != hostname)
970    {
971       *hostname = NULL;
972    }
973    *ip_address = NULL;
974
975    if (!getsockname(afd, (struct sockaddr *) &server, &s_length))
976    {
977       if (s_length > s_length_provided)
978       {
979          log_error(LOG_LEVEL_ERROR, "getsockname() truncated server address");
980          return;
981       }
982 #ifdef HAVE_RFC2553
983       *ip_address = malloc(NI_MAXHOST);
984       if (NULL == *ip_address)
985       {
986          log_error(LOG_LEVEL_ERROR,
987             "Out of memory while getting the client's IP address.");
988          return;
989       }
990       retval = getnameinfo((struct sockaddr *) &server, s_length,
991          *ip_address, NI_MAXHOST, NULL, 0, NI_NUMERICHOST);
992       if (retval)
993       {
994          log_error(LOG_LEVEL_ERROR,
995             "Unable to print my own IP address: %s", gai_strerror(retval));
996          freez(*ip_address);
997          return;
998       }
999 #else
1000       *ip_address = strdup(inet_ntoa(server.sin_addr));
1001 #endif /* HAVE_RFC2553 */
1002       if (NULL == hostname)
1003       {
1004          /*
1005           * We're done here, the caller isn't
1006           * interested in knowing the hostname.
1007           */
1008          return;
1009       }
1010
1011 #ifdef HAVE_RFC2553
1012       *hostname = malloc(NI_MAXHOST);
1013       if (NULL == *hostname)
1014       {
1015          log_error(LOG_LEVEL_ERROR,
1016             "Out of memory while getting the client's hostname.");
1017          return;
1018       }
1019       retval = getnameinfo((struct sockaddr *) &server, s_length,
1020          *hostname, NI_MAXHOST, NULL, 0, NI_NAMEREQD);
1021       if (retval)
1022       {
1023          log_error(LOG_LEVEL_ERROR,
1024             "Unable to resolve my own IP address: %s", gai_strerror(retval));
1025          freez(*hostname);
1026       }
1027 #else
1028 #if defined(HAVE_GETHOSTBYADDR_R_8_ARGS)
1029       gethostbyaddr_r((const char *)&server.sin_addr,
1030                       sizeof(server.sin_addr), AF_INET,
1031                       &result, hbuf, HOSTENT_BUFFER_SIZE,
1032                       &host, &thd_err);
1033 #elif defined(HAVE_GETHOSTBYADDR_R_7_ARGS)
1034       host = gethostbyaddr_r((const char *)&server.sin_addr,
1035                       sizeof(server.sin_addr), AF_INET,
1036                       &result, hbuf, HOSTENT_BUFFER_SIZE, &thd_err);
1037 #elif defined(HAVE_GETHOSTBYADDR_R_5_ARGS)
1038       if (0 == gethostbyaddr_r((const char *)&server.sin_addr,
1039                                sizeof(server.sin_addr), AF_INET,
1040                                &result, &hdata))
1041       {
1042          host = &result;
1043       }
1044       else
1045       {
1046          host = NULL;
1047       }
1048 #elif defined(MUTEX_LOCKS_AVAILABLE)
1049       privoxy_mutex_lock(&resolver_mutex);
1050       host = gethostbyaddr((const char *)&server.sin_addr, 
1051                            sizeof(server.sin_addr), AF_INET);
1052       privoxy_mutex_unlock(&resolver_mutex);
1053 #else
1054       host = gethostbyaddr((const char *)&server.sin_addr, 
1055                            sizeof(server.sin_addr), AF_INET);
1056 #endif
1057       if (host == NULL)
1058       {
1059          log_error(LOG_LEVEL_ERROR, "Unable to get my own hostname: %E\n");
1060       }
1061       else
1062       {
1063          *hostname = strdup(host->h_name);
1064       }
1065 #endif /* else def HAVE_RFC2553 */
1066    }
1067
1068    return;
1069 }
1070
1071
1072 /*********************************************************************
1073  *
1074  * Function    :  accept_connection
1075  *
1076  * Description :  Accepts a connection on a socket.  Socket must have
1077  *                been created using bind_port().
1078  *
1079  * Parameters  :
1080  *          1  :  csp = Client state, cfd, ip_addr_str, and 
1081  *                ip_addr_long will be set by this routine.
1082  *          2  :  fd  = file descriptor returned from bind_port
1083  *
1084  * Returns     :  when a connection is accepted, it returns 1 (TRUE).
1085  *                On an error it returns 0 (FALSE).
1086  *
1087  *********************************************************************/
1088 int accept_connection(struct client_state * csp, jb_socket fd)
1089 {
1090 #ifdef HAVE_RFC2553
1091    /* XXX: client is stored directly into csp->tcp_addr */
1092 #define client (csp->tcp_addr)
1093    int retval;
1094 #else
1095    struct sockaddr_in client;
1096 #endif
1097    jb_socket afd;
1098 #if defined(_WIN32) || defined(__OS2__) || defined(__APPLE_CC__) || defined(AMIGA)
1099    /* Wierdness - fix a warning. */
1100    int c_length;
1101 #else
1102    socklen_t c_length;
1103 #endif
1104
1105    c_length = sizeof(client);
1106
1107 #ifdef _WIN32
1108    afd = accept (fd, (struct sockaddr *) &client, &c_length);
1109    if (afd == JB_INVALID_SOCKET)
1110    {
1111       return 0;
1112    }
1113 #else
1114    do
1115    {
1116 #if defined(FEATURE_ACCEPT_FILTER) && defined(SO_ACCEPTFILTER)
1117       struct accept_filter_arg af_options;
1118       bzero(&af_options, sizeof(af_options));
1119       strlcpy(af_options.af_name, "httpready", sizeof(af_options.af_name));
1120       setsockopt(fd, SOL_SOCKET, SO_ACCEPTFILTER, &af_options, sizeof(af_options));
1121 #endif
1122       afd = accept (fd, (struct sockaddr *) &client, &c_length);
1123    } while (afd < 1 && errno == EINTR);
1124    if (afd < 0)
1125    {
1126       return 0;
1127    }
1128 #endif
1129
1130    csp->cfd = afd;
1131 #ifdef HAVE_RFC2553
1132    csp->ip_addr_str = malloc(NI_MAXHOST);
1133    if (NULL == csp->ip_addr_str)
1134    {
1135       log_error(LOG_LEVEL_ERROR,
1136          "Out of memory while getting the client's IP address.");
1137       return 0;
1138    }
1139    retval = getnameinfo((struct sockaddr *) &client, c_length,
1140          csp->ip_addr_str, NI_MAXHOST, NULL, 0, NI_NUMERICHOST);
1141    if (!csp->ip_addr_str || retval)
1142    {
1143       log_error(LOG_LEVEL_ERROR, "Can not save csp->ip_addr_str: %s",
1144             (csp->ip_addr_str) ? gai_strerror(retval) : "Insuffcient memory");
1145       freez(csp->ip_addr_str);
1146    }
1147 #undef client
1148 #else
1149    csp->ip_addr_str  = strdup(inet_ntoa(client.sin_addr));
1150    csp->ip_addr_long = ntohl(client.sin_addr.s_addr);
1151 #endif /* def HAVE_RFC2553 */
1152
1153    return 1;
1154
1155 }
1156
1157
1158 /*********************************************************************
1159  *
1160  * Function    :  resolve_hostname_to_ip
1161  *
1162  * Description :  Resolve a hostname to an internet tcp/ip address.
1163  *                NULL or an empty string resolve to INADDR_ANY.
1164  *
1165  * Parameters  :
1166  *          1  :  host = hostname to resolve
1167  *
1168  * Returns     :  INADDR_NONE => failure, INADDR_ANY or tcp/ip address if successful.
1169  *
1170  *********************************************************************/
1171 unsigned long resolve_hostname_to_ip(const char *host)
1172 {
1173    struct sockaddr_in inaddr;
1174    struct hostent *hostp;
1175 #if defined(HAVE_GETHOSTBYNAME_R_6_ARGS) || defined(HAVE_GETHOSTBYNAME_R_5_ARGS) || defined(HAVE_GETHOSTBYNAME_R_3_ARGS)
1176    struct hostent result;
1177 #if defined(HAVE_GETHOSTBYNAME_R_6_ARGS) || defined(HAVE_GETHOSTBYNAME_R_5_ARGS)
1178    char hbuf[HOSTENT_BUFFER_SIZE];
1179    int thd_err;
1180 #else /* defined(HAVE_GETHOSTBYNAME_R_3_ARGS) */
1181    struct hostent_data hdata;
1182 #endif /* def HAVE_GETHOSTBYNAME_R_(6|5)_ARGS */
1183 #endif /* def HAVE_GETHOSTBYNAME_R_(6|5|3)_ARGS */
1184
1185    if ((host == NULL) || (*host == '\0'))
1186    {
1187       return(INADDR_ANY);
1188    }
1189
1190    memset((char *) &inaddr, 0, sizeof inaddr);
1191
1192    if ((inaddr.sin_addr.s_addr = inet_addr(host)) == -1)
1193    {
1194       unsigned int dns_retries = 0;
1195 #if defined(HAVE_GETHOSTBYNAME_R_6_ARGS)
1196       while (gethostbyname_r(host, &result, hbuf,
1197                 HOSTENT_BUFFER_SIZE, &hostp, &thd_err)
1198              && (thd_err == TRY_AGAIN) && (dns_retries++ < MAX_DNS_RETRIES))
1199       {   
1200          log_error(LOG_LEVEL_ERROR,
1201             "Timeout #%u while trying to resolve %s. Trying again.",
1202             dns_retries, host);
1203       }
1204 #elif defined(HAVE_GETHOSTBYNAME_R_5_ARGS)
1205       while (NULL == (hostp = gethostbyname_r(host, &result,
1206                                  hbuf, HOSTENT_BUFFER_SIZE, &thd_err))
1207              && (thd_err == TRY_AGAIN) && (dns_retries++ < MAX_DNS_RETRIES))
1208       {   
1209          log_error(LOG_LEVEL_ERROR,
1210             "Timeout #%u while trying to resolve %s. Trying again.",
1211             dns_retries, host);
1212       }
1213 #elif defined(HAVE_GETHOSTBYNAME_R_3_ARGS)
1214       /*
1215        * XXX: Doesn't retry in case of soft errors.
1216        * Does this gethostbyname_r version set h_errno?
1217        */
1218       if (0 == gethostbyname_r(host, &result, &hdata))
1219       {
1220          hostp = &result;
1221       }
1222       else
1223       {
1224          hostp = NULL;
1225       }
1226 #elif defined(MUTEX_LOCKS_AVAILABLE)
1227       privoxy_mutex_lock(&resolver_mutex);
1228       while (NULL == (hostp = gethostbyname(host))
1229              && (h_errno == TRY_AGAIN) && (dns_retries++ < MAX_DNS_RETRIES))
1230       {   
1231          log_error(LOG_LEVEL_ERROR,
1232             "Timeout #%u while trying to resolve %s. Trying again.",
1233             dns_retries, host);
1234       }
1235       privoxy_mutex_unlock(&resolver_mutex);
1236 #else
1237       while (NULL == (hostp = gethostbyname(host))
1238              && (h_errno == TRY_AGAIN) && (dns_retries++ < MAX_DNS_RETRIES))
1239       {
1240          log_error(LOG_LEVEL_ERROR,
1241             "Timeout #%u while trying to resolve %s. Trying again.",
1242             dns_retries, host);
1243       }
1244 #endif /* def HAVE_GETHOSTBYNAME_R_(6|5|3)_ARGS */
1245       /*
1246        * On Mac OSX, if a domain exists but doesn't have a type A
1247        * record associated with it, the h_addr member of the struct
1248        * hostent returned by gethostbyname is NULL, even if h_length
1249        * is 4. Therefore the second test below.
1250        */
1251       if (hostp == NULL || hostp->h_addr == NULL)
1252       {
1253          errno = EINVAL;
1254          log_error(LOG_LEVEL_ERROR, "could not resolve hostname %s", host);
1255          return(INADDR_NONE);
1256       }
1257       if (hostp->h_addrtype != AF_INET)
1258       {
1259 #ifdef _WIN32
1260          errno = WSAEPROTOTYPE;
1261 #else
1262          errno = EPROTOTYPE;
1263 #endif 
1264          log_error(LOG_LEVEL_ERROR, "hostname %s resolves to unknown address type.", host);
1265          return(INADDR_NONE);
1266       }
1267       memcpy(
1268          (char *) &inaddr.sin_addr,
1269          (char *) hostp->h_addr,
1270          sizeof(inaddr.sin_addr)
1271       );
1272    }
1273    return(inaddr.sin_addr.s_addr);
1274
1275 }
1276
1277
1278 #ifdef FEATURE_CONNECTION_KEEP_ALIVE
1279 /*********************************************************************
1280  *
1281  * Function    :  socket_is_still_alive
1282  *
1283  * Description :  Figures out whether or not a socket is still alive.
1284  *
1285  * Parameters  :
1286  *          1  :  sfd = The socket to check.
1287  *
1288  * Returns     :  TRUE for yes, otherwise FALSE.
1289  *
1290  *********************************************************************/
1291 int socket_is_still_alive(jb_socket sfd)
1292 {
1293    char buf[10];
1294    int no_data_waiting;
1295
1296 #ifdef HAVE_POLL
1297    int poll_result;
1298    struct pollfd poll_fd[1];
1299
1300    memset(poll_fd, 0, sizeof(poll_fd));
1301    poll_fd[0].fd = sfd;
1302    poll_fd[0].events = POLLIN;
1303
1304    poll_result = poll(poll_fd, 1, 0);
1305
1306    if (-1 == poll_result)
1307    {
1308       log_error(LOG_LEVEL_CONNECT, "Polling socket %d failed.", sfd);
1309       return FALSE;
1310    }
1311    no_data_waiting = !(poll_fd[0].revents & POLLIN);
1312 #else
1313    fd_set readable_fds;
1314    struct timeval timeout;
1315    int ret;
1316
1317    memset(&timeout, '\0', sizeof(timeout));
1318    FD_ZERO(&readable_fds);
1319    FD_SET(sfd, &readable_fds);
1320
1321    ret = select((int)sfd+1, &readable_fds, NULL, NULL, &timeout);
1322    if (ret < 0)
1323    {
1324       log_error(LOG_LEVEL_CONNECT, "select() on socket %d failed: %E", sfd);
1325       return FALSE;
1326    }
1327    no_data_waiting = !FD_ISSET(sfd, &readable_fds);
1328 #endif /* def HAVE_POLL */
1329
1330    return (no_data_waiting || (1 == recv(sfd, buf, 1, MSG_PEEK)));
1331 }
1332 #endif /* def FEATURE_CONNECTION_KEEP_ALIVE */
1333
1334
1335 /*
1336   Local Variables:
1337   tab-width: 3
1338   end:
1339 */