libical, expat, and libsieve are now *required*.
[citadel.git] / webcit / webserver.c
1 /*
2  * $Id$
3  *
4  * This contains a simple multithreaded TCP server manager.  It sits around
5  * waiting on the specified port for incoming HTTP connections.  When a
6  * connection is established, it calls context_loop() from context_loop.c.
7  *
8  */
9
10 #include "webcit.h"
11 #include "webserver.h"
12
13 #if HAVE_BACKTRACE
14 #include <execinfo.h>
15 #endif
16
17 #ifndef HAVE_SNPRINTF
18 int vsnprintf(char *buf, size_t max, const char *fmt, va_list argp);
19 #endif
20
21 int verbosity = 9;              /* Logging level */
22 int msock;                      /* master listening socket */
23 int is_https = 0;               /* Nonzero if I am an HTTPS service */
24 int follow_xff = 0;             /* Follow X-Forwarded-For: header */
25 int home_specified = 0;         /* did the user specify a homedir? */
26 int time_to_die = 0;            /* Nonzero if server is shutting down */
27 extern void *context_loop(int);
28 extern void *housekeeping_loop(void);
29 extern pthread_mutex_t SessionListMutex;
30 extern pthread_key_t MyConKey;
31
32
33 char ctdl_key_dir[PATH_MAX]=SSL_DIR;
34 char file_crpt_file_key[PATH_MAX]="";
35 char file_crpt_file_csr[PATH_MAX]="";
36 char file_crpt_file_cer[PATH_MAX]="";
37
38 char socket_dir[PATH_MAX];                      /* where to talk to our citadel server */
39 static const char editor_absolut_dir[PATH_MAX]=EDITORDIR;       /* nailed to what configure gives us. */
40 static char static_dir[PATH_MAX];               /* calculated on startup */
41 static char static_local_dir[PATH_MAX];         /* calculated on startup */
42 static char static_icon_dir[PATH_MAX];          /* where should we find our mime icons? */
43 char  *static_dirs[]={                          /* needs same sort order as the web mapping */
44         (char*)static_dir,                      /* our templates on disk */
45         (char*)static_local_dir,                /* user provided templates disk */
46         (char*)editor_absolut_dir,              /* the editor on disk */
47         (char*)static_icon_dir                  /* our icons... */
48 };
49
50 /*
51  * Subdirectories from which the client may request static content
52  *
53  * (If you add more, remember to increment 'ndirs' below)
54  */
55 char *static_content_dirs[] = {
56         "static",                     /** static templates */
57         "static.local",               /** site local static templates */
58         "tiny_mce"                    /** rich text editor */
59 };
60
61 int ndirs=3;
62
63
64 char *server_cookie = NULL;     /* our Cookie connection to the client */
65 int http_port = PORT_NUM;       /* Port to listen on */
66 char *ctdlhost = DEFAULT_HOST;  /* our name */
67 char *ctdlport = DEFAULT_PORT;  /* our Port */
68 int setup_wizard = 0;           /* should we run the setup wizard? \todo */
69 char wizard_filename[PATH_MAX]; /* where's the setup wizard? */
70 int running_as_daemon = 0;      /* should we deamonize on startup? */
71
72
73 /* 
74  * This is a generic function to set up a master socket for listening on
75  * a TCP port.  The server shuts down if the bind fails.
76  *
77  * ip_addr      IP address to bind
78  * port_number  port number to bind
79  * queue_len    number of incoming connections to allow in the queue
80  */
81 int ig_tcp_server(char *ip_addr, int port_number, int queue_len)
82 {
83         struct sockaddr_in sin;
84         int s, i;
85
86         memset(&sin, 0, sizeof(sin));
87         sin.sin_family = AF_INET;
88         if (ip_addr == NULL) {
89                 sin.sin_addr.s_addr = INADDR_ANY;
90         } else {
91                 sin.sin_addr.s_addr = inet_addr(ip_addr);
92         }
93
94         if (sin.sin_addr.s_addr == INADDR_NONE) {
95                 sin.sin_addr.s_addr = INADDR_ANY;
96         }
97
98         if (port_number == 0) {
99                 lprintf(1, "Cannot start: no port number specified.\n");
100                 exit(WC_EXIT_BIND);
101         }
102         sin.sin_port = htons((u_short) port_number);
103
104         s = socket(PF_INET, SOCK_STREAM, (getprotobyname("tcp")->p_proto));
105         if (s < 0) {
106                 lprintf(1, "Can't create a socket: %s\n", strerror(errno));
107                 exit(WC_EXIT_BIND);
108         }
109         /* Set some socket options that make sense. */
110         i = 1;
111         setsockopt(s, SOL_SOCKET, SO_REUSEADDR, &i, sizeof(i));
112
113         fcntl(s, F_SETFL, O_NONBLOCK); /* maide: this statement is incorrect
114                                           there should be a preceding F_GETFL
115                                           and a bitwise OR with the previous
116                                           fd flags */
117         
118         if (bind(s, (struct sockaddr *) &sin, sizeof(sin)) < 0) {
119                 lprintf(1, "Can't bind: %s\n", strerror(errno));
120                 exit(WC_EXIT_BIND);
121         }
122         if (listen(s, queue_len) < 0) {
123                 lprintf(1, "Can't listen: %s\n", strerror(errno));
124                 exit(WC_EXIT_BIND);
125         }
126         return (s);
127 }
128
129
130
131 /*
132  * \brief Create a Unix domain socket and listen on it
133  * \param sockpath file name of the unix domain socket
134  * \param queue_len Number of incoming connections to allow in the queue
135  */
136 int ig_uds_server(char *sockpath, int queue_len)
137 {
138         struct sockaddr_un addr;
139         int s;
140         int i;
141         int actual_queue_len;
142
143         actual_queue_len = queue_len;
144         if (actual_queue_len < 5) actual_queue_len = 5;
145
146         i = unlink(sockpath);
147         if (i != 0) if (errno != ENOENT) {
148                 lprintf(1, "webserver: can't unlink %s: %s\n",
149                         sockpath, strerror(errno));
150                 exit(WC_EXIT_BIND);
151         }
152
153         memset(&addr, 0, sizeof(addr));
154         addr.sun_family = AF_UNIX;
155         safestrncpy(addr.sun_path, sockpath, sizeof addr.sun_path);
156
157         s = socket(AF_UNIX, SOCK_STREAM, 0);
158         if (s < 0) {
159                 lprintf(1, "webserver: Can't create a socket: %s\n",
160                         strerror(errno));
161                 exit(WC_EXIT_BIND);
162         }
163
164         if (bind(s, (struct sockaddr *)&addr, sizeof(addr)) < 0) {
165                 lprintf(1, "webserver: Can't bind: %s\n",
166                         strerror(errno));
167                 exit(WC_EXIT_BIND);
168         }
169
170         if (listen(s, actual_queue_len) < 0) {
171                 lprintf(1, "webserver: Can't listen: %s\n",
172                         strerror(errno));
173                 exit(WC_EXIT_BIND);
174         }
175
176         chmod(sockpath, 0777);
177         return(s);
178 }
179
180
181
182
183 /*
184  * \brief Read data from the client socket.
185  * \param sock socket fd to read from
186  * \param buf buffer to read into 
187  * \param bytes number of bytes to read
188  * \param timeout Number of seconds to wait before timing out
189  * \return values are\
190  *      1       Requested number of bytes has been read.\
191  *      0       Request timed out.\
192  *         -1           Connection is broken, or other error.
193  */
194 int client_read_to(int sock, char *buf, int bytes, int timeout)
195 {
196         int len, rlen;
197         fd_set rfds;
198         struct timeval tv;
199         int retval;
200
201
202 #ifdef HAVE_OPENSSL
203         if (is_https) {
204                 return (client_read_ssl(buf, bytes, timeout));
205         }
206 #endif
207
208         len = 0;
209         while (len < bytes) {
210                 FD_ZERO(&rfds);
211                 FD_SET(sock, &rfds);
212                 tv.tv_sec = timeout;
213                 tv.tv_usec = 0;
214
215                 retval = select((sock) + 1, &rfds, NULL, NULL, &tv);
216                 if (FD_ISSET(sock, &rfds) == 0) {
217                         return (0);
218                 }
219
220                 rlen = read(sock, &buf[len], bytes - len);
221
222                 if (rlen < 1) {
223                         lprintf(2, "client_read() failed: %s\n",
224                                 strerror(errno));
225                         return (-1);
226                 }
227                 len = len + rlen;
228         }
229
230 #ifdef HTTP_TRACING
231         write(2, "\033[32m", 5);
232         write(2, buf, bytes);
233         write(2, "\033[30m", 5);
234 #endif
235         return (1);
236 }
237
238 /*
239  * \brief write data to the client
240  * \param buf data to write to the client
241  * \param count size of buffer
242  */
243 ssize_t client_write(const void *buf, size_t count)
244 {
245         char *newptr;
246         size_t newalloc;
247         size_t bytesWritten = 0;
248         ssize_t res;
249         fd_set wset;
250         int fdflags;
251
252         if (WC->burst != NULL) {
253                 if ((WC->burst_len + count) >= WC->burst_alloc) {
254                         newalloc = (WC->burst_alloc * 2);
255                         if ((WC->burst_len + count) >= newalloc) {
256                                 newalloc += count;
257                         }
258                         newptr = realloc(WC->burst, newalloc);
259                         if (newptr != NULL) {
260                                 WC->burst = newptr;
261                                 WC->burst_alloc = newalloc;
262                         }
263                 }
264                 if ((WC->burst_len + count) < WC->burst_alloc) {
265                         memcpy(&WC->burst[WC->burst_len], buf, count);
266                         WC->burst_len += count;
267                         return (count);
268                 }
269                 else {
270                         return(-1);
271                 }
272         }
273 #ifdef HAVE_OPENSSL
274         if (is_https) {
275                 client_write_ssl((char *) buf, count);
276                 return (count);
277         }
278 #endif
279 #ifdef HTTP_TRACING
280         write(2, "\033[34m", 5);
281         write(2, buf, count);
282         write(2, "\033[30m", 5);
283 #endif
284         fdflags = fcntl(WC->http_sock, F_GETFL);
285
286         while (bytesWritten < count) {
287                 if ((fdflags & O_NONBLOCK) == O_NONBLOCK) {
288                         FD_ZERO(&wset);
289                         FD_SET(WC->http_sock, &wset);
290                         if (select(1, NULL, &wset, NULL, NULL) == -1) {
291                                 lprintf(2, "client_write: Socket select failed (%s)\n", strerror(errno));
292                                 return -1;
293                         }
294                 }
295
296                 if ((res = write(WC->http_sock, (char*)buf + bytesWritten,
297                   count - bytesWritten)) == -1) {
298                         lprintf(2, "client_write: Socket write failed (%s)\n", strerror(errno));
299                         return res;
300                 }
301                 bytesWritten += res;
302         }
303
304         return bytesWritten;
305 }
306
307 /*
308  * \brief Begin buffering HTTP output so we can transmit it all in one write operation later.
309  */
310 void begin_burst(void)
311 {
312         if (WC->burst != NULL) {
313                 free(WC->burst);
314                 WC->burst = NULL;
315         }
316         WC->burst_len = 0;
317         WC->burst_alloc = 32768;
318         WC->burst = malloc(WC->burst_alloc);
319 }
320
321
322 /*
323  * \brief uses the same calling syntax as compress2(), but it
324  * creates a stream compatible with HTTP "Content-encoding: gzip"
325  */
326 #ifdef HAVE_ZLIB
327 #define DEF_MEM_LEVEL 8 /*< memlevel??? */
328 #define OS_CODE 0x03    /*< unix */
329 int ZEXPORT compress_gzip(Bytef * dest,         /*< compressed buffer*/
330                           size_t * destLen,     /*< length of the compresed data */
331                           const Bytef * source, /*< source to encode */
332                           uLong sourceLen,      /*< length of source to encode */
333                           int level)            /*< compression level */
334 {
335         const int gz_magic[2] = { 0x1f, 0x8b }; /* gzip magic header */
336
337         /* write gzip header */
338         snprintf((char *) dest, *destLen, 
339                  "%c%c%c%c%c%c%c%c%c%c",
340                  gz_magic[0], gz_magic[1], Z_DEFLATED,
341                  0 /*flags */ , 0, 0, 0, 0 /*time */ , 0 /* xflags */ ,
342                  OS_CODE);
343
344         /* normal deflate */
345         z_stream stream;
346         int err;
347         stream.next_in = (Bytef *) source;
348         stream.avail_in = (uInt) sourceLen;
349         stream.next_out = dest + 10L;   // after header
350         stream.avail_out = (uInt) * destLen;
351         if ((uLong) stream.avail_out != *destLen)
352                 return Z_BUF_ERROR;
353
354         stream.zalloc = (alloc_func) 0;
355         stream.zfree = (free_func) 0;
356         stream.opaque = (voidpf) 0;
357
358         err = deflateInit2(&stream, level, Z_DEFLATED, -MAX_WBITS,
359                            DEF_MEM_LEVEL, Z_DEFAULT_STRATEGY);
360         if (err != Z_OK)
361                 return err;
362
363         err = deflate(&stream, Z_FINISH);
364         if (err != Z_STREAM_END) {
365                 deflateEnd(&stream);
366                 return err == Z_OK ? Z_BUF_ERROR : err;
367         }
368         *destLen = stream.total_out + 10L;
369
370         /* write CRC and Length */
371         uLong crc = crc32(0L, source, sourceLen);
372         int n;
373         for (n = 0; n < 4; ++n, ++*destLen) {
374                 dest[*destLen] = (int) (crc & 0xff);
375                 crc >>= 8;
376         }
377         uLong len = stream.total_in;
378         for (n = 0; n < 4; ++n, ++*destLen) {
379                 dest[*destLen] = (int) (len & 0xff);
380                 len >>= 8;
381         }
382         err = deflateEnd(&stream);
383         return err;
384 }
385 #endif
386
387 /*
388  * \brief Finish buffering HTTP output.  [Compress using zlib and] output with a Content-Length: header.
389  */
390 void end_burst(void)
391 {
392         size_t the_len;
393         char *the_data;
394
395         if (WC->burst == NULL)
396                 return;
397
398         the_len = WC->burst_len;
399         the_data = WC->burst;
400
401         WC->burst_len = 0;
402         WC->burst_alloc = 0;
403         WC->burst = NULL;
404
405 #ifdef HAVE_ZLIB
406         /* Perform gzip compression, if enabled and supported by client */
407         if (WC->gzip_ok) {
408                 char *compressed_data = NULL;
409                 size_t compressed_len;
410
411                 compressed_len = ((the_len * 101) / 100) + 100;
412                 compressed_data = malloc(compressed_len);
413
414                 if (compress_gzip((Bytef *) compressed_data,
415                                   &compressed_len,
416                                   (Bytef *) the_data,
417                                   (uLongf) the_len, Z_BEST_SPEED) == Z_OK) {
418                         wprintf("Content-encoding: gzip\r\n");
419                         free(the_data);
420                         the_data = compressed_data;
421                         the_len = compressed_len;
422                 } else {
423                         free(compressed_data);
424                 }
425         }
426 #endif  /* HAVE_ZLIB */
427
428         wprintf("Content-length: %d\r\n\r\n", the_len);
429         client_write(the_data, the_len);
430         free(the_data);
431         return;
432 }
433
434
435
436 /*
437  * \brief Read data from the client socket with default timeout.
438  * (This is implemented in terms of client_read_to() and could be
439  * justifiably moved out of sysdep.c)
440  * \param sock the socket fd to read from
441  * \param buf the buffer to write to
442  * \param bytes Number of bytes to read
443  */
444 int client_read(int sock, char *buf, int bytes)
445 {
446         return (client_read_to(sock, buf, bytes, SLEEPING));
447 }
448
449
450 /*
451  * \brief Get a LF-terminated line of text from the client.
452  * (This is implemented in terms of client_read() and could be
453  * justifiably moved out of sysdep.c)
454  * \param sock socket fd to get client line from
455  * \param buf buffer to write read data to
456  * \param bufsiz how many bytes to read
457  * \return  number of bytes read???
458  */
459 int client_getln(int sock, char *buf, int bufsiz)
460 {
461         int i, retval;
462
463         /* Read one character at a time.*/
464         for (i = 0;; i++) {
465                 retval = client_read(sock, &buf[i], 1);
466                 if (retval != 1 || buf[i] == '\n' || i == (bufsiz-1))
467                         break;
468                 if ( (!isspace(buf[i])) && (!isprint(buf[i])) ) {
469                         /* Non printable character recieved from client */
470                         return(-1);
471                 }
472         }
473
474         /* If we got a long line, discard characters until the newline. */
475         if (i == (bufsiz-1))
476                 while (buf[i] != '\n' && retval == 1)
477                         retval = client_read(sock, &buf[i], 1);
478
479         /*
480          * Strip any trailing non-printable characters.
481          */
482         buf[i] = 0;
483         while ((i > 0) && (!isprint(buf[i - 1]))) {
484                 buf[--i] = 0;
485         }
486         return (retval);
487 }
488
489 /*
490  * \brief shut us down the regular way.
491  * param signum the signal we want to forward
492  */
493 pid_t current_child;
494 void graceful_shutdown_watcher(int signum) {
495         lprintf (1, "bye; shutting down watcher.");
496         kill(current_child, signum);
497         if (signum != SIGHUP)
498                 exit(0);
499 }
500
501 /*
502  * \brief shut us down the regular way.
503  * param signum the signal we want to forward
504  */
505 pid_t current_child;
506 void graceful_shutdown(int signum) {
507 //      kill(current_child, signum);
508         char wd[SIZ];
509         FILE *FD;
510         int fd;
511         getcwd(wd, SIZ);
512         lprintf (1, "bye going down gracefull.[%d][%s]\n", signum, wd);
513         fd = msock;
514         msock = -1;
515         time_to_die = 1;
516         FD=fdopen(fd, "a+");
517         fflush (FD);
518         fclose (FD);
519         close(fd);
520 }
521
522
523 /*
524  * \brief       Start running as a daemon.  
525  *
526  * param        do_close_stdio          Only close stdio if set.
527  */
528
529 /*
530  * Start running as a daemon.
531  */
532 void start_daemon(char *pid_file) 
533 {
534         int status = 0;
535         pid_t child = 0;
536         FILE *fp;
537         int do_restart = 0;
538
539         current_child = 0;
540
541         /* Close stdin/stdout/stderr and replace them with /dev/null.
542          * We don't just call close() because we don't want these fd's
543          * to be reused for other files.
544          */
545         chdir("/");
546
547         signal(SIGHUP, SIG_IGN);
548         signal(SIGINT, SIG_IGN);
549         signal(SIGQUIT, SIG_IGN);
550
551         child = fork();
552         if (child != 0) {
553                 exit(0);
554         }
555
556         setsid();
557         umask(0);
558         freopen("/dev/null", "r", stdin);
559         freopen("/dev/null", "w", stdout);
560         freopen("/dev/null", "w", stderr);
561         signal(SIGTERM, graceful_shutdown_watcher);
562         signal(SIGHUP, graceful_shutdown_watcher);
563
564         do {
565                 current_child = fork();
566
567         
568                 if (current_child < 0) {
569                         perror("fork");
570                         exit(errno);
571                 }
572         
573                 else if (current_child == 0) {  // child process
574 //                      signal(SIGTERM, graceful_shutdown);
575                         signal(SIGHUP, graceful_shutdown);
576
577                         return; /* continue starting webcit. */
578                 }
579         
580                 else { // watcher process
581 //                      signal(SIGTERM, SIG_IGN);
582 //                      signal(SIGHUP, SIG_IGN);
583                         if (pid_file) {
584                                 fp = fopen(pid_file, "w");
585                                 if (fp != NULL) {
586                                         fprintf(fp, "%d\n", getpid());
587                                         fclose(fp);
588                                 }
589                         }
590                         waitpid(current_child, &status, 0);
591                 }
592
593                 do_restart = 0;
594
595                 /* Did the main process exit with an actual exit code? */
596                 if (WIFEXITED(status)) {
597
598                         /* Exit code 0 means the watcher should exit */
599                         if (WEXITSTATUS(status) == 0) {
600                                 do_restart = 0;
601                         }
602
603                         /* Exit code 101-109 means the watcher should exit */
604                         else if ( (WEXITSTATUS(status) >= 101) && (WEXITSTATUS(status) <= 109) ) {
605                                 do_restart = 0;
606                         }
607
608                         /* Any other exit code means we should restart. */
609                         else {
610                                 do_restart = 1;
611                         }
612                 }
613
614                 /* Any other type of termination (signals, etc.) should also restart. */
615                 else {
616                         do_restart = 1;
617                 }
618
619         } while (do_restart);
620
621         if (pid_file) {
622                 unlink(pid_file);
623         }
624         exit(WEXITSTATUS(status));
625 }
626
627 /*
628  * \brief       Spawn an additional worker thread into the pool.
629  */
630 void spawn_another_worker_thread()
631 {
632         pthread_t SessThread;   /*< Thread descriptor */
633         pthread_attr_t attr;    /*< Thread attributes */
634         int ret;
635
636         lprintf(3, "Creating a new thread\n");
637
638         /* set attributes for the new thread */
639         pthread_attr_init(&attr);
640         pthread_attr_setdetachstate(&attr, PTHREAD_CREATE_DETACHED);
641
642         /*
643          * Our per-thread stacks need to be bigger than the default size, otherwise
644          * the MIME parser crashes on FreeBSD, and the IMAP service crashes on
645          * 64-bit Linux.
646          */
647         if ((ret = pthread_attr_setstacksize(&attr, 1024 * 1024))) {
648                 lprintf(1, "pthread_attr_setstacksize: %s\n",
649                         strerror(ret));
650                 pthread_attr_destroy(&attr);
651         }
652
653         /* now create the thread */
654         if (pthread_create(&SessThread, &attr,
655                            (void *(*)(void *)) worker_entry, NULL)
656             != 0) {
657                 lprintf(1, "Can't create thread: %s\n", strerror(errno));
658         }
659
660         /* free up the attributes */
661         pthread_attr_destroy(&attr);
662 }
663
664 /*
665  * \brief Here's where it all begins.
666  * \param argc number of commandline args
667  * \param argv the commandline arguments
668  */
669 int main(int argc, char **argv)
670 {
671         pthread_t SessThread;   /*< Thread descriptor */
672         pthread_attr_t attr;    /*< Thread attributes */
673         int a, i;                       /*< General-purpose variables */
674         char tracefile[PATH_MAX];
675         char ip_addr[256]="0.0.0.0";
676         char dirbuffer[PATH_MAX]="";
677         int relh=0;
678         int home=0;
679         int home_specified=0;
680         char relhome[PATH_MAX]="";
681         char webcitdir[PATH_MAX] = DATADIR;
682         char *pidfile = NULL;
683         char *hdir;
684         const char *basedir;
685 #ifdef ENABLE_NLS
686         char *locale = NULL;
687         char *mo = NULL;
688 #endif /* ENABLE_NLS */
689         char uds_listen_path[PATH_MAX]; /*< listen on a unix domain socket? */
690
691         /* Ensure that we are linked to the correct version of libcitadel */
692         if (libcitadel_version_number() < LIBCITADEL_VERSION_NUMBER) {
693                 fprintf(stderr, " You are running libcitadel version %d.%02d\n",
694                         (libcitadel_version_number() / 100), (libcitadel_version_number() % 100));
695                 fprintf(stderr, "WebCit was compiled against version %d.%02d\n",
696                         (LIBCITADEL_VERSION_NUMBER / 100), (LIBCITADEL_VERSION_NUMBER % 100));
697                 return(1);
698         }
699
700         strcpy(uds_listen_path, "");
701
702         /* Parse command line */
703 #ifdef HAVE_OPENSSL
704         while ((a = getopt(argc, argv, "h:i:p:t:x:dD:cfs")) != EOF)
705 #else
706         while ((a = getopt(argc, argv, "h:i:p:t:x:dD:cf")) != EOF)
707 #endif
708                 switch (a) {
709                 case 'h':
710                         hdir = strdup(optarg);
711                         relh=hdir[0]!='/';
712                         if (!relh) safestrncpy(webcitdir, hdir,
713                                                                    sizeof webcitdir);
714                         else
715                                 safestrncpy(relhome, relhome,
716                                                         sizeof relhome);
717                         /* free(hdir); TODO: SHOULD WE DO THIS? */
718                         home_specified = 1;
719                         home=1;
720                         break;
721                 case 'd':
722                         running_as_daemon = 1;
723                         break;
724                 case 'D':
725                         pidfile = strdup(optarg);
726                         running_as_daemon = 1;
727                         break;
728                 case 'i':
729                         safestrncpy(ip_addr, optarg, sizeof ip_addr);
730                         break;
731                 case 'p':
732                         http_port = atoi(optarg);
733                         if (http_port == 0) {
734                                 safestrncpy(uds_listen_path, optarg, sizeof uds_listen_path);
735                         }
736                         break;
737                 case 't':
738                         safestrncpy(tracefile, optarg, sizeof tracefile);
739                         freopen(tracefile, "w", stdout);
740                         freopen(tracefile, "w", stderr);
741                         freopen(tracefile, "r", stdin);
742                         break;
743                 case 'x':
744                         verbosity = atoi(optarg);
745                         break;
746                 case 'f':
747                         follow_xff = 1;
748                         break;
749                 case 'c':
750                         server_cookie = malloc(256);
751                         if (server_cookie != NULL) {
752                                 safestrncpy(server_cookie,
753                                        "Set-cookie: wcserver=",
754                                         256);
755                                 if (gethostname
756                                     (&server_cookie[strlen(server_cookie)],
757                                      200) != 0) {
758                                         lprintf(2, "gethostname: %s\n",
759                                                 strerror(errno));
760                                         free(server_cookie);
761                                 }
762                         }
763                         break;
764                 case 's':
765                         is_https = 1;
766                         break;
767                 default:
768                         fprintf(stderr, "usage: webserver "
769                                 "[-i ip_addr] [-p http_port] "
770                                 "[-t tracefile] [-c] [-f] "
771                                 "[-d] "
772 #ifdef HAVE_OPENSSL
773                                 "[-s] "
774 #endif
775                                 "[remotehost [remoteport]]\n");
776                         return 1;
777                 }
778
779         if (optind < argc) {
780                 ctdlhost = argv[optind];
781                 if (++optind < argc)
782                         ctdlport = argv[optind];
783         }
784
785         /* daemonize, if we were asked to */
786         if (running_as_daemon) {
787                 start_daemon(pidfile);
788         }
789         else {
790 ///             signal(SIGTERM, graceful_shutdown);
791                 signal(SIGHUP, graceful_shutdown);
792         }
793
794         /* Tell 'em who's in da house */
795         lprintf(1, PACKAGE_STRING "\n");
796         lprintf(1, "Copyright (C) 1996-2008 by the Citadel development team.\n"
797                 "This software is distributed under the terms of the "
798                 "GNU General Public License.\n\n"
799         );
800
801
802         /* initialize the International Bright Young Thing */
803 #ifdef ENABLE_NLS
804         initialize_locales();
805
806         locale = setlocale(LC_ALL, "");
807
808         mo = malloc(strlen(webcitdir) + 20);
809         lprintf(9, "Message catalog directory: %s\n", bindtextdomain("webcit", LOCALEDIR"/locale"));
810         free(mo);
811         lprintf(9, "Text domain: %s\n", textdomain("webcit"));
812         lprintf(9, "Text domain Charset: %s\n", bind_textdomain_codeset("webcit","UTF8"));
813         preset_locale();
814 #endif
815
816
817         /* calculate all our path on a central place */
818     /* where to keep our config */
819         
820 #define COMPUTE_DIRECTORY(SUBDIR) memcpy(dirbuffer,SUBDIR, sizeof dirbuffer);\
821         snprintf(SUBDIR,sizeof SUBDIR,  "%s%s%s%s%s%s%s", \
822                          (home&!relh)?webcitdir:basedir, \
823              ((basedir!=webcitdir)&(home&!relh))?basedir:"/", \
824              ((basedir!=webcitdir)&(home&!relh))?"/":"", \
825                          relhome, \
826              (relhome[0]!='\0')?"/":"",\
827                          dirbuffer,\
828                          (dirbuffer[0]!='\0')?"/":"");
829         basedir=RUNDIR;
830         COMPUTE_DIRECTORY(socket_dir);
831         basedir=WWWDIR "/static";
832         COMPUTE_DIRECTORY(static_dir);
833         basedir=WWWDIR "/static/icons";
834         COMPUTE_DIRECTORY(static_icon_dir);
835         basedir=WWWDIR "/static.local";
836         COMPUTE_DIRECTORY(static_local_dir);
837
838         snprintf(file_crpt_file_key,
839                  sizeof file_crpt_file_key, 
840                  "%s/citadel.key",
841                  ctdl_key_dir);
842         snprintf(file_crpt_file_csr,
843                  sizeof file_crpt_file_csr, 
844                  "%s/citadel.csr",
845                  ctdl_key_dir);
846         snprintf(file_crpt_file_cer,
847                  sizeof file_crpt_file_cer, 
848                  "%s/citadel.cer",
849                  ctdl_key_dir);
850
851         /* we should go somewhere we can leave our coredump, if enabled... */
852         lprintf(9, "Changing directory to %s\n", socket_dir);
853         if (chdir(webcitdir) != 0) {
854                 perror("chdir");
855         }
856         LoadIconDir(static_icon_dir);
857         initialize_viewdefs();
858         initialize_axdefs();
859
860         /*
861          * Set up a place to put thread-specific data.
862          * We only need a single pointer per thread - it points to the
863          * wcsession struct to which the thread is currently bound.
864          */
865         if (pthread_key_create(&MyConKey, NULL) != 0) {
866                 lprintf(1, "Can't create TSD key: %s\n", strerror(errno));
867         }
868         InitialiseSemaphores ();
869
870         /*
871          * Set up a place to put thread-specific SSL data.
872          * We don't stick this in the wcsession struct because SSL starts
873          * up before the session is bound, and it gets torn down between
874          * transactions.
875          */
876 #ifdef HAVE_OPENSSL
877         if (pthread_key_create(&ThreadSSL, NULL) != 0) {
878                 lprintf(1, "Can't create TSD key: %s\n", strerror(errno));
879         }
880 #endif
881
882         /*
883          * Bind the server to our favorite port.
884          * There is no need to check for errors, because ig_tcp_server()
885          * exits if it doesn't succeed.
886          */
887
888         if (!IsEmptyStr(uds_listen_path)) {
889                 lprintf(2, "Attempting to create listener socket at %s...\n", uds_listen_path);
890                 msock = ig_uds_server(uds_listen_path, LISTEN_QUEUE_LENGTH);
891         }
892         else {
893                 lprintf(2, "Attempting to bind to port %d...\n", http_port);
894                 msock = ig_tcp_server(ip_addr, http_port, LISTEN_QUEUE_LENGTH);
895         }
896
897         lprintf(2, "Listening on socket %d\n", msock);
898         signal(SIGPIPE, SIG_IGN);
899
900         pthread_mutex_init(&SessionListMutex, NULL);
901
902         /*
903          * Start up the housekeeping thread
904          */
905         pthread_attr_init(&attr);
906         pthread_attr_setdetachstate(&attr, PTHREAD_CREATE_DETACHED);
907         pthread_create(&SessThread, &attr,
908                        (void *(*)(void *)) housekeeping_loop, NULL);
909
910
911         /*
912          * If this is an HTTPS server, fire up SSL
913          */
914 #ifdef HAVE_OPENSSL
915         if (is_https) {
916                 init_ssl();
917         }
918 #endif
919
920         /* Start a few initial worker threads */
921         for (i = 0; i < (MIN_WORKER_THREADS); ++i) {
922                 spawn_another_worker_thread();
923         }
924
925         /* now the original thread becomes another worker */
926         worker_entry();
927         return 0;
928 }
929
930
931 /*
932  * Entry point for worker threads
933  */
934 void worker_entry(void)
935 {
936         int ssock;
937         int i = 0;
938         int fail_this_transaction = 0;
939         int ret;
940         struct timeval tv;
941         fd_set readset, tempset;
942
943         tv.tv_sec = 0;
944         tv.tv_usec = 10000;
945         FD_ZERO(&readset);
946         FD_SET(msock, &readset);
947
948         do {
949                 /* Only one thread can accept at a time */
950                 fail_this_transaction = 0;
951                 ssock = -1; 
952                 errno = EAGAIN;
953                 do {
954                         ret = -1; /* just one at once should select... */
955                         begin_critical_section(S_SELECT);
956
957                         FD_ZERO(&tempset);
958                         if (msock > 0) FD_SET(msock, &tempset);
959                         tv.tv_sec = 0;
960                         tv.tv_usec = 10000;
961                         if (msock > 0)  ret = select(msock+1, &tempset, NULL, NULL,  &tv);
962                         end_critical_section(S_SELECT);
963                         if ((ret < 0) && (errno != EINTR) && (errno != EAGAIN))
964                         {// EINTR and EAGAIN are thrown but not of interest.
965                                 lprintf(2, "accept() failed:%d %s\n",
966                                         errno, strerror(errno));
967                         }
968                         else if ((ret > 0) && (msock > 0) && FD_ISSET(msock, &tempset))
969                         {// Successfully selected, and still not shutting down? Accept!
970                                 ssock = accept(msock, NULL, 0);
971                         }
972                         
973                 } while ((msock > 0) && (ssock < 0)  && (time_to_die == 0));
974
975                 if ((msock == -1)||(time_to_die))
976                 {// ok, we're going down.
977                         int shutdown = 0;
978
979                         /* the first to come here will have to do the cleanup.
980                          * make shure its realy just one.
981                          */
982                         begin_critical_section(S_SHUTDOWN);
983                         if (msock == -1)
984                         {
985                                 msock = -2;
986                                 shutdown = 1;
987                         }
988                         end_critical_section(S_SHUTDOWN);
989                         if (shutdown == 1)
990                         {// we're the one to cleanup the mess.
991                                 lprintf(2, "I'm master shutdown: tagging sessions to be killed.\n");
992                                 shutdown_sessions();
993                                 lprintf(2, "master shutdown: waiting for others\n");
994                                 sleeeeeeeeeep(1); // wait so some others might finish...
995                                 lprintf(2, "master shutdown: cleaning up sessions\n");
996                                 do_housekeeping();
997                                 lprintf(2, "master shutdown: cleaning up libical\n");
998                                 free_zone_directory ();
999                                 icaltimezone_release_zone_tab ();
1000                                 icalmemory_free_ring ();
1001                                 lprintf(2, "master shutdown exiting!.\n");                              
1002                                 exit(0);
1003                         }
1004                         break;
1005                 }
1006                 if (ssock < 0 ) continue;
1007
1008                 if (msock < 0) {
1009                         if (ssock > 0) close (ssock);
1010                         lprintf(2, "inbetween.");
1011                         pthread_exit(NULL);
1012                 } else { // Got it? do some real work!
1013                         /* Set the SO_REUSEADDR socket option */
1014                         i = 1;
1015                         setsockopt(ssock, SOL_SOCKET, SO_REUSEADDR,
1016                                    &i, sizeof(i));
1017
1018                         /* If we are an HTTPS server, go crypto now. */
1019 #ifdef HAVE_OPENSSL
1020                         if (is_https) {
1021                                 if (starttls(ssock) != 0) {
1022                                         fail_this_transaction = 1;
1023                                         close(ssock);
1024                                 }
1025                         }
1026 #endif
1027
1028                         if (fail_this_transaction == 0) {
1029
1030                                 /* Perform an HTTP transaction... */
1031                                 context_loop(ssock);
1032
1033                                 /* Shut down SSL/TLS if required... */
1034 #ifdef HAVE_OPENSSL
1035                                 if (is_https) {
1036                                         endtls();
1037                                 }
1038 #endif
1039
1040                                 /* ...and close the socket. */
1041                                 lingering_close(ssock);
1042                         }
1043
1044                 }
1045
1046         } while (!time_to_die);
1047
1048         lprintf (1, "bye\n");
1049         pthread_exit(NULL);
1050 }
1051
1052 /*
1053  * \brief logprintf. log messages 
1054  * logs to stderr if loglevel is lower than the verbosity set at startup
1055  * \param loglevel level of the message
1056  * \param format the printf like format string
1057  * \param ... the strings to put into format
1058  */
1059 int lprintf(int loglevel, const char *format, ...)
1060 {
1061         va_list ap;
1062
1063         if (loglevel <= verbosity) {
1064                 va_start(ap, format);
1065                 vfprintf(stderr, format, ap);
1066                 va_end(ap);
1067                 fflush(stderr);
1068         }
1069         return 1;
1070 }
1071
1072
1073 /*
1074  * \brief print the actual stack frame.
1075  */
1076 void wc_backtrace(void)
1077 {
1078 #ifdef HAVE_BACKTRACE
1079         void *stack_frames[50];
1080         size_t size, i;
1081         char **strings;
1082
1083
1084         size = backtrace(stack_frames, sizeof(stack_frames) / sizeof(void*));
1085         strings = backtrace_symbols(stack_frames, size);
1086         for (i = 0; i < size; i++) {
1087                 if (strings != NULL)
1088                         lprintf(1, "%s\n", strings[i]);
1089                 else
1090                         lprintf(1, "%p\n", stack_frames[i]);
1091         }
1092         free(strings);
1093 #endif
1094 }
1095
1096 /*@}*/