]> code.citadel.org Git - citadel.git/blob - citadel/msgbase.c
* When saving an RFC822 message, use a less expensive algorithm to
[citadel.git] / citadel / msgbase.c
1 /*
2  * $Id$
3  *
4  * Implements the message store.
5  *
6  */
7
8 #ifdef DLL_EXPORT
9 #define IN_LIBCIT
10 #endif
11
12 #include "sysdep.h"
13 #include <stdlib.h>
14 #include <unistd.h>
15 #include <stdio.h>
16 #include <fcntl.h>
17
18 #if TIME_WITH_SYS_TIME
19 # include <sys/time.h>
20 # include <time.h>
21 #else
22 # if HAVE_SYS_TIME_H
23 #  include <sys/time.h>
24 # else
25 #  include <time.h>
26 # endif
27 #endif
28
29
30 #include <ctype.h>
31 #include <string.h>
32 #include <limits.h>
33 #include <errno.h>
34 #include <stdarg.h>
35 #include <sys/stat.h>
36 #include "citadel.h"
37 #include "server.h"
38 #include "serv_extensions.h"
39 #include "database.h"
40 #include "msgbase.h"
41 #include "support.h"
42 #include "sysdep_decls.h"
43 #include "citserver.h"
44 #include "room_ops.h"
45 #include "user_ops.h"
46 #include "file_ops.h"
47 #include "control.h"
48 #include "tools.h"
49 #include "mime_parser.h"
50 #include "html.h"
51 #include "genstamp.h"
52 #include "internet_addressing.h"
53
54 #define desired_section ((char *)CtdlGetUserData(SYM_DESIRED_SECTION))
55 #define ma ((struct ma_info *)CtdlGetUserData(SYM_MA_INFO))
56
57 extern struct config config;
58 long config_msgnum;
59
60
61 /* 
62  * This really belongs in serv_network.c, but I don't know how to export
63  * symbols between modules.
64  */
65 struct FilterList *filterlist = NULL;
66
67
68 /*
69  * These are the four-character field headers we use when outputting
70  * messages in Citadel format (as opposed to RFC822 format).
71  */
72 char *msgkeys[] = {
73         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
74         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
75         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
76         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
77         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
78         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
79         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
80         NULL, NULL, NULL, NULL, NULL, NULL, NULL, NULL, 
81         NULL, 
82         "from",
83         NULL, NULL, NULL,
84         "exti",
85         "rfca",
86         NULL, 
87         "hnod",
88         "msgn",
89         NULL, NULL, NULL,
90         "text",
91         "node",
92         "room",
93         "path",
94         NULL,
95         "rcpt",
96         "spec",
97         "time",
98         "subj",
99         NULL,
100         NULL,
101         NULL,
102         NULL,
103         NULL
104 };
105
106 /*
107  * This function is self explanatory.
108  * (What can I say, I'm in a weird mood today...)
109  */
110 void remove_any_whitespace_to_the_left_or_right_of_at_symbol(char *name)
111 {
112         int i;
113
114         for (i = 0; i < strlen(name); ++i) {
115                 if (name[i] == '@') {
116                         while (isspace(name[i - 1]) && i > 0) {
117                                 strcpy(&name[i - 1], &name[i]);
118                                 --i;
119                         }
120                         while (isspace(name[i + 1])) {
121                                 strcpy(&name[i + 1], &name[i + 2]);
122                         }
123                 }
124         }
125 }
126
127
128 /*
129  * Aliasing for network mail.
130  * (Error messages have been commented out, because this is a server.)
131  */
132 int alias(char *name)
133 {                               /* process alias and routing info for mail */
134         FILE *fp;
135         int a, i;
136         char aaa[SIZ], bbb[SIZ];
137         char *ignetcfg = NULL;
138         char *ignetmap = NULL;
139         int at = 0;
140         char node[SIZ];
141         char testnode[SIZ];
142         char buf[SIZ];
143
144         striplt(name);
145         remove_any_whitespace_to_the_left_or_right_of_at_symbol(name);
146
147         fp = fopen("network/mail.aliases", "r");
148         if (fp == NULL) {
149                 fp = fopen("/dev/null", "r");
150         }
151         if (fp == NULL) {
152                 return (MES_ERROR);
153         }
154         strcpy(aaa, "");
155         strcpy(bbb, "");
156         while (fgets(aaa, sizeof aaa, fp) != NULL) {
157                 while (isspace(name[0]))
158                         strcpy(name, &name[1]);
159                 aaa[strlen(aaa) - 1] = 0;
160                 strcpy(bbb, "");
161                 for (a = 0; a < strlen(aaa); ++a) {
162                         if (aaa[a] == ',') {
163                                 strcpy(bbb, &aaa[a + 1]);
164                                 aaa[a] = 0;
165                         }
166                 }
167                 if (!strcasecmp(name, aaa))
168                         strcpy(name, bbb);
169         }
170         fclose(fp);
171
172         /* Hit the Global Address Book */
173         if (CtdlDirectoryLookup(aaa, name) == 0) {
174                 strcpy(name, aaa);
175         }
176
177         lprintf(CTDL_INFO, "Mail is being forwarded to %s\n", name);
178
179         /* Change "user @ xxx" to "user" if xxx is an alias for this host */
180         for (a=0; a<strlen(name); ++a) {
181                 if (name[a] == '@') {
182                         if (CtdlHostAlias(&name[a+1]) == hostalias_localhost) {
183                                 name[a] = 0;
184                                 lprintf(CTDL_INFO, "Changed to <%s>\n", name);
185                         }
186                 }
187         }
188
189         /* determine local or remote type, see citadel.h */
190         at = haschar(name, '@');
191         if (at == 0) return(MES_LOCAL);         /* no @'s - local address */
192         if (at > 1) return(MES_ERROR);          /* >1 @'s - invalid address */
193         remove_any_whitespace_to_the_left_or_right_of_at_symbol(name);
194
195         /* figure out the delivery mode */
196         extract_token(node, name, 1, '@');
197
198         /* If there are one or more dots in the nodename, we assume that it
199          * is an FQDN and will attempt SMTP delivery to the Internet.
200          */
201         if (haschar(node, '.') > 0) {
202                 return(MES_INTERNET);
203         }
204
205         /* Otherwise we look in the IGnet maps for a valid Citadel node.
206          * Try directly-connected nodes first...
207          */
208         ignetcfg = CtdlGetSysConfig(IGNETCFG);
209         for (i=0; i<num_tokens(ignetcfg, '\n'); ++i) {
210                 extract_token(buf, ignetcfg, i, '\n');
211                 extract_token(testnode, buf, 0, '|');
212                 if (!strcasecmp(node, testnode)) {
213                         free(ignetcfg);
214                         return(MES_IGNET);
215                 }
216         }
217         free(ignetcfg);
218
219         /*
220          * Then try nodes that are two or more hops away.
221          */
222         ignetmap = CtdlGetSysConfig(IGNETMAP);
223         for (i=0; i<num_tokens(ignetmap, '\n'); ++i) {
224                 extract_token(buf, ignetmap, i, '\n');
225                 extract_token(testnode, buf, 0, '|');
226                 if (!strcasecmp(node, testnode)) {
227                         free(ignetmap);
228                         return(MES_IGNET);
229                 }
230         }
231         free(ignetmap);
232
233         /* If we get to this point it's an invalid node name */
234         return (MES_ERROR);
235 }
236
237
238 void get_mm(void)
239 {
240         FILE *fp;
241
242         fp = fopen("citadel.control", "r");
243         if (fp == NULL) {
244                 lprintf(CTDL_CRIT, "Cannot open citadel.control: %s\n",
245                         strerror(errno));
246                 exit(errno);
247         }
248         fread((char *) &CitControl, sizeof(struct CitControl), 1, fp);
249         fclose(fp);
250 }
251
252
253
254 void simple_listing(long msgnum, void *userdata)
255 {
256         cprintf("%ld\n", msgnum);
257 }
258
259
260
261 /* Determine if a given message matches the fields in a message template.
262  * Return 0 for a successful match.
263  */
264 int CtdlMsgCmp(struct CtdlMessage *msg, struct CtdlMessage *template) {
265         int i;
266
267         /* If there aren't any fields in the template, all messages will
268          * match.
269          */
270         if (template == NULL) return(0);
271
272         /* Null messages are bogus. */
273         if (msg == NULL) return(1);
274
275         for (i='A'; i<='Z'; ++i) {
276                 if (template->cm_fields[i] != NULL) {
277                         if (msg->cm_fields[i] == NULL) {
278                                 return 1;
279                         }
280                         if (strcasecmp(msg->cm_fields[i],
281                                 template->cm_fields[i])) return 1;
282                 }
283         }
284
285         /* All compares succeeded: we have a match! */
286         return 0;
287 }
288
289
290
291 /*
292  * Retrieve the "seen" message list for the current room.
293  */
294 void CtdlGetSeen(char *buf, int which_set) {
295         struct visit vbuf;
296
297         /* Learn about the user and room in question */
298         CtdlGetRelationship(&vbuf, &CC->user, &CC->room);
299
300         if (which_set == ctdlsetseen_seen)
301                 safestrncpy(buf, vbuf.v_seen, SIZ);
302         if (which_set == ctdlsetseen_answered)
303                 safestrncpy(buf, vbuf.v_answered, SIZ);
304 }
305
306
307
308 /*
309  * Manipulate the "seen msgs" string (or other message set strings)
310  */
311 void CtdlSetSeen(long target_msgnum, int target_setting, int which_set) {
312         char newseen[SIZ];
313         struct cdbdata *cdbfr;
314         int i;
315         int is_seen = 0;
316         int was_seen = 1;
317         long lo = (-1L);
318         long hi = (-1L);
319         struct visit vbuf;
320         long *msglist;
321         int num_msgs = 0;
322         char vset[SIZ];
323
324         lprintf(CTDL_DEBUG, "CtdlSetSeen(%ld, %d, %d)\n",
325                 target_msgnum, target_setting, which_set);
326
327         /* Learn about the user and room in question */
328         CtdlGetRelationship(&vbuf, &CC->user, &CC->room);
329
330         /* Load the message list */
331         cdbfr = cdb_fetch(CDB_MSGLISTS, &CC->room.QRnumber, sizeof(long));
332         if (cdbfr != NULL) {
333                 msglist = malloc(cdbfr->len);
334                 memcpy(msglist, cdbfr->ptr, cdbfr->len);
335                 num_msgs = cdbfr->len / sizeof(long);
336                 cdb_free(cdbfr);
337         } else {
338                 return; /* No messages at all?  No further action. */
339         }
340
341         /* Decide which message set we're manipulating */
342         if (which_set == ctdlsetseen_seen) strcpy(vset, vbuf.v_seen);
343         if (which_set == ctdlsetseen_answered) strcpy(vset, vbuf.v_answered);
344
345         lprintf(CTDL_DEBUG, "before optimize: %s\n", vset);
346         strcpy(newseen, "");
347
348         for (i=0; i<num_msgs; ++i) {
349                 is_seen = 0;
350
351                 if (msglist[i] == target_msgnum) {
352                         is_seen = target_setting;
353                 }
354                 else {
355                         if (is_msg_in_mset(vset, msglist[i])) {
356                                 is_seen = 1;
357                         }
358                 }
359
360                 if (is_seen == 1) {
361                         if (lo < 0L) lo = msglist[i];
362                         hi = msglist[i];
363                 }
364                 if (  ((is_seen == 0) && (was_seen == 1))
365                    || ((is_seen == 1) && (i == num_msgs-1)) ) {
366                         size_t tmp;
367
368                         if ( (strlen(newseen) + 20) > SIZ) {
369                                 strcpy(newseen, &newseen[20]);
370                                 newseen[0] = '*';
371                         }
372                         tmp = strlen(newseen);
373                         if (tmp > 0) {
374                                 strcat(newseen, ",");
375                                 tmp++;
376                         }
377                         if (lo == hi) {
378                                 snprintf(&newseen[tmp], sizeof newseen - tmp,
379                                          "%ld", lo);
380                         }
381                         else {
382                                 snprintf(&newseen[tmp], sizeof newseen - tmp,
383                                          "%ld:%ld", lo, hi);
384                         }
385                         lo = (-1L);
386                         hi = (-1L);
387                 }
388                 was_seen = is_seen;
389         }
390
391         /* Decide which message set we're manipulating */
392         if (which_set == ctdlsetseen_seen) strcpy(vbuf.v_seen, newseen);
393         if (which_set == ctdlsetseen_answered) strcpy(vbuf.v_answered, newseen);
394
395         lprintf(CTDL_DEBUG, " after optimize: %s\n", newseen);
396         free(msglist);
397         CtdlSetRelationship(&vbuf, &CC->user, &CC->room);
398 }
399
400
401 /*
402  * API function to perform an operation for each qualifying message in the
403  * current room.  (Returns the number of messages processed.)
404  */
405 int CtdlForEachMessage(int mode, long ref,
406                         char *content_type,
407                         struct CtdlMessage *compare,
408                         void (*CallBack) (long, void *),
409                         void *userdata)
410 {
411
412         int a;
413         struct visit vbuf;
414         struct cdbdata *cdbfr;
415         long *msglist = NULL;
416         int num_msgs = 0;
417         int num_processed = 0;
418         long thismsg;
419         struct MetaData smi;
420         struct CtdlMessage *msg;
421         int is_seen;
422         long lastold = 0L;
423         int printed_lastold = 0;
424
425         /* Learn about the user and room in question */
426         get_mm();
427         getuser(&CC->user, CC->curr_user);
428         CtdlGetRelationship(&vbuf, &CC->user, &CC->room);
429
430         /* Load the message list */
431         cdbfr = cdb_fetch(CDB_MSGLISTS, &CC->room.QRnumber, sizeof(long));
432         if (cdbfr != NULL) {
433                 msglist = malloc(cdbfr->len);
434                 memcpy(msglist, cdbfr->ptr, cdbfr->len);
435                 num_msgs = cdbfr->len / sizeof(long);
436                 cdb_free(cdbfr);
437         } else {
438                 return 0;       /* No messages at all?  No further action. */
439         }
440
441
442         /*
443          * Now begin the traversal.
444          */
445         if (num_msgs > 0) for (a = 0; a < num_msgs; ++a) {
446
447                 /* If the caller is looking for a specific MIME type, filter
448                  * out all messages which are not of the type requested.
449                  */
450                 if (content_type != NULL) if (strlen(content_type) > 0) {
451
452                         /* This call to GetMetaData() sits inside this loop
453                          * so that we only do the extra database read per msg
454                          * if we need to.  Doing the extra read all the time
455                          * really kills the server.  If we ever need to use
456                          * metadata for another search criterion, we need to
457                          * move the read somewhere else -- but still be smart
458                          * enough to only do the read if the caller has
459                          * specified something that will need it.
460                          */
461                         GetMetaData(&smi, msglist[a]);
462
463                         if (strcasecmp(smi.meta_content_type, content_type)) {
464                                 msglist[a] = 0L;
465                         }
466                 }
467         }
468
469         num_msgs = sort_msglist(msglist, num_msgs);
470
471         /* If a template was supplied, filter out the messages which
472          * don't match.  (This could induce some delays!)
473          */
474         if (num_msgs > 0) {
475                 if (compare != NULL) {
476                         for (a = 0; a < num_msgs; ++a) {
477                                 msg = CtdlFetchMessage(msglist[a], 1);
478                                 if (msg != NULL) {
479                                         if (CtdlMsgCmp(msg, compare)) {
480                                                 msglist[a] = 0L;
481                                         }
482                                         CtdlFreeMessage(msg);
483                                 }
484                         }
485                 }
486         }
487
488         
489         /*
490          * Now iterate through the message list, according to the
491          * criteria supplied by the caller.
492          */
493         if (num_msgs > 0)
494                 for (a = 0; a < num_msgs; ++a) {
495                         thismsg = msglist[a];
496                         is_seen = is_msg_in_mset(vbuf.v_seen, thismsg);
497                         if (is_seen) lastold = thismsg;
498                         if ((thismsg > 0L)
499                             && (
500
501                                        (mode == MSGS_ALL)
502                                        || ((mode == MSGS_OLD) && (is_seen))
503                                        || ((mode == MSGS_NEW) && (!is_seen))
504                                        || ((mode == MSGS_LAST) && (a >= (num_msgs - ref)))
505                                    || ((mode == MSGS_FIRST) && (a < ref))
506                                 || ((mode == MSGS_GT) && (thismsg > ref))
507                                 || ((mode == MSGS_EQ) && (thismsg == ref))
508                             )
509                             ) {
510                                 if ((mode == MSGS_NEW) && (CC->user.flags & US_LASTOLD) && (lastold > 0L) && (printed_lastold == 0) && (!is_seen)) {
511                                         if (CallBack)
512                                                 CallBack(lastold, userdata);
513                                         printed_lastold = 1;
514                                         ++num_processed;
515                                 }
516                                 if (CallBack) CallBack(thismsg, userdata);
517                                 ++num_processed;
518                         }
519                 }
520         free(msglist);          /* Clean up */
521         return num_processed;
522 }
523
524
525
526 /*
527  * cmd_msgs()  -  get list of message #'s in this room
528  *                implements the MSGS server command using CtdlForEachMessage()
529  */
530 void cmd_msgs(char *cmdbuf)
531 {
532         int mode = 0;
533         char which[SIZ];
534         char buf[SIZ];
535         char tfield[SIZ];
536         char tvalue[SIZ];
537         int cm_ref = 0;
538         int i;
539         int with_template = 0;
540         struct CtdlMessage *template = NULL;
541
542         extract(which, cmdbuf, 0);
543         cm_ref = extract_int(cmdbuf, 1);
544         with_template = extract_int(cmdbuf, 2);
545
546         mode = MSGS_ALL;
547         strcat(which, "   ");
548         if (!strncasecmp(which, "OLD", 3))
549                 mode = MSGS_OLD;
550         else if (!strncasecmp(which, "NEW", 3))
551                 mode = MSGS_NEW;
552         else if (!strncasecmp(which, "FIRST", 5))
553                 mode = MSGS_FIRST;
554         else if (!strncasecmp(which, "LAST", 4))
555                 mode = MSGS_LAST;
556         else if (!strncasecmp(which, "GT", 2))
557                 mode = MSGS_GT;
558
559         if ((!(CC->logged_in)) && (!(CC->internal_pgm))) {
560                 cprintf("%d not logged in\n", ERROR + NOT_LOGGED_IN);
561                 return;
562         }
563
564         if (with_template) {
565                 unbuffer_output();
566                 cprintf("%d Send template then receive message list\n",
567                         START_CHAT_MODE);
568                 template = (struct CtdlMessage *)
569                         malloc(sizeof(struct CtdlMessage));
570                 memset(template, 0, sizeof(struct CtdlMessage));
571                 while(client_getln(buf, sizeof buf), strcmp(buf,"000")) {
572                         extract(tfield, buf, 0);
573                         extract(tvalue, buf, 1);
574                         for (i='A'; i<='Z'; ++i) if (msgkeys[i]!=NULL) {
575                                 if (!strcasecmp(tfield, msgkeys[i])) {
576                                         template->cm_fields[i] =
577                                                 strdup(tvalue);
578                                 }
579                         }
580                 }
581                 buffer_output();
582         }
583         else {
584                 cprintf("%d Message list...\n", LISTING_FOLLOWS);
585         }
586
587         CtdlForEachMessage(mode, cm_ref,
588                 NULL, template, simple_listing, NULL);
589         if (template != NULL) CtdlFreeMessage(template);
590         cprintf("000\n");
591 }
592
593
594
595
596 /* 
597  * help_subst()  -  support routine for help file viewer
598  */
599 void help_subst(char *strbuf, char *source, char *dest)
600 {
601         char workbuf[SIZ];
602         int p;
603
604         while (p = pattern2(strbuf, source), (p >= 0)) {
605                 strcpy(workbuf, &strbuf[p + strlen(source)]);
606                 strcpy(&strbuf[p], dest);
607                 strcat(strbuf, workbuf);
608         }
609 }
610
611
612 void do_help_subst(char *buffer)
613 {
614         char buf2[16];
615
616         help_subst(buffer, "^nodename", config.c_nodename);
617         help_subst(buffer, "^humannode", config.c_humannode);
618         help_subst(buffer, "^fqdn", config.c_fqdn);
619         help_subst(buffer, "^username", CC->user.fullname);
620         snprintf(buf2, sizeof buf2, "%ld", CC->user.usernum);
621         help_subst(buffer, "^usernum", buf2);
622         help_subst(buffer, "^sysadm", config.c_sysadm);
623         help_subst(buffer, "^variantname", CITADEL);
624         snprintf(buf2, sizeof buf2, "%d", config.c_maxsessions);
625         help_subst(buffer, "^maxsessions", buf2);
626         help_subst(buffer, "^bbsdir", BBSDIR);
627 }
628
629
630
631 /*
632  * memfmout()  -  Citadel text formatter and paginator.
633  *             Although the original purpose of this routine was to format
634  *             text to the reader's screen width, all we're really using it
635  *             for here is to format text out to 80 columns before sending it
636  *             to the client.  The client software may reformat it again.
637  */
638 void memfmout(
639         int width,              /* screen width to use */
640         char *mptr,             /* where are we going to get our text from? */
641         char subst,             /* nonzero if we should do substitutions */
642         char *nl)               /* string to terminate lines with */
643 {
644         int a, b, c;
645         int real = 0;
646         int old = 0;
647         cit_uint8_t ch;
648         char aaa[140];
649         char buffer[SIZ];
650
651         strcpy(aaa, "");
652         old = 255;
653         strcpy(buffer, "");
654         c = 1;                  /* c is the current pos */
655
656         do {
657                 if (subst) {
658                         while (ch = *mptr, ((ch != 0) && (strlen(buffer) < 126))) {
659                                 ch = *mptr++;
660                                 buffer[strlen(buffer) + 1] = 0;
661                                 buffer[strlen(buffer)] = ch;
662                         }
663
664                         if (buffer[0] == '^')
665                                 do_help_subst(buffer);
666
667                         buffer[strlen(buffer) + 1] = 0;
668                         a = buffer[0];
669                         strcpy(buffer, &buffer[1]);
670                 } else {
671                         ch = *mptr++;
672                 }
673
674                 old = real;
675                 real = ch;
676
677                 if (((ch == 13) || (ch == 10)) && (old != 13) && (old != 10))
678                         ch = 32;
679                 if (((old == 13) || (old == 10)) && (isspace(real))) {
680                         cprintf("%s", nl);
681                         c = 1;
682                 }
683                 if (ch > 126)
684                         continue;
685
686                 if (ch > 32) {
687                         if (((strlen(aaa) + c) > (width - 5)) && (strlen(aaa) > (width - 5))) {
688                                 cprintf("%s%s", nl, aaa);
689                                 c = strlen(aaa);
690                                 aaa[0] = 0;
691                         }
692                         b = strlen(aaa);
693                         aaa[b] = ch;
694                         aaa[b + 1] = 0;
695                 }
696                 if (ch == 32) {
697                         if ((strlen(aaa) + c) > (width - 5)) {
698                                 cprintf("%s", nl);
699                                 c = 1;
700                         }
701                         cprintf("%s ", aaa);
702                         ++c;
703                         c = c + strlen(aaa);
704                         strcpy(aaa, "");
705                 }
706                 if ((ch == 13) || (ch == 10)) {
707                         cprintf("%s%s", aaa, nl);
708                         c = 1;
709                         strcpy(aaa, "");
710                 }
711
712         } while (ch > 0);
713
714         cprintf("%s%s", aaa, nl);
715 }
716
717
718
719 /*
720  * Callback function for mime parser that simply lists the part
721  */
722 void list_this_part(char *name, char *filename, char *partnum, char *disp,
723                     void *content, char *cbtype, size_t length, char *encoding,
724                     void *cbuserdata)
725 {
726
727         cprintf("part=%s|%s|%s|%s|%s|%ld\n",
728                 name, filename, partnum, disp, cbtype, (long)length);
729 }
730
731 /* 
732  * Callback function for multipart prefix
733  */
734 void list_this_pref(char *name, char *filename, char *partnum, char *disp,
735                     void *content, char *cbtype, size_t length, char *encoding,
736                     void *cbuserdata)
737 {
738         cprintf("pref=%s|%s\n", partnum, cbtype);
739 }
740
741 /* 
742  * Callback function for multipart sufffix
743  */
744 void list_this_suff(char *name, char *filename, char *partnum, char *disp,
745                     void *content, char *cbtype, size_t length, char *encoding,
746                     void *cbuserdata)
747 {
748         cprintf("suff=%s|%s\n", partnum, cbtype);
749 }
750
751
752 /*
753  * Callback function for mime parser that opens a section for downloading
754  */
755 void mime_download(char *name, char *filename, char *partnum, char *disp,
756                    void *content, char *cbtype, size_t length, char *encoding,
757                    void *cbuserdata)
758 {
759
760         /* Silently go away if there's already a download open... */
761         if (CC->download_fp != NULL)
762                 return;
763
764         /* ...or if this is not the desired section */
765         if (strcasecmp(desired_section, partnum))
766                 return;
767
768         CC->download_fp = tmpfile();
769         if (CC->download_fp == NULL)
770                 return;
771
772         fwrite(content, length, 1, CC->download_fp);
773         fflush(CC->download_fp);
774         rewind(CC->download_fp);
775
776         OpenCmdResult(filename, cbtype);
777 }
778
779
780
781 /*
782  * Load a message from disk into memory.
783  * This is used by CtdlOutputMsg() and other fetch functions.
784  *
785  * NOTE: Caller is responsible for freeing the returned CtdlMessage struct
786  *       using the CtdlMessageFree() function.
787  */
788 struct CtdlMessage *CtdlFetchMessage(long msgnum, int with_body)
789 {
790         struct cdbdata *dmsgtext;
791         struct CtdlMessage *ret = NULL;
792         char *mptr;
793         cit_uint8_t ch;
794         cit_uint8_t field_header;
795         size_t field_length;
796
797         lprintf(CTDL_DEBUG, "CtdlFetchMessage(%ld, %d)\n", msgnum, with_body);
798
799         dmsgtext = cdb_fetch(CDB_MSGMAIN, &msgnum, sizeof(long));
800         if (dmsgtext == NULL) {
801                 return NULL;
802         }
803         mptr = dmsgtext->ptr;
804
805         /* Parse the three bytes that begin EVERY message on disk.
806          * The first is always 0xFF, the on-disk magic number.
807          * The second is the anonymous/public type byte.
808          * The third is the format type byte (vari, fixed, or MIME).
809          */
810         ch = *mptr++;
811         if (ch != 255) {
812                 lprintf(CTDL_ERR,
813                         "Message %ld appears to be corrupted.\n",
814                         msgnum);
815                 cdb_free(dmsgtext);
816                 return NULL;
817         }
818         ret = (struct CtdlMessage *) malloc(sizeof(struct CtdlMessage));
819         memset(ret, 0, sizeof(struct CtdlMessage));
820
821         ret->cm_magic = CTDLMESSAGE_MAGIC;
822         ret->cm_anon_type = *mptr++;    /* Anon type byte */
823         ret->cm_format_type = *mptr++;  /* Format type byte */
824
825         /*
826          * The rest is zero or more arbitrary fields.  Load them in.
827          * We're done when we encounter either a zero-length field or
828          * have just processed the 'M' (message text) field.
829          */
830         do {
831                 field_length = strlen(mptr);
832                 if (field_length == 0)
833                         break;
834                 field_header = *mptr++;
835                 ret->cm_fields[field_header] = malloc(field_length + 1);
836                 strcpy(ret->cm_fields[field_header], mptr);
837
838                 while (*mptr++ != 0);   /* advance to next field */
839
840         } while ((field_length > 0) && (field_header != 'M'));
841
842         cdb_free(dmsgtext);
843
844         /* Always make sure there's something in the msg text field.  If
845          * it's NULL, the message text is most likely stored separately,
846          * so go ahead and fetch that.  Failing that, just set a dummy
847          * body so other code doesn't barf.
848          */
849         if ( (ret->cm_fields['M'] == NULL) && (with_body) ) {
850                 dmsgtext = cdb_fetch(CDB_BIGMSGS, &msgnum, sizeof(long));
851                 if (dmsgtext != NULL) {
852                         ret->cm_fields['M'] = strdup(dmsgtext->ptr);
853                         cdb_free(dmsgtext);
854                 }
855         }
856         if (ret->cm_fields['M'] == NULL) {
857                 ret->cm_fields['M'] = strdup("<no text>\n");
858         }
859
860         /* Perform "before read" hooks (aborting if any return nonzero) */
861         if (PerformMessageHooks(ret, EVT_BEFOREREAD) > 0) {
862                 CtdlFreeMessage(ret);
863                 return NULL;
864         }
865
866         return (ret);
867 }
868
869
870 /*
871  * Returns 1 if the supplied pointer points to a valid Citadel message.
872  * If the pointer is NULL or the magic number check fails, returns 0.
873  */
874 int is_valid_message(struct CtdlMessage *msg) {
875         if (msg == NULL)
876                 return 0;
877         if ((msg->cm_magic) != CTDLMESSAGE_MAGIC) {
878                 lprintf(CTDL_WARNING, "is_valid_message() -- self-check failed\n");
879                 return 0;
880         }
881         return 1;
882 }
883
884
885 /*
886  * 'Destructor' for struct CtdlMessage
887  */
888 void CtdlFreeMessage(struct CtdlMessage *msg)
889 {
890         int i;
891
892         if (is_valid_message(msg) == 0) return;
893
894         for (i = 0; i < 256; ++i)
895                 if (msg->cm_fields[i] != NULL) {
896                         free(msg->cm_fields[i]);
897                 }
898
899         msg->cm_magic = 0;      /* just in case */
900         free(msg);
901 }
902
903
904 /*
905  * Pre callback function for multipart/alternative
906  *
907  * NOTE: this differs from the standard behavior for a reason.  Normally when
908  *       displaying multipart/alternative you want to show the _last_ usable
909  *       format in the message.  Here we show the _first_ one, because it's
910  *       usually text/plain.  Since this set of functions is designed for text
911  *       output to non-MIME-aware clients, this is the desired behavior.
912  *
913  */
914 void fixed_output_pre(char *name, char *filename, char *partnum, char *disp,
915                 void *content, char *cbtype, size_t length, char *encoding,
916                 void *cbuserdata)
917 {
918                 lprintf(CTDL_DEBUG, "fixed_output_pre() type=<%s>\n", cbtype);  
919                 if (!strcasecmp(cbtype, "multipart/alternative")) {
920                         ++ma->is_ma;
921                         ma->did_print = 0;
922                         return;
923                 }
924 }
925
926 /*
927  * Post callback function for multipart/alternative
928  */
929 void fixed_output_post(char *name, char *filename, char *partnum, char *disp,
930                 void *content, char *cbtype, size_t length, char *encoding,
931                 void *cbuserdata)
932 {
933                 lprintf(CTDL_DEBUG, "fixed_output_post() type=<%s>\n", cbtype); 
934                 if (!strcasecmp(cbtype, "multipart/alternative")) {
935                         --ma->is_ma;
936                         ma->did_print = 0;
937                         return;
938                 }
939 }
940
941 /*
942  * Inline callback function for mime parser that wants to display text
943  */
944 void fixed_output(char *name, char *filename, char *partnum, char *disp,
945                 void *content, char *cbtype, size_t length, char *encoding,
946                 void *cbuserdata)
947         {
948                 char *ptr;
949                 char *wptr;
950                 size_t wlen;
951
952                 lprintf(CTDL_DEBUG, "fixed_output() type=<%s>\n", cbtype);      
953
954                 /*
955                  * If we're in the middle of a multipart/alternative scope and
956                  * we've already printed another section, skip this one.
957                  */     
958                 if ( (ma->is_ma == 1) && (ma->did_print == 1) ) {
959                         lprintf(CTDL_DEBUG, "Skipping part %s (%s)\n", partnum, cbtype);
960                         return;
961                 }
962                 ma->did_print = 1;
963         
964                 if ( (!strcasecmp(cbtype, "text/plain")) 
965                    || (strlen(cbtype)==0) ) {
966                         wptr = content;
967                         if (length > 0) {
968                                 client_write(wptr, length);
969                                 if (wptr[length-1] != '\n') {
970                                         cprintf("\n");
971                                 }
972                         }
973                 }
974                 else if (!strcasecmp(cbtype, "text/html")) {
975                         ptr = html_to_ascii(content, 80, 0);
976                         wlen = strlen(ptr);
977                         client_write(ptr, wlen);
978                         if (ptr[wlen-1] != '\n') {
979                                 cprintf("\n");
980                         }
981                         free(ptr);
982                 }
983                 else if (strncasecmp(cbtype, "multipart/", 10)) {
984                         cprintf("Part %s: %s (%s) (%ld bytes)\r\n",
985                                 partnum, filename, cbtype, (long)length);
986                 }
987         }
988
989 /*
990  * The client is elegant and sophisticated and wants to be choosy about
991  * MIME content types, so figure out which multipart/alternative part
992  * we're going to send.
993  */
994 void choose_preferred(char *name, char *filename, char *partnum, char *disp,
995                 void *content, char *cbtype, size_t length, char *encoding,
996                 void *cbuserdata)
997 {
998         char buf[SIZ];
999         int i;
1000
1001         if (ma->is_ma > 0) {
1002                 for (i=0; i<num_tokens(CC->preferred_formats, '|'); ++i) {
1003                         extract(buf, CC->preferred_formats, i);
1004                         if (!strcasecmp(buf, cbtype)) {
1005                                 strcpy(ma->chosen_part, partnum);
1006                         }
1007                 }
1008         }
1009 }
1010
1011 /*
1012  * Now that we've chosen our preferred part, output it.
1013  */
1014 void output_preferred(char *name, char *filename, char *partnum, char *disp,
1015                 void *content, char *cbtype, size_t length, char *encoding,
1016                 void *cbuserdata)
1017 {
1018         int i;
1019         char buf[SIZ];
1020         int add_newline = 0;
1021         char *text_content;
1022
1023         /* This is not the MIME part you're looking for... */
1024         if (strcasecmp(partnum, ma->chosen_part)) return;
1025
1026         /* If the content-type of this part is in our preferred formats
1027          * list, we can simply output it verbatim.
1028          */
1029         for (i=0; i<num_tokens(CC->preferred_formats, '|'); ++i) {
1030                 extract(buf, CC->preferred_formats, i);
1031                 if (!strcasecmp(buf, cbtype)) {
1032                         /* Yeah!  Go!  W00t!! */
1033
1034                         text_content = (char *)content;
1035                         if (text_content[length-1] != '\n') {
1036                                 ++add_newline;
1037                         }
1038
1039                         cprintf("Content-type: %s\n", cbtype);
1040                         cprintf("Content-length: %d\n",
1041                                 (int)(length + add_newline) );
1042                         if (strlen(encoding) > 0) {
1043                                 cprintf("Content-transfer-encoding: %s\n", encoding);
1044                         }
1045                         else {
1046                                 cprintf("Content-transfer-encoding: 7bit\n");
1047                         }
1048                         cprintf("\n");
1049                         client_write(content, length);
1050                         if (add_newline) cprintf("\n");
1051                         return;
1052                 }
1053         }
1054
1055         /* No translations required or possible: output as text/plain */
1056         cprintf("Content-type: text/plain\n\n");
1057         fixed_output(name, filename, partnum, disp, content, cbtype,
1058                         length, encoding, cbuserdata);
1059 }
1060
1061
1062 /*
1063  * Get a message off disk.  (returns om_* values found in msgbase.h)
1064  * 
1065  */
1066 int CtdlOutputMsg(long msg_num,         /* message number (local) to fetch */
1067                 int mode,               /* how would you like that message? */
1068                 int headers_only,       /* eschew the message body? */
1069                 int do_proto,           /* do Citadel protocol responses? */
1070                 int crlf                /* Use CRLF newlines instead of LF? */
1071 ) {
1072         struct CtdlMessage *TheMessage = NULL;
1073         int retcode = om_no_such_msg;
1074
1075         lprintf(CTDL_DEBUG, "CtdlOutputMsg() msgnum=%ld, mode=%d\n", 
1076                 msg_num, mode);
1077
1078         if ((!(CC->logged_in)) && (!(CC->internal_pgm))) {
1079                 if (do_proto) cprintf("%d Not logged in.\n",
1080                         ERROR + NOT_LOGGED_IN);
1081                 return(om_not_logged_in);
1082         }
1083
1084         /* FIXME: check message id against msglist for this room */
1085
1086         /*
1087          * Fetch the message from disk.  If we're in sooper-fast headers
1088          * only mode, request that we don't even bother loading the body
1089          * into memory.
1090          */
1091         if (headers_only == HEADERS_FAST) {
1092                 TheMessage = CtdlFetchMessage(msg_num, 0);
1093         }
1094         else {
1095                 TheMessage = CtdlFetchMessage(msg_num, 1);
1096         }
1097
1098         if (TheMessage == NULL) {
1099                 if (do_proto) cprintf("%d Can't locate msg %ld on disk\n",
1100                         ERROR + MESSAGE_NOT_FOUND, msg_num);
1101                 return(om_no_such_msg);
1102         }
1103         
1104         retcode = CtdlOutputPreLoadedMsg(
1105                         TheMessage, msg_num, mode,
1106                         headers_only, do_proto, crlf);
1107
1108         CtdlFreeMessage(TheMessage);
1109
1110         return(retcode);
1111 }
1112
1113
1114 /*
1115  * Get a message off disk.  (returns om_* values found in msgbase.h)
1116  * 
1117  */
1118 int CtdlOutputPreLoadedMsg(
1119                 struct CtdlMessage *TheMessage,
1120                 long msg_num,
1121                 int mode,               /* how would you like that message? */
1122                 int headers_only,       /* eschew the message body? */
1123                 int do_proto,           /* do Citadel protocol responses? */
1124                 int crlf                /* Use CRLF newlines instead of LF? */
1125 ) {
1126         int i, k;
1127         char buf[SIZ];
1128         cit_uint8_t ch;
1129         char allkeys[SIZ];
1130         char display_name[SIZ];
1131         char *mptr;
1132         char *nl;       /* newline string */
1133         int suppress_f = 0;
1134         int subject_found = 0;
1135
1136         /* buffers needed for RFC822 translation */
1137         char suser[SIZ];
1138         char luser[SIZ];
1139         char fuser[SIZ];
1140         char snode[SIZ];
1141         char lnode[SIZ];
1142         char mid[SIZ];
1143         char datestamp[SIZ];
1144         /*                                       */
1145
1146         lprintf(CTDL_DEBUG, "CtdlOutputPreLoadedMsg(TheMessage=%s, %ld, %d, %d, %d, %d\n",
1147                 ((TheMessage == NULL) ? "NULL" : "not null"),
1148                 msg_num,
1149                 mode, headers_only, do_proto, crlf);
1150
1151         snprintf(mid, sizeof mid, "%ld", msg_num);
1152         nl = (crlf ? "\r\n" : "\n");
1153
1154         if (!is_valid_message(TheMessage)) {
1155                 lprintf(CTDL_ERR,
1156                         "ERROR: invalid preloaded message for output\n");
1157                 return(om_no_such_msg);
1158         }
1159
1160         /* Are we downloading a MIME component? */
1161         if (mode == MT_DOWNLOAD) {
1162                 if (TheMessage->cm_format_type != FMT_RFC822) {
1163                         if (do_proto)
1164                                 cprintf("%d This is not a MIME message.\n",
1165                                 ERROR + ILLEGAL_VALUE);
1166                 } else if (CC->download_fp != NULL) {
1167                         if (do_proto) cprintf(
1168                                 "%d You already have a download open.\n",
1169                                 ERROR + RESOURCE_BUSY);
1170                 } else {
1171                         /* Parse the message text component */
1172                         mptr = TheMessage->cm_fields['M'];
1173                         mime_parser(mptr, NULL,
1174                                 *mime_download, NULL, NULL,
1175                                 NULL, 0);
1176                         /* If there's no file open by this time, the requested
1177                          * section wasn't found, so print an error
1178                          */
1179                         if (CC->download_fp == NULL) {
1180                                 if (do_proto) cprintf(
1181                                         "%d Section %s not found.\n",
1182                                         ERROR + FILE_NOT_FOUND,
1183                                         desired_section);
1184                         }
1185                 }
1186                 return((CC->download_fp != NULL) ? om_ok : om_mime_error);
1187         }
1188
1189         /* now for the user-mode message reading loops */
1190         if (do_proto) cprintf("%d Message %ld:\n", LISTING_FOLLOWS, msg_num);
1191
1192         /* Does the caller want to skip the headers? */
1193         if (headers_only == HEADERS_NONE) goto START_TEXT;
1194
1195         /* Tell the client which format type we're using. */
1196         if ( (mode == MT_CITADEL) && (do_proto) ) {
1197                 cprintf("type=%d\n", TheMessage->cm_format_type);
1198         }
1199
1200         /* nhdr=yes means that we're only displaying headers, no body */
1201         if ( (TheMessage->cm_anon_type == MES_ANONONLY)
1202            && (mode == MT_CITADEL)
1203            && (do_proto)
1204            ) {
1205                 cprintf("nhdr=yes\n");
1206         }
1207
1208         /* begin header processing loop for Citadel message format */
1209
1210         if ((mode == MT_CITADEL) || (mode == MT_MIME)) {
1211
1212                 strcpy(display_name, "<unknown>");
1213                 if (TheMessage->cm_fields['A']) {
1214                         strcpy(buf, TheMessage->cm_fields['A']);
1215                         if (TheMessage->cm_anon_type == MES_ANONONLY) {
1216                                 strcpy(display_name, "****");
1217                         }
1218                         else if (TheMessage->cm_anon_type == MES_ANONOPT) {
1219                                 strcpy(display_name, "anonymous");
1220                         }
1221                         else {
1222                                 strcpy(display_name, buf);
1223                         }
1224                         if ((is_room_aide())
1225                             && ((TheMessage->cm_anon_type == MES_ANONONLY)
1226                              || (TheMessage->cm_anon_type == MES_ANONOPT))) {
1227                                 size_t tmp = strlen(display_name);
1228                                 snprintf(&display_name[tmp],
1229                                          sizeof display_name - tmp,
1230                                          " [%s]", buf);
1231                         }
1232                 }
1233
1234                 /* Don't show Internet address for users on the
1235                  * local Citadel network.
1236                  */
1237                 suppress_f = 0;
1238                 if (TheMessage->cm_fields['N'] != NULL)
1239                    if (strlen(TheMessage->cm_fields['N']) > 0)
1240                       if (haschar(TheMessage->cm_fields['N'], '.') == 0) {
1241                         suppress_f = 1;
1242                 }
1243                 
1244                 /* Now spew the header fields in the order we like them. */
1245                 strcpy(allkeys, FORDER);
1246                 for (i=0; i<strlen(allkeys); ++i) {
1247                         k = (int) allkeys[i];
1248                         if (k != 'M') {
1249                                 if ( (TheMessage->cm_fields[k] != NULL)
1250                                    && (msgkeys[k] != NULL) ) {
1251                                         if (k == 'A') {
1252                                                 if (do_proto) cprintf("%s=%s\n",
1253                                                         msgkeys[k],
1254                                                         display_name);
1255                                         }
1256                                         else if ((k == 'F') && (suppress_f)) {
1257                                                 /* do nothing */
1258                                         }
1259                                         /* Masquerade display name if needed */
1260                                         else {
1261                                                 if (do_proto) cprintf("%s=%s\n",
1262                                                         msgkeys[k],
1263                                                         TheMessage->cm_fields[k]
1264                                         );
1265                                         }
1266                                 }
1267                         }
1268                 }
1269
1270         }
1271
1272         /* begin header processing loop for RFC822 transfer format */
1273
1274         strcpy(suser, "");
1275         strcpy(luser, "");
1276         strcpy(fuser, "");
1277         strcpy(snode, NODENAME);
1278         strcpy(lnode, HUMANNODE);
1279         if (mode == MT_RFC822) {
1280                 for (i = 0; i < 256; ++i) {
1281                         if (TheMessage->cm_fields[i]) {
1282                                 mptr = TheMessage->cm_fields[i];
1283
1284                                 if (i == 'A') {
1285                                         safestrncpy(luser, mptr, sizeof luser);
1286                                         safestrncpy(suser, mptr, sizeof suser);
1287                                 }
1288                                 else if (i == 'U') {
1289                                         cprintf("Subject: %s%s", mptr, nl);
1290                                         subject_found = 1;
1291                                 }
1292                                 else if (i == 'I')
1293                                         safestrncpy(mid, mptr, sizeof mid);
1294                                 else if (i == 'H')
1295                                         safestrncpy(lnode, mptr, sizeof lnode);
1296                                 else if (i == 'F')
1297                                         safestrncpy(fuser, mptr, sizeof fuser);
1298                                 else if (i == 'O')
1299                                         cprintf("X-Citadel-Room: %s%s",
1300                                                 mptr, nl);
1301                                 else if (i == 'N')
1302                                         safestrncpy(snode, mptr, sizeof snode);
1303                                 else if (i == 'R')
1304                                         cprintf("To: %s%s", mptr, nl);
1305                                 else if (i == 'T') {
1306                                         datestring(datestamp, sizeof datestamp,
1307                                                 atol(mptr), DATESTRING_RFC822);
1308                                         cprintf("Date: %s%s", datestamp, nl);
1309                                 }
1310                         }
1311                 }
1312                 if (subject_found == 0) {
1313                         cprintf("Subject: (no subject)%s", nl);
1314                 }
1315         }
1316
1317         for (i=0; i<strlen(suser); ++i) {
1318                 suser[i] = tolower(suser[i]);
1319                 if (!isalnum(suser[i])) suser[i]='_';
1320         }
1321
1322         if (mode == MT_RFC822) {
1323                 if (!strcasecmp(snode, NODENAME)) {
1324                         safestrncpy(snode, FQDN, sizeof snode);
1325                 }
1326
1327                 /* Construct a fun message id */
1328                 cprintf("Message-ID: <%s", mid);
1329                 if (strchr(mid, '@')==NULL) {
1330                         cprintf("@%s", snode);
1331                 }
1332                 cprintf(">%s", nl);
1333
1334                 if (!is_room_aide() && (TheMessage->cm_anon_type == MES_ANONONLY)) {
1335                         cprintf("From: x@x.org (----)%s", nl);
1336                 }
1337                 else if (!is_room_aide() && (TheMessage->cm_anon_type == MES_ANONOPT)) {
1338                         cprintf("From: x@x.org (anonymous)%s", nl);
1339                 }
1340                 else if (strlen(fuser) > 0) {
1341                         cprintf("From: %s (%s)%s", fuser, luser, nl);
1342                 }
1343                 else {
1344                         cprintf("From: %s@%s (%s)%s", suser, snode, luser, nl);
1345                 }
1346
1347                 cprintf("Organization: %s%s", lnode, nl);
1348
1349                 /* Blank line signifying RFC822 end-of-headers */
1350                 if (TheMessage->cm_format_type != FMT_RFC822) {
1351                         cprintf("%s", nl);
1352                 }
1353         }
1354
1355         /* end header processing loop ... at this point, we're in the text */
1356 START_TEXT:
1357         if (headers_only == HEADERS_FAST) goto DONE;
1358         mptr = TheMessage->cm_fields['M'];
1359
1360         /* Tell the client about the MIME parts in this message */
1361         if (TheMessage->cm_format_type == FMT_RFC822) {
1362                 if ( (mode == MT_CITADEL) || (mode == MT_MIME) ) {
1363                         mime_parser(mptr, NULL,
1364                                 *list_this_part,
1365                                 *list_this_pref,
1366                                 *list_this_suff,
1367                                 NULL, 0);
1368                 }
1369                 else if (mode == MT_RFC822) {   /* unparsed RFC822 dump */
1370                         /* FIXME ... we have to put some code in here to avoid
1371                          * printing duplicate header information when both
1372                          * Citadel and RFC822 headers exist.  Preference should
1373                          * probably be given to the RFC822 headers.
1374                          */
1375                         int done_rfc822_hdrs = 0;
1376                         while (ch=*(mptr++), ch!=0) {
1377                                 if (ch==13) {
1378                                         /* do nothing */
1379                                 }
1380                                 else if (ch==10) {
1381                                         if (!done_rfc822_hdrs) {
1382                                                 if (headers_only != HEADERS_NONE) {
1383                                                         cprintf("%s", nl);
1384                                                 }
1385                                         }
1386                                         else {
1387                                                 if (headers_only != HEADERS_ONLY) {
1388                                                         cprintf("%s", nl);
1389                                                 }
1390                                         }
1391                                         if ((*(mptr) == 13) || (*(mptr) == 10)) {
1392                                                 done_rfc822_hdrs = 1;
1393                                         }
1394                                 }
1395                                 else {
1396                                         if (done_rfc822_hdrs) {
1397                                                 if (headers_only != HEADERS_NONE) {
1398                                                         cprintf("%c", ch);
1399                                                 }
1400                                         }
1401                                         else {
1402                                                 if (headers_only != HEADERS_ONLY) {
1403                                                         cprintf("%c", ch);
1404                                                 }
1405                                         }
1406                                         if ((*mptr == 13) || (*mptr == 10)) {
1407                                                 done_rfc822_hdrs = 1;
1408                                         }
1409                                 }
1410                         }
1411                         goto DONE;
1412                 }
1413         }
1414
1415         if (headers_only == HEADERS_ONLY) {
1416                 goto DONE;
1417         }
1418
1419         /* signify start of msg text */
1420         if ( (mode == MT_CITADEL) || (mode == MT_MIME) ) {
1421                 if (do_proto) cprintf("text\n");
1422         }
1423
1424         /* If the format type on disk is 1 (fixed-format), then we want
1425          * everything to be output completely literally ... regardless of
1426          * what message transfer format is in use.
1427          */
1428         if (TheMessage->cm_format_type == FMT_FIXED) {
1429                 if (mode == MT_MIME) {
1430                         cprintf("Content-type: text/plain\n\n");
1431                 }
1432                 strcpy(buf, "");
1433                 while (ch = *mptr++, ch > 0) {
1434                         if (ch == 13)
1435                                 ch = 10;
1436                         if ((ch == 10) || (strlen(buf) > 250)) {
1437                                 cprintf("%s%s", buf, nl);
1438                                 strcpy(buf, "");
1439                         } else {
1440                                 buf[strlen(buf) + 1] = 0;
1441                                 buf[strlen(buf)] = ch;
1442                         }
1443                 }
1444                 if (strlen(buf) > 0)
1445                         cprintf("%s%s", buf, nl);
1446         }
1447
1448         /* If the message on disk is format 0 (Citadel vari-format), we
1449          * output using the formatter at 80 columns.  This is the final output
1450          * form if the transfer format is RFC822, but if the transfer format
1451          * is Citadel proprietary, it'll still work, because the indentation
1452          * for new paragraphs is correct and the client will reformat the
1453          * message to the reader's screen width.
1454          */
1455         if (TheMessage->cm_format_type == FMT_CITADEL) {
1456                 if (mode == MT_MIME) {
1457                         cprintf("Content-type: text/x-citadel-variformat\n\n");
1458                 }
1459                 memfmout(80, mptr, 0, nl);
1460         }
1461
1462         /* If the message on disk is format 4 (MIME), we've gotta hand it
1463          * off to the MIME parser.  The client has already been told that
1464          * this message is format 1 (fixed format), so the callback function
1465          * we use will display those parts as-is.
1466          */
1467         if (TheMessage->cm_format_type == FMT_RFC822) {
1468                 CtdlAllocUserData(SYM_MA_INFO, sizeof(struct ma_info));
1469                 memset(ma, 0, sizeof(struct ma_info));
1470
1471                 if (mode == MT_MIME) {
1472                         strcpy(ma->chosen_part, "1");
1473                         mime_parser(mptr, NULL,
1474                                 *choose_preferred, *fixed_output_pre,
1475                                 *fixed_output_post, NULL, 0);
1476                         mime_parser(mptr, NULL,
1477                                 *output_preferred, NULL, NULL, NULL, 0);
1478                 }
1479                 else {
1480                         mime_parser(mptr, NULL,
1481                                 *fixed_output, *fixed_output_pre,
1482                                 *fixed_output_post, NULL, 0);
1483                 }
1484         }
1485
1486 DONE:   /* now we're done */
1487         if (do_proto) cprintf("000\n");
1488         return(om_ok);
1489 }
1490
1491
1492
1493 /*
1494  * display a message (mode 0 - Citadel proprietary)
1495  */
1496 void cmd_msg0(char *cmdbuf)
1497 {
1498         long msgid;
1499         int headers_only = HEADERS_ALL;
1500
1501         msgid = extract_long(cmdbuf, 0);
1502         headers_only = extract_int(cmdbuf, 1);
1503
1504         CtdlOutputMsg(msgid, MT_CITADEL, headers_only, 1, 0);
1505         return;
1506 }
1507
1508
1509 /*
1510  * display a message (mode 2 - RFC822)
1511  */
1512 void cmd_msg2(char *cmdbuf)
1513 {
1514         long msgid;
1515         int headers_only = HEADERS_ALL;
1516
1517         msgid = extract_long(cmdbuf, 0);
1518         headers_only = extract_int(cmdbuf, 1);
1519
1520         CtdlOutputMsg(msgid, MT_RFC822, headers_only, 1, 1);
1521 }
1522
1523
1524
1525 /* 
1526  * display a message (mode 3 - IGnet raw format - internal programs only)
1527  */
1528 void cmd_msg3(char *cmdbuf)
1529 {
1530         long msgnum;
1531         struct CtdlMessage *msg;
1532         struct ser_ret smr;
1533
1534         if (CC->internal_pgm == 0) {
1535                 cprintf("%d This command is for internal programs only.\n",
1536                         ERROR + HIGHER_ACCESS_REQUIRED);
1537                 return;
1538         }
1539
1540         msgnum = extract_long(cmdbuf, 0);
1541         msg = CtdlFetchMessage(msgnum, 1);
1542         if (msg == NULL) {
1543                 cprintf("%d Message %ld not found.\n", 
1544                         ERROR + MESSAGE_NOT_FOUND, msgnum);
1545                 return;
1546         }
1547
1548         serialize_message(&smr, msg);
1549         CtdlFreeMessage(msg);
1550
1551         if (smr.len == 0) {
1552                 cprintf("%d Unable to serialize message\n",
1553                         ERROR + INTERNAL_ERROR);
1554                 return;
1555         }
1556
1557         cprintf("%d %ld\n", BINARY_FOLLOWS, (long)smr.len);
1558         client_write((char *)smr.ser, (int)smr.len);
1559         free(smr.ser);
1560 }
1561
1562
1563
1564 /* 
1565  * Display a message using MIME content types
1566  */
1567 void cmd_msg4(char *cmdbuf)
1568 {
1569         long msgid;
1570
1571         msgid = extract_long(cmdbuf, 0);
1572         CtdlOutputMsg(msgid, MT_MIME, 0, 1, 0);
1573 }
1574
1575
1576
1577 /* 
1578  * Client tells us its preferred message format(s)
1579  */
1580 void cmd_msgp(char *cmdbuf)
1581 {
1582         safestrncpy(CC->preferred_formats, cmdbuf,
1583                         sizeof(CC->preferred_formats));
1584         cprintf("%d ok\n", CIT_OK);
1585 }
1586
1587
1588 /*
1589  * Open a component of a MIME message as a download file 
1590  */
1591 void cmd_opna(char *cmdbuf)
1592 {
1593         long msgid;
1594
1595         CtdlAllocUserData(SYM_DESIRED_SECTION, SIZ);
1596
1597         msgid = extract_long(cmdbuf, 0);
1598         extract(desired_section, cmdbuf, 1);
1599
1600         CtdlOutputMsg(msgid, MT_DOWNLOAD, 0, 1, 1);
1601 }                       
1602
1603
1604 /*
1605  * Save a message pointer into a specified room
1606  * (Returns 0 for success, nonzero for failure)
1607  * roomname may be NULL to use the current room
1608  */
1609 int CtdlSaveMsgPointerInRoom(char *roomname, long msgid, int flags) {
1610         int i;
1611         char hold_rm[ROOMNAMELEN];
1612         struct cdbdata *cdbfr;
1613         int num_msgs;
1614         long *msglist;
1615         long highest_msg = 0L;
1616         struct CtdlMessage *msg = NULL;
1617
1618         lprintf(CTDL_DEBUG, "CtdlSaveMsgPointerInRoom(%s, %ld, %d)\n",
1619                 roomname, msgid, flags);
1620
1621         strcpy(hold_rm, CC->room.QRname);
1622
1623         /* We may need to check to see if this message is real */
1624         if (  (flags & SM_VERIFY_GOODNESS)
1625            || (flags & SM_DO_REPL_CHECK)
1626            ) {
1627                 msg = CtdlFetchMessage(msgid, 1);
1628                 if (msg == NULL) return(ERROR + ILLEGAL_VALUE);
1629         }
1630
1631         /* Perform replication checks if necessary */
1632         if ( (flags & SM_DO_REPL_CHECK) && (msg != NULL) ) {
1633
1634                 if (getroom(&CC->room,
1635                    ((roomname != NULL) ? roomname : CC->room.QRname) )
1636                    != 0) {
1637                         lprintf(CTDL_ERR, "No such room <%s>\n", roomname);
1638                         if (msg != NULL) CtdlFreeMessage(msg);
1639                         return(ERROR + ROOM_NOT_FOUND);
1640                 }
1641
1642                 if (ReplicationChecks(msg) != 0) {
1643                         getroom(&CC->room, hold_rm);
1644                         if (msg != NULL) CtdlFreeMessage(msg);
1645                         lprintf(CTDL_DEBUG,
1646                                 "Did replication, and newer exists\n");
1647                         return(0);
1648                 }
1649         }
1650
1651         /* Now the regular stuff */
1652         if (lgetroom(&CC->room,
1653            ((roomname != NULL) ? roomname : CC->room.QRname) )
1654            != 0) {
1655                 lprintf(CTDL_ERR, "No such room <%s>\n", roomname);
1656                 if (msg != NULL) CtdlFreeMessage(msg);
1657                 return(ERROR + ROOM_NOT_FOUND);
1658         }
1659
1660         cdbfr = cdb_fetch(CDB_MSGLISTS, &CC->room.QRnumber, sizeof(long));
1661         if (cdbfr == NULL) {
1662                 msglist = NULL;
1663                 num_msgs = 0;
1664         } else {
1665                 msglist = malloc(cdbfr->len);
1666                 if (msglist == NULL)
1667                         lprintf(CTDL_ALERT, "ERROR malloc msglist!\n");
1668                 num_msgs = cdbfr->len / sizeof(long);
1669                 memcpy(msglist, cdbfr->ptr, cdbfr->len);
1670                 cdb_free(cdbfr);
1671         }
1672
1673
1674         /* Make sure the message doesn't already exist in this room.  It
1675          * is absolutely taboo to have more than one reference to the same
1676          * message in a room.
1677          */
1678         if (num_msgs > 0) for (i=0; i<num_msgs; ++i) {
1679                 if (msglist[i] == msgid) {
1680                         lputroom(&CC->room);    /* unlock the room */
1681                         getroom(&CC->room, hold_rm);
1682                         if (msg != NULL) CtdlFreeMessage(msg);
1683                         free(msglist);
1684                         return(ERROR + ALREADY_EXISTS);
1685                 }
1686         }
1687
1688         /* Now add the new message */
1689         ++num_msgs;
1690         msglist = realloc(msglist, (num_msgs * sizeof(long)));
1691
1692         if (msglist == NULL) {
1693                 lprintf(CTDL_ALERT, "ERROR: can't realloc message list!\n");
1694         }
1695         msglist[num_msgs - 1] = msgid;
1696
1697         /* Sort the message list, so all the msgid's are in order */
1698         num_msgs = sort_msglist(msglist, num_msgs);
1699
1700         /* Determine the highest message number */
1701         highest_msg = msglist[num_msgs - 1];
1702
1703         /* Write it back to disk. */
1704         cdb_store(CDB_MSGLISTS, &CC->room.QRnumber, (int)sizeof(long),
1705                   msglist, (int)(num_msgs * sizeof(long)));
1706
1707         /* Free up the memory we used. */
1708         free(msglist);
1709
1710         /* Update the highest-message pointer and unlock the room. */
1711         CC->room.QRhighest = highest_msg;
1712         lputroom(&CC->room);
1713         getroom(&CC->room, hold_rm);
1714
1715         /* Bump the reference count for this message. */
1716         if ((flags & SM_DONT_BUMP_REF)==0) {
1717                 AdjRefCount(msgid, +1);
1718         }
1719
1720         /* Return success. */
1721         if (msg != NULL) CtdlFreeMessage(msg);
1722         return (0);
1723 }
1724
1725
1726
1727 /*
1728  * Message base operation to save a new message to the message store
1729  * (returns new message number)
1730  *
1731  * This is the back end for CtdlSubmitMsg() and should not be directly
1732  * called by server-side modules.
1733  *
1734  */
1735 long send_message(struct CtdlMessage *msg) {
1736         long newmsgid;
1737         long retval;
1738         char msgidbuf[SIZ];
1739         struct ser_ret smr;
1740         int is_bigmsg = 0;
1741         char *holdM = NULL;
1742
1743         /* Get a new message number */
1744         newmsgid = get_new_message_number();
1745         snprintf(msgidbuf, sizeof msgidbuf, "%ld@%s", newmsgid, config.c_fqdn);
1746
1747         /* Generate an ID if we don't have one already */
1748         if (msg->cm_fields['I']==NULL) {
1749                 msg->cm_fields['I'] = strdup(msgidbuf);
1750         }
1751
1752         /* If the message is big, set its body aside for storage elsewhere */
1753         if (msg->cm_fields['M'] != NULL) {
1754                 if (strlen(msg->cm_fields['M']) > BIGMSG) {
1755                         is_bigmsg = 1;
1756                         holdM = msg->cm_fields['M'];
1757                         msg->cm_fields['M'] = NULL;
1758                 }
1759         }
1760
1761         /* Serialize our data structure for storage in the database */  
1762         serialize_message(&smr, msg);
1763
1764         if (is_bigmsg) {
1765                 msg->cm_fields['M'] = holdM;
1766         }
1767
1768         if (smr.len == 0) {
1769                 cprintf("%d Unable to serialize message\n",
1770                         ERROR + INTERNAL_ERROR);
1771                 return (-1L);
1772         }
1773
1774         /* Write our little bundle of joy into the message base */
1775         if (cdb_store(CDB_MSGMAIN, &newmsgid, (int)sizeof(long),
1776                       smr.ser, smr.len) < 0) {
1777                 lprintf(CTDL_ERR, "Can't store message\n");
1778                 retval = 0L;
1779         } else {
1780                 if (is_bigmsg) {
1781                         cdb_store(CDB_BIGMSGS,
1782                                 &newmsgid,
1783                                 (int)sizeof(long),
1784                                 holdM,
1785                                 (strlen(holdM) + 1)
1786                         );
1787                 }
1788                 retval = newmsgid;
1789         }
1790
1791         /* Free the memory we used for the serialized message */
1792         free(smr.ser);
1793
1794         /* Return the *local* message ID to the caller
1795          * (even if we're storing an incoming network message)
1796          */
1797         return(retval);
1798 }
1799
1800
1801
1802 /*
1803  * Serialize a struct CtdlMessage into the format used on disk and network.
1804  * 
1805  * This function loads up a "struct ser_ret" (defined in server.h) which
1806  * contains the length of the serialized message and a pointer to the
1807  * serialized message in memory.  THE LATTER MUST BE FREED BY THE CALLER.
1808  */
1809 void serialize_message(struct ser_ret *ret,             /* return values */
1810                         struct CtdlMessage *msg)        /* unserialized msg */
1811 {
1812         size_t wlen;
1813         int i;
1814         static char *forder = FORDER;
1815
1816         if (is_valid_message(msg) == 0) return;         /* self check */
1817
1818         ret->len = 3;
1819         for (i=0; i<26; ++i) if (msg->cm_fields[(int)forder[i]] != NULL)
1820                 ret->len = ret->len +
1821                         strlen(msg->cm_fields[(int)forder[i]]) + 2;
1822
1823         lprintf(CTDL_DEBUG, "serialize_message() calling malloc(%ld)\n", (long)ret->len);
1824         ret->ser = malloc(ret->len);
1825         if (ret->ser == NULL) {
1826                 ret->len = 0;
1827                 return;
1828         }
1829
1830         ret->ser[0] = 0xFF;
1831         ret->ser[1] = msg->cm_anon_type;
1832         ret->ser[2] = msg->cm_format_type;
1833         wlen = 3;
1834
1835         for (i=0; i<26; ++i) if (msg->cm_fields[(int)forder[i]] != NULL) {
1836                 ret->ser[wlen++] = (char)forder[i];
1837                 strcpy((char *)&ret->ser[wlen], msg->cm_fields[(int)forder[i]]);
1838                 wlen = wlen + strlen(msg->cm_fields[(int)forder[i]]) + 1;
1839         }
1840         if (ret->len != wlen) lprintf(CTDL_ERR, "ERROR: len=%ld wlen=%ld\n",
1841                 (long)ret->len, (long)wlen);
1842
1843         return;
1844 }
1845
1846
1847
1848 /*
1849  * Back end for the ReplicationChecks() function
1850  */
1851 void check_repl(long msgnum, void *userdata) {
1852         lprintf(CTDL_DEBUG, "check_repl() replacing message %ld\n", msgnum);
1853         CtdlDeleteMessages(CC->room.QRname, msgnum, "");
1854 }
1855
1856
1857 /*
1858  * Check to see if any messages already exist which carry the same Exclusive ID
1859  * as this one.  If any are found, delete them.
1860  *
1861  */
1862 int ReplicationChecks(struct CtdlMessage *msg) {
1863         struct CtdlMessage *template;
1864         int abort_this = 0;
1865
1866         /* No exclusive id?  Don't do anything. */
1867         if (msg->cm_fields['E'] == NULL) return 0;
1868         if (strlen(msg->cm_fields['E']) == 0) return 0;
1869         lprintf(CTDL_DEBUG, "Exclusive ID: <%s>\n", msg->cm_fields['E']);
1870
1871         template = (struct CtdlMessage *) malloc(sizeof(struct CtdlMessage));
1872         memset(template, 0, sizeof(struct CtdlMessage));
1873         template->cm_fields['E'] = strdup(msg->cm_fields['E']);
1874
1875         CtdlForEachMessage(MSGS_ALL, 0L, NULL, template, check_repl, NULL);
1876
1877         CtdlFreeMessage(template);
1878         lprintf(CTDL_DEBUG, "ReplicationChecks() returning %d\n", abort_this);
1879         return(abort_this);
1880 }
1881
1882
1883
1884
1885 /*
1886  * Save a message to disk and submit it into the delivery system.
1887  */
1888 long CtdlSubmitMsg(struct CtdlMessage *msg,     /* message to save */
1889                 struct recptypes *recps,        /* recipients (if mail) */
1890                 char *force                     /* force a particular room? */
1891 ) {
1892         char aaa[SIZ];
1893         char hold_rm[ROOMNAMELEN];
1894         char actual_rm[ROOMNAMELEN];
1895         char force_room[ROOMNAMELEN];
1896         char content_type[SIZ];                 /* We have to learn this */
1897         char recipient[SIZ];
1898         long newmsgid;
1899         char *mptr = NULL;
1900         struct ctdluser userbuf;
1901         int a, i;
1902         struct MetaData smi;
1903         FILE *network_fp = NULL;
1904         static int seqnum = 1;
1905         struct CtdlMessage *imsg = NULL;
1906         char *instr;
1907         struct ser_ret smr;
1908         char *hold_R, *hold_D;
1909
1910         lprintf(CTDL_DEBUG, "CtdlSubmitMsg() called\n");
1911         if (is_valid_message(msg) == 0) return(-1);     /* self check */
1912
1913         /* If this message has no timestamp, we take the liberty of
1914          * giving it one, right now.
1915          */
1916         if (msg->cm_fields['T'] == NULL) {
1917                 lprintf(CTDL_DEBUG, "Generating timestamp\n");
1918                 snprintf(aaa, sizeof aaa, "%ld", (long)time(NULL));
1919                 msg->cm_fields['T'] = strdup(aaa);
1920         }
1921
1922         /* If this message has no path, we generate one.
1923          */
1924         if (msg->cm_fields['P'] == NULL) {
1925                 lprintf(CTDL_DEBUG, "Generating path\n");
1926                 if (msg->cm_fields['A'] != NULL) {
1927                         msg->cm_fields['P'] = strdup(msg->cm_fields['A']);
1928                         for (a=0; a<strlen(msg->cm_fields['P']); ++a) {
1929                                 if (isspace(msg->cm_fields['P'][a])) {
1930                                         msg->cm_fields['P'][a] = ' ';
1931                                 }
1932                         }
1933                 }
1934                 else {
1935                         msg->cm_fields['P'] = strdup("unknown");
1936                 }
1937         }
1938
1939         if (force == NULL) {
1940                 strcpy(force_room, "");
1941         }
1942         else {
1943                 strcpy(force_room, force);
1944         }
1945
1946         /* Learn about what's inside, because it's what's inside that counts */
1947         lprintf(CTDL_DEBUG, "Learning what's inside\n");
1948         if (msg->cm_fields['M'] == NULL) {
1949                 lprintf(CTDL_ERR, "ERROR: attempt to save message with NULL body\n");
1950                 return(-2);
1951         }
1952
1953         switch (msg->cm_format_type) {
1954         case 0:
1955                 strcpy(content_type, "text/x-citadel-variformat");
1956                 break;
1957         case 1:
1958                 strcpy(content_type, "text/plain");
1959                 break;
1960         case 4:
1961                 strcpy(content_type, "text/plain");
1962                 mptr = bmstrstr(msg->cm_fields['M'], "Content-type: ", strncasecmp);
1963                 if (mptr != NULL) {
1964                         strcpy(content_type, &mptr[14]);
1965                         for (a = 0; a < strlen(content_type); ++a) {
1966                                 if ((content_type[a] == ';')
1967                                     || (content_type[a] == ' ')
1968                                     || (content_type[a] == 13)
1969                                     || (content_type[a] == 10)) {
1970                                         content_type[a] = 0;
1971                                 }
1972                         }
1973                 }
1974         }
1975
1976         /* Goto the correct room */
1977         lprintf(CTDL_DEBUG, "Selected room %s\n", (recps) ? CC->room.QRname : SENTITEMS);
1978         strcpy(hold_rm, CC->room.QRname);
1979         strcpy(actual_rm, CC->room.QRname);
1980         if (recps != NULL) {
1981                 strcpy(actual_rm, SENTITEMS);
1982         }
1983
1984         /* If the user is a twit, move to the twit room for posting */
1985         lprintf(CTDL_DEBUG, "Handling twit stuff: %s\n",
1986                         (CC->user.axlevel == 2) ? config.c_twitroom : "OK");
1987         if (TWITDETECT) {
1988                 if (CC->user.axlevel == 2) {
1989                         strcpy(hold_rm, actual_rm);
1990                         strcpy(actual_rm, config.c_twitroom);
1991                 }
1992         }
1993
1994         /* ...or if this message is destined for Aide> then go there. */
1995         if (strlen(force_room) > 0) {
1996                 strcpy(actual_rm, force_room);
1997         }
1998
1999         lprintf(CTDL_DEBUG, "Final selection: %s\n", actual_rm);
2000         if (strcasecmp(actual_rm, CC->room.QRname)) {
2001                 getroom(&CC->room, actual_rm);
2002         }
2003
2004         /*
2005          * If this message has no O (room) field, generate one.
2006          */
2007         if (msg->cm_fields['O'] == NULL) {
2008                 msg->cm_fields['O'] = strdup(CC->room.QRname);
2009         }
2010
2011         /* Perform "before save" hooks (aborting if any return nonzero) */
2012         lprintf(CTDL_DEBUG, "Performing before-save hooks\n");
2013         if (PerformMessageHooks(msg, EVT_BEFORESAVE) > 0) return(-3);
2014
2015         /* If this message has an Exclusive ID, perform replication checks */
2016         lprintf(CTDL_DEBUG, "Performing replication checks\n");
2017         if (ReplicationChecks(msg) > 0) return(-4);
2018
2019         /* Save it to disk */
2020         lprintf(CTDL_DEBUG, "Saving to disk\n");
2021         newmsgid = send_message(msg);
2022         if (newmsgid <= 0L) return(-5);
2023
2024         /* Write a supplemental message info record.  This doesn't have to
2025          * be a critical section because nobody else knows about this message
2026          * yet.
2027          */
2028         lprintf(CTDL_DEBUG, "Creating MetaData record\n");
2029         memset(&smi, 0, sizeof(struct MetaData));
2030         smi.meta_msgnum = newmsgid;
2031         smi.meta_refcount = 0;
2032         safestrncpy(smi.meta_content_type, content_type, sizeof smi.meta_content_type);
2033         PutMetaData(&smi);
2034
2035         /* Now figure out where to store the pointers */
2036         lprintf(CTDL_DEBUG, "Storing pointers\n");
2037
2038         /* If this is being done by the networker delivering a private
2039          * message, we want to BYPASS saving the sender's copy (because there
2040          * is no local sender; it would otherwise go to the Trashcan).
2041          */
2042         if ((!CC->internal_pgm) || (recps == NULL)) {
2043                 if (CtdlSaveMsgPointerInRoom(actual_rm, newmsgid, 0) != 0) {
2044                         lprintf(CTDL_ERR, "ERROR saving message pointer!\n");
2045                         CtdlSaveMsgPointerInRoom(config.c_aideroom, newmsgid, 0);
2046                 }
2047         }
2048
2049         /* For internet mail, drop a copy in the outbound queue room */
2050         if (recps != NULL)
2051          if (recps->num_internet > 0) {
2052                 CtdlSaveMsgPointerInRoom(SMTP_SPOOLOUT_ROOM, newmsgid, 0);
2053         }
2054
2055         /* If other rooms are specified, drop them there too. */
2056         if (recps != NULL)
2057          if (recps->num_room > 0)
2058           for (i=0; i<num_tokens(recps->recp_room, '|'); ++i) {
2059                 extract(recipient, recps->recp_room, i);
2060                 lprintf(CTDL_DEBUG, "Delivering to local room <%s>\n", recipient);
2061                 CtdlSaveMsgPointerInRoom(recipient, newmsgid, 0);
2062         }
2063
2064         /* Bump this user's messages posted counter. */
2065         lprintf(CTDL_DEBUG, "Updating user\n");
2066         lgetuser(&CC->user, CC->curr_user);
2067         CC->user.posted = CC->user.posted + 1;
2068         lputuser(&CC->user);
2069
2070         /* If this is private, local mail, make a copy in the
2071          * recipient's mailbox and bump the reference count.
2072          */
2073         if (recps != NULL)
2074          if (recps->num_local > 0)
2075           for (i=0; i<num_tokens(recps->recp_local, '|'); ++i) {
2076                 extract(recipient, recps->recp_local, i);
2077                 lprintf(CTDL_DEBUG, "Delivering private local mail to <%s>\n",
2078                         recipient);
2079                 if (getuser(&userbuf, recipient) == 0) {
2080                         MailboxName(actual_rm, sizeof actual_rm, &userbuf, MAILROOM);
2081                         CtdlSaveMsgPointerInRoom(actual_rm, newmsgid, 0);
2082                         BumpNewMailCounter(userbuf.usernum);
2083                 }
2084                 else {
2085                         lprintf(CTDL_DEBUG, "No user <%s>\n", recipient);
2086                         CtdlSaveMsgPointerInRoom(config.c_aideroom, newmsgid, 0);
2087                 }
2088         }
2089
2090         /* Perform "after save" hooks */
2091         lprintf(CTDL_DEBUG, "Performing after-save hooks\n");
2092         PerformMessageHooks(msg, EVT_AFTERSAVE);
2093
2094         /* For IGnet mail, we have to save a new copy into the spooler for
2095          * each recipient, with the R and D fields set to the recipient and
2096          * destination-node.  This has two ugly side effects: all other
2097          * recipients end up being unlisted in this recipient's copy of the
2098          * message, and it has to deliver multiple messages to the same
2099          * node.  We'll revisit this again in a year or so when everyone has
2100          * a network spool receiver that can handle the new style messages.
2101          */
2102         if (recps != NULL)
2103          if (recps->num_ignet > 0)
2104           for (i=0; i<num_tokens(recps->recp_ignet, '|'); ++i) {
2105                 extract(recipient, recps->recp_ignet, i);
2106
2107                 hold_R = msg->cm_fields['R'];
2108                 hold_D = msg->cm_fields['D'];
2109                 msg->cm_fields['R'] = malloc(SIZ);
2110                 msg->cm_fields['D'] = malloc(SIZ);
2111                 extract_token(msg->cm_fields['R'], recipient, 0, '@');
2112                 extract_token(msg->cm_fields['D'], recipient, 1, '@');
2113                 
2114                 serialize_message(&smr, msg);
2115                 if (smr.len > 0) {
2116                         snprintf(aaa, sizeof aaa,
2117                                 "./network/spoolin/netmail.%04lx.%04x.%04x",
2118                                 (long) getpid(), CC->cs_pid, ++seqnum);
2119                         network_fp = fopen(aaa, "wb+");
2120                         if (network_fp != NULL) {
2121                                 fwrite(smr.ser, smr.len, 1, network_fp);
2122                                 fclose(network_fp);
2123                         }
2124                         free(smr.ser);
2125                 }
2126
2127                 free(msg->cm_fields['R']);
2128                 free(msg->cm_fields['D']);
2129                 msg->cm_fields['R'] = hold_R;
2130                 msg->cm_fields['D'] = hold_D;
2131         }
2132
2133         /* Go back to the room we started from */
2134         lprintf(CTDL_DEBUG, "Returning to original room %s\n", hold_rm);
2135         if (strcasecmp(hold_rm, CC->room.QRname))
2136                 getroom(&CC->room, hold_rm);
2137
2138         /* For internet mail, generate delivery instructions.
2139          * Yes, this is recursive.  Deal with it.  Infinite recursion does
2140          * not happen because the delivery instructions message does not
2141          * contain a recipient.
2142          */
2143         if (recps != NULL)
2144          if (recps->num_internet > 0) {
2145                 lprintf(CTDL_DEBUG, "Generating delivery instructions\n");
2146                 instr = malloc(SIZ * 2);
2147                 snprintf(instr, SIZ * 2,
2148                         "Content-type: %s\n\nmsgid|%ld\nsubmitted|%ld\n"
2149                         "bounceto|%s@%s\n",
2150                         SPOOLMIME, newmsgid, (long)time(NULL),
2151                         msg->cm_fields['A'], msg->cm_fields['N']
2152                 );
2153
2154                 for (i=0; i<num_tokens(recps->recp_internet, '|'); ++i) {
2155                         size_t tmp = strlen(instr);
2156                         extract(recipient, recps->recp_internet, i);
2157                         snprintf(&instr[tmp], SIZ * 2 - tmp,
2158                                  "remote|%s|0||\n", recipient);
2159                 }
2160
2161                 imsg = malloc(sizeof(struct CtdlMessage));
2162                 memset(imsg, 0, sizeof(struct CtdlMessage));
2163                 imsg->cm_magic = CTDLMESSAGE_MAGIC;
2164                 imsg->cm_anon_type = MES_NORMAL;
2165                 imsg->cm_format_type = FMT_RFC822;
2166                 imsg->cm_fields['A'] = strdup("Citadel");
2167                 imsg->cm_fields['M'] = instr;
2168                 CtdlSubmitMsg(imsg, NULL, SMTP_SPOOLOUT_ROOM);
2169                 CtdlFreeMessage(imsg);
2170         }
2171
2172         return(newmsgid);
2173 }
2174
2175
2176
2177 /*
2178  * Convenience function for generating small administrative messages.
2179  */
2180 void quickie_message(char *from, char *to, char *room, char *text, 
2181                         int format_type, char *subject)
2182 {
2183         struct CtdlMessage *msg;
2184         struct recptypes *recp = NULL;
2185
2186         msg = malloc(sizeof(struct CtdlMessage));
2187         memset(msg, 0, sizeof(struct CtdlMessage));
2188         msg->cm_magic = CTDLMESSAGE_MAGIC;
2189         msg->cm_anon_type = MES_NORMAL;
2190         msg->cm_format_type = format_type;
2191         msg->cm_fields['A'] = strdup(from);
2192         if (room != NULL) msg->cm_fields['O'] = strdup(room);
2193         msg->cm_fields['N'] = strdup(NODENAME);
2194         if (to != NULL) {
2195                 msg->cm_fields['R'] = strdup(to);
2196                 recp = validate_recipients(to);
2197         }
2198         if (subject != NULL) {
2199                 msg->cm_fields['U'] = strdup(subject);
2200         }
2201         msg->cm_fields['M'] = strdup(text);
2202
2203         CtdlSubmitMsg(msg, recp, room);
2204         CtdlFreeMessage(msg);
2205         if (recp != NULL) free(recp);
2206 }
2207
2208
2209
2210 /*
2211  * Back end function used by CtdlMakeMessage() and similar functions
2212  */
2213 char *CtdlReadMessageBody(char *terminator,     /* token signalling EOT */
2214                         size_t maxlen,          /* maximum message length */
2215                         char *exist,            /* if non-null, append to it;
2216                                                    exist is ALWAYS freed  */
2217                         int crlf                /* CRLF newlines instead of LF */
2218                         ) {
2219         char buf[SIZ];
2220         int linelen;
2221         size_t message_len = 0;
2222         size_t buffer_len = 0;
2223         char *ptr;
2224         char *m;
2225         int flushing = 0;
2226         int finished = 0;
2227
2228         if (exist == NULL) {
2229                 m = malloc(4096);
2230                 m[0] = 0;
2231                 buffer_len = 4096;
2232                 message_len = 0;
2233         }
2234         else {
2235                 message_len = strlen(exist);
2236                 buffer_len = message_len + 4096;
2237                 m = realloc(exist, buffer_len);
2238                 if (m == NULL) {
2239                         free(exist);
2240                         return m;
2241                 }
2242         }
2243
2244         /* flush the input if we have nowhere to store it */
2245         if (m == NULL) {
2246                 flushing = 1;
2247         }
2248
2249         /* read in the lines of message text one by one */
2250         do {
2251                 if (client_getln(buf, sizeof buf) < 1) finished = 1;
2252                 if (!strcmp(buf, terminator)) finished = 1;
2253                 if (crlf) {
2254                         strcat(buf, "\r\n");
2255                 }
2256                 else {
2257                         strcat(buf, "\n");
2258                 }
2259
2260                 if ( (!flushing) && (!finished) ) {
2261                         /* Measure the line */
2262                         linelen = strlen(buf);
2263         
2264                         /* augment the buffer if we have to */
2265                         if ((message_len + linelen) >= buffer_len) {
2266                                 ptr = realloc(m, (buffer_len * 2) );
2267                                 if (ptr == NULL) {      /* flush if can't allocate */
2268                                         flushing = 1;
2269                                 } else {
2270                                         buffer_len = (buffer_len * 2);
2271                                         m = ptr;
2272                                         lprintf(CTDL_DEBUG, "buffer_len is now %ld\n", (long)buffer_len);
2273                                 }
2274                         }
2275         
2276                         /* Add the new line to the buffer.  NOTE: this loop must avoid
2277                         * using functions like strcat() and strlen() because they
2278                         * traverse the entire buffer upon every call, and doing that
2279                         * for a multi-megabyte message slows it down beyond usability.
2280                         */
2281                         strcpy(&m[message_len], buf);
2282                         message_len += linelen;
2283                 }
2284
2285                 /* if we've hit the max msg length, flush the rest */
2286                 if (message_len >= maxlen) flushing = 1;
2287
2288         } while (!finished);
2289         return(m);
2290 }
2291
2292
2293
2294
2295 /*
2296  * Build a binary message to be saved on disk.
2297  * (NOTE: if you supply 'preformatted_text', the buffer you give it
2298  * will become part of the message.  This means you are no longer
2299  * responsible for managing that memory -- it will be freed along with
2300  * the rest of the fields when CtdlFreeMessage() is called.)
2301  */
2302
2303 struct CtdlMessage *CtdlMakeMessage(
2304         struct ctdluser *author,        /* author's user structure */
2305         char *recipient,                /* NULL if it's not mail */
2306         char *room,                     /* room where it's going */
2307         int type,                       /* see MES_ types in header file */
2308         int format_type,                /* variformat, plain text, MIME... */
2309         char *fake_name,                /* who we're masquerading as */
2310         char *subject,                  /* Subject (optional) */
2311         char *preformatted_text         /* ...or NULL to read text from client */
2312 ) {
2313         char dest_node[SIZ];
2314         char buf[SIZ];
2315         struct CtdlMessage *msg;
2316
2317         msg = malloc(sizeof(struct CtdlMessage));
2318         memset(msg, 0, sizeof(struct CtdlMessage));
2319         msg->cm_magic = CTDLMESSAGE_MAGIC;
2320         msg->cm_anon_type = type;
2321         msg->cm_format_type = format_type;
2322
2323         /* Don't confuse the poor folks if it's not routed mail. */
2324         strcpy(dest_node, "");
2325
2326         striplt(recipient);
2327
2328         snprintf(buf, sizeof buf, "cit%ld", author->usernum);   /* Path */
2329         msg->cm_fields['P'] = strdup(buf);
2330
2331         snprintf(buf, sizeof buf, "%ld", (long)time(NULL));     /* timestamp */
2332         msg->cm_fields['T'] = strdup(buf);
2333
2334         if (fake_name[0])                                       /* author */
2335                 msg->cm_fields['A'] = strdup(fake_name);
2336         else
2337                 msg->cm_fields['A'] = strdup(author->fullname);
2338
2339         if (CC->room.QRflags & QR_MAILBOX) {            /* room */
2340                 msg->cm_fields['O'] = strdup(&CC->room.QRname[11]);
2341         }
2342         else {
2343                 msg->cm_fields['O'] = strdup(CC->room.QRname);
2344         }
2345
2346         msg->cm_fields['N'] = strdup(NODENAME);         /* nodename */
2347         msg->cm_fields['H'] = strdup(HUMANNODE);                /* hnodename */
2348
2349         if (recipient[0] != 0) {
2350                 msg->cm_fields['R'] = strdup(recipient);
2351         }
2352         if (dest_node[0] != 0) {
2353                 msg->cm_fields['D'] = strdup(dest_node);
2354         }
2355
2356         if ( (author == &CC->user) && (strlen(CC->cs_inet_email) > 0) ) {
2357                 msg->cm_fields['F'] = strdup(CC->cs_inet_email);
2358         }
2359
2360         if (subject != NULL) {
2361                 striplt(subject);
2362                 if (strlen(subject) > 0) {
2363                         msg->cm_fields['U'] = strdup(subject);
2364                 }
2365         }
2366
2367         if (preformatted_text != NULL) {
2368                 msg->cm_fields['M'] = preformatted_text;
2369         }
2370         else {
2371                 msg->cm_fields['M'] = CtdlReadMessageBody("000",
2372                                         config.c_maxmsglen, NULL, 0);
2373         }
2374
2375         return(msg);
2376 }
2377
2378
2379 /*
2380  * Check to see whether we have permission to post a message in the current
2381  * room.  Returns a *CITADEL ERROR CODE* and puts a message in errmsgbuf, or
2382  * returns 0 on success.
2383  */
2384 int CtdlDoIHavePermissionToPostInThisRoom(char *errmsgbuf, size_t n) {
2385
2386         if (!(CC->logged_in)) {
2387                 snprintf(errmsgbuf, n, "Not logged in.");
2388                 return (ERROR + NOT_LOGGED_IN);
2389         }
2390
2391         if ((CC->user.axlevel < 2)
2392             && ((CC->room.QRflags & QR_MAILBOX) == 0)) {
2393                 snprintf(errmsgbuf, n, "Need to be validated to enter "
2394                                 "(except in %s> to sysop)", MAILROOM);
2395                 return (ERROR + HIGHER_ACCESS_REQUIRED);
2396         }
2397
2398         if ((CC->user.axlevel < 4)
2399            && (CC->room.QRflags & QR_NETWORK)) {
2400                 snprintf(errmsgbuf, n, "Need net privileges to enter here.");
2401                 return (ERROR + HIGHER_ACCESS_REQUIRED);
2402         }
2403
2404         if ((CC->user.axlevel < 6)
2405            && (CC->room.QRflags & QR_READONLY)) {
2406                 snprintf(errmsgbuf, n, "Sorry, this is a read-only room.");
2407                 return (ERROR + HIGHER_ACCESS_REQUIRED);
2408         }
2409
2410         strcpy(errmsgbuf, "Ok");
2411         return(0);
2412 }
2413
2414
2415 /*
2416  * Check to see if the specified user has Internet mail permission
2417  * (returns nonzero if permission is granted)
2418  */
2419 int CtdlCheckInternetMailPermission(struct ctdluser *who) {
2420
2421         /* Do not allow twits to send Internet mail */
2422         if (who->axlevel <= 2) return(0);
2423
2424         /* Globally enabled? */
2425         if (config.c_restrict == 0) return(1);
2426
2427         /* User flagged ok? */
2428         if (who->flags & US_INTERNET) return(2);
2429
2430         /* Aide level access? */
2431         if (who->axlevel >= 6) return(3);
2432
2433         /* No mail for you! */
2434         return(0);
2435 }
2436
2437
2438
2439 /*
2440  * Validate recipients, count delivery types and errors, and handle aliasing
2441  * FIXME check for dupes!!!!!
2442  */
2443 struct recptypes *validate_recipients(char *recipients) {
2444         struct recptypes *ret;
2445         char this_recp[SIZ];
2446         char this_recp_cooked[SIZ];
2447         char append[SIZ];
2448         int num_recps;
2449         int i, j;
2450         int mailtype;
2451         int invalid;
2452         struct ctdluser tempUS;
2453         struct ctdlroom tempQR;
2454
2455         /* Initialize */
2456         ret = (struct recptypes *) malloc(sizeof(struct recptypes));
2457         if (ret == NULL) return(NULL);
2458         memset(ret, 0, sizeof(struct recptypes));
2459
2460         ret->num_local = 0;
2461         ret->num_internet = 0;
2462         ret->num_ignet = 0;
2463         ret->num_error = 0;
2464         ret->num_room = 0;
2465
2466         if (recipients == NULL) {
2467                 num_recps = 0;
2468         }
2469         else if (strlen(recipients) == 0) {
2470                 num_recps = 0;
2471         }
2472         else {
2473                 /* Change all valid separator characters to commas */
2474                 for (i=0; i<strlen(recipients); ++i) {
2475                         if ((recipients[i] == ';') || (recipients[i] == '|')) {
2476                                 recipients[i] = ',';
2477                         }
2478                 }
2479
2480                 /* Count 'em up */
2481                 num_recps = num_tokens(recipients, ',');
2482         }
2483
2484         if (num_recps > 0) for (i=0; i<num_recps; ++i) {
2485                 extract_token(this_recp, recipients, i, ',');
2486                 striplt(this_recp);
2487                 lprintf(CTDL_DEBUG, "Evaluating recipient #%d <%s>\n", i, this_recp);
2488                 mailtype = alias(this_recp);
2489                 mailtype = alias(this_recp);
2490                 mailtype = alias(this_recp);
2491                 for (j=0; j<=strlen(this_recp); ++j) {
2492                         if (this_recp[j]=='_') {
2493                                 this_recp_cooked[j] = ' ';
2494                         }
2495                         else {
2496                                 this_recp_cooked[j] = this_recp[j];
2497                         }
2498                 }
2499                 invalid = 0;
2500                 switch(mailtype) {
2501                         case MES_LOCAL:
2502                                 if (!strcasecmp(this_recp, "sysop")) {
2503                                         ++ret->num_room;
2504                                         strcpy(this_recp, config.c_aideroom);
2505                                         if (strlen(ret->recp_room) > 0) {
2506                                                 strcat(ret->recp_room, "|");
2507                                         }
2508                                         strcat(ret->recp_room, this_recp);
2509                                 }
2510                                 else if (getuser(&tempUS, this_recp) == 0) {
2511                                         ++ret->num_local;
2512                                         strcpy(this_recp, tempUS.fullname);
2513                                         if (strlen(ret->recp_local) > 0) {
2514                                                 strcat(ret->recp_local, "|");
2515                                         }
2516                                         strcat(ret->recp_local, this_recp);
2517                                 }
2518                                 else if (getuser(&tempUS, this_recp_cooked) == 0) {
2519                                         ++ret->num_local;
2520                                         strcpy(this_recp, tempUS.fullname);
2521                                         if (strlen(ret->recp_local) > 0) {
2522                                                 strcat(ret->recp_local, "|");
2523                                         }
2524                                         strcat(ret->recp_local, this_recp);
2525                                 }
2526                                 else if ( (!strncasecmp(this_recp, "room_", 5))
2527                                       && (!getroom(&tempQR, &this_recp_cooked[5])) ) {
2528                                         ++ret->num_room;
2529                                         if (strlen(ret->recp_room) > 0) {
2530                                                 strcat(ret->recp_room, "|");
2531                                         }
2532                                         strcat(ret->recp_room, &this_recp_cooked[5]);
2533                                 }
2534                                 else {
2535                                         ++ret->num_error;
2536                                         invalid = 1;
2537                                 }
2538                                 break;
2539                         case MES_INTERNET:
2540                                 /* Yes, you're reading this correctly: if the target
2541                                  * domain points back to the local system or an attached
2542                                  * Citadel directory, the address is invalid.  That's
2543                                  * because if the address were valid, we would have
2544                                  * already translated it to a local address by now.
2545                                  */
2546                                 if (IsDirectory(this_recp)) {
2547                                         ++ret->num_error;
2548                                         invalid = 1;
2549                                 }
2550                                 else {
2551                                         ++ret->num_internet;
2552                                         if (strlen(ret->recp_internet) > 0) {
2553                                                 strcat(ret->recp_internet, "|");
2554                                         }
2555                                         strcat(ret->recp_internet, this_recp);
2556                                 }
2557                                 break;
2558                         case MES_IGNET:
2559                                 ++ret->num_ignet;
2560                                 if (strlen(ret->recp_ignet) > 0) {
2561                                         strcat(ret->recp_ignet, "|");
2562                                 }
2563                                 strcat(ret->recp_ignet, this_recp);
2564                                 break;
2565                         case MES_ERROR:
2566                                 ++ret->num_error;
2567                                 invalid = 1;
2568                                 break;
2569                 }
2570                 if (invalid) {
2571                         if (strlen(ret->errormsg) == 0) {
2572                                 snprintf(append, sizeof append,
2573                                          "Invalid recipient: %s",
2574                                          this_recp);
2575                         }
2576                         else {
2577                                 snprintf(append, sizeof append,
2578                                          ", %s", this_recp);
2579                         }
2580                         if ( (strlen(ret->errormsg) + strlen(append)) < SIZ) {
2581                                 strcat(ret->errormsg, append);
2582                         }
2583                 }
2584                 else {
2585                         if (strlen(ret->display_recp) == 0) {
2586                                 strcpy(append, this_recp);
2587                         }
2588                         else {
2589                                 snprintf(append, sizeof append, ", %s",
2590                                          this_recp);
2591                         }
2592                         if ( (strlen(ret->display_recp)+strlen(append)) < SIZ) {
2593                                 strcat(ret->display_recp, append);
2594                         }
2595                 }
2596         }
2597
2598         if ((ret->num_local + ret->num_internet + ret->num_ignet +
2599            ret->num_room + ret->num_error) == 0) {
2600                 ++ret->num_error;
2601                 strcpy(ret->errormsg, "No recipients specified.");
2602         }
2603
2604         lprintf(CTDL_DEBUG, "validate_recipients()\n");
2605         lprintf(CTDL_DEBUG, " local: %d <%s>\n", ret->num_local, ret->recp_local);
2606         lprintf(CTDL_DEBUG, "  room: %d <%s>\n", ret->num_room, ret->recp_room);
2607         lprintf(CTDL_DEBUG, "  inet: %d <%s>\n", ret->num_internet, ret->recp_internet);
2608         lprintf(CTDL_DEBUG, " ignet: %d <%s>\n", ret->num_ignet, ret->recp_ignet);
2609         lprintf(CTDL_DEBUG, " error: %d <%s>\n", ret->num_error, ret->errormsg);
2610
2611         return(ret);
2612 }
2613
2614
2615
2616 /*
2617  * message entry  -  mode 0 (normal)
2618  */
2619 void cmd_ent0(char *entargs)
2620 {
2621         int post = 0;
2622         char recp[SIZ];
2623         char masquerade_as[SIZ];
2624         int anon_flag = 0;
2625         int format_type = 0;
2626         char newusername[SIZ];
2627         struct CtdlMessage *msg;
2628         int anonymous = 0;
2629         char errmsg[SIZ];
2630         int err = 0;
2631         struct recptypes *valid = NULL;
2632         char subject[SIZ];
2633         int do_confirm = 0;
2634         long msgnum;
2635
2636         unbuffer_output();
2637
2638         post = extract_int(entargs, 0);
2639         extract(recp, entargs, 1);
2640         anon_flag = extract_int(entargs, 2);
2641         format_type = extract_int(entargs, 3);
2642         extract(subject, entargs, 4);
2643         do_confirm = extract_int(entargs, 6);
2644
2645         /* first check to make sure the request is valid. */
2646
2647         err = CtdlDoIHavePermissionToPostInThisRoom(errmsg, sizeof errmsg);
2648         if (err) {
2649                 cprintf("%d %s\n", err, errmsg);
2650                 return;
2651         }
2652
2653         /* Check some other permission type things. */
2654
2655         if (post == 2) {
2656                 if (CC->user.axlevel < 6) {
2657                         cprintf("%d You don't have permission to masquerade.\n",
2658                                 ERROR + HIGHER_ACCESS_REQUIRED);
2659                         return;
2660                 }
2661                 extract(newusername, entargs, 5);
2662                 memset(CC->fake_postname, 0, sizeof(CC->fake_postname) );
2663                 safestrncpy(CC->fake_postname, newusername,
2664                         sizeof(CC->fake_postname) );
2665                 cprintf("%d ok\n", CIT_OK);
2666                 return;
2667         }
2668         CC->cs_flags |= CS_POSTING;
2669
2670         /* In the Mail> room we have to behave a little differently --
2671          * make sure the user has specified at least one recipient.  Then
2672          * validate the recipient(s).
2673          */
2674         if ( (CC->room.QRflags & QR_MAILBOX)
2675            && (!strcasecmp(&CC->room.QRname[11], MAILROOM)) ) {
2676
2677                 if (CC->user.axlevel < 2) {
2678                         strcpy(recp, "sysop");
2679                 }
2680
2681                 valid = validate_recipients(recp);
2682                 if (valid->num_error > 0) {
2683                         cprintf("%d %s\n",
2684                                 ERROR + NO_SUCH_USER, valid->errormsg);
2685                         free(valid);
2686                         return;
2687                 }
2688                 if (valid->num_internet > 0) {
2689                         if (CtdlCheckInternetMailPermission(&CC->user)==0) {
2690                                 cprintf("%d You do not have permission "
2691                                         "to send Internet mail.\n",
2692                                         ERROR + HIGHER_ACCESS_REQUIRED);
2693                                 free(valid);
2694                                 return;
2695                         }
2696                 }
2697
2698                 if ( ( (valid->num_internet + valid->num_ignet) > 0)
2699                    && (CC->user.axlevel < 4) ) {
2700                         cprintf("%d Higher access required for network mail.\n",
2701                                 ERROR + HIGHER_ACCESS_REQUIRED);
2702                         free(valid);
2703                         return;
2704                 }
2705         
2706                 if ((RESTRICT_INTERNET == 1) && (valid->num_internet > 0)
2707                     && ((CC->user.flags & US_INTERNET) == 0)
2708                     && (!CC->internal_pgm)) {
2709                         cprintf("%d You don't have access to Internet mail.\n",
2710                                 ERROR + HIGHER_ACCESS_REQUIRED);
2711                         free(valid);
2712                         return;
2713                 }
2714
2715         }
2716
2717         /* Is this a room which has anonymous-only or anonymous-option? */
2718         anonymous = MES_NORMAL;
2719         if (CC->room.QRflags & QR_ANONONLY) {
2720                 anonymous = MES_ANONONLY;
2721         }
2722         if (CC->room.QRflags & QR_ANONOPT) {
2723                 if (anon_flag == 1) {   /* only if the user requested it */
2724                         anonymous = MES_ANONOPT;
2725                 }
2726         }
2727
2728         if ((CC->room.QRflags & QR_MAILBOX) == 0) {
2729                 recp[0] = 0;
2730         }
2731
2732         /* If we're only checking the validity of the request, return
2733          * success without creating the message.
2734          */
2735         if (post == 0) {
2736                 cprintf("%d %s\n", CIT_OK,
2737                         ((valid != NULL) ? valid->display_recp : "") );
2738                 free(valid);
2739                 return;
2740         }
2741
2742         /* Handle author masquerading */
2743         if (CC->fake_postname[0]) {
2744                 strcpy(masquerade_as, CC->fake_postname);
2745         }
2746         else if (CC->fake_username[0]) {
2747                 strcpy(masquerade_as, CC->fake_username);
2748         }
2749         else {
2750                 strcpy(masquerade_as, "");
2751         }
2752
2753         /* Read in the message from the client. */
2754         if (do_confirm) {
2755                 cprintf("%d send message\n", START_CHAT_MODE);
2756         } else {
2757                 cprintf("%d send message\n", SEND_LISTING);
2758         }
2759         msg = CtdlMakeMessage(&CC->user, recp,
2760                 CC->room.QRname, anonymous, format_type,
2761                 masquerade_as, subject, NULL);
2762
2763         if (msg != NULL) {
2764                 msgnum = CtdlSubmitMsg(msg, valid, "");
2765
2766                 if (do_confirm) {
2767                         cprintf("%ld\n", msgnum);
2768                         if (msgnum >= 0L) {
2769                                 cprintf("Message accepted.\n");
2770                         }
2771                         else {
2772                                 cprintf("Internal error.\n");
2773                         }
2774                         if (msg->cm_fields['E'] != NULL) {
2775                                 cprintf("%s\n", msg->cm_fields['E']);
2776                         } else {
2777                                 cprintf("\n");
2778                         }
2779                         cprintf("000\n");
2780                 }
2781
2782                 CtdlFreeMessage(msg);
2783         }
2784         CC->fake_postname[0] = '\0';
2785         free(valid);
2786         return;
2787 }
2788
2789
2790
2791 /*
2792  * API function to delete messages which match a set of criteria
2793  * (returns the actual number of messages deleted)
2794  */
2795 int CtdlDeleteMessages(char *room_name,         /* which room */
2796                        long dmsgnum,            /* or "0" for any */
2797                        char *content_type       /* or "" for any */
2798 )
2799 {
2800
2801         struct ctdlroom qrbuf;
2802         struct cdbdata *cdbfr;
2803         long *msglist = NULL;
2804         long *dellist = NULL;
2805         int num_msgs = 0;
2806         int i;
2807         int num_deleted = 0;
2808         int delete_this;
2809         struct MetaData smi;
2810
2811         lprintf(CTDL_DEBUG, "CtdlDeleteMessages(%s, %ld, %s)\n",
2812                 room_name, dmsgnum, content_type);
2813
2814         /* get room record, obtaining a lock... */
2815         if (lgetroom(&qrbuf, room_name) != 0) {
2816                 lprintf(CTDL_ERR, "CtdlDeleteMessages(): Room <%s> not found\n",
2817                         room_name);
2818                 return (0);     /* room not found */
2819         }
2820         cdbfr = cdb_fetch(CDB_MSGLISTS, &qrbuf.QRnumber, sizeof(long));
2821
2822         if (cdbfr != NULL) {
2823                 msglist = malloc(cdbfr->len);
2824                 dellist = malloc(cdbfr->len);
2825                 memcpy(msglist, cdbfr->ptr, cdbfr->len);
2826                 num_msgs = cdbfr->len / sizeof(long);
2827                 cdb_free(cdbfr);
2828         }
2829         if (num_msgs > 0) {
2830                 for (i = 0; i < num_msgs; ++i) {
2831                         delete_this = 0x00;
2832
2833                         /* Set/clear a bit for each criterion */
2834
2835                         if ((dmsgnum == 0L) || (msglist[i] == dmsgnum)) {
2836                                 delete_this |= 0x01;
2837                         }
2838                         if (strlen(content_type) == 0) {
2839                                 delete_this |= 0x02;
2840                         } else {
2841                                 GetMetaData(&smi, msglist[i]);
2842                                 if (!strcasecmp(smi.meta_content_type,
2843                                                 content_type)) {
2844                                         delete_this |= 0x02;
2845                                 }
2846                         }
2847
2848                         /* Delete message only if all bits are set */
2849                         if (delete_this == 0x03) {
2850                                 dellist[num_deleted++] = msglist[i];
2851                                 msglist[i] = 0L;
2852                         }
2853                 }
2854
2855                 num_msgs = sort_msglist(msglist, num_msgs);
2856                 cdb_store(CDB_MSGLISTS, &qrbuf.QRnumber, (int)sizeof(long),
2857                           msglist, (int)(num_msgs * sizeof(long)));
2858
2859                 qrbuf.QRhighest = msglist[num_msgs - 1];
2860         }
2861         lputroom(&qrbuf);
2862
2863         /* Go through the messages we pulled out of the index, and decrement
2864          * their reference counts by 1.  If this is the only room the message
2865          * was in, the reference count will reach zero and the message will
2866          * automatically be deleted from the database.  We do this in a
2867          * separate pass because there might be plug-in hooks getting called,
2868          * and we don't want that happening during an S_ROOMS critical
2869          * section.
2870          */
2871         if (num_deleted) for (i=0; i<num_deleted; ++i) {
2872                 PerformDeleteHooks(qrbuf.QRname, dellist[i]);
2873                 AdjRefCount(dellist[i], -1);
2874         }
2875
2876         /* Now free the memory we used, and go away. */
2877         if (msglist != NULL) free(msglist);
2878         if (dellist != NULL) free(dellist);
2879         lprintf(CTDL_DEBUG, "%d message(s) deleted.\n", num_deleted);
2880         return (num_deleted);
2881 }
2882
2883
2884
2885 /*
2886  * Check whether the current user has permission to delete messages from
2887  * the current room (returns 1 for yes, 0 for no)
2888  */
2889 int CtdlDoIHavePermissionToDeleteMessagesFromThisRoom(void) {
2890         getuser(&CC->user, CC->curr_user);
2891         if ((CC->user.axlevel < 6)
2892             && (CC->user.usernum != CC->room.QRroomaide)
2893             && ((CC->room.QRflags & QR_MAILBOX) == 0)
2894             && (!(CC->internal_pgm))) {
2895                 return(0);
2896         }
2897         return(1);
2898 }
2899
2900
2901
2902 /*
2903  * Delete message from current room
2904  */
2905 void cmd_dele(char *delstr)
2906 {
2907         long delnum;
2908         int num_deleted;
2909
2910         if (CtdlDoIHavePermissionToDeleteMessagesFromThisRoom() == 0) {
2911                 cprintf("%d Higher access required.\n",
2912                         ERROR + HIGHER_ACCESS_REQUIRED);
2913                 return;
2914         }
2915         delnum = extract_long(delstr, 0);
2916
2917         num_deleted = CtdlDeleteMessages(CC->room.QRname, delnum, "");
2918
2919         if (num_deleted) {
2920                 cprintf("%d %d message%s deleted.\n", CIT_OK,
2921                         num_deleted, ((num_deleted != 1) ? "s" : ""));
2922         } else {
2923                 cprintf("%d Message %ld not found.\n", ERROR + MESSAGE_NOT_FOUND, delnum);
2924         }
2925 }
2926
2927
2928 /*
2929  * Back end API function for moves and deletes
2930  */
2931 int CtdlCopyMsgToRoom(long msgnum, char *dest) {
2932         int err;
2933
2934         err = CtdlSaveMsgPointerInRoom(dest, msgnum,
2935                 (SM_VERIFY_GOODNESS | SM_DO_REPL_CHECK) );
2936         if (err != 0) return(err);
2937
2938         return(0);
2939 }
2940
2941
2942
2943 /*
2944  * move or copy a message to another room
2945  */
2946 void cmd_move(char *args)
2947 {
2948         long num;
2949         char targ[SIZ];
2950         struct ctdlroom qtemp;
2951         int err;
2952         int is_copy = 0;
2953         int ra;
2954         int permit = 0;
2955
2956         num = extract_long(args, 0);
2957         extract(targ, args, 1);
2958         targ[ROOMNAMELEN - 1] = 0;
2959         is_copy = extract_int(args, 2);
2960
2961         if (getroom(&qtemp, targ) != 0) {
2962                 cprintf("%d '%s' does not exist.\n",
2963                         ERROR + ROOM_NOT_FOUND, targ);
2964                 return;
2965         }
2966
2967         getuser(&CC->user, CC->curr_user);
2968         CtdlRoomAccess(&qtemp, &CC->user, &ra, NULL);
2969
2970         /* Check for permission to perform this operation.
2971          * Remember: "CC->room" is source, "qtemp" is target.
2972          */
2973         permit = 0;
2974
2975         /* Aides can move/copy */
2976         if (CC->user.axlevel >= 6) permit = 1;
2977
2978         /* Room aides can move/copy */
2979         if (CC->user.usernum == CC->room.QRroomaide) permit = 1;
2980
2981         /* Permit move/copy from personal rooms */
2982         if ((CC->room.QRflags & QR_MAILBOX)
2983            && (qtemp.QRflags & QR_MAILBOX)) permit = 1;
2984
2985         /* Permit only copy from public to personal room */
2986         if ( (is_copy)
2987            && (!(CC->room.QRflags & QR_MAILBOX))
2988            && (qtemp.QRflags & QR_MAILBOX)) permit = 1;
2989
2990         /* User must have access to target room */
2991         if (!(ra & UA_KNOWN))  permit = 0;
2992
2993         if (!permit) {
2994                 cprintf("%d Higher access required.\n",
2995                         ERROR + HIGHER_ACCESS_REQUIRED);
2996                 return;
2997         }
2998
2999         err = CtdlCopyMsgToRoom(num, targ);
3000         if (err != 0) {
3001                 cprintf("%d Cannot store message in %s: error %d\n",
3002                         err, targ, err);
3003                 return;
3004         }
3005
3006         /* Now delete the message from the source room,
3007          * if this is a 'move' rather than a 'copy' operation.
3008          */
3009         if (is_copy == 0) {
3010                 CtdlDeleteMessages(CC->room.QRname, num, "");
3011         }
3012
3013         cprintf("%d Message %s.\n", CIT_OK, (is_copy ? "copied" : "moved") );
3014 }
3015
3016
3017
3018 /*
3019  * GetMetaData()  -  Get the supplementary record for a message
3020  */
3021 void GetMetaData(struct MetaData *smibuf, long msgnum)
3022 {
3023
3024         struct cdbdata *cdbsmi;
3025         long TheIndex;
3026
3027         memset(smibuf, 0, sizeof(struct MetaData));
3028         smibuf->meta_msgnum = msgnum;
3029         smibuf->meta_refcount = 1;      /* Default reference count is 1 */
3030
3031         /* Use the negative of the message number for its supp record index */
3032         TheIndex = (0L - msgnum);
3033
3034         cdbsmi = cdb_fetch(CDB_MSGMAIN, &TheIndex, sizeof(long));
3035         if (cdbsmi == NULL) {
3036                 return;         /* record not found; go with defaults */
3037         }
3038         memcpy(smibuf, cdbsmi->ptr,
3039                ((cdbsmi->len > sizeof(struct MetaData)) ?
3040                 sizeof(struct MetaData) : cdbsmi->len));
3041         cdb_free(cdbsmi);
3042         return;
3043 }
3044
3045
3046 /*
3047  * PutMetaData()  -  (re)write supplementary record for a message
3048  */
3049 void PutMetaData(struct MetaData *smibuf)
3050 {
3051         long TheIndex;
3052
3053         /* Use the negative of the message number for the metadata db index */
3054         TheIndex = (0L - smibuf->meta_msgnum);
3055
3056         lprintf(CTDL_DEBUG, "PutMetaData(%ld) - ref count is %d\n",
3057                 smibuf->meta_msgnum, smibuf->meta_refcount);
3058
3059         cdb_store(CDB_MSGMAIN,
3060                   &TheIndex, (int)sizeof(long),
3061                   smibuf, (int)sizeof(struct MetaData));
3062
3063 }
3064
3065 /*
3066  * AdjRefCount  -  change the reference count for a message;
3067  *                 delete the message if it reaches zero
3068  */
3069 void AdjRefCount(long msgnum, int incr)
3070 {
3071
3072         struct MetaData smi;
3073         long delnum;
3074
3075         /* This is a *tight* critical section; please keep it that way, as
3076          * it may get called while nested in other critical sections.  
3077          * Complicating this any further will surely cause deadlock!
3078          */
3079         begin_critical_section(S_SUPPMSGMAIN);
3080         GetMetaData(&smi, msgnum);
3081         lprintf(CTDL_DEBUG, "Ref count for message <%ld> before write is <%d>\n",
3082                 msgnum, smi.meta_refcount);
3083         smi.meta_refcount += incr;
3084         PutMetaData(&smi);
3085         end_critical_section(S_SUPPMSGMAIN);
3086         lprintf(CTDL_DEBUG, "Ref count for message <%ld> after write is <%d>\n",
3087                 msgnum, smi.meta_refcount);
3088
3089         /* If the reference count is now zero, delete the message
3090          * (and its supplementary record as well).
3091          */
3092         if (smi.meta_refcount == 0) {
3093                 lprintf(CTDL_DEBUG, "Deleting message <%ld>\n", msgnum);
3094                 delnum = msgnum;
3095                 cdb_delete(CDB_MSGMAIN, &delnum, (int)sizeof(long));
3096                 cdb_delete(CDB_BIGMSGS, &delnum, (int)sizeof(long));
3097
3098                 /* We have to delete the metadata record too! */
3099                 delnum = (0L - msgnum);
3100                 cdb_delete(CDB_MSGMAIN, &delnum, (int)sizeof(long));
3101         }
3102 }
3103
3104 /*
3105  * Write a generic object to this room
3106  *
3107  * Note: this could be much more efficient.  Right now we use two temporary
3108  * files, and still pull the message into memory as with all others.
3109  */
3110 void CtdlWriteObject(char *req_room,            /* Room to stuff it in */
3111                         char *content_type,     /* MIME type of this object */
3112                         char *tempfilename,     /* Where to fetch it from */
3113                         struct ctdluser *is_mailbox,    /* Mailbox room? */
3114                         int is_binary,          /* Is encoding necessary? */
3115                         int is_unique,          /* Del others of this type? */
3116                         unsigned int flags      /* Internal save flags */
3117                         )
3118 {
3119
3120         FILE *fp;
3121         struct ctdlroom qrbuf;
3122         char roomname[ROOMNAMELEN];
3123         struct CtdlMessage *msg;
3124
3125         char *raw_message = NULL;
3126         char *encoded_message = NULL;
3127         off_t raw_length = 0;
3128
3129         if (is_mailbox != NULL)
3130                 MailboxName(roomname, sizeof roomname, is_mailbox, req_room);
3131         else
3132                 safestrncpy(roomname, req_room, sizeof(roomname));
3133         lprintf(CTDL_DEBUG, "CtdlWriteObject() to <%s> (flags=%d)\n", roomname, flags);
3134
3135
3136         fp = fopen(tempfilename, "rb");
3137         if (fp == NULL) {
3138                 lprintf(CTDL_CRIT, "Cannot open %s: %s\n",
3139                         tempfilename, strerror(errno));
3140                 return;
3141         }
3142         fseek(fp, 0L, SEEK_END);
3143         raw_length = ftell(fp);
3144         rewind(fp);
3145         lprintf(CTDL_DEBUG, "Raw length is %ld\n", (long)raw_length);
3146
3147         raw_message = malloc((size_t)raw_length + 2);
3148         fread(raw_message, (size_t)raw_length, 1, fp);
3149         fclose(fp);
3150
3151         if (is_binary) {
3152                 encoded_message = malloc((size_t)
3153                         (((raw_length * 134) / 100) + 4096 ) );
3154         }
3155         else {
3156                 encoded_message = malloc((size_t)(raw_length + 4096));
3157         }
3158
3159         sprintf(encoded_message, "Content-type: %s\n", content_type);
3160
3161         if (is_binary) {
3162                 sprintf(&encoded_message[strlen(encoded_message)],
3163                         "Content-transfer-encoding: base64\n\n"
3164                 );
3165         }
3166         else {
3167                 sprintf(&encoded_message[strlen(encoded_message)],
3168                         "Content-transfer-encoding: 7bit\n\n"
3169                 );
3170         }
3171
3172         if (is_binary) {
3173                 CtdlEncodeBase64(
3174                         &encoded_message[strlen(encoded_message)],
3175                         raw_message,
3176                         (int)raw_length
3177                 );
3178         }
3179         else {
3180                 raw_message[raw_length] = 0;
3181                 memcpy(
3182                         &encoded_message[strlen(encoded_message)],
3183                         raw_message,
3184                         (int)(raw_length+1)
3185                 );
3186         }
3187
3188         free(raw_message);
3189
3190         lprintf(CTDL_DEBUG, "Allocating\n");
3191         msg = malloc(sizeof(struct CtdlMessage));
3192         memset(msg, 0, sizeof(struct CtdlMessage));
3193         msg->cm_magic = CTDLMESSAGE_MAGIC;
3194         msg->cm_anon_type = MES_NORMAL;
3195         msg->cm_format_type = 4;
3196         msg->cm_fields['A'] = strdup(CC->user.fullname);
3197         msg->cm_fields['O'] = strdup(req_room);
3198         msg->cm_fields['N'] = strdup(config.c_nodename);
3199         msg->cm_fields['H'] = strdup(config.c_humannode);
3200         msg->cm_flags = flags;
3201         
3202         msg->cm_fields['M'] = encoded_message;
3203
3204         /* Create the requested room if we have to. */
3205         if (getroom(&qrbuf, roomname) != 0) {
3206                 create_room(roomname, 
3207                         ( (is_mailbox != NULL) ? 5 : 3 ),
3208                         "", 0, 1, 0, VIEW_BBS);
3209         }
3210         /* If the caller specified this object as unique, delete all
3211          * other objects of this type that are currently in the room.
3212          */
3213         if (is_unique) {
3214                 lprintf(CTDL_DEBUG, "Deleted %d other msgs of this type\n",
3215                         CtdlDeleteMessages(roomname, 0L, content_type));
3216         }
3217         /* Now write the data */
3218         CtdlSubmitMsg(msg, NULL, roomname);
3219         CtdlFreeMessage(msg);
3220 }
3221
3222
3223
3224
3225
3226
3227 void CtdlGetSysConfigBackend(long msgnum, void *userdata) {
3228         config_msgnum = msgnum;
3229 }
3230
3231
3232 char *CtdlGetSysConfig(char *sysconfname) {
3233         char hold_rm[ROOMNAMELEN];
3234         long msgnum;
3235         char *conf;
3236         struct CtdlMessage *msg;
3237         char buf[SIZ];
3238         
3239         strcpy(hold_rm, CC->room.QRname);
3240         if (getroom(&CC->room, SYSCONFIGROOM) != 0) {
3241                 getroom(&CC->room, hold_rm);
3242                 return NULL;
3243         }
3244
3245
3246         /* We want the last (and probably only) config in this room */
3247         begin_critical_section(S_CONFIG);
3248         config_msgnum = (-1L);
3249         CtdlForEachMessage(MSGS_LAST, 1, sysconfname, NULL,
3250                 CtdlGetSysConfigBackend, NULL);
3251         msgnum = config_msgnum;
3252         end_critical_section(S_CONFIG);
3253
3254         if (msgnum < 0L) {
3255                 conf = NULL;
3256         }
3257         else {
3258                 msg = CtdlFetchMessage(msgnum, 1);
3259                 if (msg != NULL) {
3260                         conf = strdup(msg->cm_fields['M']);
3261                         CtdlFreeMessage(msg);
3262                 }
3263                 else {
3264                         conf = NULL;
3265                 }
3266         }
3267
3268         getroom(&CC->room, hold_rm);
3269
3270         if (conf != NULL) do {
3271                 extract_token(buf, conf, 0, '\n');
3272                 strcpy(conf, &conf[strlen(buf)+1]);
3273         } while ( (strlen(conf)>0) && (strlen(buf)>0) );
3274
3275         return(conf);
3276 }
3277
3278 void CtdlPutSysConfig(char *sysconfname, char *sysconfdata) {
3279         char temp[PATH_MAX];
3280         FILE *fp;
3281
3282         strcpy(temp, tmpnam(NULL));
3283
3284         fp = fopen(temp, "w");
3285         if (fp == NULL) return;
3286         fprintf(fp, "%s", sysconfdata);
3287         fclose(fp);
3288
3289         /* this handy API function does all the work for us */
3290         CtdlWriteObject(SYSCONFIGROOM, sysconfname, temp, NULL, 0, 1, 0);
3291         unlink(temp);
3292 }
3293
3294
3295 /*
3296  * Determine whether a given Internet address belongs to the current user
3297  */
3298 int CtdlIsMe(char *addr) {
3299         struct recptypes *recp;
3300         int i;
3301
3302         recp = validate_recipients(addr);
3303         if (recp == NULL) return(0);
3304
3305         if (recp->num_local == 0) {
3306                 free(recp);
3307                 return(0);
3308         }
3309
3310         for (i=0; i<recp->num_local; ++i) {
3311                 extract(addr, recp->recp_local, i);
3312                 if (!strcasecmp(addr, CC->user.fullname)) {
3313                         free(recp);
3314                         return(1);
3315                 }
3316         }
3317
3318         free(recp);
3319         return(0);
3320 }
3321
3322
3323 /*
3324  * Citadel protocol command to do the same
3325  */
3326 void cmd_isme(char *argbuf) {
3327         char addr[SIZ];
3328
3329         if (CtdlAccessCheck(ac_logged_in)) return;
3330         extract(addr, argbuf, 0);
3331
3332         if (CtdlIsMe(addr)) {
3333                 cprintf("%d %s\n", CIT_OK, addr);
3334         }
3335         else {
3336                 cprintf("%d Not you.\n", ERROR + ILLEGAL_VALUE);
3337         }
3338
3339 }