* add a strbuf'ed version of stripslashes
[citadel.git] / libcitadel / lib / libcitadel.h
1 /*
2  * $Id$
3  *
4  */
5
6
7 /* protect against double includes */
8 #ifndef LIBCITADEL_H
9 #define LIBCITADEL_H
10
11
12 /*
13  * since we reference time_t...
14  */
15 #include <time.h>
16 #include <stdlib.h>
17 #include <stdarg.h>
18 #define LIBCITADEL_VERSION_NUMBER       760
19
20 /*
21  * Here's a bunch of stupid magic to make the MIME parser portable.
22  */
23 #ifndef SIZ
24 #define SIZ     4096
25 #endif
26
27
28 /* Logging levels - correspond to syslog(3) */
29 enum LogLevel {
30         /* When about to exit the server for an unrecoverable error */
31          CTDL_EMERG,    /* system is unusable */
32         /* Manual intervention is required to avoid an abnormal exit */
33          CTDL_ALERT,    /* action must be taken immediately */
34         /* The server can continue to run with degraded functionality */
35          CTDL_CRIT,     /* critical conditions */
36         /* An error occurs but the server continues to run normally */
37          CTDL_ERR,      /* error conditions */
38         /* An abnormal condition was detected; server will continue normally */
39          CTDL_WARNING,  /* warning conditions */
40         /* Normal messages (login/out, activity, etc.) */
41          CTDL_NOTICE,   /* normal but significant condition */
42         /* Unimportant progress messages, etc. */
43          CTDL_INFO,     /* informational */
44         /* Debugging messages */
45          CTDL_DEBUG     /* debug-level messages */
46 };
47
48
49 /*
50  * View definitions.
51  * Note that not all views are implemented in all clients.
52  */
53 #define VIEW_BBS                0       /* Bulletin board view */
54 #define VIEW_MAILBOX            1       /* Mailbox summary */
55 #define VIEW_ADDRESSBOOK        2       /* Address book view */
56 #define VIEW_CALENDAR           3       /* Calendar view */
57 #define VIEW_TASKS              4       /* Tasks view */
58 #define VIEW_NOTES              5       /* Notes view */
59 #define VIEW_WIKI               6       /* Wiki view */
60 #define VIEW_CALBRIEF           7       /* Brief Calendar view */
61 #define VIEW_JOURNAL            8       /* Journal view */
62 #define VIEW_DRAFTS             9       /* Drafts folder */
63
64
65 #ifndef IsEmptyStr
66 #define IsEmptyStr(a) ((a)[0] == '\0')
67 #endif
68
69 /*
70  * Misc declarations
71  */
72
73 char *libcitadel_version_string(void);
74 int libcitadel_version_number(void);
75 void StartLibCitadel(size_t basesize);
76 void ShutDownLibCitadel(void);
77
78 /*
79  * MIME parser declarations
80  */
81
82 void extract_key(char *target, char *source, long sourcelen, char *key, long keylen);
83
84 void mime_parser(char *content_start, char *content_end,
85                 void (*CallBack)
86                         (char *cbname,
87                         char *cbfilename,
88                         char *cbpartnum,
89                         char *cbdisp,
90                         void *cbcontent,
91                         char *cbtype,
92                         char *cbcharset,
93                         size_t cblength,
94                         char *cbencoding,
95                         char *cbid,
96                         void *cbuserdata),
97                 void (*PreMultiPartCallBack)
98                         (char *cbname,
99                         char *cbfilename,
100                         char *cbpartnum,
101                         char *cbdisp,
102                         void *cbcontent,
103                         char *cbtype,
104                         char *cbcharset,
105                         size_t cblength,
106                         char *cbencoding,
107                         char *cbid,
108                         void *cbuserdata),
109                 void (*PostMultiPartCallBack)
110                         (char *cbname,
111                         char *cbfilename,
112                         char *cbpartnum,
113                         char *cbdisp,
114                         void *cbcontent,
115                         char *cbtype,
116                         char *cbcharset,
117                         size_t cblength,
118                         char *cbencoding,
119                         char *cbid,
120                         void *cbuserdata),
121                 void *userdata,
122                 int dont_decode
123 );
124
125
126
127 char *fixed_partnum(char *);
128 void mime_decode(char *partnum,
129                  char *part_start, size_t length,
130                  char *content_type, char *charset, char *encoding,
131                  char *disposition,
132                  char *id,
133                  char *name, char *filename,
134                  void (*CallBack)
135                   (char *cbname,
136                    char *cbfilename,
137                    char *cbpartnum,
138                    char *cbdisp,
139                    void *cbcontent,
140                    char *cbtype,
141                    char *cbcharset,
142                    size_t cblength,
143                    char *cbencoding,
144                    char *cbid,
145                    void *cbuserdata),
146                  void (*PreMultiPartCallBack)
147                   (char *cbname,
148                    char *cbfilename,
149                    char *cbpartnum,
150                    char *cbdisp,
151                    void *cbcontent,
152                    char *cbtype,
153                    char *cbcharset,
154                    size_t cblength,
155                    char *cbencoding,
156                    char *cbid,
157                    void *cbuserdata),
158                  void (*PostMultiPartCallBack)
159                   (char *cbname,
160                    char *cbfilename,
161                    char *cbpartnum,
162                    char *cbdisp,
163                    void *cbcontent,
164                    char *cbtype,
165                    char *cbcharset,
166                    size_t cblength,
167                    char *cbencoding,
168                    char *cbid,
169                    void *cbuserdata),
170                   void *userdata,
171                   int dont_decode
172 );
173 void the_mime_parser(char *partnum,
174                      char *content_start, char *content_end,
175                      void (*CallBack)
176                       (char *cbname,
177                        char *cbfilename,
178                        char *cbpartnum,
179                        char *cbdisp,
180                        void *cbcontent,
181                        char *cbtype,
182                        char *cbcharset,
183                        size_t cblength,
184                        char *cbencoding,
185                        char *cbid,
186                        void *cbuserdata),
187                      void (*PreMultiPartCallBack)
188                       (char *cbname,
189                        char *cbfilename,
190                        char *cbpartnum,
191                        char *cbdisp,
192                        void *cbcontent,
193                        char *cbtype,
194                        char *cbcharset,
195                        size_t cblength,
196                        char *cbencoding,
197                        char *cbid,
198                        void *cbuserdata),
199                      void (*PostMultiPartCallBack)
200                       (char *cbname,
201                        char *cbfilename,
202                        char *cbpartnum,
203                        char *cbdisp,
204                        void *cbcontent,
205                        char *cbtype,
206                        char *cbcharset,
207                        size_t cblength,
208                        char *cbencoding,
209                        char *cbid,
210                        void *cbuserdata),
211                       void *userdata,
212                       int dont_decode
213 );
214
215 typedef struct StrBuf StrBuf;
216
217 typedef struct _ConstStr {
218         const char *Key;
219         long len;
220 }ConstStr;
221 #define CKEY(a) (a).Key, (a).len
222
223 StrBuf* NewStrBuf(void);
224 StrBuf* NewStrBufDup(const StrBuf *CopyMe);
225 StrBuf* NewStrBufPlain(const char* ptr, int nChars);
226 long StrBufShrinkToFit(StrBuf *Buf, int Force);
227 void ReAdjustEmptyBuf(StrBuf *Buf, long ThreshHold, long NewSize);
228
229 int StrBufPlain(StrBuf *Buf, const char* ptr, int nChars);
230 StrBuf* _NewConstStrBuf(const char* StringConstant, size_t SizeOfStrConstant);
231 #define NewConstStrBuf(a) _NewConstStrBuf(a, sizeof(a))
232 void FreeStrBuf (StrBuf **FreeMe);
233 void HFreeStrBuf (void *VFreeMe);
234 int FlushStrBuf(StrBuf *buf);
235 int FLUSHStrBuf(StrBuf *buf); /* expensive but doesn't leave content behind for others to find in case of errors */
236
237 const char *ChrPtr(const StrBuf *Str);
238 int StrLength(const StrBuf *Str);
239 #define SKEY(a) ChrPtr(a), StrLength(a)
240 long StrBufPeek(StrBuf *Buf, const char* ptr, long nThChar, char PeekValue);
241
242 int StrBufTCP_read_line(StrBuf *buf, int *fd, int append, const char **Error);
243 int StrBufReadBLOB(StrBuf *Buf, int *fd, int append, long nBytes, const char **Error);
244 #define NNN_TERM 1
245 #define O_TERM 0
246 int StrBufReadBLOBBuffered(StrBuf *Buf, 
247                            StrBuf *IOBuf, 
248                            const char **BufPos,
249                            int *fd, 
250                            int append, 
251                            long nBytes, 
252                            int check, 
253                            const char **Error);
254 int StrBufTCP_read_buffered_line(StrBuf *Line, 
255                                  StrBuf *buf, 
256                                  int *fd, 
257                                  int timeout, 
258                                  int selectresolution, 
259                                  const char **Error);
260 int StrBufTCP_read_buffered_line_fast(StrBuf *Line, 
261                                       StrBuf *buf, 
262                                       const char **Pos,
263                                       int *fd, 
264                                       int timeout, 
265                                       int selectresolution, 
266                                       const char **Error);
267
268 int StrBufSipLine(StrBuf *LineBuf, StrBuf *Buf, const char **Ptr);
269 int StrBufExtract_token(StrBuf *dest, const StrBuf *Source, int parmnum, char separator);
270 int StrBufSub(StrBuf *dest, const StrBuf *Source, unsigned long Offset, size_t nChars);
271
272 unsigned long StrBufExtract_unsigned_long(const StrBuf* Source, int parmnum, char separator);
273 long StrBufExtract_long(const StrBuf* Source, int parmnum, char separator);
274 int StrBufExtract_int(const StrBuf* Source, int parmnum, char separator);
275 int StrBufNum_tokens(const StrBuf *source, char tok);
276 int StrBufRemove_token(StrBuf *Source, int parmnum, char separator);
277
278 int StrBufExtract_NextToken(StrBuf *dest, const StrBuf *Source, const char **pStart, char separator);
279 int StrBufSkip_NTokenS(const StrBuf *Source, const char **pStart, char separator, int nTokens);
280 unsigned long StrBufExtractNext_unsigned_long(const StrBuf* Source, const char **pStart, char separator);
281 long StrBufExtractNext_long(const StrBuf* Source, const char **pStart, char separator);
282 int StrBufExtractNext_int(const StrBuf* Source, const char **pStart, char separator);
283
284
285 void StrBufAppendBufPlain(StrBuf *Buf, const char *AppendBuf, long AppendSize, unsigned long Offset);
286 void StrBufAppendBuf(StrBuf *Buf, const StrBuf *AppendBuf, unsigned long Offset);
287 void StrBufAppendPrintf(StrBuf *Buf, const char *format, ...);
288 #ifdef SHOW_ME_VAPPEND_PRINTF
289 /* so owe don't create an include depndency, this is just visible on demand. */
290 void StrBufVAppendPrintf(StrBuf *Buf, const char *format, va_list ap);
291 #endif
292 void StrBufPrintf(StrBuf *Buf, const char *format, ...) __attribute__((__format__(__printf__,2,3)));
293 void StrBufCutLeft(StrBuf *Buf, int nChars);
294 void StrBufCutRight(StrBuf *Buf, int nChars);
295 void StrBufCutAt(StrBuf *Buf, int AfternChars, const char *At);
296 void StrBufTrim(StrBuf *Buf);
297 void StrBufUpCase(StrBuf *Buf);
298 void StrBufLowerCase(StrBuf *Buf);
299 void StrBufStripSlashes(StrBuf *Dir, int RemoveTrailingSlash);
300 void StrBufEUid_unescapize(StrBuf *target, const StrBuf *source);
301 void StrBufEUid_escapize(StrBuf *target, const StrBuf *source);
302
303 void StrBufReplaceChars(StrBuf *buf, char search, char replace);
304
305 int CompressBuffer(StrBuf *Buf);
306 void StrBufConvert(StrBuf *ConvertBuf, StrBuf *TmpBuf, void *pic);
307 void ctdl_iconv_open(const char *tocode, const char *fromcode, void *pic);
308 void StrBuf_RFC822_to_Utf8(StrBuf *Target, const StrBuf *DecodeMe, const StrBuf* DefaultCharset, StrBuf *FoundCharset);
309 int StrBufDecodeBase64(StrBuf *Buf);
310 int StrBufDecodeHex(StrBuf *Buf);
311 int StrBufRFC2047encode(StrBuf **target, const StrBuf *source);
312 int StrBufSanitizeAscii(StrBuf *Buf, const char Mute);
313 #define LB                      (1)             /* Internal escape chars */
314 #define RB                      (2)
315 #define QU                      (3)
316 void StrBufUrlescAppend(StrBuf *OutBuf, const StrBuf *In, const char *PlainIn);
317 long StrEscAppend(StrBuf *Target, const StrBuf *Source, const char *PlainIn, int nbsp, int nolinebreaks);
318 long StrECMAEscAppend(StrBuf *Target, const StrBuf *Source, const char *PlainIn);
319 void StrMsgEscAppend(StrBuf *Target, StrBuf *Source, const char *PlainIn);
320
321 long StrTol(const StrBuf *Buf);
322 int StrToi(const StrBuf *Buf);
323 int StrBufIsNumber(const StrBuf *Buf);
324 long StrBuf_Utf8StrLen(StrBuf *Buf);
325 long StrBuf_Utf8StrCut(StrBuf *Buf, int maxlen);
326
327 const char *GuessMimeType(const char *data, size_t dlen);
328 const char* GuessMimeByFilename(const char *what, size_t len);
329
330 /* Run once at Programstart */
331 int LoadIconDir(const char *DirName);
332
333 /* Select the icon for a given MIME type */
334 const char *GetIconFilename(char *MimeType, size_t len);
335
336
337 /* tools */
338
339
340 int safestrncpy(char *dest, const char *src, size_t n);
341 int num_tokens (const char *source, char tok);
342 long extract_token(char *dest, const char *source, int parmnum, char separator, int maxlen);
343 long grab_token(char **dest, const char *source, int parmnum, char separator);
344 int extract_int (const char *source, int parmnum);
345 long extract_long (const char *source, int parmnum);
346 unsigned long extract_unsigned_long(const char *source, int parmnum);
347 void CtdlInitBase64Table(void);
348 size_t CtdlEncodeBase64(char *dest, const char *source, size_t sourcelen, int linebreaks);
349 int CtdlDecodeBase64(char *dest, const char *source, size_t length);
350 unsigned int decode_hex(char *Source);
351 int CtdlDecodeQuotedPrintable(char *decoded, char *encoded, int sourcelen);
352 void StripSlashes(char *Dir, int TrailingSlash);
353 size_t striplt(char *);
354 int haschar(const char *st, int ch);
355 void remove_token(char *source, int parmnum, char separator);
356 void fmt_date(char *buf, size_t n, time_t thetime, int seconds);
357 int is_msg_in_sequence_set(const char *mset, long msgnum);
358 char *memreadline(char *start, char *buf, int maxlen);
359 char *memreadlinelen(char *start, char *buf, int maxlen, int *retlen);
360 #define IsEmptyStr(a) ((a)[0] == '\0')
361 #define num_parms(source)               num_tokens(source,(char)'|')
362 int stripout(char *str, char leftboundary, char rightboundary);
363 void stripallbut(char *str, char leftboundary, char rightboundary);
364 char *myfgets(char *s, int size, FILE *stream);
365 void urlesc(char *outbuf, size_t oblen, char *strbuf);
366 char *CtdlTempFileName(char *prefix1, int prefix2);
367 FILE *CtdlTempFile(void);
368 void generate_uuid(char *buf);
369 char *bmstrcasestr(char *text, char *pattern);
370 char *bmstrcasestr_len(char *text, size_t textlen, char *pattern, size_t patlen);
371 void CtdlMakeTempFileName(char *name, int len);
372 char *rfc2047encode(char *line, long length);
373 int is_msg_in_mset(const char *mset, long msgnum);
374 int pattern2(char *search, char *patn);
375 void stripltlen(char *, int *);
376 char *html_to_ascii(char *inputmsg, int msglen, int screenwidth, int do_citaformat);
377 void LoadEntityList(char *FileName);
378
379
380
381 /* vCard stuff */
382
383 #define CTDL_VCARD_MAGIC        0xa1f9
384
385 /* This data structure represents a vCard object currently in memory. */
386 struct vCard {
387         int magic;
388         int numprops;
389         struct vCardProp {
390                 char *name;
391                 char *value;
392         } *prop;
393 };
394
395
396 struct vCard *vcard_new(void);
397 void vcard_add_prop(struct vCard *v, char *propname, char *propvalue);
398 struct vCard *vcard_load(char *vtext);
399 struct vCard *VCardLoad(StrBuf *vbtext);
400
401 void vcard_free(struct vCard *);
402 void vcard_set_prop(struct vCard *v, char *name, char *value, int append);
403 char *vcard_get_prop(struct vCard *v, char *propname, int is_partial,
404                         int instance, int return_propname);
405 char *vcard_serialize(struct vCard *);
406 void vcard_fn_to_n(char *vname, char *n, size_t vname_size);
407 void remove_charset_attribute(char *strbuf);
408 long StrBufUnescape(StrBuf *Buf, int StripBlanks);
409
410 /*
411  * Hash list implementation for Citadel
412  */
413 #define HKEY(a) a, (sizeof(a) - 1)
414
415 typedef struct HashList HashList;
416
417 typedef struct HashKey HashKey;
418
419 typedef struct HashPos HashPos;
420
421 typedef void (*DeleteHashDataFunc)(void * Data);
422 typedef const char *(*PrintHashContent)(void * Data);
423 typedef int (*CompareFunc)(const void* Item1, const void*Item2);
424 typedef int (*HashFunc)(const char *Str, long Len);
425 typedef void (*TransitionFunc) (void *Item1, void *Item2, int Odd);
426 typedef void (*PrintHashDataFunc) (const char *Key, void *Item, int Odd);
427
428 int Flathash(const char *str, long len);
429 #define IKEY(a) (const char*)(&((int)a)), sizeof(int)
430
431 HashList *NewHash(int Uniq, HashFunc F);
432 void DeleteHash(HashList **Hash);
433 void HDeleteHash(void *vHash);
434 int GetHash(HashList *Hash, const char *HKey, long HKLen, void **Data);
435 void Put(HashList *Hash, const char *HKey, long HKLen, void *Data, DeleteHashDataFunc DeleteIt);
436 int GetKey(HashList *Hash, char *HKey, long HKLen, void **Data);
437 int GetHashKeys(HashList *Hash, char ***List);
438 int dbg_PrintHash(HashList *Hash, PrintHashContent first, PrintHashContent Second);
439 int PrintHash(HashList *Hash, TransitionFunc Trans, PrintHashDataFunc PrintEntry);
440 HashPos *GetNewHashPos(HashList *Hash, int StepWidth);
441 int GetHashPosCounter(HashPos *At);
442 void DeleteHashPos(HashPos **DelMe);
443 int GetNextHashPos(HashList *Hash, HashPos *At, long *HKLen, const char **HashKey, void **Data);
444 int GetHashAt(HashList *Hash,long At, long *HKLen, const char **HashKey, void **Data);
445 void SortByHashKey(HashList *Hash, int Order);
446 void SortByHashKeyStr(HashList *Hash);
447 int GetCount(HashList *Hash);
448 const void *GetSearchPayload(const void *HashVoid);
449 void SortByPayload(HashList *Hash, CompareFunc SortBy);
450 void generic_free_handler(void *ptr);
451 void reference_free_handler(void *ptr);
452 int HashLittle(const void *key, size_t length);
453
454
455 void convert_spaces_to_underscores(char *str);
456
457 /*
458  * Convert 4 bytes char into an Integer.
459  * usefull for easy inexpensive hashing 
460  * of for char strings.
461  */
462 #define CHAR4TO_INT(a) ((int) (a[0] | (a[1]<<8) | (a[2]<<16) | (a[3]<<24)))
463
464 /* vNote implementation */
465
466 #define CTDL_VNOTE_MAGIC        0xa1fa
467
468 struct vnote {
469         int magic;
470         char *uid;
471         char *summary;
472         char *body;
473         int pos_left;
474         int pos_top;
475         int pos_width;
476         int pos_height;
477         int color_red;
478         int color_green;
479         int color_blue;
480 };
481
482
483
484 struct vnote *vnote_new(void);
485 struct vnote *vnote_new_from_str(char *s);
486 void vnote_free(struct vnote *v);
487 char *vnote_serialize(struct vnote *v);
488 void vnote_serialize_output_field(char *append_to, char *field, char *label);
489
490
491
492
493 /*
494  * Create JSON style structures in C plus serialize them to one string
495  */
496
497 typedef struct JsonValue JsonValue;
498
499
500 void DeleteJSONValue(void *vJsonValue);
501
502 JsonValue *NewJsonObject(const char *Key, long keylen);
503
504 JsonValue *NewJsonArray(const char *Key, long keylen);
505
506 JsonValue *NewJsonNumber(const char *Key, long keylen, long Number);
507
508 JsonValue *NewJsonBigNumber(const char *Key, long keylen, double Number);
509
510 JsonValue *NewJsonString(const char *Key, long keylen, StrBuf *CopyMe);
511
512 JsonValue *NewJsonPlainString(const char *Key, long keylen, const char *CopyMe, long len);
513
514 JsonValue *NewJsonNull(const char *Key, long keylen);
515
516 JsonValue *NewJsonBool(const char *Key, long keylen, int value);
517
518 void JsonArrayAppend(JsonValue *Array, JsonValue *Val);
519
520 void JsonObjectAppend(JsonValue *Array, JsonValue *Val);
521
522 void SerializeJson(StrBuf *Target, JsonValue *Val, int FreeVal);
523
524
525
526 /*
527  * Citadels Wildfire implementation, see 
528  * http://www.firephp.org/Wiki/Reference/Protocol
529  * and http://wildfirehq.org/ for details
530  */
531 typedef void (*AddHeaderFunc)(const char *HdrName, const char *HdrValue);
532
533 typedef enum _WF_MessageType {
534         eLOG, 
535         eINFO,
536         eWARN,
537         eERROR,
538         eTRACE,
539         eEXCEPTION
540 } WF_MessageType;
541
542 JsonValue *WildFireException(const char *Filename, long FileLen,
543                              long LineNo,
544                              StrBuf *Message,
545                              int StackOffset);
546
547 void WildFireAddArray(JsonValue *ReportBase, JsonValue *Array, WF_MessageType Type);
548
549 JsonValue *WildFireMessagePlain(const char *Filename, long fnlen,
550                                    long LineNo,
551                                    const char *Message, long len, 
552                                    WF_MessageType Type);
553
554 JsonValue *WildFireMessage(const char *Filename, long fnlen,
555                            long lineno,
556                            StrBuf *Msg, 
557                            WF_MessageType Type);
558
559 void WildFireInitBacktrace(const char *argvNull, int AddBaseFrameSkip);
560
561 void WildFireSerializePayload(StrBuf *JsonBuffer, StrBuf *OutBuf, int *MsgCount, AddHeaderFunc AddHdr);
562
563 #define WF_MAJOR "1"
564 #define WF_STRUCTINDEX "1"
565 #define WF_SUB "1"
566
567
568 #endif  // LIBCITADEL_H