* fix bug in locale declaration array (missing ,)
[citadel.git] / webcit / gettext.c
1 /*
2  * $Id$
3  */
4
5 #include "webcit.h"
6 #include "webserver.h"
7 #define SEARCH_LANG 20          /* how many langs should we parse? */
8
9 #ifdef ENABLE_NLS
10 /* actual supported locales */
11 const char *AvailLang[] = {
12         "C",
13         "en_US",
14         "de_DE",
15         "it_IT",
16         "es_ES",
17         "en_GB",
18         "da_DK",
19         "fr_FR",
20         "nl_NL",
21         "pt_BR",
22         "hu_HU",
23         ""
24 };
25
26 const char **AvailLangLoaded;
27 long nLocalesLoaded = 0;
28
29 #ifdef HAVE_USELOCALE
30 locale_t *wc_locales; /**< here we keep the parsed stuff */
31 #endif
32
33 /** Keep information about one locale */
34 typedef struct _lang_pref{
35         char lang[16];          /**< the language locale string */
36         char region[16];        /**< the region locale string */
37         long priority;          /**< which priority does it have */
38         int availability;       /**< do we know it? */
39         int selectedlang;       /**< is this the selected language? */
40 } LangStruct;
41
42 /* \brief parse browser locale header 
43  * seems as most browsers just do a one after coma value even if more than 10 locales are available. Sample strings:
44  * opera: 
45  * Accept-Language: sq;q=1.0,de;q=0.9,as;q=0.8,ar;q=0.7,bn;q=0.6,zh-cn;q=0.5,kn;q=0.4,ch;q=0.3,fo;q=0.2,gn;q=0.1,ce;q=0.1,ie;q=0.1 
46  * Firefox 
47  * Accept-Language: 'de-de,en-us;q=0.7,en;q=0.3' 
48  * Accept-Language: de,en-ph;q=0.8,en-us;q=0.5,de-at;q=0.3 
49  * Accept-Language: de,en-us;q=0.9,it;q=0.9,de-de;q=0.8,en-ph;q=0.7,de-at;q=0.7,zh-cn;q=0.6,cy;q=0.5,ar-om;q=0.5,en-tt;q=0.4,xh;q=0.3,nl-be;q=0.3,cs;q=0.2,sv;q=0.1,tk;q=0.1 
50  * \param LocaleString the string from the browser http headers
51  */
52
53 void httplang_to_locale(StrBuf *LocaleString, wcsession *sess)
54 {
55         LangStruct wanted_locales[SEARCH_LANG];
56         LangStruct *ls;
57
58         int i = 0;
59         int j = 0;
60         /* size_t len = strlen(LocaleString); */
61         long prio;
62         int av;
63         int nBest;
64         int nParts;
65         StrBuf *Buf = NULL;
66         StrBuf *SBuf = NULL;
67
68         nParts=StrBufNum_tokens(LocaleString,',');
69         for (i=0; ((i<nParts)&&(i<SEARCH_LANG)); i++)
70         {
71                 char lbuf[16];
72                 int blen;
73                         
74                 if (Buf == NULL) {
75                         Buf = NewStrBuf();
76                         SBuf = NewStrBuf();
77                 }
78                 else {
79                         FlushStrBuf(Buf);
80                         FlushStrBuf(SBuf);
81                 }
82
83                 ls=&wanted_locales[i];
84
85                 StrBufExtract_token(Buf,LocaleString, i,',');
86                 /** we are searching, if this list item has something like ;q=n*/
87                 if (StrBufNum_tokens(Buf,'=')>1) {
88                         int sbuflen, k;
89                         StrBufExtract_token(SBuf,Buf, 1,'=');
90                         sbuflen=StrLength(SBuf);
91                         for (k=0; k<sbuflen; k++) 
92                                 if (ChrPtr(SBuf)[k]=='.') 
93                                         StrBufPeek(SBuf, NULL, k, '0');
94                         ls->priority=StrTol(SBuf);
95                 }
96                 else {
97                         ls->priority=1000;
98                 }
99                 /** get the locale part */
100                 StrBufExtract_token(SBuf ,Buf, 0, ';');
101                 /** get the lang part, which should be allways there */
102                 extract_token(&ls->lang[0], ChrPtr(SBuf), 0, '-', 16);
103                 /** get the area code if any. */
104                 if (StrBufNum_tokens(SBuf,'-') > 1) {
105                         extract_token(&ls->region[0],ChrPtr(SBuf),1,'-',16);
106                 }
107                 else { /** no ara code? use lang code */
108                         blen=strlen(&ls->lang[0]);
109                         memcpy(&ls->region[0], ls->lang,blen);
110                         ls->region[blen]='\0';
111                 } /** area codes are uppercase */
112                 blen=strlen(&ls->region[0]);
113                 for (j=0; j<blen; j++)
114                 {
115                         int chars=toupper(ls->region[j]);
116                         ls->region[j]=(char)chars;/** \todo ?! */
117                 }
118                 sprintf(&lbuf[0],"%s_%s",&ls->lang[0],&ls->region[0]);
119                         
120                 /** check if we have this lang */
121                 ls->availability=1;
122                 ls->selectedlang=-1;
123                 for (j=0; j<nLocalesLoaded; j++) {
124                         int result;
125                         /** match against the LANG part */
126                         result=strcasecmp(&ls->lang[0], AvailLangLoaded[j]);
127                         if ((result<0)&&(result<ls->availability)){
128                                 ls->availability=result;
129                                 ls->selectedlang=j;
130                         }
131                         /** match against lang and locale */
132                         if (0==strcasecmp(&lbuf[0], AvailLangLoaded[j])){
133                                 ls->availability=0;
134                                 ls->selectedlang=j;
135                                 j=nLocalesLoaded;
136                         }
137                 }
138         }
139         
140         prio=0;
141         av=-1000;
142         nBest=-1;
143         for (i=0; ((i<nParts)&&(i<SEARCH_LANG)); i++) {
144                 ls=&wanted_locales[i];
145                 if ((ls->availability<=0)&& 
146                    (av<ls->availability)&&
147                    (prio<ls->priority)&&
148                    (ls->selectedlang!=-1)) {
149                         nBest=ls->selectedlang;
150                         av=ls->availability;
151                         prio=ls->priority;
152                 }
153         }
154         if (nBest == -1) {
155                 /** fall back to C */
156                 nBest=0;
157         }
158         sess->selected_language=nBest;
159         lprintf(9, "language found: %s\n", AvailLangLoaded[WC->selected_language]);
160         FreeStrBuf(&Buf);
161         FreeStrBuf(&SBuf);
162 }
163
164 /**
165  * \brief show the language chooser on the login dialog
166  * depending on the browser locale change the sequence of the 
167  * language chooser.
168  */
169 void tmplput_offer_languages(StrBuf *Target, WCTemplputParams *TP)
170 {
171         int i;
172 #ifndef HAVE_USELOCALE
173         char *Lang = getenv("LANG");
174         
175         if (Lang == NULL)
176                 Lang = "C";
177 #endif
178
179
180         if (nLocalesLoaded == 1) {
181                 wprintf("<p>%s</p>", AvailLangLoaded[0]);
182                 return;
183         }
184
185         wprintf("<select name=\"language\" id=\"lname\" size=\"1\">\n");
186
187         for (i=0; i < nLocalesLoaded; ++i) {
188 #ifndef HAVE_USELOCALE
189                 if (strcmp(AvailLangLoaded[i], Lang) == 0)
190 #endif
191                 wprintf("<option %s value=%s>%s</option>\n",
192                         ((WC->selected_language == i) ? "selected" : ""),
193                         AvailLangLoaded[i],
194                         AvailLangLoaded[i]
195                 );
196         }
197
198         wprintf("</select>\n");
199 }
200
201 /**
202  * \brief Set the selected language for this session.
203  * \param lang the locale to set.
204  */
205 void set_selected_language(const char *lang) {
206 #ifdef HAVE_USELOCALE
207         int i;
208         for (i=0; i<nLocalesLoaded; ++i) {
209                 if (!strcasecmp(lang, AvailLangLoaded[i])) {
210                         WC->selected_language = i;
211                 }
212         }
213 #endif
214 }
215
216 /**
217  * \brief Activate the selected language for this session.
218  */
219 void go_selected_language(void) {
220 #ifdef HAVE_USELOCALE
221         wcsession *WCC = WC;
222         if (WCC->selected_language < 0) return;
223         uselocale(wc_locales[WCC->selected_language]);  /** switch locales */
224         textdomain(textdomain(NULL));                   /** clear the cache */
225 #else
226         char *language;
227         
228         language = getenv("LANG");
229         setlocale(LC_MESSAGES, language);
230 #endif
231 }
232
233 /**
234  * \brief Deactivate the selected language for this session.
235  */
236 void stop_selected_language(void) {
237 #ifdef HAVE_USELOCALE
238         uselocale(LC_GLOBAL_LOCALE);                    /** switch locales */
239         textdomain(textdomain(NULL));                   /** clear the cache */
240 #endif
241 }
242
243 #ifdef HAVE_USELOCALE
244         locale_t Empty_Locale;
245 #endif
246
247 /**
248  * \brief Create a locale_t for each available language
249  */
250 void initialize_locales(void) {
251         int nLocales;
252         int i;
253         char buf[32];
254         char *language = NULL;
255         char *locale;
256
257
258         nLocales = 0; 
259         while (!IsEmptyStr(AvailLang[nLocales]))
260                 nLocales++;
261
262         language = getenv("WEBCIT_LANG");
263         if ((language) && (!IsEmptyStr(language)) && (strcmp(language, "UNLIMITED") != 0)) {
264                 lprintf(9, "Nailing locale to %s\n", language);
265         }
266         else language = NULL;
267
268         AvailLangLoaded = malloc (sizeof(char*) * nLocales);
269         memset(AvailLangLoaded, 0, sizeof(char*) * nLocales);
270 #ifdef HAVE_USELOCALE
271         wc_locales = malloc (sizeof(locale_t) * nLocales);
272         memset(wc_locales,0, sizeof(locale_t) * nLocales);
273         /* create default locale */
274         Empty_Locale = newlocale(LC_ALL_MASK, NULL, NULL);
275 #endif
276
277
278
279
280         for (i = 0; i < nLocales; ++i) {
281                 if ((language != NULL) && (strcmp(AvailLang[i], language) != 0))
282                         continue;
283                 if (i == 0) {
284                         sprintf(buf, "%s", AvailLang[i]);       /* locale 0 (C) is ascii, not utf-8 */
285                 }
286                 else {
287                         sprintf(buf, "%s.UTF8", AvailLang[i]);
288                 }
289 #ifdef HAVE_USELOCALE
290                 wc_locales[nLocalesLoaded] = newlocale(
291                         (LC_MESSAGES_MASK|LC_TIME_MASK),
292                         buf,
293                         (((i > 0) && (wc_locales[0] != NULL)) ? wc_locales[0] : Empty_Locale)
294                 );
295                 if (wc_locales[nLocalesLoaded] == NULL) {
296                         lprintf(1, "Error configuring locale for "LOCALEDIR"locale/%s: %s\n",
297                                 buf,
298                                 strerror(errno)
299                         );
300                 }
301                 else {
302                         lprintf(3, "Configured available locale: %s\n", buf);
303                         AvailLangLoaded[nLocalesLoaded] = AvailLang[i];
304                         nLocalesLoaded++;
305                 }
306 #else
307                 if (language != NULL) {
308                         setenv("LANG", buf, 1);
309                         AvailLangLoaded[nLocalesLoaded] = AvailLang[i];
310                         nLocalesLoaded++;
311                 }
312                 else if (nLocalesLoaded == 0) {
313                         setenv("LANG", buf, 1);
314                         AvailLangLoaded[nLocalesLoaded] = AvailLang[i];
315                         nLocalesLoaded++;
316                 }
317 #endif
318         }
319         if ((language != NULL) && (nLocalesLoaded == 0)) {
320                 lprintf(1, "Your selected locale [%s] isn't available on your system. falling back to C\n", language);
321 #ifdef HAVE_USELOCALE
322                 wc_locales[0] = newlocale(
323                         (LC_MESSAGES_MASK|LC_TIME_MASK),
324                         AvailLang[0],
325                         Empty_Locale);          
326 #else
327                 setlocale(LC_MESSAGES, AvailLang[0]);
328                 setenv("LANG", AvailLang[0], 1);
329 #endif
330                 AvailLangLoaded[0] = AvailLang[0];
331                 nLocalesLoaded = 1;
332         }
333 #ifndef HAVE_USELOCALE
334
335
336 #endif
337
338 #ifdef ENABLE_NLS
339         locale = setlocale(LC_ALL, "");
340
341         lprintf(9, "Message catalog directory: %s\n", bindtextdomain("webcit", LOCALEDIR"/locale"));
342         lprintf(9, "Text domain: %s\n", textdomain("webcit"));
343         lprintf(9, "Text domain Charset: %s\n", bind_textdomain_codeset("webcit","UTF8"));
344
345 #endif
346 }
347
348
349 void 
350 ServerShutdownModule_GETTEXT
351 (void)
352 {
353 #ifdef HAVE_USELOCALE
354         int i;
355         for (i = 0; i < nLocalesLoaded; ++i) {
356                 if (Empty_Locale != wc_locales[i])
357                         freelocale(wc_locales[i]);
358         }
359         free(wc_locales);
360         free(AvailLangLoaded);
361 #endif
362 }
363
364 #else   /* ENABLE_NLS */
365 const char *AvailLang[NUM_LANGS] = {
366         "C"};
367
368 /** \brief dummy for non NLS enabled systems */
369 void tmplput_offer_languages(StrBuf *Target, WCTemplputParams *TP)
370 {
371         wprintf("English (US)");
372 }
373
374 /** \brief dummy for non NLS enabled systems */
375 void set_selected_language(char *lang) {
376 }
377
378 /** \brief dummy for non NLS enabled systems */
379 void go_selected_language(void) {
380 }
381
382 /** \brief dummy for non NLS enabled systems */
383 void stop_selected_language(void) {
384 }
385
386 #endif  /* ENABLE_NLS */
387
388
389 void TmplGettext(StrBuf *Target, WCTemplputParams *TP)
390 {
391         StrBufAppendBufPlain(Target, _(TP->Tokens->Params[0]->Start), -1, 0);
392 }
393
394
395 /*
396  * Returns the language currently in use.
397  * This function returns a static string, so don't do anything stupid please.
398  */
399 const char *get_selected_language(void) {
400 #ifdef ENABLE_NLS
401 #ifdef HAVE_USELOCALE
402         return AvailLang[WC->selected_language];
403 #else
404         return "en";
405 #endif
406 #else
407         return "en";
408 #endif
409 }
410
411 void 
412 InitModule_GETTEXT
413 (void)
414 {
415         initialize_locales();
416         RegisterNamespace("LANG:SELECT", 0, 0, tmplput_offer_languages, CTX_NONE);
417 }
418
419
420 void
421 SessionNewModule_GETTEXT
422 (wcsession *sess)
423 {
424 #ifdef ENABLE_NLS
425         OneHttpHeader *vLine = NULL;
426
427         if (    (sess->Hdr->HTTPHeaders != NULL)
428                 && GetHash(sess->Hdr->HTTPHeaders, HKEY("ACCEPT-LANGUAGE"), (void *)&vLine)
429                 && (vLine != NULL)
430                 && (vLine->Val != NULL)
431         ) {
432                 StrBuf *accept_language = vLine->Val;
433                 httplang_to_locale(accept_language, sess);
434         }
435 #endif
436 }
437
438 void
439 SessionAttachModule_GETTEXT
440 (wcsession *sess)
441 {
442 #ifdef ENABLE_NLS
443         go_selected_language();                                 /* set locale */
444 #endif
445 }
446
447 void 
448 SessionDestroyModule_GETTEXT
449 (wcsession *sess)
450 {
451 #ifdef ENABLE_NLS
452         stop_selected_language();                               /* unset locale */
453 #endif
454 }