Tag stable-78x for 7.86 release

Problem with merge: this is called Buf in stable, not LineBuf

if StrBuf_ServGetln() is called in a loop, its return value has to be checked for error, else we might get into infinite loops.

when generating subjects for calendar items do quoted printeable encoding

Fix searching of ']'

Mailinglist client: don't add roomname to subject if its already there

Reset run_queue_now back to 0 after a forced run of the SMTP queue.
Otherwise we continue to retry every message every minute, and that is bad.

Fixed incorrect byte count when writing XML entity references
(cherry picked from commit 77fc8e79ee0edb8b4b67fc4dcb3ed1b32381cb52)

Backported XML export fixes from master

Sanitize v_seen and v_answered during export
(cherry picked from commit eeda2be5a606771a06a74cca7705f4a7ec12c7fa)

Escape single and double quotes in export format
(cherry picked from commit cbd9bcf9a70f48fbb6d85b0a8eab837ebe1838ce)

Backport 3acf77119652d4e6081815dac7dbed4ed6fb7d2f from master

Enable XMPP over TLS

free the context on that exit place too.

Memleak: free the context on abort too.

f85b76d98b6922b36aef7eda85c08c09c478fe71

By jimcuclamath: set maxium allowed password length to the length of the buffer we read into.

use the gnu format string checker for CtdlLogPrintf; fix associated new warnings / problems.

apply memset-0 fix here too.

SMTP-Bouncing: don't put message body on wrong Citadel-Message-field.

Wiki revs now work again - replaced --global-reject-file with -r

THIS IS 7.85

Fix hangups on binary blob reads from webcit stable

Fix bug in SMTP-Client to send two < in the envelope sender, which will probably result in bounces/rejects.

update version number in preparation for 7.85 release

Replaced client_read() with socket_read_blob() in serv_network.c

Revert d36da34581cd277a2face04a11cdb8f81d8d2121 in stable.

SMTP Async I/O:

 - while sending data, wait relative to the size of the mail /128 + a minimal set of 50.

MimeParser Rewrite: add test to revalidate the results of the rewrite to the stable mimeparser.

Relax SMTP Client timeout settings as discussed.

 - default is 30 seconds
 - Server greeting 90 seconds (DNS lookups for RBLs might be slow
 - Server sending the response to the EOM sequence; here we might have background processing like virus or spam scanning that wants to finish before finaly accepting the message.

Nonblocking sockets need to select while writing

 we changed the SMTP outbound connections to be nonblocking so we could abort on not reacting SMTP-Servers.
 thus we need to select before writing, else the connection will fail.

have flexible timouts while reading lines in our client mode connections

since some mailserver take a little longer to finish reading mails we need to wait after we send our '.\r\n'; its 90 seconds now, all other parts will wait 5s, quit will wait 1 second.

check whether the sorting algorithm specified via BSTRs is intended for us before using its groupchange detector.

Memleak: free the roomlist of the sieve-queued rooms on exit; other tiny leaks.

smtp_do_bounce(): don't loose msg['A'] when overwriting its content.

Memleak: CtdlMakeMessage(): don't forget about the original author.

Memleak: post_message(): don't forget about the recipient buffer.

Don't send identity header if we want to do gzip compression

Propfind replies send 'Content-encoding: identity' right now, which is superseeded by the frameworks 'Content-encoding: gzip' in case of the client indicates this.
sending that headers twice has uncertain results depending on the client; while the RFC demands to evaluate the later, some fail to read our reply then.

fix buffer overrun while converting charsets

* DecodeSegment() didn't check whether one of the temporary buffers would be able to bear the transcoding results

fix crash in SSL BLOB-Reading

 - when diciding whether the read buffer contains more than the blob reader wants we had a wrong equation.

if we tell the client we're in error state, return.

if SNET would fail to open the temporary file, it would tell the client 'error' and continue to read -> hang
we now abort after reporting the error.

Finalize fixing of netconfig loosing incident

 * need to set & check errno that tells us whether our tempfile was fresh created or already there
 * remove tmpfile on error
 * don't use fopen() because we can't specify the flags we need for that
 * ftruncate() the tempfile at the right place

Prevent writing empty network configs Part II
 * writenfree_spoolcontrol_file ()
   - serialise into a StrBuf
   - write that to a tempfile in the netconfig directory
   - if we fail, abort & log error
   - if we succed use rename () to replace the original config file.

* cmd_snet: make shure the target FS has enough space for the new config

 - Create our own filename insteaf of using mk*tmp*; CC->cs_pid should be uniq.; we use  O_CREAT|O_EXCL so we're shure its ours or fails.
 - Create that filename in the same directory as the filal config filename; by that we can be shure its in the same filesystem, and if thats full, we will fail
 - Stat the original file for sise (if not there assume 80) and write twice as much into that file so we're next to shure the content from the client will fit in
 - the citadel protocol is a little st00pit here, we don't know the size in advance, and we can't return an error _after_ accepting the file
 - instead of moving the content of the tempfile into the final file, we use rename() which is supposed to be atomic.

assoc_file_name(): return length of string

* sock_getln (): CtdlSockGetLine() gives us lines without \r\n, no need to look for them again
* sock_getln_err (): add integer pointer returning the actual return state in case of error
* ml_sock_gets (): use sock_getln_err () so we can abort on impropper replies
* smtp_try (): make socket nonblocking, so we can abort on error
 -> we will wait 5 seconds for the remote site to send us the SMTP-State else we will abort the connection on failure.

* check whether we need to QP-Encode our from in case of umlauts or so in the users realname.

* StrBufSanitizeEmailRecipientVector () fix another off by one

* the number of messages available are unequal to those in scope of the list.

* off by one in range checking of indexed access

Backport infanticide prevention patch from head

Fixed a race condition which made the thread pool size unnecessarily large.

* knrooms():
 - use the right values for the type of display
 - detect properly whether we need to set a default

Removed a few more Id tags

* moving directories around isn't smart in a git workingcopy. create symlinks & ignore them.

Removed an Id tag

webcit to 7.84

libcitadel to 7.84

* set 7.84 version

* fix GTSN not to cut seen stats at 1024 chars
(cherry picked from commit e766e2c6d4bfa8ebce17ca3039963a3761fd3e8f)

* do typedef the visit struct, remove all those 'struct' statements from all over the source
(cherry picked from commit 63262a64633e72e4096aaeedda6950c02fb4d990)

* print name of context instead of number into the error message.
(cherry picked from commit 3c4dab06dfa7658653d7aca0a4025a8c35dcc3bb)

* substracting independend pointers with no conjunction gives mad numbers. thanks samjam for pointing that out.
(cherry picked from commit 7be3fa3266788de371f7ba1c1bc0d701b0080a26)

* output what we're sending into the BIGBAD_IODBG too.
(cherry picked from commit e6116200be29b3c203a3aa047eadf43245475bed)

* client_read_sslblob(): fix buffer handling, clean up the read-buffer if neccesary.
(cherry picked from commit d91993b02381c683f14bfc6f45476c68ef45662a)

Oops, my svn/git autodetection logic is still broken.  Fixed.
(cherry picked from commit ea36c3b92b59412eb3d74ab248f2c371d254dc06)

Yet another attempt at pushing my citadel/scripts/mk_svn_revision.sh changes to the stable-78x branch

* One more change to the recent header folding bugfix

* Fixed a wrap bug in convert_internet_message()
* This also is backported to stable, which is now 7.84

* GetRoomListHashLKRA(): just send a command if we're going to read the reply.

*** r8756 IS 7.83 ***

* display_shutdown(): fix template reference

* StrBufSanitizeEmailRecipientVector() fix bug cutting one of the email address

* All components of both stable and trunk noted as version 7.83

* When outputting legacy Citadel format messages, stop only when we reach a 0x00 byte, not when we reach any weird character.

* ctdl_internal_thread_func(): just use SYS_gettid if the system provides it. thit fixes the BSD build.

* Backport the important part of r8717 to stable.  I forgot I did this on Friday.  When running EVT_TIMER hooks from the housekeeping loop, do citthread_setspecific(MyConKey, NULL); before running *each* hook.  Some of the hooks are setting MyConKey and then leaving it set.  This is bad and causes crasheriferous behavior.  This change should fix it.

Fix IMAP-List command
* imap_is_message_set (): here we have more abort conditions, which we need to put into account when drawing our final result

* StrBufDecodeBase64(): init output buffer so in case of an empty / illegal base64 string its defined.

* StrBufSanitizeEmailRecipientVector () fix null pointer accesses

*** CITADEL 7.82 RELEASE IS r8707 ***

* Backport r8705 to stable

* Version number to 782.  NOT A RELEASE

* imap_load_part() is expecting the desired_section to be a char*, not a ChrPtr.  Fixed.  This probably fixes Alpine.  Also backported to stable.

* indentation fix

* Fix a bug that caused a logging problem but did not affect protocol behavior

* Backport r8699 to stable

* if no version is to be found, and a ready made revision file is already there, don't create a new one.

*** THIS IS 7.81 ***

* Internal version numbers to 7.81

* Open 7.80 stable branch

* remove  -finline-functions; it breaks the ubuntu build.

* update debian changelog.

* remove url-encoded strings; the Engine is advised to do that, so let it do its job.

* duplicate memreadline & bmstrcasestr to a const and non const version
* follow changes in citserver where appropriate.

* InitModule_MSGRENDERERS(): don't make citserver send us RFC822 messages inline via MSGP; fixes the Booboo helper mail bug.

* Removed the last instance if is_room_aide

 * remove is_room_aide, its not filled anymore.
 * instead of is_room_aide evaluate room->RAFlags & UA_ADMINALLOWED

* THIS IS 7.80

* Locked the banner div at top:0 to keep Google Chrome from floating it out of place