removed some debugs
[citadel.git] / citadel / modules / expire / serv_expire.c
index cf501e081615b06a425e8ace4906dbfdc00a9298..a3c2258d066b12d7fa352cfbaf55090159076754 100644 (file)
@@ -1,41 +1,18 @@
-/*
- * This module handles the expiry of old messages and the purging of old users.
- *
- * You might also see this module affectionately referred to as the DAP (the Dreaded Auto-Purger).
- *
- * Copyright (c) 1988-2015 by citadel.org (Art Cancro, Wilifried Goesgens, and others)
- *
- * This program is open source software; you can redistribute it and/or
- * modify it under the terms of the GNU General Public License as published
- * by the Free Software Foundation; either version 3 of the License, or
- * (at your option) any later version.
- *
- * This program is distributed in the hope that it will be useful,
- * but WITHOUT ANY WARRANTY; without even the implied warranty of
- * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
- * GNU General Public License for more details.
- *
- * A brief technical discussion:
- *
- * Several of the purge operations found in this module operate in two
- * stages: the first stage generates a linked list of objects to be deleted,
- * then the second stage deletes all listed objects from the database.
- *
- * At first glance this may seem cumbersome and unnecessary.  The reason it is
- * implemented in this way is because Berkeley DB, and possibly other backends
- * we may hook into in the future, explicitly do _not_ support the deletion of
- * records from a file while the file is being traversed.  The delete operation
- * will succeed, but the traversal is not guaranteed to visit every object if
- * this is done.  Therefore we utilize the two-stage purge.
- *
- * When using Berkeley DB, there's another reason for the two-phase purge: we
- * don't want the entire thing being done as one huge transaction.
- *
- * You'll also notice that we build the in-memory list of records to be deleted
- * sometimes with a linked list and sometimes with a hash table.  There is no
- * reason for this aside from the fact that the linked list ones were written
- * before we had the hash table library available.
- */
+// This module handles the expiry of old messages and the purging of old users.
+//
+// You might also see this module affectionately referred to as TDAP (The Dreaded Auto-Purger).
+//
+// Copyright (c) 1988-2022 by citadel.org (Art Cancro, Wilifried Goesgens, and others)
+//
+// This program is open source software; you can redistribute it and/or
+// modify it under the terms of the GNU General Public License as published
+// by the Free Software Foundation; either version 3 of the License, or
+// (at your option) any later version.
+//
+// This program is distributed in the hope that it will be useful,
+// but WITHOUT ANY WARRANTY; without even the implied warranty of
+// MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+// GNU General Public License for more details.
 
 
 #include "sysdep.h"
 #include <pwd.h>
 #include <errno.h>
 #include <sys/types.h>
-
-#if TIME_WITH_SYS_TIME
-# include <sys/time.h>
-# include <time.h>
-#else
-# if HAVE_SYS_TIME_H
-#  include <sys/time.h>
-# else
-#  include <time.h>
-# endif
-#endif
-
+#include <time.h>
 #include <sys/wait.h>
 #include <string.h>
 #include <limits.h>
@@ -81,7 +47,7 @@
 
 struct PurgeList {
        struct PurgeList *next;
-       char name[ROOMNAMELEN]; /* use the larger of username or roomname */
+       char name[ROOMNAMELEN];         // use the larger of username or roomname
 };
 
 struct VPurgeList {
@@ -102,7 +68,6 @@ struct ValidUser {
        long vu_usernum;
 };
 
-
 struct ctdlroomref {
        struct ctdlroomref *next;
        long msgnum;
@@ -129,13 +94,11 @@ int users_not_purged;
 char *users_corrupt_msg = NULL;
 char *users_zero_msg = NULL;
 struct ctdlroomref *rr = NULL;
-int force_purge_now = 0;                       /* set to nonzero to force a run right now */
+int force_purge_now = 0;                       // set to nonzero to force a run right now
 
 
-/*
- * First phase of message purge -- gather the locations of messages which
- * qualify for purging and write them to a temp file.
- */
+// First phase of message purge -- gather the locations of messages which
+// qualify for purging and write them to a temp file.
 void GatherPurgeMessages(struct ctdlroom *qrbuf, void *data) {
        struct ExpirePolicy epbuf;
        long delnum;
@@ -153,14 +116,14 @@ void GatherPurgeMessages(struct ctdlroom *qrbuf, void *data) {
        time(&now);
        GetExpirePolicy(&epbuf, qrbuf);
 
-       /* If the room is set to never expire messages ... do nothing */
+       // If the room is set to never expire messages ... do nothing
        if (epbuf.expire_mode == EXPIRE_NEXTLEVEL) return;
        if (epbuf.expire_mode == EXPIRE_MANUAL) return;
 
-       /* Don't purge messages containing system configuration, dumbass. */
+       // Don't purge messages containing system configuration, dumbass.
        if (!strcasecmp(qrbuf->QRname, SYSCONFIGROOM)) return;
 
-       /* Ok, we got this far ... now let's see what's in the room */
+       // Ok, we got this far ... now let's see what's in the room.
        cdbfr = cdb_fetch(CDB_MSGLISTS, &qrbuf->QRnumber, sizeof(long));
 
        if (cdbfr != NULL) {
@@ -170,14 +133,13 @@ void GatherPurgeMessages(struct ctdlroom *qrbuf, void *data) {
                cdb_free(cdbfr);
        }
 
-       /* Nothing to do if there aren't any messages */
+       // Nothing to do if there aren't any messages
        if (num_msgs == 0) {
                if (msglist != NULL) free(msglist);
                return;
        }
 
-
-       /* If the room is set to expire by count, do that */
+       // If the room is set to expire by count, do that.
        if (epbuf.expire_mode == EXPIRE_NUMMSGS) {
                if (num_msgs > epbuf.expire_value) {
                        for (a=0; a<(num_msgs - epbuf.expire_value); ++a) {
@@ -187,21 +149,21 @@ void GatherPurgeMessages(struct ctdlroom *qrbuf, void *data) {
                }
        }
 
-       /* If the room is set to expire by age... */
+       // If the room is set to expire by age...
        if (epbuf.expire_mode == EXPIRE_AGE) {
                for (a=0; a<num_msgs; ++a) {
                        delnum = msglist[a];
 
-                       msg = CtdlFetchMessage(delnum, 0); /* dont need body */
+                       msg = CtdlFetchMessage(delnum, 0);      // don't need the body
                        if (msg != NULL) {
                                xtime = atol(msg->cm_fields[eTimestamp]);
                                CM_Free(msg);
-                       } else {
+                       }
+                       else {
                                xtime = 0L;
                        }
 
-                       if ((xtime > 0L)
-                          && (now - xtime > (time_t)(epbuf.expire_value * 86400L))) {
+                       if ((xtime > 0L) && (now - xtime > (time_t)(epbuf.expire_value * 86400L))) {
                                fprintf(purgelist, "m=%ld\n", delnum);
                                ++messages_purged;
                        }
@@ -212,10 +174,7 @@ void GatherPurgeMessages(struct ctdlroom *qrbuf, void *data) {
 }
 
 
-/*
- * Second phase of message purge -- read list of msgs from temp file and
- * delete them.
- */
+// Second phase of message purge -- read list of msgs from temp file and delete them.
 void DoPurgeMessages(FILE *purgelist) {
        char roomname[ROOMNAMELEN];
        long msgnum;
@@ -256,15 +215,21 @@ void PurgeMessages(void) {
 }
 
 
-void AddValidUser(struct ctdluser *usbuf, void *data) {
+void AddValidUser(char *username, void *data) {
        struct ValidUser *vuptr;
+       struct ctdluser usbuf;
+
+       if (CtdlGetUser(&usbuf, username) != 0) {
+               return;
+       }
 
        vuptr = (struct ValidUser *)malloc(sizeof(struct ValidUser));
        vuptr->next = ValidUserList;
-       vuptr->vu_usernum = usbuf->usernum;
+       vuptr->vu_usernum = usbuf.usernum;
        ValidUserList = vuptr;
 }
 
+
 void AddValidRoom(struct ctdlroom *qrbuf, void *data) {
        struct ValidRoom *vrptr;
 
@@ -275,18 +240,18 @@ void AddValidRoom(struct ctdlroom *qrbuf, void *data) {
        ValidRoomList = vrptr;
 }
 
+
 void DoPurgeRooms(struct ctdlroom *qrbuf, void *data) {
        time_t age, purge_secs;
        struct PurgeList *pptr;
        struct ValidUser *vuptr;
        int do_purge = 0;
 
-       /* For mailbox rooms, there's only one purging rule: if the user who
-        * owns the room still exists, we keep the room; otherwise, we purge
-        * it.  Bypass any other rules.
-        */
+       // For mailbox rooms, there's only one purging rule: if the user who
+       // owns the room still exists, we keep the room; otherwise, we purge
+       // it.  Bypass any other rules.
        if (qrbuf->QRflags & QR_MAILBOX) {
-               /* if user not found, do_purge will be 1 */
+               // if user not found, do_purge will be 1
                do_purge = 1;
                for (vuptr=ValidUserList; vuptr!=NULL; vuptr=vuptr->next) {
                        if (vuptr->vu_usernum == atol(qrbuf->QRname)) {
@@ -295,7 +260,7 @@ void DoPurgeRooms(struct ctdlroom *qrbuf, void *data) {
                }
        }
        else {
-               /* Any of these attributes render a room non-purgable */
+               // Any of these attributes render a room non-purgable
                if (qrbuf->QRflags & QR_PERMANENT) return;
                if (qrbuf->QRflags & QR_DIRECTORY) return;
                if (qrbuf->QRflags & QR_NETWORK) return;
@@ -303,19 +268,19 @@ void DoPurgeRooms(struct ctdlroom *qrbuf, void *data) {
                if (!strcasecmp(qrbuf->QRname, SYSCONFIGROOM)) return;
                if (CtdlIsNonEditable(qrbuf)) return;
 
-               /* If we don't know the modification date, be safe and don't purge */
+               // If we don't know the modification date, be safe and don't purge
                if (qrbuf->QRmtime <= (time_t)0) return;
 
-               /* If no room purge time is set, be safe and don't purge */
+               // If no room purge time is set, be safe and don't purge
                if (CtdlGetConfigLong("c_roompurge") < 0) return;
 
-               /* Otherwise, check the date of last modification */
+               // Otherwise, check the date of last modification
                age = time(NULL) - (qrbuf->QRmtime);
                purge_secs = CtdlGetConfigLong("c_roompurge") * 86400;
                if (purge_secs <= (time_t)0) return;
                syslog(LOG_DEBUG, "<%s> is <%ld> seconds old", qrbuf->QRname, (long)age);
                if (age > purge_secs) do_purge = 1;
-       } /* !QR_MAILBOX */
+       } // !QR_MAILBOX
 
        if (do_purge) {
                pptr = (struct PurgeList *) malloc(sizeof(struct PurgeList));
@@ -327,7 +292,6 @@ void DoPurgeRooms(struct ctdlroom *qrbuf, void *data) {
 }
 
 
-
 int PurgeRooms(void) {
        struct PurgeList *pptr;
        int num_rooms_purged = 0;
@@ -337,22 +301,20 @@ int PurgeRooms(void) {
 
        syslog(LOG_DEBUG, "PurgeRooms() called");
 
-
-       /* Load up a table full of valid user numbers so we can delete
-        * user-owned rooms for users who no longer exist */
+       // Load up a table full of valid user numbers so we can delete
+       // user-owned rooms for users who no longer exist
        ForEachUser(AddValidUser, NULL);
 
-       /* Then cycle through the room file */
+       // Then cycle through the room file
        CtdlForEachRoom(DoPurgeRooms, NULL);
 
-       /* Free the valid user list */
+       // Free the valid user list
        while (ValidUserList != NULL) {
                vuptr = ValidUserList->next;
                free(ValidUserList);
                ValidUserList = vuptr;
        }
 
-
        transcript = malloc(SIZ);
        strcpy(transcript, "The following rooms have been auto-purged:\n");
 
@@ -377,115 +339,75 @@ int PurgeRooms(void) {
 }
 
 
-/*
- * Back end function to check user accounts for associated Unix accounts
- * which no longer exist.  (Only relevant for host auth mode.)
- */
-void do_uid_user_purge(struct ctdluser *us, void *data) {
-       struct PurgeList *pptr;
-
-       if ((us->uid != (-1)) && (us->uid != CTDLUID)) {
-               if (getpwuid(us->uid) == NULL) {
-                       pptr = (struct PurgeList *)
-                               malloc(sizeof(struct PurgeList));
-                       pptr->next = UserPurgeList;
-                       strcpy(pptr->name, us->fullname);
-                       UserPurgeList = pptr;
-               }
-       }
-       else {
-               ++users_not_purged;
-       }
-}
-
-
-
-
-/*
- * Back end function to check user accounts for expiration.
- */
-void do_user_purge(struct ctdluser *us, void *data) {
+// Back end function to check user accounts for expiration.
+void do_user_purge(char *username, void *data) {
        int purge;
        time_t now;
        time_t purge_time;
        struct PurgeList *pptr;
+       struct ctdluser us;
+
+       if (CtdlGetUser(&us, username) != 0) {
+               return;
+       }
 
-       /* Set purge time; if the user overrides the system default, use it */
-       if (us->USuserpurge > 0) {
-               purge_time = ((time_t)us->USuserpurge) * 86400;
+       // Set purge time; if the user overrides the system default, use it
+       if (us.USuserpurge > 0) {
+               purge_time = ((time_t)us.USuserpurge) * 86400;
        }
        else {
                purge_time = CtdlGetConfigLong("c_userpurge") * 86400;
        }
 
-       /* The default rule is to not purge. */
+       // The default rule is to not purge.
        purge = 0;
        
-       /* If the user hasn't called in two months and expiring of accounts is turned on, his/her account
-        * has expired, so purge the record.
-        */
-       if (CtdlGetConfigLong("c_userpurge") > 0)
-       {
+       // If the user has not logged in for the configured amount of time, expire the account.
+       if (CtdlGetConfigLong("c_userpurge") > 0) {
                now = time(NULL);
-               if ((now - us->lastcall) > purge_time) purge = 1;
+               if ((now - us.lastcall) > purge_time) purge = 1;
        }
 
-       /* If the record is marked as permanent, don't purge it.
-        */
-       if (us->flags & US_PERM) purge = 0;
+       // If the account is marked as permanent, don't purge it.
+       if (us.flags & US_PERM) purge = 0;
 
-       /* If the user is an Aide, don't purge him/her/it.
-        */
-       if (us->axlevel == 6) purge = 0;
+       // If the account is an administrator, don't purge it.
+       if (us.axlevel == 6) purge = 0;
 
-       /* If the access level is 0, the record should already have been
-        * deleted, but maybe the user was logged in at the time or something.
-        * Delete the record now.
-        */
-       if (us->axlevel == 0) purge = 1;
+       // If the access level is 0, the record should already have been
+       // deleted, but maybe the user was logged in at the time or something.
+       // Delete the record now.
+       if (us.axlevel == 0) purge = 1;
 
-       /* If the user set his/her password to 'deleteme', he/she
-        * wishes to be deleted, so purge the record.
-        * Moved this lower down so that aides and permanent users get purged if they ask to be.
-        */
-       if (!strcasecmp(us->password, "deleteme")) purge = 1;
+       // If the user set his/her password to 'deleteme', he/she
+       // wishes to be deleted, so purge the record.
+       // Moved this lower down so that aides and permanent users get purged if they ask to be.
+       if (!strcasecmp(us.password, "deleteme")) purge = 1;
        
-       /* 0 calls is impossible.  If there are 0 calls, it must
-        * be a corrupted record, so purge it.
-        * Actually it is possible if an Aide created the user so now we check for less than 0 (DRW)
-        */
-       if (us->timescalled < 0) purge = 1;
-
-       /* any negative user number, is
-        * also impossible.
-        */
-       if (us->usernum < 0L) purge = 1;
+       // Fewer than zero calls is impossible, indicating a corrupted record.
+       if (us.timescalled < 0) purge = 1;
+
+       // any negative user number, is also impossible.
+       if (us.usernum < 0L) purge = 1;
        
-       /* Don't purge user 0. That user is there for the system */
-       if (us->usernum == 0L)
-       {
-               /* FIXME: Temporary log message. Until we do unauth access with user 0 we should
-                * try to get rid of all user 0 occurences. Many will be remnants from old code so
-                * we will need to try and purge them from users data bases.Some will not have names but
-                * those with names should be purged.
-                */
-               syslog(LOG_DEBUG, "Auto purger found a user 0 with name <%s>", us->fullname);
+       // Don't purge user 0. That user is there for the system
+       if (us.usernum == 0L) {
+               // FIXME: Temporary log message. Until we do unauth access with user 0 we should
+               // try to get rid of all user 0 occurences. Many will be remnants from old code so
+               // we will need to try and purge them from users data bases.Some will not have names but
+               // those with names should be purged.
+               syslog(LOG_DEBUG, "Auto purger found a user 0 with name <%s>", us.fullname);
                // purge = 0;
        }
        
-       /* If the user has no full name entry then we can't purge them
-        * since the actual purge can't find them.
-        * This shouldn't happen but does somehow.
-        */
-       if (IsEmptyStr(us->fullname))
-       {
+       // If the user has no full name entry then we can't purge them since the actual purge can't find them.
+       // This shouldn't happen but does somehow.
+       if (IsEmptyStr(us.fullname)) {
                purge = 0;
                
-               if (us->usernum > 0L)
-               {
+               if (us.usernum > 0L) {
                        purge=0;
-                       if (users_corrupt_msg == NULL)
-                       {
+                       if (users_corrupt_msg == NULL) {
                                users_corrupt_msg = malloc(SIZ);
                                strcpy(users_corrupt_msg,
                                        "The auto-purger found the following user numbers with no name.\n"
@@ -497,14 +419,14 @@ void do_user_purge(struct ctdluser *us, void *data) {
                        }
                
                        users_corrupt_msg=realloc(users_corrupt_msg, strlen(users_corrupt_msg)+30);
-                       snprintf(&users_corrupt_msg[strlen(users_corrupt_msg)], 29, " %ld\n", us->usernum);
+                       snprintf(&users_corrupt_msg[strlen(users_corrupt_msg)], 29, " %ld\n", us.usernum);
                }
        }
 
        if (purge == 1) {
                pptr = (struct PurgeList *) malloc(sizeof(struct PurgeList));
                pptr->next = UserPurgeList;
-               strcpy(pptr->name, us->fullname);
+               strcpy(pptr->name, us.fullname);
                UserPurgeList = pptr;
        }
        else {
@@ -514,7 +436,6 @@ void do_user_purge(struct ctdluser *us, void *data) {
 }
 
 
-
 int PurgeUsers(void) {
        struct PurgeList *pptr;
        int num_users_purged = 0;
@@ -527,9 +448,6 @@ int PurgeUsers(void) {
                case AUTHMODE_NATIVE:
                        ForEachUser(do_user_purge, NULL);
                        break;
-               case AUTHMODE_HOST:
-                       ForEachUser(do_uid_user_purge, NULL);
-                       break;
                default:
                        syslog(LOG_DEBUG, "User purge for auth mode %d is not implemented.", CtdlGetConfigInt("c_auth_mode"));
                        break;
@@ -567,15 +485,13 @@ int PurgeUsers(void) {
        if (num_users_purged > 0) CtdlAideMessage(transcript, "User Purge Message");
        free(transcript);
 
-       if(users_corrupt_msg)
-       {
+       if (users_corrupt_msg) {
                CtdlAideMessage(users_corrupt_msg, "User Corruption Message");
                free (users_corrupt_msg);
                users_corrupt_msg = NULL;
        }
        
-       if(users_zero_msg)
-       {
+       if(users_zero_msg) {
                CtdlAideMessage(users_zero_msg, "User Zero Message");
                free (users_zero_msg);
                users_zero_msg = NULL;
@@ -586,18 +502,17 @@ int PurgeUsers(void) {
 }
 
 
-/*
- * Purge visits
- *
- * This is a really cumbersome "garbage collection" function.  We have to
- * delete visits which refer to rooms and/or users which no longer exist.  In
- * order to prevent endless traversals of the room and user files, we first
- * build linked lists of rooms and users which _do_ exist on the system, then
- * traverse the visit file, checking each record against those two lists and
- * purging the ones that do not have a match on _both_ lists.  (Remember, if
- * either the room or user being referred to is no longer on the system, the
- * record is completely useless.)
- */
+// Purge visits
+//
+// This is a really cumbersome "garbage collection" function.  We have to
+// delete visits which refer to rooms and/or users which no longer exist.  In
+// order to prevent endless traversals of the room and user files, we first
+// build linked lists of rooms and users which _do_ exist on the system, then
+// traverse the visit file, checking each record against those two lists and
+// purging the ones that do not have a match on _both_ lists.  (Remember, if
+// either the room or user being referred to is no longer on the system, the
+// record is completely useless.)
+//
 int PurgeVisits(void) {
        struct cdbdata *cdbvisit;
        visit vbuf;
@@ -610,13 +525,13 @@ int PurgeVisits(void) {
        struct ValidUser *vuptr;
        int RoomIsValid, UserIsValid;
 
-       /* First, load up a table full of valid room/gen combinations */
+       // First, load up a table full of valid room/gen combinations
        CtdlForEachRoom(AddValidRoom, NULL);
 
-       /* Then load up a table full of valid user numbers */
+       // Then load up a table full of valid user numbers
        ForEachUser(AddValidUser, NULL);
 
-       /* Now traverse through the visits, purging irrelevant records... */
+       // Now traverse through the visits, purging irrelevant records...
        cdb_rewind(CDB_VISIT);
        while(cdbvisit = cdb_next_item(CDB_VISIT), cdbvisit != NULL) {
                memset(&vbuf, 0, sizeof(visit));
@@ -628,20 +543,20 @@ int PurgeVisits(void) {
                RoomIsValid = 0;
                UserIsValid = 0;
 
-               /* Check to see if the room exists */
+               // Check to see if the room exists
                for (vrptr=ValidRoomList; vrptr!=NULL; vrptr=vrptr->next) {
                        if ( (vrptr->vr_roomnum==vbuf.v_roomnum)
                             && (vrptr->vr_roomgen==vbuf.v_roomgen))
                                RoomIsValid = 1;
                }
 
-               /* Check to see if the user exists */
+               // Check to see if the user exists
                for (vuptr=ValidUserList; vuptr!=NULL; vuptr=vuptr->next) {
                        if (vuptr->vu_usernum == vbuf.v_usernum)
                                UserIsValid = 1;
                }
 
-               /* Put the record on the purge list if it's dead */
+               // Put the record on the purge list if it's dead
                if ((RoomIsValid==0) || (UserIsValid==0)) {
                        vptr = (struct VPurgeList *)
                                malloc(sizeof(struct VPurgeList));
@@ -654,21 +569,21 @@ int PurgeVisits(void) {
 
        }
 
-       /* Free the valid room/gen combination list */
+       // Free the valid room/gen combination list
        while (ValidRoomList != NULL) {
                vrptr = ValidRoomList->next;
                free(ValidRoomList);
                ValidRoomList = vrptr;
        }
 
-       /* Free the valid user list */
+       // Free the valid user list
        while (ValidUserList != NULL) {
                vuptr = ValidUserList->next;
                free(ValidUserList);
                ValidUserList = vuptr;
        }
 
-       /* Now delete every visit on the purged list */
+       // Now delete every visit on the purged list
        while (VisitPurgeList != NULL) {
                IndexLen = GenerateRelationshipIndex(IndexBuf,
                                VisitPurgeList->vp_roomnum,
@@ -684,10 +599,8 @@ int PurgeVisits(void) {
        return(purged);
 }
 
-/*
- * Purge the use table of old entries.
- *
- */
+
+// Purge the use table of old entries.
 int PurgeUseTable(StrBuf *ErrMsg) {
        int purged = 0;
        struct cdbdata *cdbut;
@@ -695,22 +608,11 @@ int PurgeUseTable(StrBuf *ErrMsg) {
        struct UPurgeList *ul = NULL;
        struct UPurgeList *uptr; 
 
-       /* Phase 1: traverse through the table, discovering old records... */
-       if (CheckTDAPVeto(CDB_USETABLE, ErrMsg))
-       {
-               syslog(LOG_DEBUG, "Purge use table: VETO!");
-               return 0;
-       }
+       // Phase 1: traverse through the table, discovering old records...
 
        syslog(LOG_DEBUG, "Purge use table: phase 1");
        cdb_rewind(CDB_USETABLE);
        while(cdbut = cdb_next_item(CDB_USETABLE), cdbut != NULL) {
-
-               /*
-                * TODODRW: change this to create a new function time_t cdb_get_timestamp( struct cdbdata *)
-                * this will release this file from the serv_network.h
-                * Maybe it could be a macro that extracts and casts the reult
-                */
                if (cdbut->len > sizeof(struct UseTable))
                        memcpy(&ut, cdbut->ptr, sizeof(struct UseTable));
                else {
@@ -731,7 +633,7 @@ int PurgeUseTable(StrBuf *ErrMsg) {
 
        }
 
-       /* Phase 2: delete the records */
+       // Phase 2: delete the records
        syslog(LOG_DEBUG, "Purge use table: phase 2");
        while (ul != NULL) {
                cdb_delete(CDB_USETABLE, ul->up_key, strlen(ul->up_key));
@@ -745,11 +647,7 @@ int PurgeUseTable(StrBuf *ErrMsg) {
 }
 
 
-
-/*
- * Purge the EUID Index of old records.
- *
- */
+// Purge the EUID Index of old records.
 int PurgeEuidIndexTable(void) {
        int purged = 0;
        struct cdbdata *cdbei;
@@ -758,7 +656,7 @@ int PurgeEuidIndexTable(void) {
        long msgnum;
        struct CtdlMessage *msg = NULL;
 
-       /* Phase 1: traverse through the table, discovering old records... */
+       // Phase 1: traverse through the table, discovering old records...
        syslog(LOG_DEBUG, "Purge EUID index: phase 1");
        cdb_rewind(CDB_EUIDINDEX);
        while(cdbei = cdb_next_item(CDB_EUIDINDEX), cdbei != NULL) {
@@ -767,7 +665,7 @@ int PurgeEuidIndexTable(void) {
 
                msg = CtdlFetchMessage(msgnum, 0);
                if (msg != NULL) {
-                       CM_Free(msg);   /* it still exists, so do nothing */
+                       CM_Free(msg);   // it still exists, so do nothing
                }
                else {
                        eptr = (struct EPurgeList *) malloc(sizeof(struct EPurgeList));
@@ -785,7 +683,7 @@ int PurgeEuidIndexTable(void) {
 
        }
 
-       /* Phase 2: delete the records */
+       // Phase 2: delete the records
        syslog(LOG_DEBUG, "Purge euid index: phase 2");
        while (el != NULL) {
                cdb_delete(CDB_EUIDINDEX, el->ep_key, el->ep_keylen);
@@ -800,11 +698,8 @@ int PurgeEuidIndexTable(void) {
 }
 
 
-
-/*
- * Purge OpenID assocations for missing users (theoretically this will never delete anything)
- */
-int PurgeStaleOpenIDassociations(void) {
+// Purge external auth assocations for missing users (theoretically this will never delete anything)
+int PurgeStaleExtAuthAssociations(void) {
        struct cdbdata *cdboi;
        struct ctdluser usbuf;
        HashList *keys = NULL;
@@ -819,9 +714,8 @@ int PurgeStaleOpenIDassociations(void) {
        keys = NewHash(1, NULL);
        if (!keys) return(0);
 
-
-       cdb_rewind(CDB_OPENID);
-       while (cdboi = cdb_next_item(CDB_OPENID), cdboi != NULL) {
+       cdb_rewind(CDB_EXTAUTH);
+       while (cdboi = cdb_next_item(CDB_EXTAUTH), cdboi != NULL) {
                if (cdboi->len > sizeof(long)) {
                        memcpy(&usernum, cdboi->ptr, sizeof(long));
                        if (CtdlGetUserByNumber(&usbuf, usernum) != 0) {
@@ -832,14 +726,13 @@ int PurgeStaleOpenIDassociations(void) {
                cdb_free(cdboi);
        }
 
-       /* Go through the hash list, deleting keys we stored in it */
+       // Go through the hash list, deleting keys we stored in it
 
        HashPos = GetNewHashPos(keys, 0);
-       while (GetNextHashPos(keys, HashPos, &len, &Key, &Value)!=0)
-       {
-               syslog(LOG_DEBUG, "Deleting associated OpenID <%s>",  (char*)Value);
-               cdb_delete(CDB_OPENID, Value, strlen(Value));
-               /* note: don't free(Value) -- deleting the hash list will handle this for us */
+       while (GetNextHashPos(keys, HashPos, &len, &Key, &Value)!=0) {
+               syslog(LOG_DEBUG, "Deleting associated external authenticator <%s>",  (char*)Value);
+               cdb_delete(CDB_EXTAUTH, Value, strlen(Value));
+               // note: don't free(Value) -- deleting the hash list will handle this for us
                ++num_deleted;
        }
        DeleteHashPos(&HashPos);
@@ -848,86 +741,72 @@ int PurgeStaleOpenIDassociations(void) {
 }
 
 
-
-
-
-void purge_databases(void)
-{
+void purge_databases(void) {
        int retval;
        static time_t last_purge = 0;
        time_t now;
        struct tm tm;
 
-       /* Do the auto-purge if the current hour equals the purge hour,
-        * but not if the operation has already been performed in the
-        * last twelve hours.  This is usually enough granularity.
-        */
+       // Do the auto-purge if the current hour equals the purge hour,
+       // but not if the operation has already been performed in the
+       // last twelve hours.  This is usually enough granularity.
        now = time(NULL);
        localtime_r(&now, &tm);
-       if (((tm.tm_hour != CtdlGetConfigInt("c_purge_hour")) || ((now - last_purge) < 43200)) && (force_purge_now == 0))
-       {
-                       return;
+       if (((tm.tm_hour != CtdlGetConfigInt("c_purge_hour")) || ((now - last_purge) < 43200)) && (force_purge_now == 0)) {
+               return;
        }
 
        syslog(LOG_INFO, "Auto-purger: starting.");
 
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                retval = PurgeUsers();
                syslog(LOG_NOTICE, "Purged %d users.", retval);
        }
                
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                PurgeMessages();
                syslog(LOG_NOTICE, "Expired %d messages.", messages_purged);
        }
 
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                        retval = PurgeRooms();
                        syslog(LOG_NOTICE, "Expired %d rooms.", retval);
        }
 
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                        retval = PurgeVisits();
                        syslog(LOG_NOTICE, "Purged %d visits.", retval);
        }
 
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                StrBuf *ErrMsg;
-
-               ErrMsg = NewStrBuf ();
+               ErrMsg = NewStrBuf();
                retval = PurgeUseTable(ErrMsg);
                        syslog(LOG_NOTICE, "Purged %d entries from the use table.", retval);
-////TODO: fix errmsg
                FreeStrBuf(&ErrMsg);
        }
 
-       if (!server_shutting_down)
-       {
-               retval = PurgeEuidIndexTable();
-               syslog(LOG_NOTICE, "Purged %d entries from the EUID index.", retval);
+       if (!server_shutting_down) {
+                       retval = PurgeEuidIndexTable();
+                       syslog(LOG_NOTICE, "Purged %d entries from the EUID index.", retval);
        }
 
-       if (!server_shutting_down)
-       {
-               retval = PurgeStaleOpenIDassociations();
-               syslog(LOG_NOTICE, "Purged %d stale OpenID associations.", retval);
+       if (!server_shutting_down) {
+               retval = PurgeStaleExtAuthAssociations();
+               syslog(LOG_NOTICE, "Purged %d stale external auth associations.", retval);
        }
 
-       if (!server_shutting_down)
-       {
-                       retval = TDAP_ProcessAdjRefCountQueue();
-               syslog(LOG_NOTICE, "Processed %d message reference count adjustments.", retval);
+       //if (!server_shutting_down) {
+       //      FIXME this is where we could do a non-interactive delete of zero-refcount messages
+       //}
+
+       if ( (!server_shutting_down) && (CtdlGetConfigInt("c_shrink_db_files") != 0) ) {
+               cdb_compact();                                  // Shrink the DB files on disk
        }
 
-       if (!server_shutting_down)
-       {
+       if (!server_shutting_down) {
                syslog(LOG_INFO, "Auto-purger: finished.");
-               last_purge = now;       /* So we don't do it again soon */
+               last_purge = now;                               // So we don't do it again soon
                force_purge_now = 0;
        }
        else {
@@ -936,9 +815,7 @@ void purge_databases(void)
 }
 
 
-/*
- * Manually initiate a run of The Dreaded Auto-Purger (tm)
- */
+// Manually initiate a run of The Dreaded Auto-Purger (tm)
 void cmd_tdap(char *argbuf) {
        if (CtdlAccessCheck(ac_aide)) return;
        force_purge_now = 1;
@@ -946,7 +823,6 @@ void cmd_tdap(char *argbuf) {
 }
 
 
-
 CTDL_MODULE_INIT(expire)
 {
        if (!threading)
@@ -957,6 +833,6 @@ CTDL_MODULE_INIT(expire)
                CtdlRegisterSessionHook(purge_databases, EVT_TIMER, PRIO_CLEANUP + 20);
        }
 
-       /* return our module name for the log */
+       // return our module name for the log
        return "expire";
 }