daemon/client.c

   1 /*
   2  *  Dolda Connect - Modular multiuser Direct Connect-style client
   3  *  Copyright (C) 2004 Fredrik Tolf (fredrik@dolda2000.com)
   4  *
   5  *  This program is free software; you can redistribute it and/or modify
   6  *  it under the terms of the GNU General Public License as published by
   7  *  the Free Software Foundation; either version 2 of the License, or
   8  *  (at your option) any later version.
   9  *
  10  *  This program is distributed in the hope that it will be useful,
  11  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
  12  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  13  *  GNU General Public License for more details.
  14  *
  15  *  You should have received a copy of the GNU General Public License
  16  *  along with this program; if not, write to the Free Software
  17  *  Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  18 */
  19 #include <stdlib.h>
  20 #include <stdio.h>
  21 #include <malloc.h>
  22 #include <wchar.h>
  23 #include <string.h>
  24 #include <errno.h>
  25 #include <dirent.h>
  26 #include <sys/stat.h>
  27 #include <unistd.h>
  28 #include <fcntl.h>
  29 #include <signal.h>
  30
  31 #ifdef HAVE_CONFIG_H
  32 #include <config.h>
  33 #endif
  34 #include "client.h"
  35 #include "conf.h"
  36 #include "log.h"
  37 #include "utils.h"
  38 #include "module.h"
  39 #include "tiger.h"
  40 #include "net.h"
  41 #include "sysevents.h"
  42
  43 struct scanstate
  44 {
  45     struct scanstate *next;
  46     struct sharecache *node;
  47     DIR *dd;
  48 };
  49
  50 struct scanqueue
  51 {
  52     struct scanqueue *next;
  53     struct scanstate *state;
  54 };
  55
  56 static int conf_share(int argc, wchar_t **argv);
  57 static void freecache(struct sharecache *node);
  58 static void checkhashes(void);
  59
  60 static struct configvar myvars[] =
  61 {
  62     {CONF_VAR_STRING, "defnick", {.str = L"DoldaConnect user"}},
  63     {CONF_VAR_INT, "scanfilemask", {.num = 0004}},
  64     {CONF_VAR_INT, "scandirmask", {.num = 0005}},
  65     {CONF_VAR_STRING, "hashcache", {.str = L"dc-hashcache"}},
  66     {CONF_VAR_END}
  67 };
  68
  69 static struct configcmd mycmds[] =
  70 {
  71     {"share", conf_share},
  72     {NULL}
  73 };
  74
  75 static struct scanstate *scanjob = NULL;
  76 static struct scanqueue *scanqueue = NULL;
  77 static struct sharepoint *shares = NULL;
  78 static struct hashcache *hashcache = NULL;
  79 static pid_t hashjob = 0;
  80 struct sharecache *shareroot = NULL;
  81 unsigned long long sharesize = 0;
  82 GCBCHAIN(sharechangecb, unsigned long long);
  83
  84 static int conf_share(int argc, wchar_t **argv)
  85 {
  86     struct sharepoint *share;
  87     char *b;
  88
  89     if(argc < 3)
  90     {
  91         flog(LOG_WARNING, "not enough arguments given for share command");
  92         return(1);
  93     }
  94     if((b = icwcstombs(argv[2], NULL)) == NULL)
  95     {
  96         flog(LOG_WARNING, "could not convert wcs path (%ls) to current locale's charset: %s", argv[2], strerror(errno));
  97         return(1);
  98     }
  99     for(share = shares; share != NULL; share = share->next)
 100     {
 101         if(!strcmp(share->path, b) && !wcscmp(share->name, argv[1]))
 102         {
 103             share->delete = 0;
 104             free(b);
 105             return(0);
 106         }
 107     }
 108     share = smalloc(sizeof(*share));
 109     share->path = b;
 110     share->delete = 0;
 111     share->name = swcsdup(argv[1]);
 112     share->next = shares;
 113     share->prev = NULL;
 114     if(shares != NULL)
 115         shares->prev = share;
 116     shares = share;
 117     return(0);
 118 }
 119
 120 static void dumpsharecache(struct sharecache *node, int l)
 121 {
 122     int i;
 123
 124     for(; node != NULL; node = node->next)
 125     {
 126         for(i = 0; i < l; i++)
 127             putc('\t', stdout);
 128         printf("%ls\n", node->name);
 129         if(node->f.b.type == FILE_DIR)
 130             dumpsharecache(node->child, l + 1);
 131     }
 132 }
 133
 134 struct hash *newhash(wchar_t *algo, size_t len, char *buf)
 135 {
 136     struct hash *ret;
 137
 138     ret = smalloc(sizeof(*ret));
 139     memset(ret, 0, sizeof(*ret));
 140     ret->algo = swcsdup(algo);
 141     ret->len = len;
 142     ret->buf = memcpy(smalloc(len), buf, len);
 143     return(ret);
 144 }
 145
 146 void freehash(struct hash *hash)
 147 {
 148     free(hash->algo);
 149     free(hash->buf);
 150     free(hash);
 151 }
 152
 153 struct hash *duphash(struct hash *hash)
 154 {
 155     return(newhash(hash->algo, hash->len, hash->buf));
 156 }
 157
 158 struct hash *parsehash(wchar_t *text)
 159 {
 160     wchar_t *p;
 161     char *mbsbuf, *decbuf;
 162     size_t buflen;
 163     struct hash *ret;
 164
 165     if((p = wcschr(text, L':')) == NULL)
 166         return(NULL);
 167     *(p++) = L'\0';
 168     if((mbsbuf = icwcstombs(p, "US-ASCII")) == NULL)
 169         return(NULL);
 170     decbuf = base64decode(mbsbuf, &buflen);
 171     free(mbsbuf);
 172     if(decbuf == NULL)
 173         return(NULL);
 174     ret = newhash(text, buflen, decbuf);
 175     free(decbuf);
 176     return(ret);
 177 }
 178
 179 wchar_t *unparsehash(struct hash *hash)
 180 {
 181     static wchar_t *buf = NULL;
 182     wchar_t *whbuf;
 183     char *hbuf;
 184     size_t bufsize, bufdata;
 185
 186     if(buf != NULL)
 187         free(buf);
 188     buf = NULL;
 189     bufsize = bufdata = 0;
 190     hbuf = base64encode(hash->buf, hash->len);
 191     if((whbuf = icmbstowcs(hbuf, "US-ASCII")) == NULL)
 192     {
 193         flog(LOG_CRIT, "bug! could not convert base64 from us-ascii: %s", strerror(errno));
 194         abort();
 195     }
 196     free(hbuf);
 197     bufcat(buf, hash->algo, wcslen(hash->algo));
 198     addtobuf(buf, ':');
 199     bufcat(buf, whbuf, wcslen(whbuf));
 200     free(whbuf);
 201     return(buf);
 202 }
 203
 204 int hashcmp(struct hash *h1, struct hash *h2)
 205 {
 206     if(wcscmp(h1->algo, h2->algo))
 207         return(0);
 208     if(h1->len != h2->len)
 209         return(0);
 210     if(memcmp(h1->buf, h2->buf, h1->len))
 211         return(0);
 212     return(1);
 213 }
 214
 215 static struct hashcache *newhashcache(void)
 216 {
 217     struct hashcache *new;
 218
 219     new = smalloc(sizeof(*new));
 220     memset(new, 0, sizeof(*new));
 221     new->next = hashcache;
 222     new->prev = NULL;
 223     if(hashcache != NULL)
 224         hashcache->prev = new;
 225     hashcache = new;
 226     return(new);
 227 }
 228
 229 static void freehashcache(struct hashcache *hc)
 230 {
 231     if(hc->next != NULL)
 232         hc->next->prev = hc->prev;
 233     if(hc->prev != NULL)
 234         hc->prev->next = hc->next;
 235     if(hc == hashcache)
 236         hashcache = hc->next;
 237     free(hc);
 238 }
 239
 240 static char *findhashcachefile(int filldef)
 241 {
 242     static char ret[128];
 243     char *hcname;
 244
 245     if(getenv("HOME") != NULL)
 246     {
 247         snprintf(ret, sizeof(ret), "%s/.dc-hashcache", getenv("HOME"));
 248         if(!access(ret, R_OK))
 249             return(ret);
 250     }
 251     if((hcname = icswcstombs(confgetstr("cli", "hashcache"), NULL, NULL)) == NULL)
 252     {
 253         flog(LOG_WARNING, "could not convert hash cache name into local charset: %s", strerror(errno));
 254         return(NULL);
 255     }
 256     if(strchr(hcname, '/') != NULL)
 257     {
 258         if(!access(hcname, R_OK))
 259         {
 260             strcpy(ret, hcname);
 261             return(ret);
 262         }
 263     } else {
 264         snprintf(ret, sizeof(ret), "/etc/%s", hcname);
 265         if(!access(ret, R_OK))
 266             return(ret);
 267         snprintf(ret, sizeof(ret), "/usr/etc/%s", hcname);
 268         if(!access(ret, R_OK))
 269             return(ret);
 270         snprintf(ret, sizeof(ret), "/usr/local/etc/%s", hcname);
 271         if(!access(ret, R_OK))
 272             return(ret);
 273     }
 274     if(filldef)
 275     {
 276         if(getenv("HOME") != NULL)
 277             snprintf(ret, sizeof(ret), "%s/.dc-hashcache", getenv("HOME"));
 278         else
 279             snprintf(ret, sizeof(ret), "/etc/%s", hcname);
 280         return(ret);
 281     } else {
 282         return(NULL);
 283     }
 284 }
 285
 286 static struct hashcache *findhashcache(dev_t dev, ino_t inode)
 287 {
 288     struct hashcache *hc;
 289
 290     for(hc = hashcache; hc != NULL; hc = hc->next)
 291     {
 292         if((hc->dev == dev) && (hc->inode == inode))
 293             return(hc);
 294     }
 295     return(NULL);
 296 }
 297
 298 static void readhashcache(void)
 299 {
 300     int i, wc, line;
 301     char *hcname;
 302     FILE *stream;
 303     char linebuf[256];
 304     char *p, *p2, *wv[32], *hash;
 305     struct hashcache *hc;
 306     size_t len;
 307
 308     if((hcname = findhashcachefile(0)) == NULL)
 309         return;
 310     if((stream = fopen(hcname, "r")) == NULL)
 311     {
 312         flog(LOG_WARNING, "could not open hash cache %s: %s", hcname, strerror(errno));
 313         return;
 314     }
 315     while(hashcache != NULL)
 316         freehashcache(hashcache);
 317     line = 0;
 318     while(!feof(stream))
 319     {
 320         fgets(linebuf, sizeof(linebuf), stream);
 321         line++;
 322         for(p = linebuf; *p; p++)
 323         {
 324             if(*p == '\n')
 325                 *p = ' ';
 326         }
 327         if(linebuf[0] == '#')
 328             continue;
 329         for(wc = 0, p = linebuf; (wc < 32) && ((p2 = strchr(p, ' ')) != NULL); p = p2 + 1)
 330         {
 331             if(p2 == p)
 332                 continue;
 333             *p2 = 0;
 334             wv[wc++] = p;
 335         }
 336         if(wc < 3)
 337             continue;
 338         hc = newhashcache();
 339         hc->dev = strtoll(wv[0], NULL, 10);
 340         hc->inode = strtoll(wv[1], NULL, 10);
 341         hc->mtime = strtoll(wv[2], NULL, 10);
 342         for(i = 3; i < wc; i++)
 343         {
 344             if(!strcmp(wv[i], "tth"))
 345             {
 346                 if(++i >= wc)
 347                     continue;
 348                 hash = base64decode(wv[i], &len);
 349                 if(len != 24)
 350                 {
 351                     free(hash);
 352                     continue;
 353                 }
 354                 memcpy(hc->tth, hash, 24);
 355                 free(hash);
 356             }
 357         }
 358     }
 359     fclose(stream);
 360 }
 361
 362 static void writehashcache(void)
 363 {
 364     char *buf;
 365     char *hcname;
 366     FILE *stream;
 367     struct hashcache *hc;
 368
 369     hcname = findhashcachefile(1);
 370     if((stream = fopen(hcname, "w")) == NULL)
 371     {
 372         flog(LOG_WARNING, "could not write hash cache %s: %s", hcname, strerror(errno));
 373         return;
 374     }
 375     fprintf(stream, "# Dolda Connect hash cache file\n");
 376     fprintf(stream, "# Generated automatically, do not edit\n");
 377     fprintf(stream, "# Format: DEVICE INODE MTIME [HASH...]\n");
 378     fprintf(stream, "# HASH := HASHTYPE HASHVAL\n");
 379     fprintf(stream, "# HASHTYPE can currently only be `tth'\n");
 380     for(hc = hashcache; hc != NULL; hc = hc->next)
 381     {
 382         buf = base64encode(hc->tth, 24);
 383         fprintf(stream, "%lli %lli %li tth %s\n", hc->dev, (long long)hc->inode, hc->mtime, buf);
 384         free(buf);
 385     }
 386     fclose(stream);
 387 }
 388
 389 static void hashread(struct socket *sk, void *uudata)
 390 {
 391     static char *hashbuf;
 392     static size_t hashbufsize = 0, hashbufdata = 0;
 393     char *buf, *p, *p2, *lp;
 394     size_t bufsize;
 395     char *wv[32];
 396     int wc;
 397     dev_t dev;
 398     ino_t inode;
 399     time_t mtime;
 400     struct hashcache *hc;
 401
 402     if((buf = sockgetinbuf(sk, &bufsize)) == NULL)
 403         return;
 404     bufcat(hashbuf, buf, bufsize);
 405     free(buf);
 406     while((lp = memchr(hashbuf, '\n', hashbufdata)) != NULL)
 407     {
 408         *(lp++) = 0;
 409         wc = 0;
 410         p = hashbuf;
 411         while(1)
 412         {
 413             while((p2 = strchr(p, ' ')) == p)
 414                 p++;
 415             wv[wc++] = p;
 416             if(p2 == NULL)
 417             {
 418                 break;
 419             } else {
 420                 *p2 = 0;
 421                 p = p2 + 1;
 422             }
 423         }
 424         if(wc != 4)
 425         {
 426             flog(LOG_ERR, "BUG: unexpected number of words (%i) arrived from hashing process", wc);
 427         } else {
 428             dev = strtoll(wv[0], NULL, 10);
 429             inode = strtoll(wv[1], NULL, 10);
 430             mtime = strtol(wv[2], NULL, 10);
 431             if((hc = findhashcache(dev, inode)) == NULL)
 432             {
 433                 hc = newhashcache();
 434                 hc->dev = dev;
 435                 hc->inode = inode;
 436             }
 437             hc->mtime = mtime;
 438             buf = base64decode(wv[3], NULL);
 439             memcpy(hc->tth, buf, 24);
 440             free(buf);
 441             writehashcache();
 442         }
 443         memmove(hashbuf, lp, hashbufdata -= (lp - hashbuf));
 444     }
 445 }
 446
 447 static void hashexit(pid_t pid, int status, void *uudata)
 448 {
 449     if(pid != hashjob)
 450         flog(LOG_ERR, "BUG: hashing process changed PID?! old: %i new %i", hashjob, pid);
 451     if(status)
 452         flog(LOG_WARNING, "hashing process exited with non-zero status: %i", status);
 453     hashjob = 0;
 454     checkhashes();
 455 }
 456
 457 static int hashfile(char *path)
 458 {
 459     int i, ret;
 460     int fd;
 461     int pfd[2];
 462     char buf[4096];
 463     struct stat sb;
 464     struct tigertreehash tth;
 465     char digest[24];
 466     struct socket *outsock;
 467
 468     if((fd = open(path, O_RDONLY)) < 0)
 469     {
 470         flog(LOG_WARNING, "could not open %s for hashing: %s", path, strerror(errno));
 471         return(1);
 472     }
 473     if(fstat(fd, &sb) < 0)
 474     {
 475         flog(LOG_WARNING, "could not stat %s while hashing: %s", path, strerror(errno));
 476         close(fd);
 477         return(1);
 478     }
 479     if(pipe(pfd) < 0)
 480     {
 481         flog(LOG_WARNING, "could not create pipe(!): %s", strerror(errno));
 482         close(fd);
 483         return(1);
 484     }
 485     hashjob = fork();
 486     if(hashjob < 0)
 487     {
 488         flog(LOG_WARNING, "could not fork(!) hashing process: %s", strerror(errno));
 489         close(fd);
 490         close(pfd[0]);
 491         close(pfd[1]);
 492         return(1);
 493     }
 494     if(hashjob == 0)
 495     {
 496         nice(10);
 497         signal(SIGHUP, SIG_DFL);
 498         fd = dup2(fd, 4);
 499         pfd[1] = dup2(pfd[1], 3);
 500         dup2(fd, 0);
 501         dup2(pfd[1], 1);
 502         for(i = 3; i < FD_SETSIZE; i++)
 503             close(i);
 504         initlog();
 505         inittigertree(&tth);
 506         while((ret = read(0, buf, 4096)) > 0)
 507             dotigertree(&tth, buf, ret);
 508         if(ret < 0)
 509         {
 510             flog(LOG_WARNING, "could not read from %s while hashing: %s", path, strerror(errno));
 511             exit(1);
 512         }
 513         synctigertree(&tth);
 514         restigertree(&tth, digest);
 515         ret = snprintf(buf, sizeof(buf), "%lli %lli %li %s\n", sb.st_dev, (long long)sb.st_ino, sb.st_mtime, base64encode(digest, 24));
 516         write(1, buf, ret);
 517         exit(0);
 518     }
 519     close(fd);
 520     close(pfd[1]);
 521     outsock = wrapsock(pfd[0]);
 522     outsock->readcb = hashread;
 523     childcallback(hashjob, hashexit, NULL);
 524     return(0);
 525 }
 526
 527 /*
 528  * Call only when hashjob == 0
 529  */
 530 static void checkhashes(void)
 531 {
 532     struct sharecache *node;
 533     struct hashcache *hc;
 534     char *path;
 535
 536     node = shareroot->child;
 537     while(1)
 538     {
 539         if(node->child != NULL)
 540         {
 541             node = node->child;
 542             continue;
 543         }
 544         if(!node->f.b.hastth)
 545         {
 546             if((hc = findhashcache(node->dev, node->inode)) != NULL)
 547             {
 548                 memcpy(node->hashtth, hc->tth, 24);
 549                 node->f.b.hastth = 1;
 550                 GCBCHAINDOCB(sharechangecb, sharesize);
 551             } else {
 552                 path = getfspath(node);
 553                 if(hashfile(path))
 554                 {
 555                     flog(LOG_WARNING, "could not hash %s, unsharing it", path);
 556                     freecache(node);
 557                 }
 558                 free(path);
 559                 return;
 560             }
 561         }
 562         while(node->next == NULL)
 563         {
 564             if((node = node->parent) == shareroot)
 565                 break;
 566         }
 567         if(node == shareroot)
 568             break;
 569         node = node->next;
 570     }
 571 }
 572
 573 struct sharecache *nextscnode(struct sharecache *node)
 574 {
 575     if(node->child != NULL)
 576         return(node->child);
 577     while(node->next == NULL)
 578     {
 579         node = node->parent;
 580         if(node == shareroot)
 581             return(NULL);
 582     }
 583     return(node->next);
 584 }
 585
 586 static void freescan(struct scanstate *job)
 587 {
 588     if(job->dd != NULL)
 589         closedir(job->dd);
 590     free(job);
 591 }
 592
 593 /* No need for optimization; lookup isn't really that common */
 594 struct sharecache *findcache(struct sharecache *parent, wchar_t *name)
 595 {
 596     struct sharecache *node;
 597
 598     for(node = parent->child; node != NULL; node = node->next)
 599     {
 600         if(!wcscmp(node->name, name))
 601             return(node);
 602     }
 603     return(NULL);
 604 }
 605
 606 static void attachcache(struct sharecache *parent, struct sharecache *node)
 607 {
 608     node->parent = parent;
 609     node->next = parent->child;
 610     if(parent->child != NULL)
 611         parent->child->prev = node;
 612     parent->child = node;
 613 }
 614
 615 static void detachcache(struct sharecache *node)
 616 {
 617     if(node->next != NULL)
 618         node->next->prev = node->prev;
 619     if(node->prev != NULL)
 620         node->prev->next = node->next;
 621     if((node->parent != NULL) && (node->parent->child == node))
 622         node->parent->child = node->next;
 623     node->parent = NULL;
 624     node->next = NULL;
 625     node->prev = NULL;
 626 }
 627
 628 static void freecache(struct sharecache *node)
 629 {
 630     struct sharecache *cur, *next;
 631     struct scanqueue *q, *nq, **fq;
 632
 633     detachcache(node);
 634     fq = &scanqueue;
 635     for(q = scanqueue; q != NULL; q = nq)
 636     {
 637         nq = q->next;
 638         if(q->state->node == node)
 639         {
 640             flog(LOG_DEBUG, "freed node %ls cancelled queued scan", node->name);
 641             freescan(q->state);
 642             *fq = q->next;
 643             free(q);
 644             continue;
 645         }
 646         fq = &q->next;
 647     }
 648     if(node->child != NULL)
 649     {
 650         for(cur = node->child; cur != NULL; cur = next)
 651         {
 652             next = cur->next;
 653             freecache(cur);
 654         }
 655     }
 656     CBCHAINDOCB(node, share_delete, node);
 657     CBCHAINFREE(node, share_delete);
 658     sharesize -= node->size;
 659     if(node->path != NULL)
 660         free(node->path);
 661     if(node->name != NULL)
 662         free(node->name);
 663     free(node);
 664 }
 665
 666 static void freesharepoint(struct sharepoint *share)
 667 {
 668     struct sharecache *node;
 669
 670     if(share->next != NULL)
 671         share->next->prev = share->prev;
 672     if(share->prev != NULL)
 673         share->prev->next = share->next;
 674     if(share == shares)
 675         shares = share->next;
 676     if((node = findcache(shareroot, share->name)) != NULL)
 677         freecache(node);
 678     free(share->path);
 679     free(share->name);
 680     free(share);
 681 }
 682
 683 static struct sharecache *newcache(void)
 684 {
 685     struct sharecache *new;
 686
 687     new = smalloc(sizeof(*new));
 688     memset(new, 0, sizeof(*new));
 689     CBCHAININIT(new, share_delete);
 690     return(new);
 691 }
 692
 693 char *getfspath(struct sharecache *node)
 694 {
 695     char *buf, *mbsname;
 696     size_t bufsize;
 697
 698     buf = smalloc(bufsize = 64);
 699     *buf = 0;
 700     while(node != NULL)
 701     {
 702         if(node->path != NULL)
 703         {
 704             if(bufsize < strlen(node->path) + strlen(buf) + 1)
 705                 buf = srealloc(buf, strlen(node->path) + strlen(buf) + 1);
 706             memmove(buf + strlen(node->path), buf, strlen(buf) + 1);
 707             memcpy(buf, node->path, strlen(node->path));
 708             return(buf);
 709         }
 710         if((mbsname = icwcstombs(node->name, NULL)) == NULL)
 711         {
 712             flog(LOG_WARNING, "could not map unicode share name (%ls) into filesystem charset: %s", node->name, strerror(errno));
 713             free(buf);
 714             return(NULL);
 715         }
 716         while(bufsize < strlen(mbsname) + 1 + strlen(buf) + 1)
 717             buf = srealloc(buf, bufsize *= 2);
 718         memmove(buf + strlen(mbsname) + 1, buf, strlen(buf) + 1);
 719         memcpy(buf + 1, mbsname, strlen(mbsname));
 720         *buf = '/';
 721         free(mbsname);
 722         node = node->parent;
 723     }
 724     buf = srealloc(buf, strlen(buf) + 1);
 725     return(buf);
 726 }
 727
 728 static int checknode(struct sharecache *node)
 729 {
 730     char *path;
 731     struct stat sb;
 732
 733     if(node->parent == NULL)
 734     {
 735         return(1);
 736     } else {
 737         if(!checknode(node->parent))
 738             return(0);
 739         path = getfspath(node);
 740         if(stat(path, &sb) < 0)
 741         {
 742             flog(LOG_INFO, "%s was found to be broken (%s); scheduling rescan of parent", path, strerror(errno));
 743             queuescan(node->parent);
 744             return(0);
 745         } else {
 746             return(1);
 747         }
 748     }
 749 }
 750
 751 int opensharecache(struct sharecache *node)
 752 {
 753     char *path;
 754     int fd, errbak;
 755
 756     path = getfspath(node);
 757     fd = open(path, O_RDONLY);
 758     errbak = errno;
 759     if(fd < 0)
 760     {
 761         flog(LOG_WARNING, "could not open %s: %s", path, strerror(errbak));
 762         checknode(node);
 763     }
 764     free(path);
 765     errno = errbak;
 766     return(fd);
 767 }
 768
 769 static struct scanstate *newscan(struct sharecache *node)
 770 {
 771     struct scanstate *new;
 772
 773     new = smalloc(sizeof(*new));
 774     new->next = NULL;
 775     new->node = node;
 776     new->dd = NULL;
 777     return(new);
 778 }
 779
 780 void queuescan(struct sharecache *node)
 781 {
 782     struct scanqueue *new;
 783
 784     new = smalloc(sizeof(*new));
 785     new->state = newscan(node);
 786     new->next = scanqueue;
 787     scanqueue = new;
 788 }
 789
 790 /* For internal use in doscan() */
 791 static void removestale(struct sharecache *node)
 792 {
 793     struct sharecache *cur, *next;
 794
 795     for(cur = node->child; cur != NULL; cur = next)
 796     {
 797         next = cur->next;
 798         if(!cur->f.b.found)
 799             freecache(cur);
 800     }
 801 }
 802
 803 /* For internal use in doscan() */
 804 static void jobdone(void)
 805 {
 806     struct scanstate *jbuf;
 807
 808     jbuf = scanjob;
 809     scanjob = jbuf->next;
 810     freescan(jbuf);
 811     if(scanjob != NULL)
 812         fchdir(dirfd(scanjob->dd));
 813 }
 814
 815 int doscan(int quantum)
 816 {
 817     char *path;
 818     wchar_t *wcs;
 819     int type;
 820     struct sharecache *n;
 821     struct scanstate *jbuf;
 822     struct scanqueue *qbuf;
 823     struct dirent *de;
 824     struct stat sb;
 825     struct hashcache *hc;
 826     int dmask, fmask;
 827     static int busybefore = 0;
 828
 829     dmask = confgetint("cli", "scandirmask");
 830     fmask = confgetint("cli", "scanfilemask");
 831     if((scanjob != NULL) && (scanjob->dd != NULL))
 832     {
 833         while(fchdir(dirfd(scanjob->dd)) < 0)
 834         {
 835             flog(LOG_WARNING, "could not fchdir to fd %i: %s", dirfd(scanjob->dd), strerror(errno));
 836             removestale(scanjob->node);
 837             jobdone();
 838         }
 839     }
 840     while(quantum-- > 0)
 841     {
 842         if(scanjob != NULL)
 843         {
 844             busybefore = 1;
 845         } else {
 846             while(scanjob == NULL)
 847             {
 848                 if(scanqueue == NULL)
 849                 {
 850                     if(busybefore)
 851                     {
 852                         flog(LOG_INFO, "sharing %lli bytes", sharesize);
 853                         busybefore = 0;
 854                         GCBCHAINDOCB(sharechangecb, sharesize);
 855                         if(hashjob == 0)
 856                             checkhashes();
 857                     }
 858                     return(0);
 859                 }
 860                 busybefore = 1;
 861                 scanjob = scanqueue->state;
 862                 qbuf = scanqueue;
 863                 scanqueue = qbuf->next;
 864                 free(qbuf);
 865                 for(n = scanjob->node->child; n != NULL; n = n->next)
 866                     n->f.b.found = 0;
 867             }
 868         }
 869         if(scanjob->dd == NULL)
 870         {
 871             path = getfspath(scanjob->node);
 872             if((scanjob->dd = opendir(path)) == NULL)
 873             {
 874                 flog(LOG_WARNING, "cannot open directory %s for scanning: %s, deleting from share", path, strerror(errno));
 875                 freecache(scanjob->node);
 876                 free(path);
 877                 jobdone();
 878                 continue;
 879             }
 880             free(path);
 881             if(fchdir(dirfd(scanjob->dd)) < 0)
 882             {
 883                 flog(LOG_WARNING, "could not fchdir to fd %i: %s", dirfd(scanjob->dd), strerror(errno));
 884                 jobdone();
 885                 continue;
 886             }
 887         }
 888         if((de = readdir(scanjob->dd)) == NULL)
 889         {
 890             removestale(scanjob->node);
 891             jobdone();
 892             continue;
 893         }
 894         if(*de->d_name == '.')
 895             continue;
 896         if((wcs = icmbstowcs(de->d_name, NULL)) == NULL)
 897         {
 898             flog(LOG_WARNING, "file name %s has cannot be converted to wchar: %s", de->d_name, strerror(errno));
 899             continue;
 900         }
 901         n = findcache(scanjob->node, wcs);
 902         if(stat(de->d_name, &sb) < 0)
 903         {
 904             free(wcs);
 905             if(n != NULL)
 906             {
 907                 flog(LOG_WARNING, "could not stat %s: %s, deleting from share", de->d_name, strerror(errno));
 908                 freecache(n);
 909             } else {
 910                 flog(LOG_WARNING, "could not stat %s: %s", de->d_name, strerror(errno));
 911             }
 912             continue;
 913         }
 914         if(S_ISDIR(sb.st_mode))
 915         {
 916             if(~sb.st_mode & dmask)
 917             {
 918                 free(wcs);
 919                 continue;
 920             }
 921             type = FILE_DIR;
 922         } else if(S_ISREG(sb.st_mode)) {
 923             if(~sb.st_mode & fmask)
 924             {
 925                 free(wcs);
 926                 continue;
 927             }
 928             type = FILE_REG;
 929         } else {
 930             flog(LOG_WARNING, "unhandled file type: %i", sb.st_mode);
 931             free(wcs);
 932             continue;
 933         }
 934         if(n != NULL)
 935         {
 936             if((n->f.b.type != type) || (n->mtime != sb.st_mtime) || ((type == FILE_REG) && (n->size != sb.st_size)))
 937             {
 938                 freecache(n);
 939                 n = NULL;
 940             }
 941         }
 942         if(n == NULL)
 943         {
 944             n = newcache();
 945             n->name = wcs;
 946             if(S_ISREG(sb.st_mode))
 947             {
 948                 sharesize += (n->size = sb.st_size);
 949             } else {
 950                 n->size = 0;
 951             }
 952             n->mtime = sb.st_mtime;
 953             n->dev = sb.st_dev;
 954             n->inode = sb.st_ino;
 955             n->f.b.type = type;
 956             attachcache(scanjob->node, n);
 957         } else {
 958             free(wcs);
 959         }
 960         n->f.b.found = 1;
 961         if(n->f.b.type == FILE_DIR)
 962         {
 963             jbuf = newscan(n);
 964             jbuf->next = scanjob;
 965             scanjob = jbuf;
 966         } else if(n->f.b.type == FILE_REG) {
 967             if(n->f.b.hastth && (n->mtime != sb.st_mtime))
 968                 n->f.b.hastth = 0;
 969             if(!n->f.b.hastth)
 970             {
 971                 if((hc = findhashcache(sb.st_dev, sb.st_ino)) != NULL)
 972                 {
 973                     if(hc->mtime == n->mtime)
 974                     {
 975                         n->f.b.hastth = 1;
 976                         memcpy(n->hashtth, hc->tth, 24);
 977                     } else {
 978                         freehashcache(hc);
 979                     }
 980                 }
 981             }
 982         }
 983     }
 984     return(1);
 985 }
 986
 987 void scanshares(void)
 988 {
 989     struct sharepoint *cur;
 990     struct sharecache *node;
 991     struct stat sb;
 992
 993     for(cur = shares; cur != NULL; cur = cur->next)
 994     {
 995         if((node = findcache(shareroot, cur->name)) == NULL)
 996         {
 997             if(stat(cur->path, &sb))
 998             {
 999                 flog(LOG_WARNING, "could not stat share \"%ls\": %s", cur->name, strerror(errno));
1000                 continue;
1001             }
1002             if(!S_ISDIR(sb.st_mode))
1003             {
1004                 flog(LOG_WARNING, "%s is not a directory; won't share it", cur->path);
1005                 continue;
1006             }
1007             node = newcache();
1008             node->name = swcsdup(cur->name);
1009             node->path = sstrdup(cur->path);
1010             if(node->path[strlen(node->path) - 1] == '/')
1011                 node->path[strlen(node->path) - 1] = 0;
1012             node->f.b.type = FILE_DIR;
1013             attachcache(shareroot, node);
1014         }
1015         queuescan(node);
1016     }
1017 }
1018
1019 static void preinit(int hup)
1020 {
1021     struct sharepoint *cur;
1022
1023     if(hup)
1024     {
1025         for(cur = shares; cur != NULL; cur = cur->next)
1026             cur->delete = 1;
1027     } else {
1028         shareroot = newcache();
1029         shareroot->name = swcsdup(L"");
1030         shareroot->f.b.type = FILE_DIR;
1031     }
1032 }
1033
1034 static int init(int hup)
1035 {
1036     struct sharepoint *cur, *next;
1037
1038     readhashcache();
1039     for(cur = shares; cur != NULL; cur = next)
1040     {
1041         next = cur->next;
1042         if(cur->delete)
1043             freesharepoint(cur);
1044     }
1045     scanshares();
1046     if(!hup)
1047         while(doscan(100));
1048     return(0);
1049 }
1050
1051 static int run(void)
1052 {
1053     return(doscan(10));
1054 }
1055
1056 static void terminate(void)
1057 {
1058     if(hashjob != 0)
1059         kill(hashjob, SIGHUP);
1060     while(shares != NULL)
1061         freesharepoint(shares);
1062     freecache(shareroot);
1063 }
1064
1065 static struct module me =
1066 {
1067     .name = "cli",
1068     .conf =
1069     {
1070         .vars = myvars,
1071         .cmds = mycmds
1072     },
1073     .preinit = preinit,
1074     .init = init,
1075     .run = run,
1076     .terminate = terminate
1077 };
1078
1079 MODULE(me)