ViewVC Help
View File | Revision Log | Show Annotations | Download File | Root Listing
root/radiance/ray/src/hd/holofile.c
(Generate patch)

Comparing ray/src/hd/holofile.c (file contents):
Revision 3.2 by gregl, Fri Oct 31 15:48:32 1997 UTC vs.
Revision 3.25 by gwlarson, Fri Sep 18 13:51:01 1998 UTC

# Line 1 | Line 1
1 < /* Copyright (c) 1997 Silicon Graphics, Inc. */
1 > /* Copyright (c) 1998 Silicon Graphics, Inc. */
2  
3   #ifndef lint
4   static char SCCSid[] = "$SunId$ SGI";
# Line 16 | Line 16 | static char SCCSid[] = "$SunId$ SGI";
16   #define CACHESIZE       16      /* default cache size (Mbytes, 0==inf) */
17   #endif
18   #ifndef FREEBEAMS
19 < #define FREEBEAMS       1024    /* maximum beams to free at a time */
19 > #define FREEBEAMS       1500    /* maximum beams to free at a time */
20   #endif
21   #ifndef PCTFREE
22 < #define PCTFREE         12      /* maximum fraction to free (%) */
22 > #define PCTFREE         15      /* maximum fraction to free (%) */
23   #endif
24 #ifndef FFDMAX
25 #define FFDMAX          64      /* max. file descriptor for tracking */
26 #endif
24   #ifndef MAXFRAG
25 < #define MAXFRAG         2048    /* maximum fragments tracked in each file */
25 > #define MAXFRAG         32767   /* maximum fragments/file to track (0==inf) */
26   #endif
27  
28 < int     hdcachesize = CACHESIZE*1024*1024;      /* target cache size (bytes) */
28 > #ifndef BSD
29 > #define write   writebuf        /* safe i/o routines */
30 > #define read    readbuf
31 > #endif
32 >
33 > #define FRAGBLK         256     /* number of fragments to allocate at a time */
34 >
35 > unsigned        hdcachesize = CACHESIZE*1024*1024;      /* target cache size */
36   unsigned long   hdclock;        /* clock value */
37  
38   HOLO    *hdlist[HDMAX+1];       /* holodeck pointers (NULL term.) */
39  
40 < static struct fragment {
40 > static struct fraglist {
41          short   nlinks;         /* number of holodeck sections using us */
42 <        short   nfrags;         /* number of known fragments */
43 <        BEAMI   fi[MAXFRAG];    /* fragments, descending file position */
42 >        short   writerr;        /* write error encountered */
43 >        int     nfrags;         /* number of known fragments */
44 >        BEAMI   *fi;            /* fragments, descending file position */
45          long    flen;           /* last known file length */
46 < } *hdfrag[FFDMAX];      /* fragment lists, indexed by file descriptor */
46 > } *hdfragl;             /* fragment lists, indexed by file descriptor */
47  
48 + static int      nhdfragls;      /* size of hdfragl array */
49  
50 +
51   hdattach(fd)            /* start tracking file fragments for some section */
52   register int    fd;
53   {
54 <        if (fd >= FFDMAX)
55 <                return;                         /* descriptor out of range */
56 <        if (hdfrag[fd] == NULL) {
57 <                if ((hdfrag[fd] = (struct fragment *)
58 <                                malloc(sizeof(struct fragment))) == NULL)
59 <                        return;                 /* should flag error? */
60 <                hdfrag[fd]->nlinks = 0;
61 <                hdfrag[fd]->nfrags = 0;
54 >        if (fd >= nhdfragls) {
55 >                if (nhdfragls)
56 >                        hdfragl = (struct fraglist *)realloc((char *)hdfragl,
57 >                                        (fd+1)*sizeof(struct fraglist));
58 >                else
59 >                        hdfragl = (struct fraglist *)malloc(
60 >                                        (fd+1)*sizeof(struct fraglist));
61 >                if (hdfragl == NULL)
62 >                        error(SYSTEM, "out of memory in hdattach");
63 >                bzero((char *)(hdfragl+nhdfragls),
64 >                                (fd+1-nhdfragls)*sizeof(struct fraglist));
65 >                nhdfragls = fd+1;
66          }
67 <        hdfrag[fd]->nlinks++;
68 <        hdfrag[fd]->flen = lseek(fd, 0L, 2);    /* get file length */
67 >        hdfragl[fd].nlinks++;
68 >        hdfragl[fd].flen = lseek(fd, 0L, 2);    /* get file length */
69   }
70  
71  
# Line 64 | Line 75 | register int   fd;
75   hdrelease(fd)           /* stop tracking file fragments for some section */
76   register int    fd;
77   {
78 <        if (fd >= FFDMAX || hdfrag[fd] == NULL)
78 >        if (fd < 0 | fd >= nhdfragls || !hdfragl[fd].nlinks)
79                  return;
80 <        if (!--hdfrag[fd]->nlinks) {
81 <                free((char *)hdfrag[fd]);
82 <                hdfrag[fd] = NULL;
80 >        if (!--hdfragl[fd].nlinks && hdfragl[fd].nfrags) {
81 >                free((char *)hdfragl[fd].fi);
82 >                hdfragl[fd].fi = NULL;
83 >                hdfragl[fd].nfrags = 0;
84          }
85   }
86  
87  
88 + markdirty(hp)                   /* mark holodeck section directory dirty */
89 + register HOLO   *hp;
90 + {
91 +        static BEAMI    smudge = {0, -1};
92 +
93 +        if (hp->dirty)          /* already marked? */
94 +                return;
95 +        hp->dirty = 1;
96 +        if (lseek(hp->fd, biglob(hp)->fo+(nbeams(hp)-1)*sizeof(BEAMI), 0) < 0
97 +                        || write(hp->fd, (char *)&smudge,
98 +                                        sizeof(BEAMI)) != sizeof(BEAMI))
99 +                error(SYSTEM, "seek/write error in markdirty");
100 + }
101 +
102 +
103   HOLO *
104   hdinit(fd, hproto)      /* initialize a holodeck section in a file */
105   int     fd;                     /* corresponding file descriptor */
106   HDGRID  *hproto;                /* holodeck section grid */
107   {
108 +        long    rtrunc;
109          long    fpos;
110          register HOLO   *hp;
111          register int    n;
# Line 97 | Line 125 | HDGRID *hproto;                /* holodeck section grid */
125                  n = nbeams(hp)*sizeof(BEAMI);
126                  if (read(fd, (char *)(hp->bi+1), n) != n)
127                          error(SYSTEM, "failure loading holodeck directory");
128 +                                                /* check that it's clean */
129 +                if (hp->bi[nbeams(hp)].fo < 0)
130 +                        error(WARNING, "dirty holodeck section");
131          } else {                        /* assume we're creating it */
132                  if ((hp = hdalloc(hproto)) == NULL)
133                          goto memerr;
# Line 110 | Line 141 | HDGRID *hproto;                /* holodeck section grid */
141          hp->fd = fd;    
142          hp->dirty = 0;
143          biglob(hp)->fo = fpos + sizeof(HDGRID);
144 <        biglob(hp)->nrd = 0;            /* count rays on disk */
145 <        for (n = nbeams(hp); n > 0; n--)
146 <                biglob(hp)->nrd += hp->bi[n].nrd;
144 >                                        /* start tracking fragments */
145 >        hdattach(fd);
146 >                                        /* check rays on disk */
147 >        fpos = hdfilen(fd);
148 >        biglob(hp)->nrd = rtrunc = 0;
149 >        for (n = hproto == NULL ? nbeams(hp) : 0; n > 0; n--)
150 >                if (hp->bi[n].nrd)
151 >                        if (hp->bi[n].fo + hp->bi[n].nrd > fpos) {
152 >                                rtrunc += hp->bi[n].nrd;
153 >                                hp->bi[n].nrd = 0;
154 >                        } else
155 >                                biglob(hp)->nrd += hp->bi[n].nrd;
156 >        if (rtrunc) {
157 >                sprintf(errmsg, "truncated section, %ld rays lost (%.1f%%)",
158 >                                rtrunc, 100.*rtrunc/(rtrunc+biglob(hp)->nrd));
159 >                error(WARNING, errmsg);
160 >        }
161                                          /* add to holodeck list */
162          for (n = 0; n < HDMAX; n++)
163                  if (hdlist[n] == NULL) {
164                          hdlist[n] = hp;
165                          break;
166                  }
122                                        /* start tracking fragments (last) */
123        hdattach(fd);
167                                          /* all done */
168          return(hp);
169   memerr:
# Line 129 | Line 172 | memerr:
172  
173  
174   int
175 < hdsync(hp)                      /* update directory on disk if necessary */
175 > hdsync(hp, all)                 /* update beams and directory on disk */
176   register HOLO   *hp;
177 + int     all;
178   {
179          register int    j, n;
180  
181 <        if (hp == NULL) {               /* do all */
181 >        if (hp == NULL) {               /* do all holodecks */
182                  n = 0;
183                  for (j = 0; hdlist[j] != NULL; j++)
184 <                        n += hdsync(hdlist[j]);
184 >                        n += hdsync(hdlist[j], all);
185                  return(n);
186          }
187 <        if (!hp->dirty)                 /* check first */
187 >                                        /* sync the beams */
188 >        for (j = (all ? nbeams(hp) : 0); j > 0; j--)
189 >                if (hp->bl[j] != NULL)
190 >                        hdsyncbeam(hp, j);
191 >        if (!hp->dirty)                 /* directory clean? */
192                  return(0);
193 +        errno = 0;
194          if (lseek(hp->fd, biglob(hp)->fo, 0) < 0)
195                  error(SYSTEM, "cannot seek on holodeck file");
196          n = nbeams(hp)*sizeof(BEAMI);
# Line 152 | Line 201 | register HOLO  *hp;
201   }
202  
203  
204 < long
204 > unsigned
205   hdmemuse(all)           /* return memory usage (in bytes) */
206   int     all;                    /* include overhead (painful) */
207   {
# Line 171 | Line 220 | int    all;                    /* include overhead (painful) */
220                  }
221          }
222          if (all)
223 <                for (j = 0; j < FFDMAX; j++)
224 <                        if (hdfrag[j] != NULL)
225 <                                total += sizeof(struct fragment);
223 >                for (j = 0; j < nhdfragls; j++) {
224 >                        total += sizeof(struct fraglist);
225 >                        if (hdfragl[j].nfrags)
226 >                                total += FRAGBLK*sizeof(BEAMI) *
227 >                                        ((hdfragl[j].nfrags-1)/FRAGBLK + 1) ;
228 >                }
229          return(total);
230   }
231  
232  
233   long
234 + hdfilen(fd)             /* return file length for fd */
235 + int     fd;
236 + {
237 +        long    fpos, flen;
238 +
239 +        if (fd < 0)
240 +                return(-1);
241 +        if (fd >= nhdfragls || !hdfragl[fd].nlinks) {
242 +                if ((fpos = lseek(fd, 0L, 1)) < 0)
243 +                        return(-1);
244 +                flen = lseek(fd, 0L, 2);
245 +                lseek(fd, fpos, 0);
246 +                return(flen);
247 +        }
248 +        return(hdfragl[fd].flen);
249 + }
250 +
251 +
252 + long
253   hdfiluse(fd, all)       /* compute file usage (in bytes) */
254   int     fd;                     /* open file descriptor to check */
255   int     all;                    /* include overhead and unflushed data */
# Line 221 | Line 292 | int    nr;                     /* number of new rays desired */
292                  hp->bl[i]->tick = hdclock;      /* preempt swap */
293          if (hdcachesize > 0 && hdmemuse(0) >= hdcachesize)
294                  hdfreecache(PCTFREE, NULL);     /* free some space */
295 +        errno = 0;
296          if (hp->bl[i] == NULL) {                /* allocate (and load) */
297                  n = hp->bi[i].nrd + nr;
298                  if ((hp->bl[i] = (BEAM *)malloc(hdbsiz(n))) == NULL)
# Line 244 | Line 316 | int    nr;                     /* number of new rays desired */
316          p = hdbray(hp->bl[i]) + hp->bl[i]->nrm;
317          hp->bl[i]->nrm += nr;                   /* update in-core structure */
318          bzero((char *)p, nr*sizeof(RAYVAL));
319 <        hp->bl[i]->tick = ++hdclock;            /* update LRU clock */
248 <        blglob(hp)->tick = hdclock;
319 >        blglob(hp)->tick = hp->bl[i]->tick = hdclock++; /* update LRU clock */
320          return(p);                              /* point to new rays */
321   memerr:
322          error(SYSTEM, "out of memory in hdnewrays");
# Line 276 | Line 347 | register int   i;
347                  if (read(hp->fd, (char *)hdbray(hp->bl[i]), n) != n)
348                          error(SYSTEM, "error reading beam from holodeck file");
349          }
350 <        hp->bl[i]->tick = ++hdclock;    /* update LRU clock */
280 <        blglob(hp)->tick = hdclock;
350 >        blglob(hp)->tick = hp->bl[i]->tick = hdclock++; /* update LRU clock */
351          return(hp->bl[i]);
352   }
353  
354  
355   int
356 < hdgetbi(hp, i)                  /* allocate a file fragment */
357 < register HOLO   *hp;
288 < register int    i;
356 > hdfilord(hb1, hb2)      /* order beams for quick loading */
357 > register HDBEAMI        *hb1, *hb2;
358   {
359 <        int     nrays = hp->bl[i]->nrm;
359 >        register long   c;
360 >                                /* residents go first */
361 >        if (hb2->h->bl[hb2->b] != NULL)
362 >                return(hb1->h->bl[hb1->b] == NULL);
363 >        if (hb1->h->bl[hb1->b] != NULL)
364 >                return(-1);
365 >                                /* otherwise sort by file descriptor */
366 >        if ((c = hb1->h->fd - hb2->h->fd))
367 >                return(c);
368 >                                /* then by position in file */
369 >        c = hb1->h->bi[hb1->b].fo - hb2->h->bi[hb2->b].fo;
370 >        return(c > 0 ? 1 : c < 0 ? -1 : 0);
371 > }
372  
292        if (hp->bi[i].nrd == nrays)     /* current one will do? */
293                return(0);
373  
374 <        if (hp->fd >= FFDMAX || hdfrag[hp->fd] == NULL) /* untracked */
375 <                hp->bi[i].fo = lseek(hp->fd, 0L, 2);
374 > hdloadbeams(hb, n, bf)  /* load a list of beams in optimal order */
375 > register HDBEAMI        *hb;    /* list gets sorted by hdfilord() */
376 > int     n;                      /* list length */
377 > int     (*bf)();                /* callback function (optional) */
378 > {
379 >        unsigned        origcachesize, memuse;
380 >        int     bytesloaded, needbytes, bytes2free;
381 >        register BEAM   *bp;
382 >        register int    i;
383 >                                        /* precheck consistency */
384 >        if (n <= 0) return;
385 >        for (i = n; i--; )
386 >                if (hb[i].h == NULL || hb[i].b < 1 | hb[i].b > nbeams(hb[i].h))
387 >                        error(CONSISTENCY, "bad beam in hdloadbeams");
388 >                                        /* sort list for optimal access */
389 >        qsort((char *)hb, n, sizeof(HDBEAMI), hdfilord);
390 >        bytesloaded = 0;                /* run through loaded beams */
391 >        for ( ; n && (bp = hb->h->bl[hb->b]) != NULL; n--, hb++) {
392 >                bp->tick = hdclock;     /* preempt swap */
393 >                bytesloaded += bp->nrm;
394 >                if (bf != NULL)
395 >                        (*bf)(bp, hb);
396 >        }
397 >        bytesloaded *= sizeof(RAYVAL);
398 >        if ((origcachesize = hdcachesize) > 0) {
399 >                needbytes = 0;          /* figure out memory needs */
400 >                for (i = n; i--; )
401 >                        needbytes += hb[i].h->bi[hb[i].b].nrd;
402 >                needbytes *= sizeof(RAYVAL);
403 >                do {                            /* free enough memory */
404 >                        memuse = hdmemuse(0);
405 >                        bytes2free = needbytes - (int)(hdcachesize-memuse);
406 >                        if (bytes2free > (int)(memuse - bytesloaded))
407 >                                bytes2free = memuse - bytesloaded;
408 >                } while (bytes2free > 0 &&
409 >                                hdfreecache(100*bytes2free/memuse, NULL) < 0);
410 >                hdcachesize = 0;                /* load beams w/o swap */
411 >        }
412 >        for (i = 0; i < n; i++)
413 >                if ((bp = hdgetbeam(hb[i].h, hb[i].b)) != NULL && bf != NULL)
414 >                        (*bf)(bp, hb+i);
415 >        hdcachesize = origcachesize;    /* resume dynamic swapping */
416 > }
417  
298        else if (hp->bi[i].fo + hp->bi[i].nrd*sizeof(RAYVAL) ==
299                        hdfrag[hp->fd]->flen)           /* EOF special case */
300                hdfrag[hp->fd]->flen = hp->bi[i].fo + nrays*sizeof(RAYVAL);
418  
419 <        else {                                          /* general case */
420 <                register struct fragment        *f = hdfrag[hp->fd];
421 <                register int    j, k;
422 <                                        /* relinquish old fragment */
423 <                if (hp->bi[i].nrd) {
424 <                        if ((j = ++f->nfrags) >= MAXFRAG)
425 <                                f->nfrags--;
426 <                        for ( ; ; ) {   /* stick it in our descending list */
427 <                                if (!--j || hp->bi[i].fo < f->fi[j-1].fo) {
428 <                                        f->fi[j].fo = hp->bi[i].fo;
429 <                                        f->fi[j].nrd = hp->bi[i].nrd;
430 <                                        break;
431 <                                }
432 <                                copystruct(f->fi+j, f->fi+j-1);
433 <                        }
419 > hdfreefrag(fd, bi)                      /* free a file fragment */
420 > int     fd;
421 > register BEAMI  *bi;
422 > {
423 >        register struct fraglist        *f;
424 >        register int    j, k;
425 >
426 >        if (bi->nrd == 0)
427 >                return;
428 > #ifdef DEBUG
429 >        if (fd < 0 | fd >= nhdfragls || !hdfragl[fd].nlinks)
430 >                error(CONSISTENCY, "bad file descriptor in hdfreefrag");
431 > #endif
432 >        f = &hdfragl[fd];
433 >        if (f->nfrags % FRAGBLK == 0) { /* delete empty remnants */
434 >                for (j = k = 0; k < f->nfrags; j++, k++) {
435 >                        while (f->fi[k].nrd == 0)
436 >                                if (++k >= f->nfrags)
437 >                                        goto endloop;
438 >                        if (k > j)
439 >                                copystruct(f->fi+j, f->fi+k);
440 >                }
441 >        endloop:
442 >                f->nfrags = j;
443 >        }
444 >        j = f->nfrags++;                /* allocate a slot in free list */
445 > #if MAXFRAG
446 >        if (j >= MAXFRAG-1)
447 >                f->nfrags--;
448 > #endif
449 >        if (j % FRAGBLK == 0) {         /* more free list space */
450 >                if (f->fi == NULL)
451 >                        f->fi = (BEAMI *)malloc(FRAGBLK*sizeof(BEAMI));
452 >                else
453 >                        f->fi = (BEAMI *)realloc((char *)f->fi,
454 >                                        (j+FRAGBLK)*sizeof(BEAMI));
455 >                if (f->fi == NULL)
456 >                        error(SYSTEM, "out of memory in hdfreefrag");
457 >        }
458 >        for ( ; ; j--) {                /* insert in descending list */
459 >                if (!j || bi->fo < f->fi[j-1].fo) {
460 >                        f->fi[j].fo = bi->fo;
461 >                        f->fi[j].nrd = bi->nrd;
462 >                        break;
463 >                }
464 >                copystruct(f->fi+j, f->fi+(j-1));
465 >        }
466                                          /* coalesce adjacent fragments */
467 <                        for (j = k = 0; k < f->nfrags; j++, k++) {
468 <                                if (j != k)
469 <                                        copystruct(f->fi+j, f->fi+k);
470 <                                while (k+1 < f->nfrags &&
471 <                                f->fi[k+1].fo + f->fi[k+1].nrd*sizeof(RAYVAL)
472 <                                                == f->fi[j].fo)
473 <                                        f->fi[j].fo -=
474 <                                                f->fi[++k].nrd*sizeof(RAYVAL);
467 >                                                /* successors never empty */
468 >        if (j && f->fi[j-1].fo == f->fi[j].fo + f->fi[j].nrd*sizeof(RAYVAL)) {
469 >                f->fi[j].nrd += f->fi[j-1].nrd;
470 >                f->fi[j-1].nrd = 0;
471 >        }
472 >        for (k = j+1; k < f->nfrags; k++)       /* get non-empty predecessor */
473 >                if (f->fi[k].nrd) {
474 >                        if (f->fi[j].fo == f->fi[k].fo +
475 >                                        f->fi[k].nrd*sizeof(RAYVAL)) {
476 >                                f->fi[k].nrd += f->fi[j].nrd;
477 >                                f->fi[j].nrd = 0;
478                          }
479 <                        f->nfrags = j;
479 >                        break;
480                  }
481 <                k = -1;                 /* find closest-sized fragment */
482 <                for (j = f->nfrags; j-- > 0; )
483 <                        if (f->fi[j].nrd >= nrays &&
484 <                                        (k < 0 || f->fi[j].nrd < f->fi[k].nrd)
485 <                                        && f->fi[k=j].nrd == nrays)
481 > }
482 >
483 >
484 > long
485 > hdallocfrag(fd, nrays)          /* allocate a file fragment */
486 > int     fd;
487 > unsigned int4   nrays;
488 > {
489 >        register struct fraglist        *f;
490 >        register int    j, k;
491 >        long    nfo;
492 >
493 >        if (nrays == 0)
494 >                return(-1L);
495 > #ifdef DEBUG
496 >        if (fd < 0 | fd >= nhdfragls || !hdfragl[fd].nlinks)
497 >                error(CONSISTENCY, "bad file descriptor in hdallocfrag");
498 > #endif
499 >        f = &hdfragl[fd];
500 >        k = -1;                         /* find closest-sized fragment */
501 >        for (j = f->nfrags; j-- > 0; )
502 >                if (f->fi[j].nrd >= nrays &&
503 >                                (k < 0 || f->fi[j].nrd < f->fi[k].nrd))
504 >                        if (f->fi[k=j].nrd == nrays)
505                                  break;
506 <                if (k < 0) {            /* no fragment -- extend file */
507 <                        hp->bi[i].fo = f->flen;
508 <                        f->flen += nrays*sizeof(RAYVAL);
509 <                } else {                /* else use fragment */
510 <                        hp->bi[i].fo = f->fi[k].fo;
511 <                        if (f->fi[k].nrd == nrays) {    /* delete fragment */
512 <                                f->nfrags--;
342 <                                for (j = k; j < f->nfrags; j++)
343 <                                        copystruct(f->fi+j, f->fi+j+1);
344 <                        } else {                        /* else shrink it */
345 <                                f->fi[k].fo += nrays*sizeof(RAYVAL);
346 <                                f->fi[k].nrd -= nrays;
347 <                        }
348 <                }
506 >        if (k < 0) {                    /* no fragment -- extend file */
507 >                nfo = f->flen;
508 >                f->flen += nrays*sizeof(RAYVAL);
509 >        } else {                        /* else use fragment */
510 >                nfo = f->fi[k].fo;
511 >                f->fi[k].fo += nrays*sizeof(RAYVAL);
512 >                f->fi[k].nrd -= nrays;
513          }
514 +        return(nfo);
515 + }
516 +
517 +
518 + int
519 + hdsyncbeam(hp, i)               /* sync beam in memory with beam on disk */
520 + register HOLO   *hp;
521 + register int    i;
522 + {
523 +        unsigned int4   nrays;
524 +        unsigned int    n;
525 +        long    nfo;
526 +                                        /* check file status */
527 +        if (hdfragl[hp->fd].writerr)
528 +                return(-1);
529 + #ifdef DEBUG
530 +        if (i < 1 | i > nbeams(hp))
531 +                error(CONSISTENCY, "bad beam index in hdsyncbeam");
532 + #endif
533 +                                        /* is current fragment OK? */
534 +        if (hp->bl[i] == NULL || (nrays = hp->bl[i]->nrm) == hp->bi[i].nrd)
535 +                return(0);
536 +        if (hp->bi[i].nrd)              /* relinquish old fragment */
537 +                hdfreefrag(hp->fd, &hp->bi[i]);
538 +        if (nrays) {                    /* get and write new fragment */
539 +                nfo = hdallocfrag(hp->fd, nrays);
540 +                errno = 0;
541 +                if (lseek(hp->fd, nfo, 0) < 0)
542 +                        error(SYSTEM, "cannot seek on holodeck file");
543 +                n = hp->bl[i]->nrm * sizeof(RAYVAL);
544 +                if (write(hp->fd, (char *)hdbray(hp->bl[i]), n) != n) {
545 +                        hdfragl[hp->fd].writerr++;
546 +                        hdsync(NULL, 0);        /* sync directories */
547 +                        error(SYSTEM, "write error in hdsyncbeam");
548 +                }
549 +                hp->bi[i].fo = nfo;
550 +        } else
551 +                hp->bi[i].fo = 0L;
552          biglob(hp)->nrd += nrays - hp->bi[i].nrd;
553          hp->bi[i].nrd = nrays;
554 <        hp->dirty++;            /* section directory now out of date */
554 >        markdirty(hp);                  /* section directory now out of date */
555          return(1);
556   }
557  
# Line 359 | Line 561 | hdfreebeam(hp, i)              /* free beam, writing if dirty */
561   register HOLO   *hp;
562   register int    i;
563   {
564 <        int     nchanged, n;
564 >        int     nchanged;
565  
566          if (hp == NULL) {               /* clear all holodecks */
567                  nchanged = 0;
# Line 367 | Line 569 | register int   i;
569                          nchanged += hdfreebeam(hdlist[i], 0);
570                  return(nchanged);
571          }
572 +        if (hdfragl[hp->fd].writerr)    /* check for file error */
573 +                return(0);
574          if (i == 0) {                   /* clear entire holodeck */
575                  nchanged = 0;
576 <                for (i = 1; i <= nbeams(hp); i++)
577 <                        nchanged += hdfreebeam(hp, i);
576 >                for (i = nbeams(hp); i > 0; i--)
577 >                        if (hp->bl[i] != NULL)
578 >                                nchanged += hdfreebeam(hp, i);
579                  return(nchanged);
580          }
581 + #ifdef DEBUG
582          if (i < 1 | i > nbeams(hp))
583                  error(CONSISTENCY, "bad beam index to hdfreebeam");
584 + #endif
585          if (hp->bl[i] == NULL)
586                  return(0);
587                                          /* check for additions */
588          nchanged = hp->bl[i]->nrm - hp->bi[i].nrd;
589 <        if (nchanged) {
590 <                hdgetbi(hp, i);                 /* allocate a file position */
384 <                errno = 0;
385 <                if (lseek(hp->fd, hp->bi[i].fo, 0) < 0)
386 <                        error(SYSTEM, "cannot seek on holodeck file");
387 <                n = hp->bl[i]->nrm * sizeof(RAYVAL);
388 <                if (write(hp->fd, (char *)hdbray(hp->bl[i]), n) != n)
389 <                        error(SYSTEM, "write error in hdfreebeam");
390 <        }
589 >        if (nchanged)
590 >                hdsyncbeam(hp, i);              /* write new fragment */
591          blglob(hp)->nrm -= hp->bl[i]->nrm;
592          free((char *)hp->bl[i]);                /* free memory */
593          hp->bl[i] = NULL;
# Line 395 | Line 595 | register int   i;
595   }
596  
597  
598 < hdlrulist(ha, ba, n, hp)        /* add beams from holodeck to LRU list */
599 < register HOLO   *ha[];                  /* section list (NULL terminated) */
600 < register int    ba[];                   /* beam index to go with section */
601 < int     n;                              /* length of arrays minus 1 */
598 > int
599 > hdkillbeam(hp, i)               /* delete beam from holodeck */
600 > register HOLO   *hp;
601 > register int    i;
602 > {
603 >        static BEAM     emptybeam;
604 >        int     nchanged;
605 >
606 >        if (hp == NULL) {               /* clobber all holodecks */
607 >                nchanged = 0;
608 >                for (i = 0; hdlist[i] != NULL; i++)
609 >                        nchanged += hdkillbeam(hdlist[i], 0);
610 >                return(nchanged);
611 >        }
612 >        if (i == 0) {                   /* clobber entire holodeck */
613 >                nchanged = 0;
614 >                for (i = nbeams(hp); i > 0; i--)
615 >                        if (hp->bi[i].nrd > 0 || hp->bl[i] != NULL)
616 >                                nchanged += hdkillbeam(hp, i);
617 > #ifdef DEBUG
618 >                if (biglob(hp)->nrd != 0 | blglob(hp)->nrm != 0)
619 >                        error(CONSISTENCY, "bad beam count in hdkillbeam");
620 > #endif
621 >                return(nchanged);
622 >        }
623 > #ifdef DEBUG
624 >        if (i < 1 | i > nbeams(hp))
625 >                error(CONSISTENCY, "bad beam index to hdkillbeam");
626 > #endif
627 >        if (hp->bl[i] != NULL) {        /* free memory */
628 >                blglob(hp)->nrm -= nchanged = hp->bl[i]->nrm;
629 >                free((char *)hp->bl[i]);
630 >        } else
631 >                nchanged = hp->bi[i].nrd;
632 >        if (hp->bi[i].nrd) {            /* free file fragment */
633 >                hp->bl[i] = &emptybeam;
634 >                hdsyncbeam(hp, i);
635 >        }
636 >        hp->bl[i] = NULL;
637 >        return(nchanged);
638 > }
639 >
640 >
641 > int
642 > hdlrulist(hb, nents, n, hp)     /* add beams from holodeck to LRU list */
643 > register HDBEAMI        *hb;            /* beam list */
644 > int     nents;                          /* current list length */
645 > int     n;                              /* maximum list length */
646   register HOLO   *hp;                    /* section we're adding from */
647   {
648          register int    i, j;
405        int     nents;
406                                        /* find last entry in LRU list */
407        for (j = 0; ha[j] != NULL; j++)
408                ;
409        nents = j;
649                                          /* insert each beam from hp */
650 <        for (i = nbeams(hp); i > 0; i-- ) {
650 >        for (i = 1; i <= nbeams(hp); i++) {
651                  if (hp->bl[i] == NULL)          /* check if loaded */
652                          continue;
653 <                if ((j = ++nents) > n)          /* grow list if we can */
653 > #if 0
654 >                if (hp->bl[i]->tick == hdclock) /* preempt swap? */
655 >                        continue;
656 > #endif
657 >                if ((j = ++nents) >= n)         /* grow list if we can */
658                          nents--;
659                  for ( ; ; ) {                   /* bubble into place */
660                          if (!--j || hp->bl[i]->tick >=
661 <                                        ha[j-1]->bl[ba[j-1]]->tick) {
662 <                                ha[j] = hp;
663 <                                ba[j] = i;
661 >                                        hb[j-1].h->bl[hb[j-1].b]->tick) {
662 >                                hb[j].h = hp;
663 >                                hb[j].b = i;
664                                  break;
665                          }
666 <                        ha[j] = ha[j-1];
424 <                        ba[j] = ba[j-1];
666 >                        copystruct(hb+j, hb+(j-1));
667                  }
668          }
669 <        ha[nents] = NULL;               /* all done */
428 <        ba[nents] = 0;
669 >        return(nents);                  /* return new list length */
670   }
671  
672  
673 + int
674   hdfreecache(pct, honly)         /* free up cache space, writing changes */
675   int     pct;                            /* maximum percentage to free */
676   register HOLO   *honly;                 /* NULL means check all */
677   {
678 <        HOLO    *hp[FREEBEAMS+1];
437 <        int     bn[FREEBEAMS+1];
678 >        HDBEAMI hb[FREEBEAMS];
679          int     freetarget;
680 +        int     n;
681          register int    i;
682 + #ifdef DEBUG
683 +        unsigned        membefore;
684 +
685 +        membefore = hdmemuse(0);
686 + #endif
687                                                  /* compute free target */
688          freetarget = (honly != NULL) ? blglob(honly)->nrm :
689                          hdmemuse(0)/sizeof(RAYVAL) ;
690          freetarget = freetarget*pct/100;
691 +        if (freetarget <= 0)
692 +                return(0);
693                                                  /* find least recently used */
694 <        hp[0] = NULL;
446 <        bn[0] = 0;
694 >        n = 0;
695          if (honly != NULL)
696 <                hdlrulist(hp, bn, FREEBEAMS, honly);
696 >                n = hdlrulist(hb, n, FREEBEAMS, honly);
697          else
698                  for (i = 0; hdlist[i] != NULL; i++)
699 <                        hdlrulist(hp, bn, FREEBEAMS, hdlist[i]);
699 >                        n = hdlrulist(hb, n, FREEBEAMS, hdlist[i]);
700                                                  /* free LRU beams */
701 <        for (i = 0; hp[i] != NULL; i++) {
702 <                hdfreebeam(hp[i], bn[i]);
703 <                if ((freetarget -= hp[i]->bi[bn[i]].nrd) <= 0)
701 >        for (i = 0; i < n; i++) {
702 >                hdfreebeam(hb[i].h, hb[i].b);
703 >                if ((freetarget -= hb[i].h->bi[hb[i].b].nrd) <= 0)
704                          break;
705          }
706 <        hdsync(honly);          /* synchronize directories as necessary */
706 >        hdsync(honly, 0);       /* synchronize directories as necessary */
707 > #ifdef DEBUG
708 >        sprintf(errmsg,
709 >        "%dK before, %dK after hdfreecache (%dK total), %d rays short\n",
710 >                membefore>>10, hdmemuse(0)>>10, hdmemuse(1)>>10, freetarget);
711 >        wputs(errmsg);
712 > #endif
713 >        return(-freetarget);    /* return how far past goal we went */
714   }
715  
716  
# Line 467 | Line 722 | register HOLO  *hp;            /* NULL means clean up all */
722          if (hp == NULL) {               /* NULL means clean up everything */
723                  while (hdlist[0] != NULL)
724                          hddone(hdlist[0]);
725 +                free((char *)hdfragl);
726 +                hdfragl = NULL; nhdfragls = 0;
727                  return;
728          }
729                                          /* flush all data and free memory */

Diff Legend

Removed lines
+ Added lines
< Changed lines
> Changed lines