ViewVC Help
View File | Revision Log | Show Annotations | Download File | Root Listing
root/radiance/ray/src/rt/ambient.c
(Generate patch)

Comparing ray/src/rt/ambient.c (file contents):
Revision 2.89 by greg, Sun May 11 19:03:37 2014 UTC vs.
Revision 2.112 by greg, Mon Mar 7 17:52:14 2022 UTC

# Line 1 | Line 1
1 #ifndef lint
1   static const char       RCSid[] = "$Id$";
3 #endif
2   /*
3   *  ambient.c - routines dealing with ambient (inter-reflected) component.
4   *
# Line 14 | Line 12 | static const char      RCSid[] = "$Id$";
12   #include  "platform.h"
13   #include  "ray.h"
14   #include  "otypes.h"
15 + #include  "otspecial.h"
16   #include  "resolu.h"
17   #include  "ambient.h"
18   #include  "random.h"
19 + #include  "pmapamb.h"
20  
21   #ifndef  OCTSCALE
22   #define  OCTSCALE       1.0     /* ceil((valid rad.)/(cube size)) */
# Line 37 | Line 37 | static AMBTREE atrunk;         /* our ambient trunk node */
37   static FILE  *ambfp = NULL;     /* ambient file pointer */
38   static int  nunflshed = 0;      /* number of unflushed ambient values */
39  
40 #ifndef SORT_THRESH
41 #ifdef SMLMEM
42 #define SORT_THRESH     ((16L<<20)/sizeof(AMBVAL))
43 #else
44 #define SORT_THRESH     ((64L<<20)/sizeof(AMBVAL))
45 #endif
46 #endif
47 #ifndef SORT_INTVL
48 #define SORT_INTVL      (SORT_THRESH<<1)
49 #endif
50 #ifndef MAX_SORT_INTVL
51 #define MAX_SORT_INTVL  (SORT_INTVL<<6)
52 #endif
53
54
40   static double  avsum = 0.;              /* computed ambient value sum (log) */
41   static unsigned int  navsum = 0;        /* number of values in avsum */
42   static unsigned int  nambvals = 0;      /* total number of indirect values */
43   static unsigned int  nambshare = 0;     /* number of values from file */
59 static unsigned long  ambclock = 0;     /* ambient access clock */
60 static unsigned long  lastsort = 0;     /* time of last value sort */
61 static long  sortintvl = SORT_INTVL;    /* time until next sort */
44   static FILE  *ambinp = NULL;            /* auxiliary file for input */
45   static long  lastpos = -1;              /* last flush position */
46  
65 #define MAXACLOCK       (1L<<30)        /* clock turnover value */
66        /*
67         * Track access times unless we are sharing ambient values
68         * through memory on a multiprocessor, when we want to avoid
69         * claiming our own memory (copy on write).  Go ahead anyway
70         * if more than two thirds of our values are unshared.
71         * Compile with -Dtracktime=0 to turn this code off.
72         */
73 #ifndef tracktime
74 #define tracktime       (shm_boundary == NULL || nambvals > 3*nambshare)
75 #endif
76
47   #define  AMBFLUSH       (BUFSIZ/AMBVALSIZ)
48  
49   #define  newambval()    (AMBVAL *)malloc(sizeof(AMBVAL))
80 #define  freeav(av)     free((void *)av);
50  
51 + #define  tfunc(lwr, x, upr)     (((x)-(lwr))/((upr)-(lwr)))
52 +
53   static void initambfile(int creat);
54   static void avsave(AMBVAL *av);
55   static AMBVAL *avstore(AMBVAL  *aval);
# Line 87 | Line 58 | static void freeambtree(AMBTREE  *atp);
58  
59   typedef void unloadtf_t(AMBVAL *);
60   static unloadtf_t avinsert;
90 static unloadtf_t av2list;
61   static unloadtf_t avfree;
62   static void unloadatree(AMBTREE  *at, unloadtf_t *f);
63  
64 < static int aposcmp(const void *avp1, const void *avp2);
95 < static int avlmemi(AMBVAL *avaddr);
96 < static void sortambvals(int always);
64 > static void sortambvals(void);
65  
66 + static int      plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang);
67 + static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
68 +                                AMBTREE *at, FVECT c0, double s);
69 + static int      makeambient(COLOR acol, RAY *r, FVECT rn, int al);
70 + static int      extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
71 +                                FVECT uvw[3]);
72 +
73   #ifdef  F_SETLKW
74   static void aflock(int  typ);
75   #endif
# Line 133 | Line 108 | setambacc(                             /* set ambient accuracy */
108          newa *= (newa > 0);
109          if (fabs(newa - olda) >= .05*(newa + olda)) {
110                  ambacc = newa;
111 <                if (nambvals > 0)
112 <                        sortambvals(1);         /* rebuild tree */
111 >                if (ambacc > FTINY && nambvals > 0)
112 >                        sortambvals();          /* rebuild tree */
113          }
114   }
115  
# Line 185 | Line 160 | setambient(void)                               /* initialize calculation */
160                                          (flen - lastpos)/AMBVALSIZ);
161                          error(WARNING, errmsg);
162                          fseek(ambfp, lastpos, SEEK_SET);
188 #ifndef _WIN32 /* XXX we need a replacement for that one */
163                          ftruncate(fileno(ambfp), (off_t)lastpos);
190 #endif
164                  }
165          } else if ((ambfp = fopen(ambfile, "w+")) != NULL) {
166                  initambfile(1);                 /* else create new file */
# Line 197 | Line 170 | setambient(void)                               /* initialize calculation */
170                  sprintf(errmsg, "cannot open ambient file \"%s\"", ambfile);
171                  error(SYSTEM, errmsg);
172          }
200 #ifdef getc_unlocked
201        flockfile(ambfp);                       /* application-level lock */
202 #endif
173   #ifdef  F_SETLKW
174          aflock(F_UNLCK);                        /* release file */
175   #endif
# Line 220 | Line 190 | ambdone(void)                  /* close ambient file and free memory
190                  lastpos = -1;
191          }
192                                          /* free ambient tree */
193 <        unloadatree(&atrunk, &avfree);
193 >        unloadatree(&atrunk, avfree);
194                                          /* reset state variables */
195          avsum = 0.;
196          navsum = 0;
197          nambvals = 0;
198          nambshare = 0;
229        ambclock = 0;
230        lastsort = 0;
231        sortintvl = SORT_INTVL;
199   }
200  
201  
# Line 261 | Line 228 | ambnotify(                     /* record new modifier */
228                  }
229   }
230  
264 /************ THE FOLLOWING ROUTINES DIFFER BETWEEN NEW & OLD ***************/
231  
266 #ifdef NEWAMB
267
268 #define tfunc(lwr, x, upr)      (((x)-(lwr))/((upr)-(lwr)))
269
270 static int      plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang);
271 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
272                                AMBTREE *at, FVECT c0, double s);
273 static int      makeambient(COLOR acol, RAY *r, FVECT rn, int al);
274 static void     extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
275                                FVECT uvw[3]);
276
232   void
233   multambient(            /* compute ambient component & multiply by coef. */
234          COLOR  aval,
# Line 281 | Line 236 | multambient(           /* compute ambient component & multiply
236          FVECT  nrm
237   )
238   {
239 +        static double  logAvgAbsorp = 1;
240          static int  rdepth = 0;                 /* ambient recursion */
241 <        COLOR   acol;
242 <        int     ok;
241 >        COLOR   acol, caustic;
242 >        int     i, ok;
243          double  d, l;
244  
245 +        /* PMAP: Factor in ambient from photon map, if enabled and ray is
246 +         * ambient. Return as all ambient components accounted for, else
247 +         * continue. */
248 +        if (ambPmap(aval, r, rdepth))
249 +                return;
250 +
251 +        if (logAvgAbsorp > 0)                   /* exclude in -aw to avoid growth */
252 +                logAvgAbsorp = log(1.-AVGREFL);
253 +
254 +        /* PMAP: Factor in specular-diffuse ambient (caustics) from photon
255 +         * map, if enabled and ray is primary, else caustic is zero.  Continue
256 +         * with RADIANCE ambient calculation */
257 +        copycolor(caustic, aval);
258 +        ambPmapCaustic(caustic, r, rdepth);
259 +        
260          if (ambdiv <= 0)                        /* no ambient calculation */
261                  goto dumbamb;
262                                                  /* check number of bounces */
# Line 297 | Line 268 | multambient(           /* compute ambient component & multiply
268                  goto dumbamb;
269  
270          if (ambacc <= FTINY) {                  /* no ambient storage */
271 +                FVECT   uvd[2];
272 +                float   dgrad[2], *dgp = NULL;
273 +
274 +                if (nrm != r->ron && DOT(nrm,r->ron) < 0.9999)
275 +                        dgp = dgrad;            /* compute rotational grad. */
276                  copycolor(acol, aval);
277                  rdepth++;
278                  ok = doambient(acol, r, r->rweight,
279 <                                NULL, NULL, NULL, NULL, NULL);
279 >                                uvd, NULL, NULL, dgp, NULL);
280                  rdepth--;
281                  if (!ok)
282                          goto dumbamb;
283 +                if ((ok > 0) & (dgp != NULL)) { /* apply texture */
284 +                        FVECT   v1;
285 +                        VCROSS(v1, r->ron, nrm);
286 +                        d = 1.0;
287 +                        for (i = 3; i--; )
288 +                                d += v1[i] * (dgp[0]*uvd[0][i] + dgp[1]*uvd[1][i]);
289 +                        if (d >= 0.05)
290 +                                scalecolor(acol, d);
291 +                }
292                  copycolor(aval, acol);
293 +
294 +                /* PMAP: add in caustic */
295 +                addcolor(aval, caustic);
296                  return;
297          }
310
311        if (tracktime)                          /* sort to minimize thrashing */
312                sortambvals(0);
298                                                  /* interpolate ambient value */
299          setcolor(acol, 0.0, 0.0, 0.0);
300          d = sumambient(acol, r, nrm, rdepth,
301                          &atrunk, thescene.cuorg, thescene.cusize);
302 +                        
303          if (d > FTINY) {
304                  d = 1.0/d;
305                  scalecolor(acol, d);
306                  multcolor(aval, acol);
307 +
308 +                /* PMAP: add in caustic */
309 +                addcolor(aval, caustic);
310                  return;
311          }
312 +        
313          rdepth++;                               /* need to cache new value */
314          ok = makeambient(acol, r, nrm, rdepth-1);
315          rdepth--;
316 +        
317          if (ok) {
318                  multcolor(aval, acol);          /* computed new value */
319 +
320 +                /* PMAP: add in caustic */
321 +                addcolor(aval, caustic);
322                  return;
323          }
324 +        
325   dumbamb:                                        /* return global value */
326          if ((ambvwt <= 0) | (navsum == 0)) {
327                  multcolor(aval, ambval);
328 +                
329 +                /* PMAP: add in caustic */
330 +                addcolor(aval, caustic);
331                  return;
332          }
333 <        l = bright(ambval);                     /* average in computations */
333 >        
334 >        l = bright(ambval);                     /* average in computations */  
335          if (l > FTINY) {
336 <                d = (log(l)*(double)ambvwt + avsum) /
336 >                d = (log(l)*(double)ambvwt + avsum + logAvgAbsorp*navsum) /
337                                  (double)(ambvwt + navsum);
338                  d = exp(d) / l;
339                  scalecolor(aval, d);
340                  multcolor(aval, ambval);        /* apply color of ambval */
341          } else {
342 <                d = exp( avsum / (double)navsum );
342 >                d = exp( avsum/(double)navsum + logAvgAbsorp );
343                  scalecolor(aval, d);            /* neutral color */
344          }
345   }
# Line 379 | Line 378 | plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang)
378          VSUM(rtst.rdir, vdif, anorm, t[1]);     /* further dist. > plane */
379          rtst.rmax = normalize(rtst.rdir);       /* short ray test */
380          while (localhit(&rtst, &thescene)) {    /* check for occluder */
381 <                if (rtst.ro->omod != OVOID &&
381 >                OBJREC  *m = findmaterial(rtst.ro);
382 >                if (m != NULL && !istransp(m->otype) && !isBSDFproxy(m) &&
383                                  (rtst.clipset == NULL ||
384                                          !inset(rtst.clipset, rtst.ro->omod)))
385                          return(1);              /* plug light leak */
# Line 437 | Line 437 | sumambient(            /* get interpolated ambient value */
437                  double  u, v, d, delta_r2, delta_t2;
438                  COLOR   ct;
439                  FVECT   uvw[3];
440                                        /* record access */
441                if (tracktime)
442                        av->latick = ambclock;
440                  /*
441                   *  Ambient level test
442                   */
# Line 486 | Line 483 | sumambient(            /* get interpolated ambient value */
483                  /*
484                   *  Extrapolate value and compute final weight (hat function)
485                   */
486 <                extambient(ct, av, r->rop, rn, uvw);
486 >                if (!extambient(ct, av, r->rop, rn, uvw))
487 >                        continue;
488                  d = tfunc(maxangle, sqrt(delta_r2), 0.0) *
489                          tfunc(ambacc, sqrt(delta_t2), 0.0);
490                  scalecolor(ct, d);
# Line 537 | Line 535 | makeambient(           /* make a new ambient value for storage
535   }
536  
537  
538 < static void
538 > static int
539   extambient(             /* extrapolate value at pv, nv */
540          COLOR  cr,
541          AMBVAL   *ap,
# Line 546 | Line 544 | extambient(            /* extrapolate value at pv, nv */
544          FVECT  uvw[3]
545   )
546   {
547 +        const double    min_d = 0.05;
548 +        const double    max_d = 20.;
549          static FVECT    my_uvw[3];
550          FVECT           v1;
551          int             i;
# Line 565 | Line 565 | extambient(            /* extrapolate value at pv, nv */
565          for (i = 3; i--; )
566                  d += v1[i] * (ap->gdir[0]*uvw[0][i] + ap->gdir[1]*uvw[1][i]);
567          
568 <        if (d <= 0.0) {
569 <                setcolor(cr, 0.0, 0.0, 0.0);
570 <                return;
571 <        }
568 >        if (d < min_d)                  /* clamp min/max scaling */
569 >                d = min_d;
570 >        else if (d > max_d)
571 >                d = max_d;
572          copycolor(cr, ap->val);
573          scalecolor(cr, d);
574 +        return(d > min_d);
575   }
576  
577  
# Line 617 | Line 618 | avinsert(                              /* insert ambient value in our tree */
618   }
619  
620  
620 #else /* ! NEWAMB */
621
622 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
623                                AMBTREE *at, FVECT c0, double s);
624 static double   makeambient(COLOR acol, RAY *r, FVECT rn, int al);
625 static void     extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv);
626
627
628 void
629 multambient(            /* compute ambient component & multiply by coef. */
630        COLOR  aval,
631        RAY  *r,
632        FVECT  nrm
633 )
634 {
635        static int  rdepth = 0;                 /* ambient recursion */
636        COLOR   acol;
637        double  d, l;
638
639        if (ambdiv <= 0)                        /* no ambient calculation */
640                goto dumbamb;
641                                                /* check number of bounces */
642        if (rdepth >= ambounce)
643                goto dumbamb;
644                                                /* check ambient list */
645        if (ambincl != -1 && r->ro != NULL &&
646                        ambincl != inset(ambset, r->ro->omod))
647                goto dumbamb;
648
649        if (ambacc <= FTINY) {                  /* no ambient storage */
650                copycolor(acol, aval);
651                rdepth++;
652                d = doambient(acol, r, r->rweight, NULL, NULL);
653                rdepth--;
654                if (d <= FTINY)
655                        goto dumbamb;
656                copycolor(aval, acol);
657                return;
658        }
659
660        if (tracktime)                          /* sort to minimize thrashing */
661                sortambvals(0);
662                                                /* interpolate ambient value */
663        setcolor(acol, 0.0, 0.0, 0.0);
664        d = sumambient(acol, r, nrm, rdepth,
665                        &atrunk, thescene.cuorg, thescene.cusize);
666        if (d > FTINY) {
667                d = 1.0/d;
668                scalecolor(acol, d);
669                multcolor(aval, acol);
670                return;
671        }
672        rdepth++;                               /* need to cache new value */
673        d = makeambient(acol, r, nrm, rdepth-1);
674        rdepth--;
675        if (d > FTINY) {
676                multcolor(aval, acol);          /* got new value */
677                return;
678        }
679 dumbamb:                                        /* return global value */
680        if ((ambvwt <= 0) | (navsum == 0)) {
681                multcolor(aval, ambval);
682                return;
683        }
684        l = bright(ambval);                     /* average in computations */
685        if (l > FTINY) {
686                d = (log(l)*(double)ambvwt + avsum) /
687                                (double)(ambvwt + navsum);
688                d = exp(d) / l;
689                scalecolor(aval, d);
690                multcolor(aval, ambval);        /* apply color of ambval */
691        } else {
692                d = exp( avsum / (double)navsum );
693                scalecolor(aval, d);            /* neutral color */
694        }
695 }
696
697
698 static double
699 sumambient(     /* get interpolated ambient value */
700        COLOR  acol,
701        RAY  *r,
702        FVECT  rn,
703        int  al,
704        AMBTREE  *at,
705        FVECT  c0,
706        double  s
707 )
708 {
709        double  d, e1, e2, wt, wsum;
710        COLOR  ct;
711        FVECT  ck0;
712        int  i;
713        int  j;
714        AMBVAL   *av;
715
716        wsum = 0.0;
717                                        /* do this node */
718        for (av = at->alist; av != NULL; av = av->next) {
719                double  rn_dot = -2.0;
720                if (tracktime)
721                        av->latick = ambclock;
722                /*
723                 *  Ambient level test.
724                 */
725                if (av->lvl > al ||     /* list sorted, so this works */
726                                (av->lvl == al) & (av->weight < 0.9*r->rweight))
727                        break;
728                /*
729                 *  Ambient radius test.
730                 */
731                VSUB(ck0, av->pos, r->rop);
732                e1 = DOT(ck0, ck0) / (av->rad * av->rad);
733                if (e1 > ambacc*ambacc*1.21)
734                        continue;
735                /*
736                 *  Direction test using closest normal.
737                 */
738                d = DOT(av->dir, r->ron);
739                if (rn != r->ron) {
740                        rn_dot = DOT(av->dir, rn);
741                        if (rn_dot > 1.0-FTINY)
742                                rn_dot = 1.0-FTINY;
743                        if (rn_dot >= d-FTINY) {
744                                d = rn_dot;
745                                rn_dot = -2.0;
746                        }
747                }
748                e2 = (1.0 - d) * r->rweight;
749                if (e2 < 0.0)
750                        e2 = 0.0;
751                else if (e1 + e2 > ambacc*ambacc*1.21)
752                        continue;
753                /*
754                 *  Ray behind test.
755                 */
756                d = 0.0;
757                for (j = 0; j < 3; j++)
758                        d += (r->rop[j] - av->pos[j]) *
759                                        (av->dir[j] + r->ron[j]);
760                if (d*0.5 < -minarad*ambacc-.001)
761                        continue;
762                /*
763                 *  Jittering final test reduces image artifacts.
764                 */
765                e1 = sqrt(e1);
766                e2 = sqrt(e2);
767                wt = e1 + e2;
768                if (wt > ambacc*(.9+.2*urand(9015+samplendx)))
769                        continue;
770                /*
771                 *  Recompute directional error using perturbed normal
772                 */
773                if (rn_dot > 0.0) {
774                        e2 = sqrt((1.0 - rn_dot)*r->rweight);
775                        wt = e1 + e2;
776                }
777                if (wt <= 1e-3)
778                        wt = 1e3;
779                else
780                        wt = 1.0 / wt;
781                wsum += wt;
782                extambient(ct, av, r->rop, rn);
783                scalecolor(ct, wt);
784                addcolor(acol, ct);
785        }
786        if (at->kid == NULL)
787                return(wsum);
788                                        /* do children */
789        s *= 0.5;
790        for (i = 0; i < 8; i++) {
791                for (j = 0; j < 3; j++) {
792                        ck0[j] = c0[j];
793                        if (1<<j & i)
794                                ck0[j] += s;
795                        if (r->rop[j] < ck0[j] - OCTSCALE*s)
796                                break;
797                        if (r->rop[j] > ck0[j] + (1.0+OCTSCALE)*s)
798                                break;
799                }
800                if (j == 3)
801                        wsum += sumambient(acol, r, rn, al,
802                                                at->kid+i, ck0, s);
803        }
804        return(wsum);
805 }
806
807
808 static double
809 makeambient(            /* make a new ambient value for storage */
810        COLOR  acol,
811        RAY  *r,
812        FVECT  rn,
813        int  al
814 )
815 {
816        AMBVAL  amb;
817        FVECT   gp, gd;
818        int     i;
819
820        amb.weight = 1.0;                       /* compute weight */
821        for (i = al; i-- > 0; )
822                amb.weight *= AVGREFL;
823        if (r->rweight < 0.1*amb.weight)        /* heuristic override */
824                amb.weight = 1.25*r->rweight;
825        setcolor(acol, AVGREFL, AVGREFL, AVGREFL);
826                                                /* compute ambient */
827        amb.rad = doambient(acol, r, amb.weight, gp, gd);
828        if (amb.rad <= FTINY) {
829                setcolor(acol, 0.0, 0.0, 0.0);
830                return(0.0);
831        }
832        scalecolor(acol, 1./AVGREFL);           /* undo assumed reflectance */
833                                                /* store value */
834        VCOPY(amb.pos, r->rop);
835        VCOPY(amb.dir, r->ron);
836        amb.lvl = al;
837        copycolor(amb.val, acol);
838        VCOPY(amb.gpos, gp);
839        VCOPY(amb.gdir, gd);
840                                                /* insert into tree */
841        avsave(&amb);                           /* and save to file */
842        if (rn != r->ron)
843                extambient(acol, &amb, r->rop, rn);     /* texture */
844        return(amb.rad);
845 }
846
847
621   static void
849 extambient(             /* extrapolate value at pv, nv */
850        COLOR  cr,
851        AMBVAL   *ap,
852        FVECT  pv,
853        FVECT  nv
854 )
855 {
856        FVECT  v1;
857        int  i;
858        double  d;
859
860        d = 1.0;                        /* zeroeth order */
861                                        /* gradient due to translation */
862        for (i = 0; i < 3; i++)
863                d += ap->gpos[i]*(pv[i]-ap->pos[i]);
864                                        /* gradient due to rotation */
865        VCROSS(v1, ap->dir, nv);
866        d += DOT(ap->gdir, v1);
867        if (d <= 0.0) {
868                setcolor(cr, 0.0, 0.0, 0.0);
869                return;
870        }
871        copycolor(cr, ap->val);
872        scalecolor(cr, d);
873 }
874
875
876 static void
877 avinsert(                               /* insert ambient value in our tree */
878        AMBVAL *av
879 )
880 {
881        AMBTREE  *at;
882        AMBVAL  *ap;
883        AMBVAL  avh;
884        FVECT  ck0;
885        double  s;
886        int  branch;
887        int  i;
888
889        if (av->rad <= FTINY)
890                error(CONSISTENCY, "zero ambient radius in avinsert");
891        at = &atrunk;
892        VCOPY(ck0, thescene.cuorg);
893        s = thescene.cusize;
894        while (s*(OCTSCALE/2) > av->rad*ambacc) {
895                if (at->kid == NULL)
896                        if ((at->kid = newambtree()) == NULL)
897                                error(SYSTEM, "out of memory in avinsert");
898                s *= 0.5;
899                branch = 0;
900                for (i = 0; i < 3; i++)
901                        if (av->pos[i] > ck0[i] + s) {
902                                ck0[i] += s;
903                                branch |= 1 << i;
904                        }
905                at = at->kid + branch;
906        }
907        avh.next = at->alist;           /* order by increasing level */
908        for (ap = &avh; ap->next != NULL; ap = ap->next)
909                if ( ap->next->lvl > av->lvl ||
910                                (ap->next->lvl == av->lvl) &
911                                (ap->next->weight <= av->weight) )
912                        break;
913        av->next = ap->next;
914        ap->next = (AMBVAL*)av;
915        at->alist = avh.next;
916 }
917
918 #endif  /* ! NEWAMB */
919
920 /************* FOLLOWING ROUTINES SAME FOR NEW & OLD METHODS ***************/
921
922 static void
622   initambfile(            /* initialize ambient file */
623          int  cre8
624   )
# Line 985 | Line 684 | avstore(                               /* allocate memory and save aval */
684          if ((av = newambval()) == NULL)
685                  error(SYSTEM, "out of memory in avstore");
686          *av = *aval;
988        av->latick = ambclock;
687          av->next = NULL;
688          nambvals++;
689          d = bright(av->val);
# Line 1020 | Line 718 | newambtree(void)                               /* allocate 8 ambient tree structs
718          }
719          atp = atfreelist;
720          atfreelist = atp->kid;
721 <        memset((char *)atp, '\0', 8*sizeof(AMBTREE));
721 >        memset(atp, 0, 8*sizeof(AMBTREE));
722          return(atp);
723   }
724  
# Line 1046 | Line 744 | unloadatree(                   /* unload an ambient value tree */
744                                          /* transfer values at this node */
745          for (av = at->alist; av != NULL; av = at->alist) {
746                  at->alist = av->next;
747 +                av->next = NULL;
748                  (*f)(av);
749          }
750          if (at->kid == NULL)
# Line 1057 | Line 756 | unloadatree(                   /* unload an ambient value tree */
756   }
757  
758  
1060 static struct avl {
1061        AMBVAL  *p;
1062        unsigned long   t;
1063 }       *avlist1;                       /* ambient value list with ticks */
1064 static AMBVAL   **avlist2;              /* memory positions for sorting */
1065 static int      i_avlist;               /* index for lists */
1066
1067 static int alatcmp(const void *av1, const void *av2);
1068
759   static void
760   avfree(AMBVAL *av)
761   {
762          free(av);
763   }
764  
765 +
766   static void
767 < av2list(
1077 <        AMBVAL *av
1078 < )
767 > sortambvals(void)                       /* resort ambient values */
768   {
769 < #ifdef DEBUG
1081 <        if (i_avlist >= nambvals)
1082 <                error(CONSISTENCY, "too many ambient values in av2list1");
1083 < #endif
1084 <        avlist1[i_avlist].p = avlist2[i_avlist] = (AMBVAL*)av;
1085 <        avlist1[i_avlist++].t = av->latick;
1086 < }
769 >        AMBTREE  oldatrunk = atrunk;
770  
771 <
772 < static int
773 < alatcmp(                        /* compare ambient values for MRA */
1091 <        const void *av1,
1092 <        const void *av2
1093 < )
1094 < {
1095 <        long  lc = ((struct avl *)av2)->t - ((struct avl *)av1)->t;
1096 <        return(lc<0 ? -1 : lc>0 ? 1 : 0);
771 >        atrunk.alist = NULL;
772 >        atrunk.kid = NULL;
773 >        unloadatree(&oldatrunk, avinsert);
774   }
775  
776  
1100 /* GW NOTE 2002/10/3:
1101 * I used to compare AMBVAL pointers, but found that this was the
1102 * cause of a serious consistency error with gcc, since the optimizer
1103 * uses some dangerous trick in pointer subtraction that
1104 * assumes pointers differ by exact struct size increments.
1105 */
1106 static int
1107 aposcmp(                        /* compare ambient value positions */
1108        const void      *avp1,
1109        const void      *avp2
1110 )
1111 {
1112        long    diff = *(char * const *)avp1 - *(char * const *)avp2;
1113        if (diff < 0)
1114                return(-1);
1115        return(diff > 0);
1116 }
1117
1118
1119 static int
1120 avlmemi(                                /* find list position from address */
1121        AMBVAL  *avaddr
1122 )
1123 {
1124        AMBVAL  **avlpp;
1125
1126        avlpp = (AMBVAL **)bsearch((char *)&avaddr, (char *)avlist2,
1127                        nambvals, sizeof(AMBVAL *), &aposcmp);
1128        if (avlpp == NULL)
1129                error(CONSISTENCY, "address not found in avlmemi");
1130        return(avlpp - avlist2);
1131 }
1132
1133
1134 static void
1135 sortambvals(                    /* resort ambient values */
1136        int     always
1137 )
1138 {
1139        AMBTREE  oldatrunk;
1140        AMBVAL  tav, *tap, *pnext;
1141        int     i, j;
1142                                        /* see if it's time yet */
1143        if (!always && (ambclock++ < lastsort+sortintvl ||
1144                        nambvals < SORT_THRESH))
1145                return;
1146        /*
1147         * The idea here is to minimize memory thrashing
1148         * in VM systems by improving reference locality.
1149         * We do this by periodically sorting our stored ambient
1150         * values in memory in order of most recently to least
1151         * recently accessed.  This ordering was chosen so that new
1152         * ambient values (which tend to be less important) go into
1153         * higher memory with the infrequently accessed values.
1154         *      Since we expect our values to need sorting less
1155         * frequently as the process continues, we double our
1156         * waiting interval after each call.
1157         *      This routine is also called by setambacc() with
1158         * the "always" parameter set to 1 so that the ambient
1159         * tree will be rebuilt with the new accuracy parameter.
1160         */
1161        if (tracktime) {                /* allocate pointer arrays to sort */
1162                avlist2 = (AMBVAL **)malloc(nambvals*sizeof(AMBVAL *));
1163                avlist1 = (struct avl *)malloc(nambvals*sizeof(struct avl));
1164        } else {
1165                avlist2 = NULL;
1166                avlist1 = NULL;
1167        }
1168        if (avlist1 == NULL) {          /* no time tracking -- rebuild tree? */
1169                if (avlist2 != NULL)
1170                        free((void *)avlist2);
1171                if (always) {           /* rebuild without sorting */
1172                        oldatrunk = atrunk;
1173                        atrunk.alist = NULL;
1174                        atrunk.kid = NULL;
1175                        unloadatree(&oldatrunk, &avinsert);
1176                }
1177        } else {                        /* sort memory by last access time */
1178                /*
1179                 * Sorting memory is tricky because it isn't contiguous.
1180                 * We have to sort an array of pointers by MRA and also
1181                 * by memory position.  We then copy values in "loops"
1182                 * to minimize memory hits.  Nevertheless, we will visit
1183                 * everyone at least twice, and this is an expensive process
1184                 * when we're thrashing, which is when we need to do it.
1185                 */
1186 #ifdef DEBUG
1187                sprintf(errmsg, "sorting %u ambient values at ambclock=%lu...",
1188                                nambvals, ambclock);
1189                eputs(errmsg);
1190 #endif
1191                i_avlist = 0;
1192                unloadatree(&atrunk, &av2list); /* empty current tree */
1193 #ifdef DEBUG
1194                if (i_avlist < nambvals)
1195                        error(CONSISTENCY, "missing ambient values in sortambvals");
1196 #endif
1197                qsort((char *)avlist1, nambvals, sizeof(struct avl), &alatcmp);
1198                qsort((char *)avlist2, nambvals, sizeof(AMBVAL *), &aposcmp);
1199                for (i = 0; i < nambvals; i++) {
1200                        if (avlist1[i].p == NULL)
1201                                continue;
1202                        tap = avlist2[i];
1203                        tav = *tap;
1204                        for (j = i; (pnext = avlist1[j].p) != tap;
1205                                        j = avlmemi(pnext)) {
1206                                *(avlist2[j]) = *pnext;
1207                                avinsert(avlist2[j]);
1208                                avlist1[j].p = NULL;
1209                        }
1210                        *(avlist2[j]) = tav;
1211                        avinsert(avlist2[j]);
1212                        avlist1[j].p = NULL;
1213                }
1214                free((void *)avlist1);
1215                free((void *)avlist2);
1216                                                /* compute new sort interval */
1217                sortintvl = ambclock - lastsort;
1218                if (sortintvl >= MAX_SORT_INTVL/2)
1219                        sortintvl = MAX_SORT_INTVL;
1220                else
1221                        sortintvl <<= 1;        /* wait twice as long next */
1222 #ifdef DEBUG
1223                eputs("done\n");
1224 #endif
1225        }
1226        if (ambclock >= MAXACLOCK)
1227                ambclock = MAXACLOCK/2;
1228        lastsort = ambclock;
1229 }
1230
1231
777   #ifdef  F_SETLKW
778  
779   static void
# Line 1240 | Line 785 | aflock(                        /* lock/unlock ambient file */
785  
786          if (typ == fls.l_type)          /* already called? */
787                  return;
788 +
789          fls.l_type = typ;
790 <        if (fcntl(fileno(ambfp), F_SETLKW, &fls) < 0)
791 <                error(SYSTEM, "cannot (un)lock ambient file");
790 >        do
791 >                if (fcntl(fileno(ambfp), F_SETLKW, &fls) != -1)
792 >                        return;
793 >        while (errno == EINTR);
794 >        
795 >        error(SYSTEM, "cannot (un)lock ambient file");
796   }
797  
798  
# Line 1261 | Line 811 | ambsync(void)                  /* synchronize ambient file */
811          if ((flen = lseek(fileno(ambfp), (off_t)0, SEEK_END)) < 0)
812                  goto seekerr;
813          if ((n = flen - lastpos) > 0) {         /* file has grown */
814 <                if (ambinp == NULL) {           /* use duplicate filedes */
815 <                        ambinp = fdopen(dup(fileno(ambfp)), "r");
814 >                if (ambinp == NULL) {           /* get new file pointer */
815 >                        ambinp = fopen(ambfile, "rb");
816                          if (ambinp == NULL)
817 <                                error(SYSTEM, "fdopen failed in ambsync");
817 >                                error(SYSTEM, "fopen failed in ambsync");
818                  }
819                  if (fseek(ambinp, lastpos, SEEK_SET) < 0)
820                          goto seekerr;
# Line 1279 | Line 829 | ambsync(void)                  /* synchronize ambient file */
829                          avstore(&avs);
830                          n -= AMBVALSIZ;
831                  }
832 <                lastpos = flen - n;
833 <                /*** seek always as safety measure
834 <                if (n) ***/                     /* alignment */
1285 <                        if (lseek(fileno(ambfp), (off_t)lastpos, SEEK_SET) < 0)
1286 <                                goto seekerr;
832 >                lastpos = flen - n;             /* check alignment */
833 >                if (n && lseek(fileno(ambfp), (off_t)lastpos, SEEK_SET) < 0)
834 >                        goto seekerr;
835          }
836          n = fflush(ambfp);                      /* calls write() at last */
837 <        if (n != EOF)
1290 <                lastpos += (long)nunflshed*AMBVALSIZ;
1291 <        else if ((lastpos = lseek(fileno(ambfp), (off_t)0, SEEK_CUR)) < 0)
1292 <                goto seekerr;
1293 <                
837 >        lastpos += (long)nunflshed*AMBVALSIZ;
838          aflock(F_UNLCK);                        /* release file */
839          nunflshed = 0;
840          return(n);
841   seekerr:
842          error(SYSTEM, "seek failed in ambsync");
843 <        return -1; /* pro forma return */
843 >        return(EOF);    /* pro forma return */
844   }
845  
846   #else   /* ! F_SETLKW */

Diff Legend

Removed lines
+ Added lines
< Changed lines
> Changed lines