ViewVC Help
View File | Revision Log | Show Annotations | Download File | Root Listing
root/radiance/ray/src/rt/ambient.c
(Generate patch)

Comparing ray/src/rt/ambient.c (file contents):
Revision 2.101 by schorsch, Sun Mar 6 01:13:17 2016 UTC vs.
Revision 2.116 by greg, Fri Jan 27 19:57:08 2023 UTC

# Line 12 | Line 12 | static const char      RCSid[] = "$Id$";
12   #include  "platform.h"
13   #include  "ray.h"
14   #include  "otypes.h"
15 + #include  "otspecial.h"
16   #include  "resolu.h"
17   #include  "ambient.h"
18   #include  "random.h"
# Line 21 | Line 22 | static const char      RCSid[] = "$Id$";
22   #define  OCTSCALE       1.0     /* ceil((valid rad.)/(cube size)) */
23   #endif
24  
24 extern char  *shm_boundary;     /* memory sharing boundary */
25
25   #ifndef  MAXASET
26   #define  MAXASET        4095    /* maximum number of elements in ambient set */
27   #endif
# Line 36 | Line 35 | static AMBTREE atrunk;         /* our ambient trunk node */
35   static FILE  *ambfp = NULL;     /* ambient file pointer */
36   static int  nunflshed = 0;      /* number of unflushed ambient values */
37  
39 #ifndef SORT_THRESH
40 #ifdef SMLMEM
41 #define SORT_THRESH     ((16L<<20)/sizeof(AMBVAL))
42 #else
43 #define SORT_THRESH     ((64L<<20)/sizeof(AMBVAL))
44 #endif
45 #endif
46 #ifndef SORT_INTVL
47 #define SORT_INTVL      (SORT_THRESH<<1)
48 #endif
49 #ifndef MAX_SORT_INTVL
50 #define MAX_SORT_INTVL  (SORT_INTVL<<6)
51 #endif
52
53
38   static double  avsum = 0.;              /* computed ambient value sum (log) */
39   static unsigned int  navsum = 0;        /* number of values in avsum */
40   static unsigned int  nambvals = 0;      /* total number of indirect values */
41   static unsigned int  nambshare = 0;     /* number of values from file */
58 static unsigned long  ambclock = 0;     /* ambient access clock */
59 static unsigned long  lastsort = 0;     /* time of last value sort */
60 static long  sortintvl = SORT_INTVL;    /* time until next sort */
42   static FILE  *ambinp = NULL;            /* auxiliary file for input */
43   static long  lastpos = -1;              /* last flush position */
44  
64 #define MAXACLOCK       (1L<<30)        /* clock turnover value */
65        /*
66         * Track access times unless we are sharing ambient values
67         * through memory on a multiprocessor, when we want to avoid
68         * claiming our own memory (copy on write).  Go ahead anyway
69         * if more than two thirds of our values are unshared.
70         * Compile with -Dtracktime=0 to turn this code off.
71         */
72 #ifndef tracktime
73 #define tracktime       (shm_boundary == NULL || nambvals > 3*nambshare)
74 #endif
75
45   #define  AMBFLUSH       (BUFSIZ/AMBVALSIZ)
46  
47   #define  newambval()    (AMBVAL *)malloc(sizeof(AMBVAL))
79 #define  freeav(av)     free((void *)av);
48  
49 + #define  tfunc(lwr, x, upr)     (((x)-(lwr))/((upr)-(lwr)))
50 +
51   static void initambfile(int creat);
52   static void avsave(AMBVAL *av);
53   static AMBVAL *avstore(AMBVAL  *aval);
# Line 86 | Line 56 | static void freeambtree(AMBTREE  *atp);
56  
57   typedef void unloadtf_t(AMBVAL *);
58   static unloadtf_t avinsert;
89 static unloadtf_t av2list;
59   static unloadtf_t avfree;
60   static void unloadatree(AMBTREE  *at, unloadtf_t *f);
61  
62 < static int aposcmp(const void *avp1, const void *avp2);
94 < static int avlmemi(AMBVAL *avaddr);
95 < static void sortambvals(int always);
62 > static void sortambvals(void);
63  
64 + static int      plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang);
65 + static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
66 +                                AMBTREE *at, FVECT c0, double s);
67 + static int      makeambient(COLOR acol, RAY *r, FVECT rn, int al);
68 + static int      extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
69 +                                FVECT uvw[3]);
70 +
71   #ifdef  F_SETLKW
72   static void aflock(int  typ);
73   #endif
# Line 132 | Line 106 | setambacc(                             /* set ambient accuracy */
106          newa *= (newa > 0);
107          if (fabs(newa - olda) >= .05*(newa + olda)) {
108                  ambacc = newa;
109 <                if (nambvals > 0)
110 <                        sortambvals(1);         /* rebuild tree */
109 >                if (ambacc > FTINY && nambvals > 0)
110 >                        sortambvals();          /* rebuild tree */
111          }
112   }
113  
# Line 220 | Line 194 | ambdone(void)                  /* close ambient file and free memory
194          navsum = 0;
195          nambvals = 0;
196          nambshare = 0;
223        ambclock = 0;
224        lastsort = 0;
225        sortintvl = SORT_INTVL;
197   }
198  
199  
# Line 255 | Line 226 | ambnotify(                     /* record new modifier */
226                  }
227   }
228  
258 /************ THE FOLLOWING ROUTINES DIFFER BETWEEN NEW & OLD ***************/
229  
260 #ifndef OLDAMB
261
262 #define tfunc(lwr, x, upr)      (((x)-(lwr))/((upr)-(lwr)))
263
264 static int      plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang);
265 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
266                                AMBTREE *at, FVECT c0, double s);
267 static int      makeambient(COLOR acol, RAY *r, FVECT rn, int al);
268 static int      extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
269                                FVECT uvw[3]);
270
230   void
231   multambient(            /* compute ambient component & multiply by coef. */
232          COLOR  aval,
# Line 275 | Line 234 | multambient(           /* compute ambient component & multiply
234          FVECT  nrm
235   )
236   {
237 +        static double  logAvgAbsorp = 1;
238          static int  rdepth = 0;                 /* ambient recursion */
239          COLOR   acol, caustic;
240 <        int     ok;
240 >        int     i, ok;
241          double  d, l;
242  
243          /* PMAP: Factor in ambient from photon map, if enabled and ray is
# Line 286 | Line 246 | multambient(           /* compute ambient component & multiply
246          if (ambPmap(aval, r, rdepth))
247                  return;
248  
249 +        if (logAvgAbsorp > 0)                   /* exclude in -aw to avoid growth */
250 +                logAvgAbsorp = log(1.-AVGREFL);
251 +
252          /* PMAP: Factor in specular-diffuse ambient (caustics) from photon
253           * map, if enabled and ray is primary, else caustic is zero.  Continue
254           * with RADIANCE ambient calculation */
# Line 303 | Line 266 | multambient(           /* compute ambient component & multiply
266                  goto dumbamb;
267  
268          if (ambacc <= FTINY) {                  /* no ambient storage */
269 +                FVECT   uvd[2];
270 +                float   dgrad[2], *dgp = NULL;
271 +
272 +                if (nrm != r->ron && DOT(nrm,r->ron) < 0.9999)
273 +                        dgp = dgrad;            /* compute rotational grad. */
274                  copycolor(acol, aval);
275                  rdepth++;
276                  ok = doambient(acol, r, r->rweight,
277 <                                NULL, NULL, NULL, NULL, NULL);
277 >                                uvd, NULL, NULL, dgp, NULL);
278                  rdepth--;
279                  if (!ok)
280                          goto dumbamb;
281 +                if ((ok > 0) & (dgp != NULL)) { /* apply texture */
282 +                        FVECT   v1;
283 +                        VCROSS(v1, r->ron, nrm);
284 +                        d = 1.0;
285 +                        for (i = 3; i--; )
286 +                                d += v1[i] * (dgp[0]*uvd[0][i] + dgp[1]*uvd[1][i]);
287 +                        if (d >= 0.05)
288 +                                scalecolor(acol, d);
289 +                }
290                  copycolor(aval, acol);
291  
292                  /* PMAP: add in caustic */
293                  addcolor(aval, caustic);
294                  return;
295          }
319
320        if (tracktime)                          /* sort to minimize thrashing */
321                sortambvals(0);
296                                                  /* interpolate ambient value */
297          setcolor(acol, 0.0, 0.0, 0.0);
298          d = sumambient(acol, r, nrm, rdepth,
# Line 357 | Line 331 | dumbamb:                                       /* return global value */
331          
332          l = bright(ambval);                     /* average in computations */  
333          if (l > FTINY) {
334 <                d = (log(l)*(double)ambvwt + avsum) /
334 >                d = (log(l)*(double)ambvwt + avsum + logAvgAbsorp*navsum) /
335                                  (double)(ambvwt + navsum);
336                  d = exp(d) / l;
337                  scalecolor(aval, d);
338                  multcolor(aval, ambval);        /* apply color of ambval */
339          } else {
340 <                d = exp( avsum / (double)navsum );
340 >                d = exp( avsum/(double)navsum + logAvgAbsorp );
341                  scalecolor(aval, d);            /* neutral color */
342          }
343   }
# Line 402 | Line 376 | plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang)
376          VSUM(rtst.rdir, vdif, anorm, t[1]);     /* further dist. > plane */
377          rtst.rmax = normalize(rtst.rdir);       /* short ray test */
378          while (localhit(&rtst, &thescene)) {    /* check for occluder */
379 <                if (rtst.ro->omod != OVOID &&
379 >                OBJREC  *m = findmaterial(rtst.ro);
380 >                if (m != NULL && !istransp(m->otype) && !isBSDFproxy(m) &&
381                                  (rtst.clipset == NULL ||
382                                          !inset(rtst.clipset, rtst.ro->omod)))
383                          return(1);              /* plug light leak */
# Line 460 | Line 435 | sumambient(            /* get interpolated ambient value */
435                  double  u, v, d, delta_r2, delta_t2;
436                  COLOR   ct;
437                  FVECT   uvw[3];
463                                        /* record access */
464                if (tracktime)
465                        av->latick = ambclock;
438                  /*
439                   *  Ambient level test
440                   */
# Line 484 | Line 456 | sumambient(            /* get interpolated ambient value */
456                   */
457                  VSUB(ck0, r->rop, av->pos);
458                  d = DOT(ck0, uvw[2]);
459 <                if (d < -minarad*ambacc-.001)
459 >                if (d < -minarad*ambacc)
460                          continue;
461                  d /= av->rad[0];
462                  delta_t2 = d*d;
# Line 571 | Line 543 | extambient(            /* extrapolate value at pv, nv */
543   )
544   {
545          const double    min_d = 0.05;
546 +        const double    max_d = 20.;
547          static FVECT    my_uvw[3];
548          FVECT           v1;
549          int             i;
# Line 590 | Line 563 | extambient(            /* extrapolate value at pv, nv */
563          for (i = 3; i--; )
564                  d += v1[i] * (ap->gdir[0]*uvw[0][i] + ap->gdir[1]*uvw[1][i]);
565          
566 <        if (d < min_d)                  /* should not use if we can avoid it */
566 >        if (d < min_d)                  /* clamp min/max scaling */
567                  d = min_d;
568 +        else if (d > max_d)
569 +                d = max_d;
570          copycolor(cr, ap->val);
571          scalecolor(cr, d);
572          return(d > min_d);
# Line 641 | Line 616 | avinsert(                              /* insert ambient value in our tree */
616   }
617  
618  
644 #else /* ! NEWAMB */
645
646 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
647                                AMBTREE *at, FVECT c0, double s);
648 static double   makeambient(COLOR acol, RAY *r, FVECT rn, int al);
649 static void     extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv);
650
651
652 void
653 multambient(            /* compute ambient component & multiply by coef. */
654        COLOR  aval,
655        RAY  *r,
656        FVECT  nrm
657 )
658 {
659        static int  rdepth = 0;                 /* ambient recursion */
660        COLOR   acol, caustic;
661        double  d, l;
662
663        /* PMAP: Factor in ambient from global photon map (if enabled) and return
664         * as all ambient components accounted for */
665        if (ambPmap(aval, r, rdepth))
666                return;
667
668        /* PMAP: Otherwise factor in ambient from caustic photon map
669         * (ambPmapCaustic() returns zero if caustic photons disabled) and
670         * continue with RADIANCE ambient calculation */
671        copycolor(caustic, aval);
672        ambPmapCaustic(caustic, r, rdepth);
673        
674        if (ambdiv <= 0)                        /* no ambient calculation */
675                goto dumbamb;
676                                                /* check number of bounces */
677        if (rdepth >= ambounce)
678                goto dumbamb;
679                                                /* check ambient list */
680        if (ambincl != -1 && r->ro != NULL &&
681                        ambincl != inset(ambset, r->ro->omod))
682                goto dumbamb;
683
684        if (ambacc <= FTINY) {                  /* no ambient storage */
685                copycolor(acol, aval);
686                rdepth++;
687                d = doambient(acol, r, r->rweight, NULL, NULL);
688                rdepth--;
689                if (d <= FTINY)
690                        goto dumbamb;
691                copycolor(aval, acol);          
692        
693           /* PMAP: add in caustic */
694                addcolor(aval, caustic);        
695                return;
696        }
697
698        if (tracktime)                          /* sort to minimize thrashing */
699                sortambvals(0);
700                                                /* interpolate ambient value */
701        setcolor(acol, 0.0, 0.0, 0.0);
702        d = sumambient(acol, r, nrm, rdepth,
703                        &atrunk, thescene.cuorg, thescene.cusize);
704                        
705        if (d > FTINY) {
706                d = 1.0/d;
707                scalecolor(acol, d);
708                multcolor(aval, acol);
709                
710                /* PMAP: add in caustic */
711                addcolor(aval, caustic);        
712                return;
713        }
714        
715        rdepth++;                               /* need to cache new value */
716        d = makeambient(acol, r, nrm, rdepth-1);
717        rdepth--;
718        
719        if (d > FTINY) {
720                multcolor(aval, acol);          /* got new value */
721
722                /* PMAP: add in caustic */
723                addcolor(aval, caustic);                        
724                return;
725        }
726        
727 dumbamb:                                        /* return global value */
728        if ((ambvwt <= 0) | (navsum == 0)) {
729                multcolor(aval, ambval);
730
731                /* PMAP: add in caustic */
732                addcolor(aval, caustic);        
733                return;
734        }
735        
736        l = bright(ambval);                     /* average in computations */
737        if (l > FTINY) {
738                d = (log(l)*(double)ambvwt + avsum) /
739                                (double)(ambvwt + navsum);
740                d = exp(d) / l;
741                scalecolor(aval, d);
742                multcolor(aval, ambval);        /* apply color of ambval */
743        } else {
744                d = exp( avsum / (double)navsum );
745                scalecolor(aval, d);            /* neutral color */
746        }
747 }
748
749
750 static double
751 sumambient(     /* get interpolated ambient value */
752        COLOR  acol,
753        RAY  *r,
754        FVECT  rn,
755        int  al,
756        AMBTREE  *at,
757        FVECT  c0,
758        double  s
759 )
760 {
761        double  d, e1, e2, wt, wsum;
762        COLOR  ct;
763        FVECT  ck0;
764        int  i;
765        int  j;
766        AMBVAL   *av;
767
768        wsum = 0.0;
769                                        /* do this node */
770        for (av = at->alist; av != NULL; av = av->next) {
771                double  rn_dot = -2.0;
772                if (tracktime)
773                        av->latick = ambclock;
774                /*
775                 *  Ambient level test.
776                 */
777                if (av->lvl > al ||     /* list sorted, so this works */
778                                (av->lvl == al) & (av->weight < 0.9*r->rweight))
779                        break;
780                /*
781                 *  Ambient radius test.
782                 */
783                VSUB(ck0, av->pos, r->rop);
784                e1 = DOT(ck0, ck0) / (av->rad * av->rad);
785                if (e1 > ambacc*ambacc*1.21)
786                        continue;
787                /*
788                 *  Direction test using closest normal.
789                 */
790                d = DOT(av->dir, r->ron);
791                if (rn != r->ron) {
792                        rn_dot = DOT(av->dir, rn);
793                        if (rn_dot > 1.0-FTINY)
794                                rn_dot = 1.0-FTINY;
795                        if (rn_dot >= d-FTINY) {
796                                d = rn_dot;
797                                rn_dot = -2.0;
798                        }
799                }
800                e2 = (1.0 - d) * r->rweight;
801                if (e2 < 0.0)
802                        e2 = 0.0;
803                else if (e1 + e2 > ambacc*ambacc*1.21)
804                        continue;
805                /*
806                 *  Ray behind test.
807                 */
808                d = 0.0;
809                for (j = 0; j < 3; j++)
810                        d += (r->rop[j] - av->pos[j]) *
811                                        (av->dir[j] + r->ron[j]);
812                if (d*0.5 < -minarad*ambacc-.001)
813                        continue;
814                /*
815                 *  Jittering final test reduces image artifacts.
816                 */
817                e1 = sqrt(e1);
818                e2 = sqrt(e2);
819                wt = e1 + e2;
820                if (wt > ambacc*(.9+.2*urand(9015+samplendx)))
821                        continue;
822                /*
823                 *  Recompute directional error using perturbed normal
824                 */
825                if (rn_dot > 0.0) {
826                        e2 = sqrt((1.0 - rn_dot)*r->rweight);
827                        wt = e1 + e2;
828                }
829                if (wt <= 1e-3)
830                        wt = 1e3;
831                else
832                        wt = 1.0 / wt;
833                wsum += wt;
834                extambient(ct, av, r->rop, rn);
835                scalecolor(ct, wt);
836                addcolor(acol, ct);
837        }
838        if (at->kid == NULL)
839                return(wsum);
840                                        /* do children */
841        s *= 0.5;
842        for (i = 0; i < 8; i++) {
843                for (j = 0; j < 3; j++) {
844                        ck0[j] = c0[j];
845                        if (1<<j & i)
846                                ck0[j] += s;
847                        if (r->rop[j] < ck0[j] - OCTSCALE*s)
848                                break;
849                        if (r->rop[j] > ck0[j] + (1.0+OCTSCALE)*s)
850                                break;
851                }
852                if (j == 3)
853                        wsum += sumambient(acol, r, rn, al,
854                                                at->kid+i, ck0, s);
855        }
856        return(wsum);
857 }
858
859
860 static double
861 makeambient(            /* make a new ambient value for storage */
862        COLOR  acol,
863        RAY  *r,
864        FVECT  rn,
865        int  al
866 )
867 {
868        AMBVAL  amb;
869        FVECT   gp, gd;
870        int     i;
871
872        amb.weight = 1.0;                       /* compute weight */
873        for (i = al; i-- > 0; )
874                amb.weight *= AVGREFL;
875        if (r->rweight < 0.1*amb.weight)        /* heuristic override */
876                amb.weight = 1.25*r->rweight;
877        setcolor(acol, AVGREFL, AVGREFL, AVGREFL);
878                                                /* compute ambient */
879        amb.rad = doambient(acol, r, amb.weight, gp, gd);
880        if (amb.rad <= FTINY) {
881                setcolor(acol, 0.0, 0.0, 0.0);
882                return(0.0);
883        }
884        scalecolor(acol, 1./AVGREFL);           /* undo assumed reflectance */
885                                                /* store value */
886        VCOPY(amb.pos, r->rop);
887        VCOPY(amb.dir, r->ron);
888        amb.lvl = al;
889        copycolor(amb.val, acol);
890        VCOPY(amb.gpos, gp);
891        VCOPY(amb.gdir, gd);
892                                                /* insert into tree */
893        avsave(&amb);                           /* and save to file */
894        if (rn != r->ron)
895                extambient(acol, &amb, r->rop, rn);     /* texture */
896        return(amb.rad);
897 }
898
899
619   static void
901 extambient(             /* extrapolate value at pv, nv */
902        COLOR  cr,
903        AMBVAL   *ap,
904        FVECT  pv,
905        FVECT  nv
906 )
907 {
908        FVECT  v1;
909        int  i;
910        double  d;
911
912        d = 1.0;                        /* zeroeth order */
913                                        /* gradient due to translation */
914        for (i = 0; i < 3; i++)
915                d += ap->gpos[i]*(pv[i]-ap->pos[i]);
916                                        /* gradient due to rotation */
917        VCROSS(v1, ap->dir, nv);
918        d += DOT(ap->gdir, v1);
919        if (d <= 0.0) {
920                setcolor(cr, 0.0, 0.0, 0.0);
921                return;
922        }
923        copycolor(cr, ap->val);
924        scalecolor(cr, d);
925 }
926
927
928 static void
929 avinsert(                               /* insert ambient value in our tree */
930        AMBVAL *av
931 )
932 {
933        AMBTREE  *at;
934        AMBVAL  *ap;
935        AMBVAL  avh;
936        FVECT  ck0;
937        double  s;
938        int  branch;
939        int  i;
940
941        if (av->rad <= FTINY)
942                error(CONSISTENCY, "zero ambient radius in avinsert");
943        at = &atrunk;
944        VCOPY(ck0, thescene.cuorg);
945        s = thescene.cusize;
946        while (s*(OCTSCALE/2) > av->rad*ambacc) {
947                if (at->kid == NULL)
948                        if ((at->kid = newambtree()) == NULL)
949                                error(SYSTEM, "out of memory in avinsert");
950                s *= 0.5;
951                branch = 0;
952                for (i = 0; i < 3; i++)
953                        if (av->pos[i] > ck0[i] + s) {
954                                ck0[i] += s;
955                                branch |= 1 << i;
956                        }
957                at = at->kid + branch;
958        }
959        avh.next = at->alist;           /* order by increasing level */
960        for (ap = &avh; ap->next != NULL; ap = ap->next)
961                if ( ap->next->lvl > av->lvl ||
962                                (ap->next->lvl == av->lvl) &
963                                (ap->next->weight <= av->weight) )
964                        break;
965        av->next = ap->next;
966        ap->next = (AMBVAL*)av;
967        at->alist = avh.next;
968 }
969
970 #endif  /* ! NEWAMB */
971
972 /************* FOLLOWING ROUTINES SAME FOR NEW & OLD METHODS ***************/
973
974 static void
620   initambfile(            /* initialize ambient file */
621          int  cre8
622   )
# Line 994 | Line 639 | initambfile(           /* initialize ambient file */
639                                  ambvwt, ambounce, ambacc);
640                  fprintf(ambfp, "-ad %d -as %d -ar %d ",
641                                  ambdiv, ambssamp, ambres);
642 +                fprintf(ambfp, "-dr %d -ds %g -dt %g -dc %g ", directrelay,
643 +                                srcsizerat, shadthresh, shadcert);
644 +                fprintf(ambfp, "-ss %g -st %g -lr %d -lw %g ", specjitter,
645 +                                specthresh, maxdepth, minweight);
646                  if (octname != NULL)
647                          fputs(octname, ambfp);
648                  fputc('\n', ambfp);
# Line 1037 | Line 686 | avstore(                               /* allocate memory and save aval */
686          if ((av = newambval()) == NULL)
687                  error(SYSTEM, "out of memory in avstore");
688          *av = *aval;
1040        av->latick = ambclock;
689          av->next = NULL;
690          nambvals++;
691          d = bright(av->val);
# Line 1072 | Line 720 | newambtree(void)                               /* allocate 8 ambient tree structs
720          }
721          atp = atfreelist;
722          atfreelist = atp->kid;
723 <        memset((char *)atp, '\0', 8*sizeof(AMBTREE));
723 >        memset(atp, 0, 8*sizeof(AMBTREE));
724          return(atp);
725   }
726  
# Line 1098 | Line 746 | unloadatree(                   /* unload an ambient value tree */
746                                          /* transfer values at this node */
747          for (av = at->alist; av != NULL; av = at->alist) {
748                  at->alist = av->next;
749 +                av->next = NULL;
750                  (*f)(av);
751          }
752          if (at->kid == NULL)
# Line 1109 | Line 758 | unloadatree(                   /* unload an ambient value tree */
758   }
759  
760  
1112 static struct avl {
1113        AMBVAL  *p;
1114        unsigned long   t;
1115 }       *avlist1;                       /* ambient value list with ticks */
1116 static AMBVAL   **avlist2;              /* memory positions for sorting */
1117 static int      i_avlist;               /* index for lists */
1118
1119 static int alatcmp(const void *av1, const void *av2);
1120
761   static void
762   avfree(AMBVAL *av)
763   {
764          free(av);
765   }
766  
767 +
768   static void
769 < av2list(
1129 <        AMBVAL *av
1130 < )
769 > sortambvals(void)                       /* resort ambient values */
770   {
771 < #ifdef DEBUG
1133 <        if (i_avlist >= nambvals)
1134 <                error(CONSISTENCY, "too many ambient values in av2list1");
1135 < #endif
1136 <        avlist1[i_avlist].p = avlist2[i_avlist] = (AMBVAL*)av;
1137 <        avlist1[i_avlist++].t = av->latick;
1138 < }
771 >        AMBTREE  oldatrunk = atrunk;
772  
773 <
774 < static int
775 < alatcmp(                        /* compare ambient values for MRA */
1143 <        const void *av1,
1144 <        const void *av2
1145 < )
1146 < {
1147 <        long  lc = ((struct avl *)av2)->t - ((struct avl *)av1)->t;
1148 <        return(lc<0 ? -1 : lc>0 ? 1 : 0);
773 >        atrunk.alist = NULL;
774 >        atrunk.kid = NULL;
775 >        unloadatree(&oldatrunk, avinsert);
776   }
777  
778  
1152 /* GW NOTE 2002/10/3:
1153 * I used to compare AMBVAL pointers, but found that this was the
1154 * cause of a serious consistency error with gcc, since the optimizer
1155 * uses some dangerous trick in pointer subtraction that
1156 * assumes pointers differ by exact struct size increments.
1157 */
1158 static int
1159 aposcmp(                        /* compare ambient value positions */
1160        const void      *avp1,
1161        const void      *avp2
1162 )
1163 {
1164        long    diff = *(char * const *)avp1 - *(char * const *)avp2;
1165        if (diff < 0)
1166                return(-1);
1167        return(diff > 0);
1168 }
1169
1170
1171 static int
1172 avlmemi(                                /* find list position from address */
1173        AMBVAL  *avaddr
1174 )
1175 {
1176        AMBVAL  **avlpp;
1177
1178        avlpp = (AMBVAL **)bsearch((char *)&avaddr, (char *)avlist2,
1179                        nambvals, sizeof(AMBVAL *), &aposcmp);
1180        if (avlpp == NULL)
1181                error(CONSISTENCY, "address not found in avlmemi");
1182        return(avlpp - avlist2);
1183 }
1184
1185
1186 static void
1187 sortambvals(                    /* resort ambient values */
1188        int     always
1189 )
1190 {
1191        AMBTREE  oldatrunk;
1192        AMBVAL  tav, *tap, *pnext;
1193        int     i, j;
1194                                        /* see if it's time yet */
1195        if (!always && (ambclock++ < lastsort+sortintvl ||
1196                        nambvals < SORT_THRESH))
1197                return;
1198        /*
1199         * The idea here is to minimize memory thrashing
1200         * in VM systems by improving reference locality.
1201         * We do this by periodically sorting our stored ambient
1202         * values in memory in order of most recently to least
1203         * recently accessed.  This ordering was chosen so that new
1204         * ambient values (which tend to be less important) go into
1205         * higher memory with the infrequently accessed values.
1206         *      Since we expect our values to need sorting less
1207         * frequently as the process continues, we double our
1208         * waiting interval after each call.
1209         *      This routine is also called by setambacc() with
1210         * the "always" parameter set to 1 so that the ambient
1211         * tree will be rebuilt with the new accuracy parameter.
1212         */
1213        if (tracktime) {                /* allocate pointer arrays to sort */
1214                avlist2 = (AMBVAL **)malloc(nambvals*sizeof(AMBVAL *));
1215                avlist1 = (struct avl *)malloc(nambvals*sizeof(struct avl));
1216        } else {
1217                avlist2 = NULL;
1218                avlist1 = NULL;
1219        }
1220        if (avlist1 == NULL) {          /* no time tracking -- rebuild tree? */
1221                if (avlist2 != NULL)
1222                        free((void *)avlist2);
1223                if (always) {           /* rebuild without sorting */
1224                        oldatrunk = atrunk;
1225                        atrunk.alist = NULL;
1226                        atrunk.kid = NULL;
1227                        unloadatree(&oldatrunk, avinsert);
1228                }
1229        } else {                        /* sort memory by last access time */
1230                /*
1231                 * Sorting memory is tricky because it isn't contiguous.
1232                 * We have to sort an array of pointers by MRA and also
1233                 * by memory position.  We then copy values in "loops"
1234                 * to minimize memory hits.  Nevertheless, we will visit
1235                 * everyone at least twice, and this is an expensive process
1236                 * when we're thrashing, which is when we need to do it.
1237                 */
1238 #ifdef DEBUG
1239                sprintf(errmsg, "sorting %u ambient values at ambclock=%lu...",
1240                                nambvals, ambclock);
1241                eputs(errmsg);
1242 #endif
1243                i_avlist = 0;
1244                unloadatree(&atrunk, av2list);  /* empty current tree */
1245 #ifdef DEBUG
1246                if (i_avlist < nambvals)
1247                        error(CONSISTENCY, "missing ambient values in sortambvals");
1248 #endif
1249                qsort((char *)avlist1, nambvals, sizeof(struct avl), alatcmp);
1250                qsort((char *)avlist2, nambvals, sizeof(AMBVAL *), aposcmp);
1251                for (i = 0; i < nambvals; i++) {
1252                        if (avlist1[i].p == NULL)
1253                                continue;
1254                        tap = avlist2[i];
1255                        tav = *tap;
1256                        for (j = i; (pnext = avlist1[j].p) != tap;
1257                                        j = avlmemi(pnext)) {
1258                                *(avlist2[j]) = *pnext;
1259                                avinsert(avlist2[j]);
1260                                avlist1[j].p = NULL;
1261                        }
1262                        *(avlist2[j]) = tav;
1263                        avinsert(avlist2[j]);
1264                        avlist1[j].p = NULL;
1265                }
1266                free((void *)avlist1);
1267                free((void *)avlist2);
1268                                                /* compute new sort interval */
1269                sortintvl = ambclock - lastsort;
1270                if (sortintvl >= MAX_SORT_INTVL/2)
1271                        sortintvl = MAX_SORT_INTVL;
1272                else
1273                        sortintvl <<= 1;        /* wait twice as long next */
1274 #ifdef DEBUG
1275                eputs("done\n");
1276 #endif
1277        }
1278        if (ambclock >= MAXACLOCK)
1279                ambclock = MAXACLOCK/2;
1280        lastsort = ambclock;
1281 }
1282
1283
779   #ifdef  F_SETLKW
780  
781   static void
# Line 1292 | Line 787 | aflock(                        /* lock/unlock ambient file */
787  
788          if (typ == fls.l_type)          /* already called? */
789                  return;
790 +
791          fls.l_type = typ;
792 <        if (fcntl(fileno(ambfp), F_SETLKW, &fls) < 0)
793 <                error(SYSTEM, "cannot (un)lock ambient file");
792 >        do
793 >                if (fcntl(fileno(ambfp), F_SETLKW, &fls) != -1)
794 >                        return;
795 >        while (errno == EINTR);
796 >        
797 >        error(SYSTEM, "cannot (un)lock ambient file");
798   }
799  
800  
# Line 1313 | Line 813 | ambsync(void)                  /* synchronize ambient file */
813          if ((flen = lseek(fileno(ambfp), (off_t)0, SEEK_END)) < 0)
814                  goto seekerr;
815          if ((n = flen - lastpos) > 0) {         /* file has grown */
816 <                if (ambinp == NULL) {           /* use duplicate filedes */
817 <                        ambinp = fdopen(dup(fileno(ambfp)), "r");
816 >                if (ambinp == NULL) {           /* get new file pointer */
817 >                        ambinp = fopen(ambfile, "rb");
818                          if (ambinp == NULL)
819 <                                error(SYSTEM, "fdopen failed in ambsync");
819 >                                error(SYSTEM, "fopen failed in ambsync");
820                  }
821                  if (fseek(ambinp, lastpos, SEEK_SET) < 0)
822                          goto seekerr;
# Line 1331 | Line 831 | ambsync(void)                  /* synchronize ambient file */
831                          avstore(&avs);
832                          n -= AMBVALSIZ;
833                  }
834 <                lastpos = flen - n;
835 <                /*** seek always as safety measure
836 <                if (n) ***/                     /* alignment */
1337 <                        if (lseek(fileno(ambfp), (off_t)lastpos, SEEK_SET) < 0)
1338 <                                goto seekerr;
834 >                lastpos = flen - n;             /* check alignment */
835 >                if (n && lseek(fileno(ambfp), (off_t)lastpos, SEEK_SET) < 0)
836 >                        goto seekerr;
837          }
838          n = fflush(ambfp);                      /* calls write() at last */
839 <        if (n != EOF)
1342 <                lastpos += (long)nunflshed*AMBVALSIZ;
1343 <        else if ((lastpos = lseek(fileno(ambfp), (off_t)0, SEEK_CUR)) < 0)
1344 <                goto seekerr;
1345 <                
839 >        lastpos += (long)nunflshed*AMBVALSIZ;
840          aflock(F_UNLCK);                        /* release file */
841          nunflshed = 0;
842          return(n);
843   seekerr:
844          error(SYSTEM, "seek failed in ambsync");
845 <        return -1; /* pro forma return */
845 >        return(EOF);    /* pro forma return */
846   }
847  
848   #else   /* ! F_SETLKW */

Diff Legend

Removed lines
+ Added lines
< Changed lines
> Changed lines