ViewVC Help
View File | Revision Log | Show Annotations | Download File | Root Listing
root/radiance/ray/src/rt/ambient.c
(Generate patch)

Comparing ray/src/rt/ambient.c (file contents):
Revision 2.81 by greg, Fri Apr 25 23:04:16 2014 UTC vs.
Revision 2.130 by greg, Thu Jan 23 18:44:20 2025 UTC

# Line 1 | Line 1
1 #ifndef lint
1   static const char       RCSid[] = "$Id$";
3 #endif
2   /*
3   *  ambient.c - routines dealing with ambient (inter-reflected) component.
4   *
# Line 14 | Line 12 | static const char      RCSid[] = "$Id$";
12   #include  "platform.h"
13   #include  "ray.h"
14   #include  "otypes.h"
15 + #include  "otspecial.h"
16   #include  "resolu.h"
17   #include  "ambient.h"
18   #include  "random.h"
19 + #include  "pmapamb.h"
20  
21   #ifndef  OCTSCALE
22   #define  OCTSCALE       1.0     /* ceil((valid rad.)/(cube size)) */
23   #endif
24  
25 extern char  *shm_boundary;     /* memory sharing boundary */
26
25   #ifndef  MAXASET
26   #define  MAXASET        4095    /* maximum number of elements in ambient set */
27   #endif
# Line 35 | Line 33 | double minarad;                /* minimum ambient radius */
33   static AMBTREE  atrunk;         /* our ambient trunk node */
34  
35   static FILE  *ambfp = NULL;     /* ambient file pointer */
36 < static int  nunflshed = 0;      /* number of unflushed ambient values */
36 > static int  nunflshed;          /* number of unflushed ambient values */
37 > static FILE  *ambinp = NULL;    /* input pointer for ambient i/o */
38  
40 #ifndef SORT_THRESH
41 #ifdef SMLMEM
42 #define SORT_THRESH     ((16L<<20)/sizeof(AMBVAL))
43 #else
44 #define SORT_THRESH     ((64L<<20)/sizeof(AMBVAL))
45 #endif
46 #endif
47 #ifndef SORT_INTVL
48 #define SORT_INTVL      (SORT_THRESH<<1)
49 #endif
50 #ifndef MAX_SORT_INTVL
51 #define MAX_SORT_INTVL  (SORT_INTVL<<6)
52 #endif
53
54
55 static double  qambacc = 0.;            /* ambient accuracy to the 1/4 power */
39   static double  avsum = 0.;              /* computed ambient value sum (log) */
40   static unsigned int  navsum = 0;        /* number of values in avsum */
41   static unsigned int  nambvals = 0;      /* total number of indirect values */
42 < static unsigned int  nambshare = 0;     /* number of values from file */
60 < static unsigned long  ambclock = 0;     /* ambient access clock */
61 < static unsigned long  lastsort = 0;     /* time of last value sort */
62 < static long  sortintvl = SORT_INTVL;    /* time until next sort */
63 < static FILE  *ambinp = NULL;            /* auxiliary file for input */
64 < static long  lastpos = -1;              /* last flush position */
42 > static off_t  lastpos = -1;             /* last flush position */
43  
66 #define MAXACLOCK       (1L<<30)        /* clock turnover value */
67        /*
68         * Track access times unless we are sharing ambient values
69         * through memory on a multiprocessor, when we want to avoid
70         * claiming our own memory (copy on write).  Go ahead anyway
71         * if more than two thirds of our values are unshared.
72         * Compile with -Dtracktime=0 to turn this code off.
73         */
74 #ifndef tracktime
75 #define tracktime       (shm_boundary == NULL || nambvals > 3*nambshare)
76 #endif
77
44   #define  AMBFLUSH       (BUFSIZ/AMBVALSIZ)
45  
46 < #define  newambval()    (AMBVAL *)malloc(sizeof(AMBVAL))
47 < #define  freeav(av)     free((void *)av);
46 > #define  AVSIZE         (sizeof(AMBVAL)-sizeof(SCOLOR)+sizeof(COLORV)*NCSAMP)
47 > #define  newambval()    (AMBVAL *)malloc(AVSIZE)
48  
49 < static void initambfile(int creat);
49 > #define  tfunc(x0, x, x1)       (((x)-(x0))/((x1)-(x0)))
50 >
51 > static void initambfile(int cre8);
52   static void avsave(AMBVAL *av);
53   static AMBVAL *avstore(AMBVAL  *aval);
54   static AMBTREE *newambtree(void);
# Line 88 | Line 56 | static void freeambtree(AMBTREE  *atp);
56  
57   typedef void unloadtf_t(AMBVAL *);
58   static unloadtf_t avinsert;
91 static unloadtf_t av2list;
59   static unloadtf_t avfree;
60   static void unloadatree(AMBTREE  *at, unloadtf_t *f);
61  
62 < static int aposcmp(const void *avp1, const void *avp2);
96 < static int avlmemi(AMBVAL *avaddr);
97 < static void sortambvals(int always);
62 > static void sortambvals(void);
63  
64 < #ifdef  F_SETLKW
65 < static void aflock(int  typ);
66 < #endif
64 > static int      plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang);
65 > static double   sumambient(SCOLOR acol, RAY *r, FVECT rn, int al,
66 >                                AMBTREE *at, FVECT c0, double s);
67 > static int      makeambient(SCOLOR acol, RAY *r, FVECT rn, int al);
68 > static int      extambient(SCOLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
69 >                                FVECT uvw[3]);
70  
71  
72   void
# Line 110 | Line 78 | setambres(                             /* set ambient resolution */
78                                                  /* set min & max radii */
79          if (ar <= 0) {
80                  minarad = 0;
81 <                maxarad = thescene.cusize / 2.0;
81 >                maxarad = thescene.cusize*0.2;
82          } else {
83                  minarad = thescene.cusize / ar;
84 <                maxarad = 64 * minarad;                 /* heuristic */
85 <                if (maxarad > thescene.cusize / 2.0)
86 <                        maxarad = thescene.cusize / 2.0;
84 >                maxarad = 64.0 * minarad;               /* heuristic */
85 >                if (maxarad > thescene.cusize*0.2)
86 >                        maxarad = thescene.cusize*0.2;
87          }
88          if (minarad <= FTINY)
89 <                minarad = 10*FTINY;
89 >                minarad = 10.0*FTINY;
90          if (maxarad <= minarad)
91 <                maxarad = 64 * minarad;
91 >                maxarad = 64.0 * minarad;
92   }
93  
94  
# Line 129 | Line 97 | setambacc(                             /* set ambient accuracy */
97          double  newa
98   )
99   {
100 <        double  ambdiff;
101 <
102 <        if (newa < 0.0)
103 <                newa = 0.0;
104 <        ambdiff = fabs(newa - ambacc);
105 <        if (ambdiff >= .01 && (ambacc = newa) > FTINY) {
106 <                qambacc = sqrt(sqrt(ambacc));
139 <                if (nambvals > 0)
140 <                        sortambvals(1);         /* rebuild tree */
100 >        static double   olda;           /* remember previous setting here */
101 >        
102 >        newa *= (newa > 0);
103 >        if (fabs(newa - olda) >= .05*(newa + olda)) {
104 >                ambacc = newa;
105 >                if (ambacc > FTINY && nambvals > 0)
106 >                        sortambvals();          /* rebuild tree */
107          }
108   }
109  
# Line 145 | Line 111 | setambacc(                             /* set ambient accuracy */
111   void
112   setambient(void)                                /* initialize calculation */
113   {
114 <        int     readonly = 0;
115 <        long    flen;
114 >        int     exists;
115 >        off_t   flen;
116          AMBVAL  amb;
117                                                  /* make sure we're fresh */
118          ambdone();
119                                                  /* init ambient limits */
120          setambres(ambres);
121 <        qambacc = sqrt(sqrt(ambacc *= (ambacc > FTINY)));
121 >        setambacc(ambacc);
122          if (ambfile == NULL || !ambfile[0])
123                  return;
124          if (ambacc <= FTINY) {
# Line 161 | Line 127 | setambient(void)                               /* initialize calculation */
127                  error(WARNING, errmsg);
128                  return;
129          }
130 <                                                /* open ambient file */
131 <        if ((ambfp = fopen(ambfile, "r+")) == NULL)
132 <                readonly = (ambfp = fopen(ambfile, "r")) != NULL;
133 <        if (ambfp != NULL) {
134 <                initambfile(0);                 /* file exists */
130 >        exists = access(ambfile, F_OK) == 0;    /* check existence, first */
131 >        ambfp = fopen(ambfile, "a+");           /* try read/append */
132 >        if (!exists & (ambfp == NULL)) {
133 >                sprintf(errmsg, "cannot create ambient file \"%s\"", ambfile);
134 >                error(SYSTEM, errmsg);
135 >        }
136 >        if (ambfp == NULL) {                    /* try opening read-only? */
137 >                if ((ambfp = fopen(ambfile, "r")) == NULL) {
138 >                        sprintf(errmsg,
139 >                        "cannot open ambient file \"%s\" for reading",
140 >                                        ambfile);
141 >                        error(SYSTEM, errmsg);
142 >                }
143 >                exists = -1;                    /* flag read-only */
144 >        } else if (exists)
145 >                rewind(ambfp);  /* XXX not necessary? */
146 >
147 >        if (exists) {
148 >                initambfile(0);                 /* file already exists */
149                  lastpos = ftell(ambfp);
150                  while (readambval(&amb, ambfp))
151 <                        avinsert(avstore(&amb));
152 <                nambshare = nambvals;           /* share loaded values */
173 <                if (readonly) {
151 >                        avstore(&amb);          /* load what we can */
152 >                if (exists < 0) {               /* read-only? */
153                          sprintf(errmsg,
154                                  "loaded %u values from read-only ambient file",
155                                          nambvals);
156                          error(WARNING, errmsg);
157                          fclose(ambfp);          /* close file so no writes */
158                          ambfp = NULL;
159 <                        return;                 /* avoid ambsync() */
159 >                        return;
160                  }
161                                                  /* align file pointer */
162 <                lastpos += (long)nambvals*AMBVALSIZ;
163 <                flen = lseek(fileno(ambfp), (off_t)0, SEEK_END);
162 >                lastpos += (off_t)nambvals*AMBVALSIZ;
163 >                flen = lseek(fileno(ambfp), 0, SEEK_END);
164                  if (flen != lastpos) {
165                          sprintf(errmsg,
166 <                        "ignoring last %ld values in ambient file (corrupted)",
167 <                                        (flen - lastpos)/AMBVALSIZ);
166 >                        "ignoring last %lu values in ambient file (corrupted)",
167 >                                (unsigned long)((flen - lastpos)/AMBVALSIZ));
168                          error(WARNING, errmsg);
169 <                        fseek(ambfp, lastpos, SEEK_SET);
170 < #ifndef _WIN32 /* XXX we need a replacement for that one */
171 <                        ftruncate(fileno(ambfp), (off_t)lastpos);
193 < #endif
169 >                                                /* fseek() not needed? */
170 >                        fseeko(ambfp, lastpos, SEEK_SET);
171 >                        ftruncate(fileno(ambfp), lastpos);
172                  }
173 <        } else if ((ambfp = fopen(ambfile, "w+")) != NULL) {
174 <                initambfile(1);                 /* else create new file */
173 >        } else {
174 >                initambfile(1);                 /* else start new file */
175                  fflush(ambfp);
176                  lastpos = ftell(ambfp);
199        } else {
200                sprintf(errmsg, "cannot open ambient file \"%s\"", ambfile);
201                error(SYSTEM, errmsg);
177          }
203 #ifdef getc_unlocked
204        flockfile(ambfp);                       /* application-level lock */
205 #endif
206 #ifdef  F_SETLKW
207        aflock(F_UNLCK);                        /* release file */
208 #endif
178   }
179  
180  
# Line 213 | Line 182 | void
182   ambdone(void)                   /* close ambient file and free memory */
183   {
184          if (ambfp != NULL) {            /* close ambient file */
185 <                ambsync();
217 <                fclose(ambfp);
185 >                fclose(ambfp);          /* don't call ambsync() */
186                  ambfp = NULL;
187 <                if (ambinp != NULL) {  
187 >                lastpos = -1;
188 >                if (ambinp != NULL) {
189                          fclose(ambinp);
190                          ambinp = NULL;
191                  }
223                lastpos = -1;
192          }
193                                          /* free ambient tree */
194 <        unloadatree(&atrunk, &avfree);
194 >        unloadatree(&atrunk, avfree);
195                                          /* reset state variables */
196          avsum = 0.;
197          navsum = 0;
198          nambvals = 0;
231        nambshare = 0;
232        ambclock = 0;
233        lastsort = 0;
234        sortintvl = SORT_INTVL;
199   }
200  
201  
# Line 264 | Line 228 | ambnotify(                     /* record new modifier */
228                  }
229   }
230  
267 /************ THE FOLLOWING ROUTINES DIFFER BETWEEN NEW & OLD ***************/
231  
269 #ifdef NEWAMB
270
271 #define tfunc(lwr, x, upr)      (((x)-(lwr))/((upr)-(lwr)))
272
273 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
274                                AMBTREE *at, FVECT c0, double s);
275 static int      makeambient(COLOR acol, RAY *r, FVECT rn, int al);
276 static void     extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv,
277                                FVECT uvw[3]);
278
232   void
233   multambient(            /* compute ambient component & multiply by coef. */
234 <        COLOR  aval,
234 >        SCOLOR  aval,
235          RAY  *r,
236          FVECT  nrm
237   )
238   {
239 +        static double  logAvgAbsorp = 1;
240          static int  rdepth = 0;                 /* ambient recursion */
241 <        COLOR   acol;
242 <        int     ok;
241 >        SCOLOR  acol, caustic;
242 >        int     i, ok;
243          double  d, l;
244  
245 +        /* PMAP: Factor in ambient from photon map, if enabled and ray is
246 +         * ambient. Return as all ambient components accounted for, else
247 +         * continue. */
248 +        if (ambPmap(aval, r, rdepth))
249 +                return;
250 +
251 +        if (logAvgAbsorp > 0)                   /* exclude in -aw to avoid growth */
252 +                logAvgAbsorp = log(1.-AVGREFL);
253 +
254 +        /* PMAP: Factor in specular-diffuse ambient (caustics) from photon
255 +         * map, if enabled and ray is primary, else caustic is zero.  Continue
256 +         * with RADIANCE ambient calculation */
257 + {/* XXX TEMPORARY */
258 +        COLOR   pmc;
259 +        scolor_color(pmc, aval);
260 +        ambPmapCaustic(pmc, r, rdepth);
261 +        setscolor(caustic, colval(pmc,RED), colval(pmc,GRN), colval(pmc,BLU));
262 + }
263          if (ambdiv <= 0)                        /* no ambient calculation */
264                  goto dumbamb;
265                                                  /* check number of bounces */
# Line 298 | Line 270 | multambient(           /* compute ambient component & multiply
270                          ambincl != inset(ambset, r->ro->omod))
271                  goto dumbamb;
272  
273 <        if (ambacc <= FTINY) {                  /* no ambient storage */
274 <                copycolor(acol, aval);
273 >        if (ambacc <= FTINY) {                  /* no ambient storage? */
274 >                double  rdot = DOT(nrm,r->ron);
275 >                int     sgn = 1 - 2*(rdot < 0);
276 >                float   dgrad[2], *dgp = NULL;
277 >                FVECT   uvd[2];
278 >
279 >                if (sgn*rdot < 0.9999)
280 >                        dgp = dgrad;            /* compute rotational grad. */
281 >                copyscolor(acol, aval);
282                  rdepth++;
283 <                ok = doambient(acol, r, r->rweight, NULL, NULL, NULL, NULL);
283 >                ok = doambient(acol, r, r->rweight*sgn,
284 >                                uvd, NULL, NULL, dgp, NULL);
285                  rdepth--;
286                  if (!ok)
287                          goto dumbamb;
288 <                copycolor(aval, acol);
288 >                if ((ok > 0) & (dgp != NULL)) { /* apply texture */
289 >                        FVECT   v1;
290 >                        VCROSS(v1, r->ron, nrm);
291 >                        d = 1.0;
292 >                        for (i = 3; i--; )
293 >                                d += sgn*v1[i] * (dgp[0]*uvd[0][i] + dgp[1]*uvd[1][i]);
294 >                        if (d >= 0.05)
295 >                                scalescolor(acol, d);
296 >                }
297 >                copyscolor(aval, acol);
298 >
299 >                /* PMAP: add in caustic */
300 >                saddscolor(aval, caustic);
301                  return;
302          }
311
312        if (tracktime)                          /* sort to minimize thrashing */
313                sortambvals(0);
303                                                  /* interpolate ambient value */
304 <        setcolor(acol, 0.0, 0.0, 0.0);
304 >        scolorblack(acol);
305          d = sumambient(acol, r, nrm, rdepth,
306                          &atrunk, thescene.cuorg, thescene.cusize);
307 +                        
308          if (d > FTINY) {
309 <                d = 1.0/d;
310 <                scalecolor(acol, d);
311 <                multcolor(aval, acol);
309 >                scalescolor(acol, 1.0/d);
310 >                smultscolor(aval, acol);
311 >
312 >                /* PMAP: add in caustic */
313 >                saddscolor(aval, caustic);
314                  return;
315          }
316 +        
317          rdepth++;                               /* need to cache new value */
318          ok = makeambient(acol, r, nrm, rdepth-1);
319          rdepth--;
320 +        
321          if (ok) {
322 <                multcolor(aval, acol);          /* computed new value */
322 >                smultscolor(aval, acol);        /* computed new value */
323 >
324 >                /* PMAP: add in caustic */
325 >                saddscolor(aval, caustic);
326                  return;
327          }
328 +        
329   dumbamb:                                        /* return global value */
330          if ((ambvwt <= 0) | (navsum == 0)) {
331 <                multcolor(aval, ambval);
331 >                smultcolor(aval, ambval);
332 >                
333 >                /* PMAP: add in caustic */
334 >                saddscolor(aval, caustic);
335                  return;
336          }
337 <        l = bright(ambval);                     /* average in computations */
337 >        
338 >        l = bright(ambval);                     /* average in computations */  
339          if (l > FTINY) {
340 <                d = (log(l)*(double)ambvwt + avsum) /
340 >                d = (log(l)*(double)ambvwt + avsum + logAvgAbsorp*navsum) /
341                                  (double)(ambvwt + navsum);
342                  d = exp(d) / l;
343 <                scalecolor(aval, d);
344 <                multcolor(aval, ambval);        /* apply color of ambval */
343 >                scalescolor(aval, d);
344 >                smultcolor(aval, ambval);       /* apply color of ambval */
345          } else {
346 <                d = exp( avsum / (double)navsum );
347 <                scalecolor(aval, d);            /* neutral color */
346 >                d = exp( avsum/(double)navsum + logAvgAbsorp );
347 >                scalescolor(aval, d);           /* neutral color */
348          }
349   }
350  
351  
352 < double
352 > /* Plug a potential leak where ambient cache value is occluded */
353 > static int
354 > plugaleak(RAY *r, AMBVAL *ap, FVECT anorm, double ang)
355 > {
356 >        const double    cost70sq = 0.1169778;   /* cos(70deg)^2 */
357 >        RAY             rtst;
358 >        FVECT           vdif;
359 >        double          normdot, ndotd, nadotd;
360 >        double          a, b, c, t[2];
361 >
362 >        ang += 2.*PI*(ang < 0);                 /* check direction flags */
363 >        if ( !(ap->corral>>(int)(ang*(16./PI)) & 1) )
364 >                return(0);
365 >        /*
366 >         * Generate test ray, targeting 20 degrees above sample point plane
367 >         * along surface normal from cache position.  This should be high
368 >         * enough to miss local geometry we don't really care about.
369 >         */
370 >        VSUB(vdif, ap->pos, r->rop);
371 >        normdot = DOT(anorm, r->ron);
372 >        ndotd = DOT(vdif, r->ron);
373 >        nadotd = DOT(vdif, anorm);
374 >        a = normdot*normdot - cost70sq;
375 >        b = 2.0*(normdot*ndotd - nadotd*cost70sq);
376 >        c = ndotd*ndotd - DOT(vdif,vdif)*cost70sq;
377 >        if (quadratic(t, a, b, c) != 2)
378 >                return(1);                      /* should rarely happen */
379 >        if (t[1] <= FTINY)
380 >                return(0);                      /* should fail behind test */
381 >        rayorigin(&rtst, SHADOW, r, NULL);
382 >        VSUM(rtst.rdir, vdif, anorm, t[1]);     /* further dist. > plane */
383 >        rtst.rmax = normalize(rtst.rdir);       /* short ray test */
384 >        while (localhit(&rtst, &thescene)) {    /* check for occluder */
385 >                OBJREC  *m = findmaterial(rtst.ro);
386 >                if (m != NULL && !istransp(m) && !isBSDFproxy(m) &&
387 >                                (rtst.clipset == NULL ||
388 >                                        !inset(rtst.clipset, rtst.ro->omod)))
389 >                        return(1);              /* plug light leak */
390 >                VCOPY(rtst.rorg, rtst.rop);     /* skip invisible surface */
391 >                rtst.rmax -= rtst.rot;
392 >                rayclear(&rtst);
393 >        }
394 >        return(0);                              /* seems we're OK */
395 > }
396 >
397 >
398 > static double
399   sumambient(             /* get interpolated ambient value */
400 <        COLOR  acol,
400 >        SCOLOR  acol,
401          RAY  *r,
402          FVECT  rn,
403          int  al,
# Line 359 | Line 407 | sumambient(            /* get interpolated ambient value */
407   )
408   {                       /* initial limit is 10 degrees plus ambacc radians */
409          const double    minangle = 10.0 * PI/180.;
410 <        const double    maxangle = (minangle+ambacc-PI/2.)*pow(r->rweight,0.13)
411 <                                        + PI/2.;
410 >        const int       sgn = 1 - 2*(DOT(r->ron,rn) < 0);
411 >        double          maxangle = minangle + ambacc;
412          double          wsum = 0.0;
413          FVECT           ck0;
414          int             i, j;
415          AMBVAL          *av;
416 +
417 +        if (at->kid != NULL) {          /* sum children first */                                
418 +                s *= 0.5;
419 +                for (i = 0; i < 8; i++) {
420 +                        for (j = 0; j < 3; j++) {
421 +                                ck0[j] = c0[j];
422 +                                if (1<<j & i)
423 +                                        ck0[j] += s;
424 +                                if (r->rop[j] < ck0[j] - OCTSCALE*s)
425 +                                        break;
426 +                                if (r->rop[j] > ck0[j] + (1.0+OCTSCALE)*s)
427 +                                        break;
428 +                        }
429 +                        if (j == 3)
430 +                                wsum += sumambient(acol, r, rn, al,
431 +                                                        at->kid+i, ck0, s);
432 +                }
433 +                                        /* good enough? */
434 +                if ((wsum >= 0.05) & (s*ambacc > minarad))
435 +                        return(wsum);
436 +        }
437 +                                        /* adjust maximum angle */
438 +        if (at->alist != NULL && (at->alist->lvl <= al) & (r->rweight < 0.6))
439 +                maxangle = (maxangle - PI/2.)*pow(r->rweight,0.13) + PI/2.;
440                                          /* sum this node */
441          for (av = at->alist; av != NULL; av = av->next) {
442 <                double  d, delta_r2, delta_t2;
443 <                COLOR   ct;
442 >                double  u, v, d, delta_r2, delta_t2;
443 >                SCOLOR  sct;
444                  FVECT   uvw[3];
373                                        /* record access */
374                if (tracktime)
375                        av->latick = ambclock;
445                  /*
446                   *  Ambient level test
447                   */
448 <                if (av->lvl > al)       /* list sorted, so this works */
448 >                if (av->lvl > al ||     /* list sorted, so this works */
449 >                                (av->lvl == al) & (av->weight < 0.9*r->rweight))
450                          break;
381                if (av->weight < 0.9*r->rweight)
382                        continue;
451                  /*
452                   *  Direction test using unperturbed normal
453                   */
454                  decodedir(uvw[2], av->ndir);
455 <                d = DOT(uvw[2], r->ron);
455 >                d = sgn * DOT(uvw[2], r->ron);
456                  if (d <= 0.0)           /* >= 90 degrees */
457                          continue;
458                  delta_r2 = 2.0 - 2.0*d; /* approx. radians^2 */
# Line 393 | Line 461 | sumambient(            /* get interpolated ambient value */
461                  /*
462                   *  Modified ray behind test
463                   */
464 <                VSUB(ck0, av->pos, r->rop);
464 >                VSUB(ck0, r->rop, av->pos);
465                  d = DOT(ck0, uvw[2]);
466 <                if (d < -minarad*qambacc-.001)
466 >                if (d < -minarad*ambacc)
467                          continue;
468                  d /= av->rad[0];
469                  delta_t2 = d*d;
470 <                if (delta_t2 >= qambacc*qambacc)
470 >                if (delta_t2 >= ambacc*ambacc)
471                          continue;
472                  /*
473                   *  Elliptical radii test based on Hessian
474                   */
475                  decodedir(uvw[0], av->udir);
476                  VCROSS(uvw[1], uvw[2], uvw[0]);
477 <                d = DOT(ck0, uvw[0]) / av->rad[0];
477 >                d = (u = DOT(ck0, uvw[0])) / av->rad[0];
478                  delta_t2 += d*d;
479 <                d = DOT(ck0, uvw[1]) / av->rad[1];
479 >                d = (v = DOT(ck0, uvw[1])) / av->rad[1];
480                  delta_t2 += d*d;
481 <                if (delta_t2 >= qambacc*qambacc)
481 >                if (delta_t2 >= ambacc*ambacc)
482                          continue;
483                  /*
484 +                 *  Test for potential light leak
485 +                 */
486 +                if (av->corral && plugaleak(r, av, uvw[2], atan2a(v,u)))
487 +                        continue;
488 +                /*
489                   *  Extrapolate value and compute final weight (hat function)
490                   */
491 <                extambient(ct, av, r->rop, rn, uvw);
491 >                if (!extambient(sct, av, r->rop, rn, uvw))
492 >                        continue;
493                  d = tfunc(maxangle, sqrt(delta_r2), 0.0) *
494 <                        tfunc(qambacc, sqrt(delta_t2), 0.0);
495 <                scalecolor(ct, d);
496 <                addcolor(acol, ct);
494 >                        tfunc(ambacc, sqrt(delta_t2), 0.0);
495 >                scalescolor(sct, d);
496 >                saddscolor(acol, sct);
497                  wsum += d;
498          }
425        if (at->kid == NULL)
426                return(wsum);
427                                        /* sum children */
428        s *= 0.5;
429        for (i = 0; i < 8; i++) {
430                for (j = 0; j < 3; j++) {
431                        ck0[j] = c0[j];
432                        if (1<<j & i)
433                                ck0[j] += s;
434                        if (r->rop[j] < ck0[j] - OCTSCALE*s)
435                                break;
436                        if (r->rop[j] > ck0[j] + (1.0+OCTSCALE)*s)
437                                break;
438                }
439                if (j == 3)
440                        wsum += sumambient(acol, r, rn, al,
441                                                at->kid+i, ck0, s);
442        }
499          return(wsum);
500   }
501  
502  
503 < int
503 > static int
504   makeambient(            /* make a new ambient value for storage */
505 <        COLOR  acol,
505 >        SCOLOR  acol,
506          RAY  *r,
507          FVECT  rn,
508          int  al
509   )
510   {
511 +        int     sgn = 1 - 2*(DOT(r->ron,rn) < 0);
512          AMBVAL  amb;
513          FVECT   uvw[3];
514          int     i;
# Line 461 | Line 518 | makeambient(           /* make a new ambient value for storage
518                  amb.weight *= AVGREFL;
519          if (r->rweight < 0.1*amb.weight)        /* heuristic override */
520                  amb.weight = 1.25*r->rweight;
521 <        setcolor(acol, AVGREFL, AVGREFL, AVGREFL);
521 >        setscolor(acol, AVGREFL, AVGREFL, AVGREFL);
522                                                  /* compute ambient */
523 <        i = doambient(acol, r, amb.weight, uvw, amb.rad, amb.gpos, amb.gdir);
524 <        scalecolor(acol, 1./AVGREFL);           /* undo assumed reflectance */
523 >        i = doambient(acol, r, amb.weight*sgn,
524 >                        uvw, amb.rad, amb.gpos, amb.gdir, &amb.corral);
525 >        scalescolor(acol, 1./AVGREFL);          /* undo assumed reflectance */
526          if (i <= 0 || amb.rad[0] <= FTINY)      /* no Hessian or zero radius */
527                  return(i);
528 +        uvw[2][0] = sgn*r->ron[0];              /* orient unperturbed normal */
529 +        uvw[2][1] = sgn*r->ron[1];
530 +        uvw[2][2] = sgn*r->ron[2];
531                                                  /* store value */
532          VCOPY(amb.pos, r->rop);
533 <        amb.ndir = encodedir(r->ron);
533 >        amb.ndir = encodedir(uvw[2]);
534          amb.udir = encodedir(uvw[0]);
535          amb.lvl = al;
536 <        copycolor(amb.val, acol);
537 <                                                /* insert into tree */
538 <        avsave(&amb);                           /* and save to file */
478 <        if (rn != r->ron) {                     /* texture */
479 <                VCOPY(uvw[2], r->ron);
536 >        copyscolor(amb.val, acol);
537 >        avsave(&amb);                           /* insert and save to file */
538 >        if (DOT(uvw[2],rn) < 0.9999)            /* texture? */
539                  extambient(acol, &amb, r->rop, rn, uvw);
481        }
540          return(1);
541   }
542  
543  
544 < void
544 > static int
545   extambient(             /* extrapolate value at pv, nv */
546 <        COLOR  cr,
546 >        SCOLOR  scr,
547          AMBVAL   *ap,
548          FVECT  pv,
549          FVECT  nv,
550          FVECT  uvw[3]
551   )
552   {
553 +        const double    min_d = 0.05;
554 +        const double    max_d = 20.;
555          static FVECT    my_uvw[3];
556          FVECT           v1;
557          int             i;
# Line 511 | Line 571 | extambient(            /* extrapolate value at pv, nv */
571          for (i = 3; i--; )
572                  d += v1[i] * (ap->gdir[0]*uvw[0][i] + ap->gdir[1]*uvw[1][i]);
573          
574 <        if (d <= 0.0) {
575 <                setcolor(cr, 0.0, 0.0, 0.0);
576 <                return;
577 <        }
578 <        copycolor(cr, ap->val);
579 <        scalecolor(cr, d);
574 >        if (d < min_d)                  /* clamp min/max scaling */
575 >                d = min_d;
576 >        else if (d > max_d)
577 >                d = max_d;
578 >        copyscolor(scr, ap->val);
579 >        scalescolor(scr, d);
580 >        return(d > min_d);
581   }
582  
583  
# Line 538 | Line 599 | avinsert(                              /* insert ambient value in our tree */
599          at = &atrunk;
600          VCOPY(ck0, thescene.cuorg);
601          s = thescene.cusize;
602 <        while (s*(OCTSCALE/2) > av->rad[1]*qambacc) {
602 >        while (s*(OCTSCALE/2) > av->rad[1]*ambacc) {
603                  if (at->kid == NULL)
604                          if ((at->kid = newambtree()) == NULL)
605                                  error(SYSTEM, "out of memory in avinsert");
# Line 553 | Line 614 | avinsert(                              /* insert ambient value in our tree */
614          }
615          avh.next = at->alist;           /* order by increasing level */
616          for (ap = &avh; ap->next != NULL; ap = ap->next)
617 <                if (ap->next->lvl >= av->lvl)
617 >                if ( ap->next->lvl > av->lvl ||
618 >                                (ap->next->lvl == av->lvl) &
619 >                                (ap->next->weight <= av->weight) )
620                          break;
621          av->next = ap->next;
622          ap->next = (AMBVAL*)av;
# Line 561 | Line 624 | avinsert(                              /* insert ambient value in our tree */
624   }
625  
626  
564 #else /* ! NEWAMB */
565
566 static double   sumambient(COLOR acol, RAY *r, FVECT rn, int al,
567                                AMBTREE *at, FVECT c0, double s);
568 static double   makeambient(COLOR acol, RAY *r, FVECT rn, int al);
569 static void     extambient(COLOR cr, AMBVAL *ap, FVECT pv, FVECT nv);
570
571
572 void
573 multambient(            /* compute ambient component & multiply by coef. */
574        COLOR  aval,
575        RAY  *r,
576        FVECT  nrm
577 )
578 {
579        static int  rdepth = 0;                 /* ambient recursion */
580        COLOR   acol;
581        double  d, l;
582
583        if (ambdiv <= 0)                        /* no ambient calculation */
584                goto dumbamb;
585                                                /* check number of bounces */
586        if (rdepth >= ambounce)
587                goto dumbamb;
588                                                /* check ambient list */
589        if (ambincl != -1 && r->ro != NULL &&
590                        ambincl != inset(ambset, r->ro->omod))
591                goto dumbamb;
592
593        if (ambacc <= FTINY) {                  /* no ambient storage */
594                copycolor(acol, aval);
595                rdepth++;
596                d = doambient(acol, r, r->rweight, NULL, NULL);
597                rdepth--;
598                if (d <= FTINY)
599                        goto dumbamb;
600                copycolor(aval, acol);
601                return;
602        }
603
604        if (tracktime)                          /* sort to minimize thrashing */
605                sortambvals(0);
606                                                /* interpolate ambient value */
607        setcolor(acol, 0.0, 0.0, 0.0);
608        d = sumambient(acol, r, nrm, rdepth,
609                        &atrunk, thescene.cuorg, thescene.cusize);
610        if (d > FTINY) {
611                d = 1.0/d;
612                scalecolor(acol, d);
613                multcolor(aval, acol);
614                return;
615        }
616        rdepth++;                               /* need to cache new value */
617        d = makeambient(acol, r, nrm, rdepth-1);
618        rdepth--;
619        if (d > FTINY) {
620                multcolor(aval, acol);          /* got new value */
621                return;
622        }
623 dumbamb:                                        /* return global value */
624        if ((ambvwt <= 0) | (navsum == 0)) {
625                multcolor(aval, ambval);
626                return;
627        }
628        l = bright(ambval);                     /* average in computations */
629        if (l > FTINY) {
630                d = (log(l)*(double)ambvwt + avsum) /
631                                (double)(ambvwt + navsum);
632                d = exp(d) / l;
633                scalecolor(aval, d);
634                multcolor(aval, ambval);        /* apply color of ambval */
635        } else {
636                d = exp( avsum / (double)navsum );
637                scalecolor(aval, d);            /* neutral color */
638        }
639 }
640
641
642 static double
643 sumambient(     /* get interpolated ambient value */
644        COLOR  acol,
645        RAY  *r,
646        FVECT  rn,
647        int  al,
648        AMBTREE  *at,
649        FVECT  c0,
650        double  s
651 )
652 {
653        double  d, e1, e2, wt, wsum;
654        COLOR  ct;
655        FVECT  ck0;
656        int  i;
657        int  j;
658        AMBVAL   *av;
659
660        wsum = 0.0;
661                                        /* do this node */
662        for (av = at->alist; av != NULL; av = av->next) {
663                double  rn_dot = -2.0;
664                if (tracktime)
665                        av->latick = ambclock;
666                /*
667                 *  Ambient level test.
668                 */
669                if (av->lvl > al)       /* list sorted, so this works */
670                        break;
671                if (av->weight < 0.9*r->rweight)
672                        continue;
673                /*
674                 *  Ambient radius test.
675                 */
676                VSUB(ck0, av->pos, r->rop);
677                e1 = DOT(ck0, ck0) / (av->rad * av->rad);
678                if (e1 > ambacc*ambacc*1.21)
679                        continue;
680                /*
681                 *  Direction test using closest normal.
682                 */
683                d = DOT(av->dir, r->ron);
684                if (rn != r->ron) {
685                        rn_dot = DOT(av->dir, rn);
686                        if (rn_dot > 1.0-FTINY)
687                                rn_dot = 1.0-FTINY;
688                        if (rn_dot >= d-FTINY) {
689                                d = rn_dot;
690                                rn_dot = -2.0;
691                        }
692                }
693                e2 = (1.0 - d) * r->rweight;
694                if (e2 < 0.0)
695                        e2 = 0.0;
696                else if (e1 + e2 > ambacc*ambacc*1.21)
697                        continue;
698                /*
699                 *  Ray behind test.
700                 */
701                d = 0.0;
702                for (j = 0; j < 3; j++)
703                        d += (r->rop[j] - av->pos[j]) *
704                                        (av->dir[j] + r->ron[j]);
705                if (d*0.5 < -minarad*ambacc-.001)
706                        continue;
707                /*
708                 *  Jittering final test reduces image artifacts.
709                 */
710                e1 = sqrt(e1);
711                e2 = sqrt(e2);
712                wt = e1 + e2;
713                if (wt > ambacc*(.9+.2*urand(9015+samplendx)))
714                        continue;
715                /*
716                 *  Recompute directional error using perturbed normal
717                 */
718                if (rn_dot > 0.0) {
719                        e2 = sqrt((1.0 - rn_dot)*r->rweight);
720                        wt = e1 + e2;
721                }
722                if (wt <= 1e-3)
723                        wt = 1e3;
724                else
725                        wt = 1.0 / wt;
726                wsum += wt;
727                extambient(ct, av, r->rop, rn);
728                scalecolor(ct, wt);
729                addcolor(acol, ct);
730        }
731        if (at->kid == NULL)
732                return(wsum);
733                                        /* do children */
734        s *= 0.5;
735        for (i = 0; i < 8; i++) {
736                for (j = 0; j < 3; j++) {
737                        ck0[j] = c0[j];
738                        if (1<<j & i)
739                                ck0[j] += s;
740                        if (r->rop[j] < ck0[j] - OCTSCALE*s)
741                                break;
742                        if (r->rop[j] > ck0[j] + (1.0+OCTSCALE)*s)
743                                break;
744                }
745                if (j == 3)
746                        wsum += sumambient(acol, r, rn, al,
747                                                at->kid+i, ck0, s);
748        }
749        return(wsum);
750 }
751
752
753 static double
754 makeambient(            /* make a new ambient value for storage */
755        COLOR  acol,
756        RAY  *r,
757        FVECT  rn,
758        int  al
759 )
760 {
761        AMBVAL  amb;
762        FVECT   gp, gd;
763        int     i;
764
765        amb.weight = 1.0;                       /* compute weight */
766        for (i = al; i-- > 0; )
767                amb.weight *= AVGREFL;
768        if (r->rweight < 0.1*amb.weight)        /* heuristic override */
769                amb.weight = 1.25*r->rweight;
770        setcolor(acol, AVGREFL, AVGREFL, AVGREFL);
771                                                /* compute ambient */
772        amb.rad = doambient(acol, r, amb.weight, gp, gd);
773        if (amb.rad <= FTINY) {
774                setcolor(acol, 0.0, 0.0, 0.0);
775                return(0.0);
776        }
777        scalecolor(acol, 1./AVGREFL);           /* undo assumed reflectance */
778                                                /* store value */
779        VCOPY(amb.pos, r->rop);
780        VCOPY(amb.dir, r->ron);
781        amb.lvl = al;
782        copycolor(amb.val, acol);
783        VCOPY(amb.gpos, gp);
784        VCOPY(amb.gdir, gd);
785                                                /* insert into tree */
786        avsave(&amb);                           /* and save to file */
787        if (rn != r->ron)
788                extambient(acol, &amb, r->rop, rn);     /* texture */
789        return(amb.rad);
790 }
791
792
627   static void
794 extambient(             /* extrapolate value at pv, nv */
795        COLOR  cr,
796        AMBVAL   *ap,
797        FVECT  pv,
798        FVECT  nv
799 )
800 {
801        FVECT  v1;
802        int  i;
803        double  d;
804
805        d = 1.0;                        /* zeroeth order */
806                                        /* gradient due to translation */
807        for (i = 0; i < 3; i++)
808                d += ap->gpos[i]*(pv[i]-ap->pos[i]);
809                                        /* gradient due to rotation */
810        VCROSS(v1, ap->dir, nv);
811        d += DOT(ap->gdir, v1);
812        if (d <= 0.0) {
813                setcolor(cr, 0.0, 0.0, 0.0);
814                return;
815        }
816        copycolor(cr, ap->val);
817        scalecolor(cr, d);
818 }
819
820
821 static void
822 avinsert(                               /* insert ambient value in our tree */
823        AMBVAL *av
824 )
825 {
826        AMBTREE  *at;
827        AMBVAL  *ap;
828        AMBVAL  avh;
829        FVECT  ck0;
830        double  s;
831        int  branch;
832        int  i;
833
834        if (av->rad <= FTINY)
835                error(CONSISTENCY, "zero ambient radius in avinsert");
836        at = &atrunk;
837        VCOPY(ck0, thescene.cuorg);
838        s = thescene.cusize;
839        while (s*(OCTSCALE/2) > av->rad*ambacc) {
840                if (at->kid == NULL)
841                        if ((at->kid = newambtree()) == NULL)
842                                error(SYSTEM, "out of memory in avinsert");
843                s *= 0.5;
844                branch = 0;
845                for (i = 0; i < 3; i++)
846                        if (av->pos[i] > ck0[i] + s) {
847                                ck0[i] += s;
848                                branch |= 1 << i;
849                        }
850                at = at->kid + branch;
851        }
852        avh.next = at->alist;           /* order by increasing level */
853        for (ap = &avh; ap->next != NULL; ap = ap->next)
854                if (ap->next->lvl >= av->lvl)
855                        break;
856        av->next = ap->next;
857        ap->next = (AMBVAL*)av;
858        at->alist = avh.next;
859 }
860
861 #endif  /* ! NEWAMB */
862
863 /************* FOLLOWING ROUTINES SAME FOR NEW & OLD METHODS ***************/
864
865 static void
628   initambfile(            /* initialize ambient file */
629          int  cre8
630   )
631   {
632          extern char  *progname, *octname;
633          static char  *mybuf = NULL;
634 +        int  ntries = 3;
635  
636 < #ifdef  F_SETLKW
637 <        aflock(cre8 ? F_WRLCK : F_RDLCK);
875 < #endif
636 >        if (!AMBFLUSH)
637 >                error(INTERNAL, "BUFSIZ too small in initambfile");
638          SET_FILE_BINARY(ambfp);
639          if (mybuf == NULL)
640 <                mybuf = (char *)bmalloc(BUFSIZ+8);
640 >                mybuf = (char *)bmalloc(BUFSIZ);
641          setbuf(ambfp, mybuf);
642 +        nunflshed = 0;
643 + retry:
644          if (cre8) {                     /* new file */
645                  newheader("RADIANCE", ambfp);
646                  fprintf(ambfp, "%s -av %g %g %g -aw %d -ab %d -aa %g ",
# Line 885 | Line 649 | initambfile(           /* initialize ambient file */
649                                  ambvwt, ambounce, ambacc);
650                  fprintf(ambfp, "-ad %d -as %d -ar %d ",
651                                  ambdiv, ambssamp, ambres);
652 +                fprintf(ambfp, "-dr %d -ds %g -dt %g -dc %g ", directrelay,
653 +                                srcsizerat, shadthresh, shadcert);
654 +                fprintf(ambfp, "-ss %g -st %g -lr %d -lw %g ", specjitter,
655 +                                specthresh, maxdepth, minweight);
656 +                fprintf(ambfp, "-cw %g %g -cs %d ", WLPART[3], WLPART[0], NCSAMP);
657                  if (octname != NULL)
658                          fputs(octname, ambfp);
659 <                fputc('\n', ambfp);
659 >                fputc('\n', ambfp);     /* end of command line, not header! */
660                  fprintf(ambfp, "SOFTWARE= %s\n", VersionID);
661                  fputnow(ambfp);
662 +                AMB_CNDX = CNDX;        /* use current spectral sampling */
663 +                AMB_WLPART = WLPART;
664 +                fputwlsplit(WLPART, ambfp);
665 +                fputncomp(NCSAMP, ambfp);
666                  fputformat(AMBFMT, ambfp);
667                  fputc('\n', ambfp);
668                  putambmagic(ambfp);
669 <        } else if (checkheader(ambfp, AMBFMT, NULL) < 0 || !hasambmagic(ambfp))
670 <                error(USER, "bad ambient file");
669 >        } else if (getheader(ambfp, amb_headline, NULL) < 0 || !hasambmagic(ambfp)) {
670 >                if (--ntries > 0 && ftell(ambfp) == 0) {
671 >                        clearerr(ambfp);
672 >                        sleep(2);
673 >                        goto retry;
674 >                }
675 >                error(USER, "bad/incompatible ambient file");
676 >        }
677 >        if ((AMB_CNDX != CNDX) | (AMB_WLPART != WLPART)) {
678 >                if (setspectrsamp(AMB_CNDX, AMB_WLPART) < 0)
679 >                        error(USER, "bad wavelength sampling in ambient file");
680 >                if (AMB_CNDX[3] == CNDX[3] && FABSEQ(AMB_WLPART[0],WLPART[0]) &&
681 >                                        FABSEQ(AMB_WLPART[3],WLPART[3])) {
682 >                        AMB_CNDX = CNDX;
683 >                        AMB_WLPART = WLPART;            /* just the same */
684 >                } else
685 >                        error(WARNING, "different ambient file wavelength sampling");
686 >        }
687   }
688  
689  
# Line 903 | Line 692 | avsave(                                /* insert and save an ambient value */
692          AMBVAL  *av
693   )
694   {
695 <        avinsert(avstore(av));
695 >        avstore(av);
696          if (ambfp == NULL)
697                  return;
698          if (writambval(av, ambfp) < 0)
# Line 918 | Line 707 | writerr:
707  
708  
709   static AMBVAL *
710 < avstore(                                /* allocate memory and store aval */
710 > avstore(                                /* allocate memory and save aval */
711          AMBVAL  *aval
712   )
713   {
# Line 927 | Line 716 | avstore(                               /* allocate memory and store aval */
716  
717          if ((av = newambval()) == NULL)
718                  error(SYSTEM, "out of memory in avstore");
719 <        *av = *aval;
931 <        av->latick = ambclock;
719 >        memcpy(av, aval, AVSIZE);       /* AVSIZE <= sizeof(AMBVAL) */
720          av->next = NULL;
721          nambvals++;
722 <        d = bright(av->val);
722 >        d = pbright(av->val);
723          if (d > FTINY) {                /* add to log sum for averaging */
724                  avsum += log(d);
725                  navsum++;
726          }
727 +        avinsert(av);                   /* insert in our cache tree */
728          return(av);
729   }
730  
# Line 962 | Line 751 | newambtree(void)                               /* allocate 8 ambient tree structs
751          }
752          atp = atfreelist;
753          atfreelist = atp->kid;
754 <        memset((char *)atp, '\0', 8*sizeof(AMBTREE));
754 >        memset(atp, 0, 8*sizeof(AMBTREE));
755          return(atp);
756   }
757  
# Line 988 | Line 777 | unloadatree(                   /* unload an ambient value tree */
777                                          /* transfer values at this node */
778          for (av = at->alist; av != NULL; av = at->alist) {
779                  at->alist = av->next;
780 +                av->next = NULL;
781                  (*f)(av);
782          }
783          if (at->kid == NULL)
# Line 999 | Line 789 | unloadatree(                   /* unload an ambient value tree */
789   }
790  
791  
1002 static struct avl {
1003        AMBVAL  *p;
1004        unsigned long   t;
1005 }       *avlist1;                       /* ambient value list with ticks */
1006 static AMBVAL   **avlist2;              /* memory positions for sorting */
1007 static int      i_avlist;               /* index for lists */
1008
1009 static int alatcmp(const void *av1, const void *av2);
1010
792   static void
793   avfree(AMBVAL *av)
794   {
795          free(av);
796   }
797  
1017 static void
1018 av2list(
1019        AMBVAL *av
1020 )
1021 {
1022 #ifdef DEBUG
1023        if (i_avlist >= nambvals)
1024                error(CONSISTENCY, "too many ambient values in av2list1");
1025 #endif
1026        avlist1[i_avlist].p = avlist2[i_avlist] = (AMBVAL*)av;
1027        avlist1[i_avlist++].t = av->latick;
1028 }
798  
1030
1031 static int
1032 alatcmp(                        /* compare ambient values for MRA */
1033        const void *av1,
1034        const void *av2
1035 )
1036 {
1037        long  lc = ((struct avl *)av2)->t - ((struct avl *)av1)->t;
1038        return(lc<0 ? -1 : lc>0 ? 1 : 0);
1039 }
1040
1041
1042 /* GW NOTE 2002/10/3:
1043 * I used to compare AMBVAL pointers, but found that this was the
1044 * cause of a serious consistency error with gcc, since the optimizer
1045 * uses some dangerous trick in pointer subtraction that
1046 * assumes pointers differ by exact struct size increments.
1047 */
1048 static int
1049 aposcmp(                        /* compare ambient value positions */
1050        const void      *avp1,
1051        const void      *avp2
1052 )
1053 {
1054        long    diff = *(char * const *)avp1 - *(char * const *)avp2;
1055        if (diff < 0)
1056                return(-1);
1057        return(diff > 0);
1058 }
1059
1060
1061 static int
1062 avlmemi(                                /* find list position from address */
1063        AMBVAL  *avaddr
1064 )
1065 {
1066        AMBVAL  **avlpp;
1067
1068        avlpp = (AMBVAL **)bsearch((char *)&avaddr, (char *)avlist2,
1069                        nambvals, sizeof(AMBVAL *), &aposcmp);
1070        if (avlpp == NULL)
1071                error(CONSISTENCY, "address not found in avlmemi");
1072        return(avlpp - avlist2);
1073 }
1074
1075
799   static void
800 < sortambvals(                    /* resort ambient values */
1078 <        int     always
1079 < )
800 > sortambvals(void)                       /* resort ambient values */
801   {
802 <        AMBTREE  oldatrunk;
1082 <        AMBVAL  tav, *tap, *pnext;
1083 <        int     i, j;
1084 <                                        /* see if it's time yet */
1085 <        if (!always && (ambclock++ < lastsort+sortintvl ||
1086 <                        nambvals < SORT_THRESH))
1087 <                return;
1088 <        /*
1089 <         * The idea here is to minimize memory thrashing
1090 <         * in VM systems by improving reference locality.
1091 <         * We do this by periodically sorting our stored ambient
1092 <         * values in memory in order of most recently to least
1093 <         * recently accessed.  This ordering was chosen so that new
1094 <         * ambient values (which tend to be less important) go into
1095 <         * higher memory with the infrequently accessed values.
1096 <         *      Since we expect our values to need sorting less
1097 <         * frequently as the process continues, we double our
1098 <         * waiting interval after each call.
1099 <         *      This routine is also called by setambacc() with
1100 <         * the "always" parameter set to 1 so that the ambient
1101 <         * tree will be rebuilt with the new accuracy parameter.
1102 <         */
1103 <        if (tracktime) {                /* allocate pointer arrays to sort */
1104 <                avlist2 = (AMBVAL **)malloc(nambvals*sizeof(AMBVAL *));
1105 <                avlist1 = (struct avl *)malloc(nambvals*sizeof(struct avl));
1106 <        } else {
1107 <                avlist2 = NULL;
1108 <                avlist1 = NULL;
1109 <        }
1110 <        if (avlist1 == NULL) {          /* no time tracking -- rebuild tree? */
1111 <                if (avlist2 != NULL)
1112 <                        free((void *)avlist2);
1113 <                if (always) {           /* rebuild without sorting */
1114 <                        oldatrunk = atrunk;
1115 <                        atrunk.alist = NULL;
1116 <                        atrunk.kid = NULL;
1117 <                        unloadatree(&oldatrunk, &avinsert);
1118 <                }
1119 <        } else {                        /* sort memory by last access time */
1120 <                /*
1121 <                 * Sorting memory is tricky because it isn't contiguous.
1122 <                 * We have to sort an array of pointers by MRA and also
1123 <                 * by memory position.  We then copy values in "loops"
1124 <                 * to minimize memory hits.  Nevertheless, we will visit
1125 <                 * everyone at least twice, and this is an expensive process
1126 <                 * when we're thrashing, which is when we need to do it.
1127 <                 */
1128 < #ifdef DEBUG
1129 <                sprintf(errmsg, "sorting %u ambient values at ambclock=%lu...",
1130 <                                nambvals, ambclock);
1131 <                eputs(errmsg);
1132 < #endif
1133 <                i_avlist = 0;
1134 <                unloadatree(&atrunk, &av2list); /* empty current tree */
1135 < #ifdef DEBUG
1136 <                if (i_avlist < nambvals)
1137 <                        error(CONSISTENCY, "missing ambient values in sortambvals");
1138 < #endif
1139 <                qsort((char *)avlist1, nambvals, sizeof(struct avl), &alatcmp);
1140 <                qsort((char *)avlist2, nambvals, sizeof(AMBVAL *), &aposcmp);
1141 <                for (i = 0; i < nambvals; i++) {
1142 <                        if (avlist1[i].p == NULL)
1143 <                                continue;
1144 <                        tap = avlist2[i];
1145 <                        tav = *tap;
1146 <                        for (j = i; (pnext = avlist1[j].p) != tap;
1147 <                                        j = avlmemi(pnext)) {
1148 <                                *(avlist2[j]) = *pnext;
1149 <                                avinsert(avlist2[j]);
1150 <                                avlist1[j].p = NULL;
1151 <                        }
1152 <                        *(avlist2[j]) = tav;
1153 <                        avinsert(avlist2[j]);
1154 <                        avlist1[j].p = NULL;
1155 <                }
1156 <                free((void *)avlist1);
1157 <                free((void *)avlist2);
1158 <                                                /* compute new sort interval */
1159 <                sortintvl = ambclock - lastsort;
1160 <                if (sortintvl >= MAX_SORT_INTVL/2)
1161 <                        sortintvl = MAX_SORT_INTVL;
1162 <                else
1163 <                        sortintvl <<= 1;        /* wait twice as long next */
1164 < #ifdef DEBUG
1165 <                eputs("done\n");
1166 < #endif
1167 <        }
1168 <        if (ambclock >= MAXACLOCK)
1169 <                ambclock = MAXACLOCK/2;
1170 <        lastsort = ambclock;
1171 < }
802 >        AMBTREE  oldatrunk = atrunk;
803  
804 <
805 < #ifdef  F_SETLKW
806 <
1176 < static void
1177 < aflock(                 /* lock/unlock ambient file */
1178 <        int  typ
1179 < )
1180 < {
1181 <        static struct flock  fls;       /* static so initialized to zeroes */
1182 <
1183 <        if (typ == fls.l_type)          /* already called? */
1184 <                return;
1185 <        fls.l_type = typ;
1186 <        if (fcntl(fileno(ambfp), F_SETLKW, &fls) < 0)
1187 <                error(SYSTEM, "cannot (un)lock ambient file");
804 >        atrunk.alist = NULL;
805 >        atrunk.kid = NULL;
806 >        unloadatree(&oldatrunk, avinsert);
807   }
808  
809  
810   int
811   ambsync(void)                   /* synchronize ambient file */
812   {
813 <        long  flen;
813 >        off_t   newpos;
814 >        int     n;
815          AMBVAL  avs;
1196        int  n;
816  
817          if (ambfp == NULL)      /* no ambient file? */
818                  return(0);
819 <                                /* gain appropriate access */
820 <        aflock(nunflshed ? F_WRLCK : F_RDLCK);
821 <                                /* see if file has grown */
822 <        if ((flen = lseek(fileno(ambfp), (off_t)0, SEEK_END)) < 0)
819 >
820 >        if (nunflshed > 0) {    /* append new values? */
821 >                if (fflush(ambfp) < 0)
822 >                        return(EOF);
823 >                newpos = lseek(fileno(ambfp), 0, SEEK_CUR);
824 >        } else
825 >                newpos = lseek(fileno(ambfp), 0, SEEK_END);
826 >
827 >        if (newpos < 0)
828                  goto seekerr;
829 <        if ((n = flen - lastpos) > 0) {         /* file has grown */
830 <                if (ambinp == NULL) {           /* use duplicate filedes */
831 <                        ambinp = fdopen(dup(fileno(ambfp)), "r");
832 <                        if (ambinp == NULL)
833 <                                error(SYSTEM, "fdopen failed in ambsync");
829 >                                /* how many others added? */
830 >        n = (newpos - lastpos)/AMBVALSIZ - nunflshed;
831 >        nunflshed = 0;
832 >        if (n <= 0) {           /* no one helping this time? */
833 >                lastpos = newpos;
834 >                return(0);
835 >        }
836 >        if (ambinp == NULL) {   /* else need to open for input? */
837 >                ambinp = fopen(ambfile, "r");
838 >                if (ambinp == NULL) {
839 >                        sprintf(errmsg, "cannot reopen ambient file \"%s\"",
840 >                                        ambfile);
841 >                        error(SYSTEM, errmsg);
842                  }
843 <                if (fseek(ambinp, lastpos, SEEK_SET) < 0)
1212 <                        goto seekerr;
1213 <                while (n >= AMBVALSIZ) {        /* load contributed values */
1214 <                        if (!readambval(&avs, ambinp)) {
1215 <                                sprintf(errmsg,
1216 <                        "ambient file \"%s\" corrupted near character %ld",
1217 <                                                ambfile, flen - n);
1218 <                                error(WARNING, errmsg);
1219 <                                break;
1220 <                        }
1221 <                        avinsert(avstore(&avs));
1222 <                        n -= AMBVALSIZ;
1223 <                }
1224 <                lastpos = flen - n;
1225 <                /*** seek always as safety measure
1226 <                if (n) ***/                     /* alignment */
1227 <                        if (lseek(fileno(ambfp), (off_t)lastpos, SEEK_SET) < 0)
1228 <                                goto seekerr;
843 >                SET_FILE_BINARY(ambinp);
844          }
845 <        n = fflush(ambfp);                      /* calls write() at last */
846 <        if (n != EOF)
1232 <                lastpos += (long)nunflshed*AMBVALSIZ;
1233 <        else if ((lastpos = lseek(fileno(ambfp), (off_t)0, SEEK_CUR)) < 0)
845 >                                /* read from last endpoint */
846 >        if (fseeko(ambinp, lastpos, SEEK_SET) < 0)
847                  goto seekerr;
848 <                
849 <        aflock(F_UNLCK);                        /* release file */
850 <        nunflshed = 0;
851 <        return(n);
848 >        while (n-- > 0) {       /* load new contributed values */
849 >                if (!readambval(&avs, ambinp)) {
850 >                        sprintf(errmsg, "ambient file \"%s\" corrupted",
851 >                                        ambfile);
852 >                        error(WARNING, errmsg);
853 >                        break;
854 >                }
855 >                avstore(&avs);
856 >        }
857 >        lastpos = newpos;       /* update endpoint */
858 >        return(0);
859   seekerr:
860          error(SYSTEM, "seek failed in ambsync");
861 <        return -1; /* pro forma return */
861 >        return(EOF);    /* pro forma return */
862   }
1243
1244 #else   /* ! F_SETLKW */
1245
1246 int
1247 ambsync(void)                   /* flush ambient file */
1248 {
1249        if (ambfp == NULL)
1250                return(0);
1251        nunflshed = 0;
1252        return(fflush(ambfp));
1253 }
1254
1255 #endif  /* ! F_SETLKW */

Diff Legend

Removed lines
+ Added lines
< Changed lines
> Changed lines