ViewVC Help
View File | Revision Log | Show Annotations | Download File | Root Listing
root/radiance/ray/src/util/rtcontrib.c
(Generate patch)

Comparing ray/src/util/rtcontrib.c (file contents):
Revision 1.1 by greg, Wed May 25 04:45:22 2005 UTC vs.
Revision 1.55 by greg, Wed Dec 9 21:43:35 2009 UTC

# Line 5 | Line 5 | static const char RCSid[] = "$Id$";
5   * Gather rtrace output to compute contributions from particular sources
6   */
7  
8 + #include  "standard.h"
9   #include  <ctype.h>
10 < #include  "rtio.h"
10 < #include  "rterror.h"
10 > #include  <signal.h>
11   #include  "platform.h"
12   #include  "rtprocess.h"
13   #include  "selcall.h"
# Line 16 | Line 16 | static const char RCSid[] = "$Id$";
16   #include  "lookup.h"
17   #include  "calcomp.h"
18  
19 < #ifdef getc_unlocked            /* avoid horrendous overhead of flockfile */
20 < #undef getc
21 < #undef putc
22 < #define getc    getc_unlocked
23 < #define putc    putc_unlocked
24 < #define ferror  ferror_unlocked
19 > #ifndef MAXMODLIST
20 > #define MAXMODLIST      1024            /* maximum modifiers we'll track */
21   #endif
22  
27 #define MAXMODLIST      1024            /* maximum modifiers we'll track */
28
23   int     treebufsiz = BUFSIZ;            /* current tree buffer size */
24  
25 + typedef double  DCOLOR[3];              /* double-precision color */
26 +
27   /*
28 < * The modcont structure is used to accumulate ray contributions
28 > * The MODCONT structure is used to accumulate ray contributions
29   * for a particular modifier, which may be subdivided into bins
30 < * if binv is non-NULL.  If outspec contains a %s in it, this will
30 > * if binv evaluates > 0.  If outspec contains a %s in it, this will
31   * be replaced with the modifier name.  If outspec contains a %d in it,
32   * this will be used to create one output file per bin, otherwise all bins
33   * will be written to the same file, in order.  If the global outfmt
# Line 43 | Line 39 | typedef struct {
39          const char      *modname;       /* modifier name */
40          EPNODE          *binv;          /* bin value expression */
41          int             nbins;          /* number of accumulation bins */
42 <        COLOR           cbin[1];        /* contribution bins (extends struct) */
42 >        DCOLOR          cbin[1];        /* contribution bins (extends struct) */
43   } MODCONT;                      /* modifier contribution */
44  
45   static void mcfree(void *p) { epfree((*(MODCONT *)p).binv); free(p); }
46  
47   LUTAB   modconttab = LU_SINIT(NULL,mcfree);     /* modifier lookup table */
48  
49 < /* close output stream */
50 < static void closefile(void *p) { fclose((FILE *)p); }
49 > /*
50 > * The STREAMOUT structure holds an open FILE pointer and a count of
51 > * the number of RGB triplets per record, or 0 if unknown.
52 > */
53 > typedef struct {
54 >        FILE            *ofp;           /* output file pointer */
55 >        int             outpipe;        /* output is to a pipe */
56 >        int             reclen;         /* triplets/record */
57 >        int             xr, yr;         /* output resolution for picture */
58 > } STREAMOUT;
59  
60 < LUTAB   ofiletab = LU_SINIT(free,closefile);    /* output file table */
60 > /* close output stream and free record */
61 > static void
62 > closestream(void *p)
63 > {
64 >        STREAMOUT       *sop = (STREAMOUT *)p;
65 >        int             status;
66 >        if (sop->outpipe)
67 >                status = pclose(sop->ofp);
68 >        else
69 >                status = fclose(sop->ofp);
70 >        if (status)
71 >                error(SYSTEM, "error closing output stream");
72 >        free(p);
73 > }
74  
75 < FILE *getofile(const char *ospec, const char *mname, int bn);
75 > LUTAB   ofiletab = LU_SINIT(free,closestream);  /* output file table */
76  
77 + #define OF_MODIFIER     01
78 + #define OF_BIN          02
79 +
80 + STREAMOUT *getostream(const char *ospec, const char *mname, int bn, int noopen);
81 + int ofname(char *oname, const char *ospec, const char *mname, int bn);
82 + void printheader(FILE *fout, const char *info);
83 + void printresolu(FILE *fout, int xr, int yr);
84 +
85   /*
86   * The rcont structure is used to manage i/o with a particular
87   * rtrace child process.  Input is passed unchanged from stdin,
# Line 66 | Line 91 | FILE *getofile(const char *ospec, const char *mname, i
91   struct rtproc {
92          struct rtproc   *next;          /* next in list of processes */
93          SUBPROC         pd;             /* rtrace pipe descriptors */
94 <        unsigned long   raynum;         /* ray number for this buffer */
95 <        int             bsiz;           /* rtrace buffer length */
96 <        char            *buf;           /* rtrace i/o buffer */
97 <        char            *bpos;          /* current buffer position */
98 < };                              /* rtrace process */
94 >        unsigned long   raynum;         /* ray number for this tree */
95 >        int             bsiz;           /* ray tree buffer length */
96 >        char            *buf;           /* ray tree buffer */
97 >        int             nbr;            /* number of bytes from rtrace */
98 > };                              /* rtrace process buffer */
99  
100                                          /* rtrace command and defaults */
101 < char            *rtargv[256] = { "rtrace", "-dj", ".5", "-dr", "3",
102 <                                "-ab", "1", "-ad", "512", };
101 > char            *rtargv[256+2*MAXMODLIST] = { "rtrace",
102 >                                "-dj", ".9", "-dr", "3",
103 >                                "-ab", "1", "-ad", "350", };
104 >
105   int  rtargc = 9;
106                                          /* overriding rtrace options */
107 < char            *myrtopts[] = { "-o-TmWdp", "-h-",
108 <                                "-x", "1", "-y", "0", NULL };
107 > char            *myrtopts[] = { "-h-", "-x", "1", "-y", "0",
108 >                                "-dt", "0", "-as", "0", "-aa", "0", NULL };
109  
110 + #define RTCOEFF         "-o~~TmWdp"     /* compute coefficients only */
111 + #define RTCONTRIB       "-o~~TmVdp"     /* compute ray contributions */
112 +
113   struct rtproc   rt0;                    /* head of rtrace process list */
114  
115   struct rtproc   *rt_unproc = NULL;      /* unprocessed ray trees */
116  
117 < char    persistfn[] = "pfXXXXXX";       /* persist file name */
118 < char    fmt[8];                         /* rtrace i/o format */
117 > #define PERSIST_NONE    0               /* no persist file */
118 > #define PERSIST_SINGLE  1               /* user set -P persist */
119 > #define PERSIST_PARALL  2               /* user set -PP persist */
120 > #define PERSIST_OURS    3               /* -PP persist belongs to us */
121 > int     persist_state = PERSIST_NONE;   /* persist file state */
122 > char    persistfn[] = "pfXXXXXX";       /* our persist file name, if set */
123  
124   int             gargc;                  /* global argc */
125   char            **gargv;                /* global argv */
# Line 97 | Line 131 | int            inpfmt = 'a';           /* input format */
131   int             outfmt = 'a';           /* output format */
132  
133   int             header = 1;             /* output header? */
134 + int             force_open = 0;         /* truncate existing output? */
135 + int             recover = 0;            /* recover previous output? */
136 + int             accumulate = 1;         /* input rays per output record */
137   int             xres = 0;               /* horiz. output resolution */
138   int             yres = 0;               /* vert. output resolution */
139  
140 < long            raysleft;               /* number of rays left to trace */
140 > int             account;                /* current accumulation count */
141 > unsigned long   raysleft;               /* number of rays left to trace */
142   long            waitflush;              /* how long until next flush */
143  
144   unsigned long   lastray = 0;            /* last ray number sent */
145   unsigned long   lastdone = 0;           /* last ray processed */
146  
147 + int             using_stdout = 0;       /* are we using stdout? */
148 +
149   const char      *modname[MAXMODLIST];   /* ordered modifier name list */
150   int             nmods = 0;              /* number of modifiers */
151  
152 < MODCONT *addmodifier(char *modn, char *outf, char *binv);
152 > #define queue_length()          (lastray - lastdone)
153  
154 < int done_rprocs(struct rtproc *rtp);
154 > MODCONT *growmodifier(MODCONT *mp, int nb);
155 > MODCONT *addmodifier(char *modn, char *outf, char *binv, int bincnt);
156 > void addmodfile(char *fname, char *outf, char *binv, int bincnt);
157 >
158   void init(int np);
159 < void tracecontribs(FILE *fp);
159 > int done_rprocs(struct rtproc *rtp);
160 > void reload_output(void);
161 > void recover_output(FILE *fin);
162 > void trace_contribs(FILE *fin);
163   struct rtproc *wait_rproc(void);
164   struct rtproc *get_rproc(void);
165 < void process_rays(struct rtproc *rtp);
165 > void queue_raytree(struct rtproc *rtp);
166 > void process_queue(void);
167  
168 < void add_contrib(const char *modn, float rayval[7]);
169 < void done_contrib(void);
168 > void put_contrib(const DCOLOR cnt, FILE *fout);
169 > void add_contrib(const char *modn);
170 > void done_contrib(int navg);
171  
172 + /* return number of open rtrace processes */
173 + static int
174 + nrtprocs(void)
175 + {
176 +        int     nrtp = 0;
177 +        struct rtproc   *rtp;
178 +
179 +        for (rtp = &rt0; rtp != NULL; rtp = rtp->next)
180 +                nrtp += rtp->pd.running;
181 +        return(nrtp);
182 + }
183 +
184   /* set input/output format */
185   static void
186   setformat(const char *fmt)
187   {
188          switch (fmt[0]) {
129        case 'a':
189          case 'f':
190          case 'd':
191 +                SET_FILE_BINARY(stdin);
192 +                /* fall through */
193 +        case 'a':
194                  inpfmt = fmt[0];
195                  break;
196          default:
# Line 158 | Line 220 | fmterr:
220   int
221   main(int argc, char *argv[])
222   {
223 +        int     contrib = 0;
224          int     nprocs = 1;
225          char    *curout = NULL;
226          char    *binval = NULL;
227 <        int     i;
228 <                                /* set global argument list */
229 <        gargc = argc;
227 >        int     bincnt = 0;
228 >        char    fmt[8];
229 >        int     i, j;
230 >                                /* need at least one argument */
231 >        if (argc < 2) {
232 >                fprintf(stderr,
233 > "Usage: %s [-n nprocs][-V][-r][-e expr][-f source][-o ospec][-b binv] {-m mod | -M file} [rtrace options] octree\n",
234 >                        argv[0]);
235 >                exit(1);
236 >        }
237 >                                /* global program name */
238          gargv = argv;
239 <                                /* set up calcomp functions */
239 >                                /* initialize calcomp routines */
240          esupport |= E_VARIABLE|E_FUNCTION|E_INCHAN|E_RCONST|E_REDEFW;
241          esupport &= ~(E_OUTCHAN);
242 +        varset("PI", ':', PI);
243                                  /* get our options */
244 <        for (i = 1; i < argc && argv[i][0] == '-'; i++) {
245 <                switch (argv[i][1]) {
246 <                case 'n':                       /* number of processes */
247 <                        if (argv[i][2] || i >= argc-1) break;
248 <                        nprocs = atoi(argv[++i]);
249 <                        if (nprocs <= 0)
250 <                                error(USER, "illegal number of processes");
251 <                        continue;
252 <                case 'h':                       /* output header? */
253 <                        switch (argv[i][2]) {
254 <                        case '\0':
255 <                                header = !header;
244 >        for (i = 1; i < argc-1; i++) {
245 >                                                /* expand arguments */
246 >                while ((j = expandarg(&argc, &argv, i)) > 0)
247 >                        ;
248 >                if (j < 0) {
249 >                        fprintf(stderr, "%s: cannot expand '%s'\n",
250 >                                        argv[0], argv[i]);
251 >                        exit(1);
252 >                }
253 >                if (argv[i][0] == '-')
254 >                        switch (argv[i][1]) {
255 >                        case 'n':               /* number of processes */
256 >                                if (argv[i][2] || i >= argc-2) break;
257 >                                nprocs = atoi(argv[++i]);
258 >                                if (nprocs <= 0)
259 >                                        error(USER, "illegal number of processes");
260                                  continue;
261 <                        case '+': case '1': case 'T': case 't':
262 <                                header = 1;
261 >                        case 'V':               /* output contributions */
262 >                                switch (argv[i][2]) {
263 >                                case '\0':
264 >                                        contrib = !contrib;
265 >                                        continue;
266 >                                case '+': case '1':
267 >                                case 'T': case 't':
268 >                                case 'Y': case 'y':
269 >                                        contrib = 1;
270 >                                        continue;
271 >                                case '-': case '0':
272 >                                case 'F': case 'f':
273 >                                case 'N': case 'n':
274 >                                        contrib = 0;
275 >                                        continue;
276 >                                }
277 >                                break;
278 >                        case 'c':               /* input rays per output */
279 >                                if (argv[i][2] || i >= argc-2) break;
280 >                                accumulate = atoi(argv[++i]);
281                                  continue;
282 <                        case '-': case '0': case 'F': case 'f':
283 <                                header = 0;
282 >                        case 'r':               /* recover output */
283 >                                if (argv[i][2]) break;
284 >                                recover = 1;
285                                  continue;
286 <                        }
287 <                        break;
288 <                case 'f':                       /* file or i/o format */
289 <                        if (!argv[i][2]) {
290 <                                if (i >= argc-1) break;
291 <                                fcompile(argv[++i]);
286 >                        case 'h':               /* output header? */
287 >                                switch (argv[i][2]) {
288 >                                case '\0':
289 >                                        header = !header;
290 >                                        continue;
291 >                                case '+': case '1':
292 >                                case 'T': case 't':
293 >                                case 'Y': case 'y':
294 >                                        header = 1;
295 >                                        continue;
296 >                                case '-': case '0':
297 >                                case 'F': case 'f':
298 >                                case 'N': case 'n':
299 >                                        header = 0;
300 >                                        continue;
301 >                                }
302 >                                break;
303 >                        case 'f':               /* file or force or format */
304 >                                if (!argv[i][2]) {
305 >                                        char    *fpath;
306 >                                        if (i >= argc-2) break;
307 >                                        fpath = getpath(argv[++i],
308 >                                                        getrlibpath(), R_OK);
309 >                                        if (fpath == NULL) {
310 >                                                sprintf(errmsg,
311 >                                                        "cannot find file '%s'",
312 >                                                                argv[i]);
313 >                                                error(USER, errmsg);
314 >                                        }
315 >                                        fcompile(fpath);
316 >                                        continue;
317 >                                }
318 >                                if (argv[i][2] == 'o') {
319 >                                        force_open = 1;
320 >                                        continue;
321 >                                }
322 >                                setformat(argv[i]+2);
323                                  continue;
324 +                        case 'e':               /* expression */
325 +                                if (argv[i][2] || i >= argc-2) break;
326 +                                scompile(argv[++i], NULL, 0);
327 +                                continue;
328 +                        case 'o':               /* output file spec. */
329 +                                if (argv[i][2] || i >= argc-2) break;
330 +                                curout = argv[++i];
331 +                                continue;
332 +                        case 'x':               /* horiz. output resolution */
333 +                                if (argv[i][2] || i >= argc-2) break;
334 +                                xres = atoi(argv[++i]);
335 +                                continue;
336 +                        case 'y':               /* vert. output resolution */
337 +                                if (argv[i][2] || i >= argc-2) break;
338 +                                yres = atoi(argv[++i]);
339 +                                continue;
340 +                        case 'b':               /* bin expression/count */
341 +                                if (i >= argc-2) break;
342 +                                if (argv[i][2] == 'n') {
343 +                                        bincnt = (int)(eval(argv[++i]) + .5);
344 +                                        continue;
345 +                                }
346 +                                if (argv[i][2]) break;
347 +                                binval = argv[++i];
348 +                                continue;
349 +                        case 'm':               /* modifier name */
350 +                                if (argv[i][2] || i >= argc-2) break;
351 +                                rtargv[rtargc++] = "-ti";
352 +                                rtargv[rtargc++] = argv[++i];
353 +                                addmodifier(argv[i], curout, binval, bincnt);
354 +                                continue;
355 +                        case 'M':               /* modifier file */
356 +                                if (argv[i][2] || i >= argc-2) break;
357 +                                rtargv[rtargc++] = "-tI";
358 +                                rtargv[rtargc++] = argv[++i];
359 +                                addmodfile(argv[i], curout, binval, bincnt);
360 +                                continue;
361 +                        case 'P':               /* persist file */
362 +                                if (i >= argc-2) break;
363 +                                persist_state = (argv[i][2] == 'P') ?
364 +                                                PERSIST_PARALL : PERSIST_SINGLE;
365 +                                rtargv[rtargc++] = argv[i];
366 +                                rtargv[rtargc++] = argv[++i];
367 +                                continue;
368                          }
369 <                        setformat(argv[i]+2);
200 <                        continue;
201 <                case 'e':                       /* expression */
202 <                        if (argv[i][2] || i >= argc-1) break;
203 <                        scompile(argv[++i], NULL, 0);
204 <                        continue;
205 <                case 'o':                       /* output file spec. */
206 <                        if (argv[i][2] || i >= argc-1) break;
207 <                        curout = argv[++i];
208 <                        continue;
209 <                case 'x':                       /* horiz. output resolution */
210 <                        if (argv[i][2] || i >= argc-1) break;
211 <                        xres = atoi(argv[++i]);
212 <                        continue;
213 <                case 'y':                       /* vert. output resolution */
214 <                        if (argv[i][2] || i >= argc-1) break;
215 <                        yres = atoi(argv[++i]);
216 <                        continue;
217 <                case 'l':                       /* limit distance? */
218 <                        if (argv[i][2] != 'd') break;
219 <                        rtargv[rtargc++] = argv[i];
220 <                        continue;
221 <                case 'b':                       /* bin expression */
222 <                        if (argv[i][2] || i >= argc-1) break;
223 <                        binval = argv[++i];
224 <                        continue;
225 <                case 'm':                       /* modifier name */
226 <                        if (argv[i][2] || i >= argc-1) break;
227 <                        rtargv[rtargc++] = "-ti";
228 <                        rtargv[rtargc++] = argv[++i];
229 <                        addmodifier(argv[i], curout, binval);
230 <                        continue;
231 <                }
232 <                break;          /* break into rtrace options */
369 >                rtargv[rtargc++] = argv[i];     /* assume rtrace option */
370          }
371 <        for ( ; i < argc; i++)  /* transfer rtrace-specific options */
372 <                rtargv[rtargc++] = argv[i];
373 <        if (!strcmp(rtargv[--rtargc], "-defaults"))
374 <                nprocs = 0;
238 <        if (nprocs > 1) {       /* add persist file if parallel invocation */
239 <                rtargv[rtargc++] = "-PP";
240 <                rtargv[rtargc++] = mktemp(persistfn);
241 <        }
371 >        if (accumulate <= 0)    /* no output flushing for single record */
372 >                xres = yres = 0;
373 >                                /* set global argument list */
374 >        gargc = argc; gargv = argv;
375                                  /* add "mandatory" rtrace settings */
376 <        for (i = 0; myrtopts[i] != NULL; i++)
377 <                rtargv[rtargc++] = myrtopts[i];
378 <        if (!nprocs) {          /* just asking for defaults? */
376 >        for (j = 0; myrtopts[j] != NULL; j++)
377 >                rtargv[rtargc++] = myrtopts[j];
378 >        rtargv[rtargc++] = contrib ? RTCONTRIB : RTCOEFF;
379 >                                /* just asking for defaults? */
380 >        if (!strcmp(argv[i], "-defaults")) {
381                  char    sxres[16], syres[16];
382                  char    *rtpath;
383 <                printf("-n  1\t\t\t\t# number of processes\n", nprocs);
383 >                printf("-n %-2d\t\t\t\t# number of processes\n", nprocs);
384 >                printf("-c %-5d\t\t\t# accumulated rays per record\n",
385 >                                accumulate);
386 >                printf("-V%c\t\t\t\t# output %s\n", contrib ? '+' : '-',
387 >                                contrib ? "contributions" : "coefficients");
388                  fflush(stdout);                 /* report OUR options */
389                  rtargv[rtargc++] = header ? "-h+" : "-h-";
390                  sprintf(fmt, "-f%c%c", inpfmt, outfmt);
# Line 256 | Line 395 | main(int argc, char *argv[])
395                  rtargv[rtargc++] = "-y";
396                  sprintf(syres, "%d", yres);
397                  rtargv[rtargc++] = syres;
259                rtargv[rtargc++] = "-oW";
398                  rtargv[rtargc++] = "-defaults";
399                  rtargv[rtargc] = NULL;
400                  rtpath = getpath(rtargv[0], getenv("PATH"), X_OK);
# Line 269 | Line 407 | main(int argc, char *argv[])
407                  perror(rtpath); /* execv() should not return */
408                  exit(1);
409          }
410 <        if (!nmods)
411 <                error(USER, "No modifiers specified");
412 <        if (argc < 2 || argv[argc-1][0] == '-')
413 <                error(USER, "missing octree argument");
410 >        if (nprocs > 1) {       /* add persist file if parallel */
411 >                if (persist_state == PERSIST_SINGLE)
412 >                        error(USER, "use -PP option for multiple processes");
413 >                if (persist_state == PERSIST_NONE) {
414 >                        rtargv[rtargc++] = "-PP";
415 >                        rtargv[rtargc++] = mktemp(persistfn);
416 >                        persist_state = PERSIST_OURS;
417 >                }
418 >        }
419                                  /* add format string */
420          sprintf(fmt, "-f%cf", inpfmt);
421          rtargv[rtargc++] = fmt;
422                                  /* octree argument is last */
423 <        rtargv[rtargc++] = octree = argv[argc-1];
423 >        if (i <= 0 || i != argc-1 || argv[i][0] == '-')
424 >                error(USER, "missing octree argument");
425 >        rtargv[rtargc++] = octree = argv[i];
426          rtargv[rtargc] = NULL;
427 <                                /* start rtrace & sum contributions */
427 >                                /* start rtrace & recover if requested */
428          init(nprocs);
429 <        tracecontribs(stdin);
429 >                                /* compute contributions */
430 >        trace_contribs(stdin);
431 >                                /* clean up */
432          quit(0);
433   }
434  
435 + #ifndef SIGALRM
436 + #define SIGALRM SIGTERM
437 + #endif
438   /* kill persistent rtrace process */
439   static void
440   killpersist(void)
441   {
442          FILE    *fp = fopen(persistfn, "r");
443 <        int     pid;
443 >        RT_PID  pid;
444  
445          if (fp == NULL)
446                  return;
# Line 324 | Line 474 | quit(int status)
474   {
475          int     rtstat;
476  
477 <        if (rt0.next != NULL)           /* terminate persistent rtrace */
477 >        if (persist_state == PERSIST_OURS)  /* terminate waiting rtrace */
478                  killpersist();
479                                          /* clean up rtrace process(es) */
480          rtstat = done_rprocs(&rt0);
# Line 333 | Line 483 | quit(int status)
483          exit(status);                   /* flushes all output streams */
484   }
485  
486 < /* start rtrace and initialize buffers */
486 > /* start rtrace processes and initialize */
487   void
488   init(int np)
489   {
490          struct rtproc   *rtp;
491          int     i;
492          int     maxbytes;
493 +                                        /* make sure we have something to do */
494 +        if (!nmods)
495 +                error(USER, "No modifiers specified");
496                                          /* assign ray variables */
497          scompile("Dx=$1;Dy=$2;Dz=$3;", NULL, 0);
498          scompile("Px=$4;Py=$5;Pz=$6;", NULL, 0);
499                                          /* set up signal handling */
500 < #ifdef SIGPIPE /* not present on Windows */
500 >        signal(SIGINT, quit);
501 > #ifdef SIGHUP
502 >        signal(SIGHUP, quit);
503 > #endif
504 > #ifdef SIGTERM
505 >        signal(SIGTERM, quit);
506 > #endif
507 > #ifdef SIGPIPE
508          signal(SIGPIPE, quit);
509   #endif
510          rtp = &rt0;                     /* start rtrace process(es) */
# Line 360 | Line 520 | init(int np)
520                          error(SYSTEM, "cannot start rtrace process");
521                  if (maxbytes > treebufsiz)
522                          treebufsiz = maxbytes;
523 +                rtp->raynum = 0;
524                  rtp->bsiz = 0;
525                  rtp->buf = NULL;
526 <                rtp->raynum = 0;
526 >                rtp->nbr = 0;
527                  if (i == np)            /* last process? */
528                          break;
529                  if (i == 1)
# Line 375 | Line 536 | init(int np)
536          rtp->next = NULL;               /* terminate list */
537          if (yres > 0) {
538                  if (xres > 0)
539 <                        raysleft = xres*yres;
539 >                        raysleft = (unsigned long)xres*yres;
540                  else
541                          raysleft = yres;
542          } else
543                  raysleft = 0;
544 +        if ((account = accumulate) > 0)
545 +                raysleft *= accumulate;
546          waitflush = xres;
547 +        if (!recover)
548 +                return;
549 +                                        /* recover previous values */
550 +        if (accumulate <= 0)
551 +                reload_output();
552 +        else
553 +                recover_output(stdin);
554   }
555  
556 + /* grow modifier to accommodate more bins */
557 + MODCONT *
558 + growmodifier(MODCONT *mp, int nb)
559 + {
560 +        if (nb <= mp->nbins)
561 +                return mp;
562 +        mp = (MODCONT *)realloc(mp, sizeof(MODCONT) + sizeof(DCOLOR)*(nb-1));
563 +        if (mp == NULL)
564 +                error(SYSTEM, "out of memory in growmodifier");
565 +        memset(mp->cbin+mp->nbins, 0, sizeof(DCOLOR)*(nb-mp->nbins));
566 +        mp->nbins = nb;
567 +        return mp;
568 + }
569 +
570   /* add modifier to our list to track */
571   MODCONT *
572 < addmodifier(char *modn, char *outf, char *binv)
572 > addmodifier(char *modn, char *outf, char *binv, int bincnt)
573   {
574          LUENT   *lep = lu_find(&modconttab, modn);
575          MODCONT *mp;
576 +        int     i;
577          
578          if (lep->data != NULL) {
579                  sprintf(errmsg, "duplicate modifier '%s'", modn);
580                  error(USER, errmsg);
581          }
582          if (nmods >= MAXMODLIST)
583 <                error(USER, "too many modifiers");
583 >                error(INTERNAL, "too many modifiers");
584          modname[nmods++] = modn;        /* XXX assumes static string */
585          lep->key = modn;                /* XXX assumes static string */
586          mp = (MODCONT *)malloc(sizeof(MODCONT));
587          if (mp == NULL)
588                  error(SYSTEM, "out of memory in addmodifier");
404        lep->data = (char *)mp;
589          mp->outspec = outf;             /* XXX assumes static string */
590          mp->modname = modn;             /* XXX assumes static string */
591 <        if (binv != NULL)
592 <                mp->binv = eparse(binv);
593 <        else
594 <                mp->binv = eparse("0");
595 <        mp->nbins = 1;
591 >        if (binv == NULL)
592 >                binv = "0";             /* use single bin if unspecified */
593 >        mp->binv = eparse(binv);
594 >        if (mp->binv->type == NUM) {    /* check value if constant */
595 >                bincnt = (int)(evalue(mp->binv) + 1.5);
596 >                if (bincnt != 1) {
597 >                        sprintf(errmsg, "illegal non-zero constant for bin (%s)",
598 >                                        binv);
599 >                        error(USER, errmsg);
600 >                }
601 >        }
602 >        mp->nbins = 1;                  /* initialize results holder */
603          setcolor(mp->cbin[0], 0., 0., 0.);
604 +        if (bincnt > 1)
605 +                mp = growmodifier(mp, bincnt);
606 +        lep->data = (char *)mp;
607 +                                        /* allocate output streams */
608 +        for (i = bincnt; i-- > 0; )
609 +                getostream(mp->outspec, mp->modname, i, 1);
610          return mp;
611   }
612  
613 + /* add modifiers from a file list */
614 + void
615 + addmodfile(char *fname, char *outf, char *binv, int bincnt)
616 + {
617 +        char    *mname[MAXMODLIST];
618 +        int     i;
619 +                                        /* find the file & store strings */
620 +        if (wordfile(mname, getpath(fname, getrlibpath(), R_OK)) < 0) {
621 +                sprintf(errmsg, "cannot find modifier file '%s'", fname);
622 +                error(SYSTEM, errmsg);
623 +        }
624 +        for (i = 0; mname[i]; i++)      /* add each one */
625 +                addmodifier(mname[i], outf, binv, bincnt);
626 + }
627 +
628   /* put string to stderr */
629   void
630   eputs(char  *s)
# Line 428 | Line 640 | eputs(char  *s)
640          midline = s[strlen(s)-1] != '\n';
641   }
642  
643 + /* construct output file name and return flags whether modifier/bin present */
644 + int
645 + ofname(char *oname, const char *ospec, const char *mname, int bn)
646 + {
647 +        const char      *mnp = NULL;
648 +        const char      *bnp = NULL;
649 +        const char      *cp;
650 +        
651 +        if (ospec == NULL)
652 +                return -1;
653 +        for (cp = ospec; *cp; cp++)             /* check format position(s) */
654 +                if (*cp == '%') {
655 +                        do
656 +                                ++cp;
657 +                        while (isdigit(*cp));
658 +                        switch (*cp) {
659 +                        case '%':
660 +                                break;
661 +                        case 's':
662 +                                if (mnp != NULL)
663 +                                        return -1;
664 +                                mnp = cp;
665 +                                break;
666 +                        case 'd':
667 +                        case 'i':
668 +                        case 'o':
669 +                        case 'x':
670 +                        case 'X':
671 +                                if (bnp != NULL)
672 +                                        return -1;
673 +                                bnp = cp;
674 +                                break;
675 +                        default:
676 +                                return -1;
677 +                        }
678 +                }
679 +        if (mnp != NULL) {                      /* create file name */
680 +                if (bnp != NULL) {
681 +                        if (bnp > mnp)
682 +                                sprintf(oname, ospec, mname, bn);
683 +                        else
684 +                                sprintf(oname, ospec, bn, mname);
685 +                        return OF_MODIFIER|OF_BIN;
686 +                }
687 +                sprintf(oname, ospec, mname);
688 +                return OF_MODIFIER;
689 +        }
690 +        if (bnp != NULL) {
691 +                sprintf(oname, ospec, bn);
692 +                return OF_BIN;
693 +        }
694 +        strcpy(oname, ospec);
695 +        return 0;
696 + }
697 +
698   /* write header to the given output stream */
699   void
700 < printheader(FILE *fout)
700 > printheader(FILE *fout, const char *info)
701   {
702          extern char     VersionID[];
703          FILE            *fin = fopen(octree, "r");
704          
705          if (fin == NULL)
706                  quit(1);
707 <        getheader(fin, (gethfunc *)fputs, fout);        /* copy octree header */
707 >        checkheader(fin, "ignore", fout);       /* copy octree header */
708          fclose(fin);
709          printargs(gargc-1, gargv, fout);        /* add our command */
710          fprintf(fout, "SOFTWARE= %s\n", VersionID);
711          fputnow(fout);
712 +        if (info != NULL)                       /* add extra info if given */
713 +                fputs(info, fout);
714          switch (outfmt) {                       /* add output format */
715          case 'a':
716                  fputformat("ascii", fout);
# Line 457 | Line 726 | printheader(FILE *fout)
726                  break;
727          }
728          fputc('\n', fout);
729 <        if (xres > 0) {
730 <                if (yres > 0)                   /* resolution string */
731 <                        fprtresolu(xres, yres, fout);
729 > }
730 >
731 > /* write resolution string to given output stream */
732 > void
733 > printresolu(FILE *fout, int xr, int yr)
734 > {
735 >        if ((xr > 0) & (yr > 0))        /* resolution string */
736 >                fprtresolu(xr, yr, fout);
737 >        if (xres > 0)                   /* global flush flag */
738                  fflush(fout);
464        }
739   }
740  
741 < /* Get output file pointer (open and write header if new) */
742 < FILE *
743 < getofile(const char *ospec, const char *mname, int bn)
741 > /* Get output stream pointer (open and write header if new and noopen==0) */
742 > STREAMOUT *
743 > getostream(const char *ospec, const char *mname, int bn, int noopen)
744   {
745 <        static int      using_stdout = 0;
746 <        const char      *mnp = NULL;
747 <        const char      *bnp = NULL;
748 <        const char      *cp;
749 <        char            ofname[1024];
750 <        LUENT           *lep;
745 >        static const DCOLOR     nocontrib = BLKCOLOR;
746 >        static STREAMOUT        stdos;
747 >        int                     ofl;
748 >        char                    oname[1024];
749 >        LUENT                   *lep;
750 >        STREAMOUT               *sop;
751          
752          if (ospec == NULL) {                    /* use stdout? */
753 <                if (!using_stdout && header)
754 <                        printheader(stdout);
755 <                using_stdout = 1;
756 <                return stdout;
753 >                if (!noopen && !using_stdout) {
754 >                        if (outfmt != 'a')
755 >                                SET_FILE_BINARY(stdout);
756 >                        if (header)
757 >                                printheader(stdout, NULL);
758 >                        printresolu(stdout, xres, yres);
759 >                        stdos.xr = xres; stdos.yr = yres;
760 >                        using_stdout = 1;
761 >                }
762 >                stdos.ofp = stdout;
763 >                stdos.reclen += noopen;
764 >                return &stdos;
765          }
766 <        for (cp = ospec; *cp; cp++)             /* check format position(s) */
767 <                if (*cp == '%') {
768 <                        do
769 <                                ++cp;
770 <                        while (isdigit(*cp));
771 <                        switch (*cp) {
772 <                        case '%':
773 <                                break;
774 <                        case 's':
775 <                                if (mnp != NULL)
776 <                                        goto badspec;
777 <                                mnp = cp;
778 <                                break;
779 <                        case 'd':
780 <                                if (bnp != NULL)
781 <                                        goto badspec;
782 <                                bnp = cp;
783 <                                break;
784 <                        default:
785 <                                goto badspec;
766 >        ofl = ofname(oname, ospec, mname, bn);  /* get output name */
767 >        if (ofl < 0) {
768 >                sprintf(errmsg, "bad output format '%s'", ospec);
769 >                error(USER, errmsg);
770 >        }
771 >        lep = lu_find(&ofiletab, oname);        /* look it up */
772 >        if (lep->key == NULL)                   /* new entry */
773 >                lep->key = strcpy((char *)malloc(strlen(oname)+1), oname);
774 >        sop = (STREAMOUT *)lep->data;
775 >        if (sop == NULL) {                      /* allocate stream */
776 >                sop = (STREAMOUT *)malloc(sizeof(STREAMOUT));
777 >                if (sop == NULL)
778 >                        error(SYSTEM, "out of memory in getostream");
779 >                sop->outpipe = oname[0] == '!';
780 >                sop->reclen = 0;
781 >                sop->ofp = NULL;                /* open iff noopen==0 */
782 >                sop->xr = xres; sop->yr = yres;
783 >                lep->data = (char *)sop;
784 >                if (!sop->outpipe & !force_open & !recover &&
785 >                                access(oname, F_OK) == 0) {
786 >                        errno = EEXIST;         /* file exists */
787 >                        goto openerr;
788 >                }
789 >        }
790 >        if (!noopen && sop->ofp == NULL) {      /* open output stream */
791 >                long            i;
792 >                if (oname[0] == '!')            /* output to command */
793 >                        sop->ofp = popen(oname+1, "w");
794 >                else                            /* else open file */
795 >                        sop->ofp = fopen(oname, "w");
796 >                if (sop->ofp == NULL)
797 >                        goto openerr;
798 >                if (outfmt != 'a')
799 >                        SET_FILE_BINARY(sop->ofp);
800 >                if (header) {
801 >                        char    info[512];
802 >                        char    *cp = info;
803 >                        if (ofl & OF_MODIFIER || sop->reclen == 1) {
804 >                                sprintf(cp, "MODIFIER=%s\n", mname);
805 >                                while (*cp) ++cp;
806                          }
807 +                        if (ofl & OF_BIN) {
808 +                                sprintf(cp, "BIN=%d\n", bn);
809 +                                while (*cp) ++cp;
810 +                        }
811 +                        *cp = '\0';
812 +                        printheader(sop->ofp, info);
813                  }
814 <        if (mnp != NULL) {                      /* create file name */
815 <                if (bnp != NULL) {
508 <                        if (bnp > mnp)
509 <                                sprintf(ofname, ospec, mname, bn);
510 <                        else
511 <                                sprintf(ofname, ospec, bn, mname);
512 <                } else
513 <                        sprintf(ofname, ospec, mname);
514 <        } else if (bnp != NULL)
515 <                sprintf(ofname, ospec, bn);
516 <        else
517 <                strcpy(ofname, ospec);
518 <        lep = lu_find(&ofiletab, ofname);       /* look it up */
519 <        if (lep->key == NULL)                   /* new entry */
520 <                lep->key = strcpy((char *)malloc(strlen(ofname)+1), ofname);
521 <        if (lep->data == NULL) {                /* open output file */
522 <                lep->data = (char *)fopen(ofname, "w");
523 <                if (lep->data == NULL) {
524 <                        sprintf(errmsg, "cannot open '%s' for writing", ofname);
525 <                        error(SYSTEM, errmsg);
814 >                if (accumulate > 0) {           /* global resolution */
815 >                        sop->xr = xres; sop->yr = yres;
816                  }
817 <                if (header)
818 <                        printheader((FILE *)lep->data);
817 >                printresolu(sop->ofp, sop->xr, sop->yr);
818 >                                                /* play catch-up */
819 >                for (i = accumulate > 0 ? lastdone/accumulate : 0; i--; ) {
820 >                        int     j = sop->reclen;
821 >                        if (j <= 0) j = 1;
822 >                        while (j--)
823 >                                put_contrib(nocontrib, sop->ofp);
824 >                        if (outfmt == 'a')
825 >                                putc('\n', sop->ofp);
826 >                }
827 >                if (xres > 0)
828 >                        fflush(sop->ofp);
829          }
830 <        return (FILE *)lep->data;               /* return open file pointer */
831 < badspec:
832 <        sprintf(errmsg, "bad output format '%s'", ospec);
833 <        error(USER, errmsg);
834 <        return NULL;            /* pro forma return */
830 >        sop->reclen += noopen;                  /* add to length if noopen */
831 >        return sop;                             /* return output stream */
832 > openerr:
833 >        sprintf(errmsg, "cannot open '%s' for writing", oname);
834 >        error(SYSTEM, errmsg);
835 >        return NULL;    /* pro forma return */
836   }
837  
838   /* read input ray into buffer */
839   int
840   getinp(char *buf, FILE *fp)
841   {
842 +        double  dv[3], *dvp;
843 +        float   *fvp;
844 +        char    *cp;
845 +        int     i;
846 +
847          switch (inpfmt) {
848          case 'a':
849 <                if (fgets(buf, 128, fp) == NULL)
850 <                        return 0;
849 >                cp = buf;               /* make sure we get 6 floats */
850 >                for (i = 0; i < 6; i++) {
851 >                        if (fgetword(cp, buf+127-cp, fp) == NULL)
852 >                                return -1;
853 >                        if (i >= 3)
854 >                                dv[i-3] = atof(cp);
855 >                        if ((cp = fskip(cp)) == NULL || *cp)
856 >                                return -1;
857 >                        *cp++ = ' ';
858 >                }
859 >                getc(fp);               /* get/put eol */
860 >                *cp-- = '\0'; *cp = '\n';
861 >                if (DOT(dv,dv) <= FTINY*FTINY)
862 >                        return 0;       /* dummy ray */
863                  return strlen(buf);
864          case 'f':
865                  if (fread(buf, sizeof(float), 6, fp) < 6)
866 <                        return 0;
866 >                        return -1;
867 >                fvp = (float *)buf + 3;
868 >                if (DOT(fvp,fvp) <= FTINY*FTINY)
869 >                        return 0;       /* dummy ray */
870                  return sizeof(float)*6;
871          case 'd':
872                  if (fread(buf, sizeof(double), 6, fp) < 6)
873 <                        return 0;
873 >                        return -1;
874 >                dvp = (double *)buf + 3;
875 >                if (DOT(dvp,dvp) <= FTINY*FTINY)
876 >                        return 0;       /* dummy ray */
877                  return sizeof(double)*6;
878          }
879          error(INTERNAL, "botched input format");
880 <        return 0;       /* pro forma return */
880 >        return -1;      /* pro forma return */
881   }
882  
883 < static const float      *rparams = NULL;        /* ray parameter pointer */
883 > static float    rparams[9];             /* traced ray parameters */
884  
885   /* return channel (ray) value */
886   double
# Line 564 | Line 888 | chanvalue(int n)
888   {
889          if (--n < 0 || n >= 6)
890                  error(USER, "illegal channel number ($N)");
891 <        if (rparams == NULL)
568 <                error(USER, "illegal use of $N in constant expression");
569 <        return rparams[n];
891 >        return rparams[n+3];
892   }
893  
894 < /* add ray contribution to the appropriate modifier bin */
894 > /* add current ray contribution to the appropriate modifier bin */
895   void
896 < add_contrib(const char *modn, float rayval[9])
896 > add_contrib(const char *modn)
897   {
898          LUENT   *le = lu_find(&modconttab, modn);
899          MODCONT *mp = (MODCONT *)le->data;
# Line 581 | Line 903 | add_contrib(const char *modn, float rayval[9])
903                  sprintf(errmsg, "unexpected modifier '%s' from rtrace", modn);
904                  error(USER, errmsg);
905          }
906 <        rparams = rayval + 3;           /* for chanvalue */
585 <        eclock++;
906 >        eclock++;                       /* get bin number */
907          bn = (int)(evalue(mp->binv) + .5);
908          if (bn <= 0)
909                  bn = 0;
910 <        else if (bn > mp->nbins) {      /* new bin */
911 <                mp = (MODCONT *)realloc(mp, sizeof(MODCONT) +
912 <                                                bn*sizeof(COLOR));
592 <                if (mp == NULL)
593 <                        error(SYSTEM, "out of memory in add_contrib");
594 <                memset(mp->cbin+mp->nbins, 0, sizeof(COLOR)*(bn+1-mp->nbins));
595 <                mp->nbins = bn+1;
596 <                le->data = (char *)mp;
597 <        }
598 <        addcolor(mp->cbin[bn], rayval);
599 <        rparams = NULL;
910 >        else if (bn >= mp->nbins)       /* new bin */
911 >                le->data = (char *)(mp = growmodifier(mp, bn+1));
912 >        addcolor(mp->cbin[bn], rparams);
913   }
914  
915   /* output newline to ASCII file and/or flush as requested */
916   static int
917   puteol(const LUENT *e, void *p)
918   {
919 <        FILE    *fp = (FILE *)e->data;
919 >        STREAMOUT       *sop = (STREAMOUT *)e->data;
920  
921          if (outfmt == 'a')
922 <                putc('\n', fp);
922 >                putc('\n', sop->ofp);
923          if (!waitflush)
924 <                fflush(fp);
925 <        if (ferror(fp)) {
924 >                fflush(sop->ofp);
925 >        if (ferror(sop->ofp)) {
926                  sprintf(errmsg, "write error on file '%s'", e->key);
927                  error(SYSTEM, errmsg);
928          }
929          return 0;
930   }
931  
932 < /* output ray tallies and clear for next primary */
932 > /* put out ray contribution to file */
933   void
934 < done_contrib(void)
934 > put_contrib(const DCOLOR cnt, FILE *fout)
935   {
936 <        int     i, j;
624 <        MODCONT *mp;
625 <        FILE    *fout;
626 <        double  dv[3];
936 >        float   fv[3];
937          COLR    cv;
938 +
939 +        switch (outfmt) {
940 +        case 'a':
941 +                fprintf(fout, "%.6e\t%.6e\t%.6e\t", cnt[0], cnt[1], cnt[2]);
942 +                break;
943 +        case 'f':
944 +                copycolor(fv, cnt);
945 +                fwrite(fv, sizeof(float), 3, fout);
946 +                break;
947 +        case 'd':
948 +                fwrite(cnt, sizeof(double), 3, fout);
949 +                break;
950 +        case 'c':
951 +                setcolr(cv, cnt[0], cnt[1], cnt[2]);
952 +                fwrite(cv, sizeof(cv), 1, fout);
953 +                break;
954 +        default:
955 +                error(INTERNAL, "botched output format");
956 +        }
957 + }
958 +
959 + /* output ray tallies and clear for next accumulation */
960 + void
961 + done_contrib(int navg)
962 + {
963 +        double          sf = 1.;
964 +        int             i, j;
965 +        MODCONT         *mp;
966 +        STREAMOUT       *sop;
967 +                                                /* set average scaling */
968 +        if (navg > 1)
969 +                sf = 1. / (double)navg;
970                                                  /* output modifiers in order */
971          for (i = 0; i < nmods; i++) {
972                  mp = (MODCONT *)lu_find(&modconttab,modname[i])->data;
973 <                for (j = 0; j < mp->nbins; j++) {
974 <                        fout = getofile(mp->outspec, mp->modname, j);
975 <                        switch (outfmt) {
976 <                        case 'a':
977 <                                fprintf(fout, "%.6e\t%.6e\t%.6e\t",
978 <                                                mp->cbin[j][RED],
979 <                                                mp->cbin[j][GRN],
980 <                                                mp->cbin[j][BLU]);
981 <                                break;
982 <                        case 'f':
983 <                                fwrite(mp->cbin[j], sizeof(float), 3, fout);
984 <                                break;
985 <                        case 'd':
986 <                                dv[0] = mp->cbin[j][0];
987 <                                dv[1] = mp->cbin[j][1];
646 <                                dv[2] = mp->cbin[j][2];
647 <                                fwrite(dv, sizeof(double), 3, fout);
648 <                                break;
649 <                        case 'c':
650 <                                setcolr(cv, mp->cbin[j][RED],
651 <                                        mp->cbin[j][GRN], mp->cbin[j][BLU]);
652 <                                fwrite(cv, sizeof(COLR), 1, fout);
653 <                                break;
654 <                        default:
655 <                                error(INTERNAL, "botched output format");
656 <                        }
657 <                }
658 <                                                /* clear for next ray tree */
659 <                memset(mp->cbin, 0, sizeof(COLOR)*mp->nbins);
973 >                if (navg > 1)                   /* average scaling */
974 >                        for (j = mp->nbins; j--; )
975 >                                scalecolor(mp->cbin[j], sf);
976 >                sop = getostream(mp->outspec, mp->modname, 0,0);
977 >                put_contrib(mp->cbin[0], sop->ofp);
978 >                if (mp->nbins > 3 &&            /* minor optimization */
979 >                                sop == getostream(mp->outspec, mp->modname, 1,0))
980 >                        for (j = 1; j < mp->nbins; j++)
981 >                                put_contrib(mp->cbin[j], sop->ofp);
982 >                else
983 >                        for (j = 1; j < mp->nbins; j++)
984 >                                put_contrib(mp->cbin[j],
985 >                                    getostream(mp->outspec,mp->modname,j,0)->ofp);
986 >                                                /* clear for next time */
987 >                memset(mp->cbin, 0, sizeof(DCOLOR)*mp->nbins);
988          }
989          --waitflush;                            /* terminate records */
990          lu_doall(&ofiletab, puteol, NULL);
991 <        if (!waitflush)
991 >        if (using_stdout & (outfmt == 'a'))
992 >                putc('\n', stdout);
993 >        if (!waitflush) {
994                  waitflush = xres;
995 +                if (using_stdout)
996 +                        fflush(stdout);
997 +        }
998   }
999  
1000 < /* process (or save) ray tree produced by rtrace process */
1000 > /* queue completed ray tree produced by rtrace process */
1001   void
1002 < process_rays(struct rtproc *rtp)
1002 > queue_raytree(struct rtproc *rtp)
1003   {
1004 <        struct rtproc   *rtu;
1005 <                                        /* check if time to process it */
1006 <        if (rtp->raynum == lastdone+1) {
1007 <                int             n = rtp->bpos - rtp->buf;
1004 >        struct rtproc   *rtu, *rtl = NULL;
1005 >                                        /* insert following ray order */
1006 >        for (rtu = rt_unproc; rtu != NULL; rtu = (rtl=rtu)->next)
1007 >                if (rtp->raynum < rtu->raynum)
1008 >                        break;
1009 >        rtu = (struct rtproc *)malloc(sizeof(struct rtproc));
1010 >        if (rtu == NULL)
1011 >                error(SYSTEM, "out of memory in queue_raytree");
1012 >        *rtu = *rtp;
1013 >        if (rtl == NULL) {
1014 >                rtu->next = rt_unproc;
1015 >                rt_unproc = rtu;
1016 >        } else {
1017 >                rtu->next = rtl->next;
1018 >                rtl->next = rtu;
1019 >        }
1020 >        rtp->raynum = 0;                /* clear path for next ray tree */
1021 >        rtp->bsiz = 0;
1022 >        rtp->buf = NULL;
1023 >        rtp->nbr = 0;
1024 > }
1025 >
1026 > /* process completed ray trees from our queue */
1027 > void
1028 > process_queue(void)
1029 > {
1030 >        char    modname[128];
1031 >                                        /* ray-ordered queue */
1032 >        while (rt_unproc != NULL && rt_unproc->raynum == lastdone+1) {
1033 >                struct rtproc   *rtp = rt_unproc;
1034 >                int             n = rtp->nbr;
1035                  const char      *cp = rtp->buf;
1036                  while (n > 0) {         /* process rays */
1037 <                        char    matname[128];
678 <                        char    *mnp = matname;
1037 >                        register char   *mnp = modname;
1038                                          /* skip leading tabs */
1039                          while (n > 0 && *cp == '\t') {
1040                                  cp++; n--;
1041                          }
1042 <                                        /* get material name */
1043 <                        while (n > 0 && *cp != '\t') {
1042 >                        if (!n || !(isalpha(*cp) | (*cp == '_')))
1043 >                                error(USER, "bad modifier name from rtrace");
1044 >                                        /* get modifier name */
1045 >                        while (n > 1 && *cp != '\t') {
1046 >                                if (mnp - modname >= sizeof(modname)-2)
1047 >                                        error(INTERNAL, "modifier name too long");
1048                                  *mnp++ = *cp++; n--;
1049                          }
687                        if (!n)
688                                error(USER, "botched modifer name from rtrace");
1050                          *mnp = '\0';
1051 <                        cp++; n--;      /* skip terminating tab */
1051 >                        cp++; n--;      /* eat following tab */
1052                          if (n < (int)(sizeof(float)*9))
1053                                  error(USER, "incomplete ray value from rtrace");
1054                                          /* add ray contribution */
1055 <                        add_contrib(matname, (float *)cp);
1055 >                        memcpy(rparams, cp, sizeof(float)*9);
1056                          cp += sizeof(float)*9; n -= sizeof(float)*9;
1057 +                        add_contrib(modname);
1058                  }
1059 <                done_contrib();         /* sum up contributions & output */
1059 >                                        /* time to produce record? */
1060 >                if (account > 0 && !--account)
1061 >                        done_contrib(account = accumulate);
1062                  lastdone = rtp->raynum;
1063 <                free(rtp->buf);
1064 <                                        /* catch up with unprocessed list */
1065 <                while (rt_unproc != NULL && rt_unproc->raynum == lastdone+1) {
1066 <                        process_rays(rt_unproc);
703 <                        rt_unproc = (rtu=rt_unproc)->next;
704 <                        free(rtu);
705 <                }
706 <        } else {                        /* else insert in unprocessed list */
707 <                struct rtproc   *rtl = NULL;
708 <                for (rtu = rt_unproc; rtu != NULL; rtu = (rtl=rtu)->next)
709 <                        if (rtp->raynum < rtu->raynum)
710 <                                break;
711 <                rtu = (struct rtproc *)malloc(sizeof(struct rtproc));
712 <                if (rtu == NULL)
713 <                        error(SYSTEM, "out of memory in process_rays");
714 <                *rtu = *rtp;
715 <                if (rtl == NULL) {
716 <                        rtu->next = rt_unproc;
717 <                        rt_unproc = rtu;
718 <                } else {
719 <                        rtu->next = rtl->next;
720 <                        rtl->next = rtu;
721 <                }
1063 >                if (rtp->buf != NULL)   /* free up buffer space */
1064 >                        free(rtp->buf);
1065 >                rt_unproc = rtp->next;
1066 >                free(rtp);              /* done with this ray tree */
1067          }
723        rtp->raynum = 0;                /* clear path for next ray tree */
724        rtp->bsiz = 0;
725        rtp->buf = NULL;
1068   }
1069  
1070   /* wait for rtrace process to finish with ray tree */
# Line 763 | Line 1105 | wait_rproc(void)
1105                          if (rt->buf == NULL) {
1106                                  rt->bsiz = treebufsiz;
1107                                  rt->buf = (char *)malloc(treebufsiz);
1108 <                        } else if (rt->bpos + BUFSIZ > rt->buf + rt->bsiz) {
1108 >                        } else if (rt->nbr + BUFSIZ > rt->bsiz) {
1109                                  if (rt->bsiz + BUFSIZ <= treebufsiz)
1110                                          rt->bsiz = treebufsiz;
1111                                  else
1112 <                                        rt->bsiz = treebufsiz += BUFSIZ;
1112 >                                        treebufsiz = rt->bsiz += BUFSIZ;
1113                                  rt->buf = (char *)realloc(rt->buf, rt->bsiz);
1114                          }
1115                          if (rt->buf == NULL)
1116                                  error(SYSTEM, "out of memory in wait_rproc");
1117 <                        nr = read(rt->pd.r, rt->bpos,
1118 <                                        rt->buf + rt->bsiz - rt->bpos);
777 <                        if (!nr)
1117 >                        nr = read(rt->pd.r, rt->buf+rt->nbr, rt->bsiz-rt->nbr);
1118 >                        if (nr <= 0)
1119                                  error(USER, "rtrace process died");
1120 <                        rt->bpos += nr;         /* advance buffer & check */
1121 <                        if (rt->bpos[-1] == '\t' && rt->bpos[-2] == '-') {
1122 <                                rt->bpos -= 2;  /* elide terminator */
1123 <                                process_rays(rt);
1120 >                        rt->nbr += nr;          /* advance & check */
1121 >                        if (rt->nbr >= 4 && !memcmp(rt->buf+rt->nbr-4,
1122 >                                                        "~\t~\t", 4)) {
1123 >                                rt->nbr -= 4;   /* elide terminator */
1124 >                                queue_raytree(rt);
1125                                  rtfree = rt;    /* ready for next ray */
1126                          }
1127                  }
# Line 801 | Line 1143 | get_rproc(void)
1143  
1144   /* trace ray contributions (main loop) */
1145   void
1146 < tracecontribs(FILE *fin)
1146 > trace_contribs(FILE *fin)
1147   {
1148 +        static int      ignore_warning_given = 0;
1149          char            inpbuf[128];
1150          int             iblen;
1151          struct rtproc   *rtp;
1152                                                  /* loop over input */
1153 <        while ((iblen = getinp(inpbuf, fin)) > 0) {
1154 <                if (lastray+1 < lastray) {      /* counter rollover? */
1153 >        while ((iblen = getinp(inpbuf, fin)) >= 0) {
1154 >                if (!iblen && accumulate != 1) {
1155 >                        if (!ignore_warning_given++)
1156 >                                error(WARNING,
1157 >                                "dummy ray(s) ignored during accumulation\n");
1158 >                        continue;
1159 >                }
1160 >                if (!iblen ||                   /* need flush/reset? */
1161 >                                queue_length() > 10*nrtprocs() ||
1162 >                                lastray+1 < lastray) {
1163                          while (wait_rproc() != NULL)
1164 <                                ;
1165 <                        lastdone = lastray = 0;
1164 >                                process_queue();
1165 >                        if (lastray+1 < lastray)
1166 >                                lastdone = lastray = 0;
1167                  }
1168                  rtp = get_rproc();              /* get avail. rtrace process */
1169 <                rtp->raynum = ++lastray;        /* assign this ray to it */
1170 <                writebuf(rtp->pd.w, inpbuf, iblen);
1171 <                if (!--raysleft)
1172 <                        break;                  /* explicit EOF */
1169 >                rtp->raynum = ++lastray;        /* assign ray */
1170 >                if (iblen) {                    /* trace ray if valid */
1171 >                        writebuf(rtp->pd.w, inpbuf, iblen);
1172 >                } else {                        /* else bypass dummy ray */
1173 >                        queue_raytree(rtp);     /* queue empty ray/record */
1174 >                        if ((yres <= 0) | (xres <= 0))
1175 >                                waitflush = 1;  /* flush right after */
1176 >                }
1177 >                process_queue();                /* catch up with results */
1178 >                if (raysleft && !--raysleft)
1179 >                        break;                  /* preemptive EOI */
1180          }
1181          while (wait_rproc() != NULL)            /* process outstanding rays */
1182 <                ;
1182 >                process_queue();
1183 >        if (accumulate <= 0)
1184 >                done_contrib(0);                /* output tallies */
1185 >        else if (account < accumulate) {
1186 >                error(WARNING, "partial accumulation in final record");
1187 >                done_contrib(accumulate - account);
1188 >        }
1189 >        if (raysleft)
1190 >                error(USER, "unexpected EOF on input");
1191 >        lu_done(&ofiletab);                     /* close output files */
1192 > }
1193 >
1194 > /* get ray contribution from previous file */
1195 > static int
1196 > get_contrib(DCOLOR cnt, FILE *finp)
1197 > {
1198 >        COLOR   fv;
1199 >        COLR    cv;
1200 >
1201 >        switch (outfmt) {
1202 >        case 'a':
1203 >                return(fscanf(finp,"%lf %lf %lf",&cnt[0],&cnt[1],&cnt[2]) == 3);
1204 >        case 'f':
1205 >                if (fread(fv, sizeof(fv[0]), 3, finp) != 3)
1206 >                        return(0);
1207 >                copycolor(cnt, fv);
1208 >                return(1);
1209 >        case 'd':
1210 >                return(fread(cnt, sizeof(cnt[0]), 3, finp) == 3);
1211 >        case 'c':
1212 >                if (fread(cv, sizeof(cv), 1, finp) != 1)
1213 >                        return(0);
1214 >                colr_color(fv, cv);
1215 >                copycolor(cnt, fv);
1216 >                return(1);
1217 >        default:
1218 >                error(INTERNAL, "botched output format");
1219 >        }
1220 >        return(0);      /* pro forma return */
1221 > }
1222 >
1223 > /* close output file opened for input */
1224 > static int
1225 > myclose(const LUENT *e, void *p)
1226 > {
1227 >        STREAMOUT       *sop = (STREAMOUT *)e->data;
1228 >        
1229 >        if (sop->ofp == NULL)
1230 >                return(0);
1231 >        fclose(sop->ofp);
1232 >        sop->ofp = NULL;
1233 >        return(0);
1234 > }
1235 >
1236 > /* load previously accumulated values */
1237 > void
1238 > reload_output(void)
1239 > {
1240 >        int             i, j;
1241 >        MODCONT         *mp;
1242 >        int             ofl;
1243 >        char            oname[1024];
1244 >        char            *fmode = "rb";
1245 >        char            *outvfmt;
1246 >        LUENT           *ment, *oent;
1247 >        int             xr, yr;
1248 >        STREAMOUT       sout;
1249 >        DCOLOR          rgbv;
1250 >
1251 >        switch (outfmt) {
1252 >        case 'a':
1253 >                outvfmt = "ascii";
1254 >                fmode = "r";
1255 >                break;
1256 >        case 'f':
1257 >                outvfmt = "float";
1258 >                break;
1259 >        case 'd':
1260 >                outvfmt = "double";
1261 >                break;
1262 >        case 'c':
1263 >                outvfmt = COLRFMT;
1264 >                break;
1265 >        default:
1266 >                error(INTERNAL, "botched output format");
1267 >                return;
1268 >        }
1269 >                                                /* reload modifier values */
1270 >        for (i = 0; i < nmods; i++) {
1271 >                ment = lu_find(&modconttab,modname[i]);
1272 >                mp = (MODCONT *)ment->data;
1273 >                if (mp->outspec == NULL)
1274 >                        error(USER, "cannot reload from stdout");
1275 >                if (mp->outspec[0] == '!')
1276 >                        error(USER, "cannot reload from command");
1277 >                for (j = 0; ; j++) {            /* load each modifier bin */
1278 >                        ofl = ofname(oname, mp->outspec, mp->modname, j);
1279 >                        if (ofl < 0)
1280 >                                error(USER, "bad output file specification");
1281 >                        oent = lu_find(&ofiletab, oname);
1282 >                        if (oent->data != NULL) {
1283 >                                sout = *(STREAMOUT *)oent->data;
1284 >                        } else {
1285 >                                sout.reclen = 0;
1286 >                                sout.outpipe = 0;
1287 >                                sout.xr = xres; sout.yr = yres;
1288 >                                sout.ofp = NULL;
1289 >                        }
1290 >                        if (sout.ofp == NULL) { /* open output as input */
1291 >                                sout.ofp = fopen(oname, fmode);
1292 >                                if (sout.ofp == NULL) {
1293 >                                        if (j)
1294 >                                                break;  /* assume end of modifier */
1295 >                                        sprintf(errmsg, "missing reload file '%s'",
1296 >                                                        oname);
1297 >                                        error(WARNING, errmsg);
1298 >                                        break;
1299 >                                }
1300 >                                if (header && checkheader(sout.ofp, outvfmt, NULL) != 1) {
1301 >                                        sprintf(errmsg, "format mismatch for '%s'",
1302 >                                                        oname);
1303 >                                        error(USER, errmsg);
1304 >                                }
1305 >                                if ((sout.xr > 0) & (sout.yr > 0) &&
1306 >                                                (!fscnresolu(&xr, &yr, sout.ofp) ||
1307 >                                                        (xr != sout.xr) |
1308 >                                                        (yr != sout.yr))) {
1309 >                                        sprintf(errmsg, "resolution mismatch for '%s'",
1310 >                                                        oname);
1311 >                                        error(USER, errmsg);
1312 >                                }
1313 >                        }
1314 >                                                        /* read in RGB value */
1315 >                        if (!get_contrib(rgbv, sout.ofp)) {
1316 >                                if (!j) {
1317 >                                        fclose(sout.ofp);
1318 >                                        break;          /* ignore empty file */
1319 >                                }
1320 >                                if (j < mp->nbins) {
1321 >                                        sprintf(errmsg, "missing data in '%s'",
1322 >                                                        oname);
1323 >                                        error(USER, errmsg);
1324 >                                }
1325 >                                break;
1326 >                        }
1327 >                        if (j >= mp->nbins)             /* grow modifier size */
1328 >                                ment->data = (char *)(mp = growmodifier(mp, j+1));
1329 >                        copycolor(mp->cbin[j], rgbv);
1330 >                        if (oent->key == NULL)          /* new file entry */
1331 >                                oent->key = strcpy((char *)
1332 >                                                malloc(strlen(oname)+1), oname);
1333 >                        if (oent->data == NULL)
1334 >                                oent->data = (char *)malloc(sizeof(STREAMOUT));
1335 >                        *(STREAMOUT *)oent->data = sout;
1336 >                }
1337 >        }
1338 >        lu_doall(&ofiletab, myclose, NULL);     /* close all files */
1339 > }
1340 >
1341 > /* seek on the given output file */
1342 > static int
1343 > myseeko(const LUENT *e, void *p)
1344 > {
1345 >        STREAMOUT       *sop = (STREAMOUT *)e->data;
1346 >        off_t           nbytes = *(off_t *)p;
1347 >        
1348 >        if (sop->reclen > 1)
1349 >                nbytes = nbytes * sop->reclen;
1350 >        if (fseeko(sop->ofp, nbytes, SEEK_CUR) < 0) {
1351 >                sprintf(errmsg, "seek error on file '%s'", e->key);
1352 >                error(SYSTEM, errmsg);
1353 >        }
1354 >        return 0;
1355 > }
1356 >
1357 > /* recover output if possible */
1358 > void
1359 > recover_output(FILE *fin)
1360 > {
1361 >        off_t           lastout = -1;
1362 >        int             outvsiz, recsiz;
1363 >        char            *outvfmt;
1364 >        int             i, j;
1365 >        MODCONT         *mp;
1366 >        int             ofl;
1367 >        char            oname[1024];
1368 >        LUENT           *ment, *oent;
1369 >        STREAMOUT       sout;
1370 >        off_t           nvals;
1371 >        int             xr, yr;
1372 >
1373 >        switch (outfmt) {
1374 >        case 'a':
1375 >                error(USER, "cannot recover ASCII output");
1376 >                return;
1377 >        case 'f':
1378 >                outvsiz = sizeof(float)*3;
1379 >                outvfmt = "float";
1380 >                break;
1381 >        case 'd':
1382 >                outvsiz = sizeof(double)*3;
1383 >                outvfmt = "double";
1384 >                break;
1385 >        case 'c':
1386 >                outvsiz = sizeof(COLR);
1387 >                outvfmt = COLRFMT;
1388 >                break;
1389 >        default:
1390 >                error(INTERNAL, "botched output format");
1391 >                return;
1392 >        }
1393 >                                                /* check modifier outputs */
1394 >        for (i = 0; i < nmods; i++) {
1395 >                ment = lu_find(&modconttab,modname[i]);
1396 >                mp = (MODCONT *)ment->data;
1397 >                if (mp->outspec == NULL)
1398 >                        error(USER, "cannot recover from stdout");
1399 >                if (mp->outspec[0] == '!')
1400 >                        error(USER, "cannot recover from command");
1401 >                for (j = 0; ; j++) {            /* check each bin's file */
1402 >                        ofl = ofname(oname, mp->outspec, mp->modname, j);
1403 >                        if (ofl < 0)
1404 >                                error(USER, "bad output file specification");
1405 >                        oent = lu_find(&ofiletab, oname);
1406 >                        if (oent->data != NULL) {
1407 >                                sout = *(STREAMOUT *)oent->data;
1408 >                        } else {
1409 >                                sout.reclen = 0;
1410 >                                sout.outpipe = 0;
1411 >                                sout.ofp = NULL;
1412 >                        }
1413 >                        if (sout.ofp != NULL) { /* already open? */
1414 >                                if (ofl & OF_BIN)
1415 >                                        continue;
1416 >                                break;
1417 >                        }
1418 >                                                /* open output */
1419 >                        sout.ofp = fopen(oname, "rb+");
1420 >                        if (sout.ofp == NULL) {
1421 >                                if (j)
1422 >                                        break;  /* assume end of modifier */
1423 >                                sprintf(errmsg, "missing recover file '%s'",
1424 >                                                oname);
1425 >                                error(WARNING, errmsg);
1426 >                                break;
1427 >                        }
1428 >                        nvals = lseek(fileno(sout.ofp), 0, SEEK_END);
1429 >                        if (nvals <= 0) {
1430 >                                lastout = 0;    /* empty output, quit here */
1431 >                                fclose(sout.ofp);
1432 >                                break;
1433 >                        }
1434 >                        if (!sout.reclen) {
1435 >                                if (!(ofl & OF_BIN)) {
1436 >                                        sprintf(errmsg,
1437 >                                                "need -bn to recover file '%s'",
1438 >                                                        oname);
1439 >                                        error(USER, errmsg);
1440 >                                }
1441 >                                recsiz = outvsiz;
1442 >                        } else
1443 >                                recsiz = outvsiz * sout.reclen;
1444 >
1445 >                        lseek(fileno(sout.ofp), 0, SEEK_SET);
1446 >                        if (header && checkheader(sout.ofp, outvfmt, NULL) != 1) {
1447 >                                sprintf(errmsg, "format mismatch for '%s'",
1448 >                                                oname);
1449 >                                error(USER, errmsg);
1450 >                        }
1451 >                        sout.xr = xres; sout.yr = yres;
1452 >                        if ((sout.xr > 0) & (sout.yr > 0) &&
1453 >                                        (!fscnresolu(&xr, &yr, sout.ofp) ||
1454 >                                                (xr != sout.xr) |
1455 >                                                (yr != sout.yr))) {
1456 >                                sprintf(errmsg, "resolution mismatch for '%s'",
1457 >                                                oname);
1458 >                                error(USER, errmsg);
1459 >                        }
1460 >                        nvals = (nvals - (off_t)ftell(sout.ofp)) / recsiz;
1461 >                        if ((lastout < 0) | (nvals < lastout))
1462 >                                lastout = nvals;
1463 >                        if (oent->key == NULL)  /* new entry */
1464 >                                oent->key = strcpy((char *)
1465 >                                                malloc(strlen(oname)+1), oname);
1466 >                        if (oent->data == NULL)
1467 >                                oent->data = (char *)malloc(sizeof(STREAMOUT));
1468 >                        *(STREAMOUT *)oent->data = sout;
1469 >                        if (!(ofl & OF_BIN))
1470 >                                break;          /* no bin separation */
1471 >                }
1472 >                if (!lastout) {                 /* empty output */
1473 >                        error(WARNING, "no previous data to recover");
1474 >                        lu_done(&ofiletab);     /* reclose all outputs */
1475 >                        return;
1476 >                }
1477 >                if (j > mp->nbins)              /* reallocate modifier bins */
1478 >                        ment->data = (char *)(mp = growmodifier(mp, j));
1479 >        }
1480 >        if (lastout < 0) {
1481 >                error(WARNING, "no output files to recover");
1482 >                return;
1483 >        }
1484 >        if (raysleft && lastout >= raysleft/accumulate) {
1485 >                error(WARNING, "output appears to be complete");
1486 >                /* XXX should read & discard input? */
1487 >                quit(0);
1488 >        }
1489 >                                                /* seek on all files */
1490 >        nvals = lastout * outvsiz;
1491 >        lu_doall(&ofiletab, myseeko, &nvals);
1492 >                                                /* skip repeated input */
1493 >        for (nvals = 0; nvals < lastout; nvals++)
1494 >                if (getinp(oname, fin) < 0)
1495 >                        error(USER, "unexpected EOF on input");
1496 >        lastray = lastdone = (unsigned long)lastout * accumulate;
1497 >        if (raysleft)
1498 >                raysleft -= lastray;
1499   }

Diff Legend

Removed lines
+ Added lines
< Changed lines
> Changed lines