chiark / gitweb /
61901a5924854c967d9fc981a63406d6af89f66d
[ypp-sc-tools.web-live.git] / pctb / convert.c
1 /*
2  * ypp-commodities main program: argument parsing etc.
3  */
4 /*
5  *  This is part of ypp-sc-tools, a set of third-party tools for assisting
6  *  players of Yohoho Puzzle Pirates.
7  * 
8  *  Copyright (C) 2009 Ian Jackson <ijackson@chiark.greenend.org.uk>
9  * 
10  *  This program is free software: you can redistribute it and/or modify
11  *  it under the terms of the GNU General Public License as published by
12  *  the Free Software Foundation, either version 3 of the License, or
13  *  (at your option) any later version.
14  * 
15  *  This program is distributed in the hope that it will be useful,
16  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
17  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  *  GNU General Public License for more details.
19  * 
20  *  You should have received a copy of the GNU General Public License
21  *  along with this program.  If not, see <http://www.gnu.org/licenses/>.
22  * 
23  *  Yohoho and Puzzle Pirates are probably trademarks of Three Rings and
24  *  are used without permission.  This program is not endorsed or
25  *  sponsored by Three Rings.
26  */
27
28 #include "convert.h"
29
30 void debug_flush(void) {
31   sysassert(!ferror(debug));
32   sysassert(!fflush(debug));
33 }
34
35 const char *get_vardir(void) { return "."; }
36 const char *get_libdir(void) { return "."; }
37
38
39 enum mode {
40   mf_findwindow=      00001,
41   mf_screenshot=      00010,
42   mf_readscreenshot=  00020,
43   mf_analyse=         00100,
44   mfm_special=        07000,
45   
46   mode_findwindow=    00001,
47   mode_screenshot=    00011,
48   mode_analyse=       00120,
49   mode_showcharset=   01000,
50
51   mode_all=           00111,
52 };
53
54 enum outmodekind {
55   omk_unset, omk_upload, omk_str, omk_raw, omk_none
56 };
57 static enum outmodekind o_outmode_kind;
58 static const char *o_outmode_str= 0;
59
60 static enum mode o_mode= mode_all;
61 static char *o_screenshot_fn;
62 static const char *o_serv_pctb, *o_serv_dict_fetch, *o_serv_dict_submit;
63
64 const char *o_resolver= "./dictionary-manager";
65 FILE *screenshot_file;
66 const char *o_ocean, *o_pirate;
67 int o_quiet;
68
69 enum flags o_flags= ff_dict_fetch|ff_dict_submit|ff_dict_pirate;
70
71 static void vbadusage(const char *fmt, va_list) FMT(1,0) NORET;
72 static void vbadusage(const char *fmt, va_list al) {
73   fputs("bad usage: ",stderr);
74   vfprintf(stderr,fmt,al);
75   fputc('\n',stderr);
76   exit(12);
77 }
78 DEFINE_VWRAPPERF(static, badusage, NORET);
79
80 static void open_screenshot_file(const char *mode) {
81   screenshot_file= fopen(o_screenshot_fn, mode);
82   if (!screenshot_file)
83     fatal("could not open screenshots file `%s': %s",
84           o_screenshot_fn, strerror(errno));
85 }
86
87 static void run_analysis(void) {
88   FILE *tf;
89
90   sysassert( tf= tmpfile() );
91   progress("running recognition...");
92   analyse(tf);
93
94   if (o_flags & ff_upload) {
95     if (o_flags & ff_singlepage)
96       fatal("Recognition successful, but refusing to upload partial data\n"
97             " (--single-page specified).  Specify an output mode?");
98   }
99
100   sysassert( fseek(tf,0,SEEK_SET) == 0);
101
102   progress_log("processing results (--%s)...", o_outmode_str);
103   pid_t processor;
104   sysassert( (processor= fork()) != -1 );
105
106   if (!processor) {
107     sysassert( dup2(fileno(tf),0) ==0 );
108     EXECLP_HELPER("commod-results-processor", o_outmode_str, (char*)0);
109   }
110
111   waitpid_check_exitstatus(processor, "output processor/uploader");
112   fclose(tf);
113   progress_log("all complete.");
114 }
115
116 void fetch_with_rsync(const char *stem) {
117   pid_t fetcher;
118
119   sysassert( (fetcher= fork()) != -1 );
120   if (!fetcher) {
121     const char *rsync= getenv("YPPSC_PCTB_RSYNC");
122     if (!rsync) rsync= "rsync";
123   
124     const char *src= getenv("YPPSC_PCTB_DICT_UPDATE");
125     char *remote= masprintf("%s/master-%s.txt", src, stem);
126     char *local= masprintf("#master-%s#.txt", stem);
127     execlp(rsync, "rsync",
128            DEBUGP(rsync) ? "-vLt" : "-Lt",
129            "--",remote,local,(char*)0);
130     sysassert(!"exec rsync failed");
131   }
132
133   waitpid_check_exitstatus(fetcher, "rsync");
134 }
135
136 static void set_server(const char *envname, const char *defprotocol,
137                        const char *defvalue, const char *defvalue_test,
138                        const char *userspecified,
139                        int enable) {
140   const char *value;
141   
142   if (!enable) { value= "0"; goto ok; }
143
144   if (userspecified)
145     value= userspecified;
146   else if ((value= getenv(envname)))
147     ;
148   else if (o_flags & ff_testservers)
149     value= defvalue_test;
150   else
151     value= defvalue;
152
153   if (value[0]=='/' || (value[0]=='.' && value[1]=='/'))
154     /* absolute or relative pathname - or anyway, something with no hostname */
155     goto ok;
156
157   const char *colon= strchr(value, ':');
158   const char *slash= strchr(value, '/');
159
160   if (colon && (!slash || colon < slash))
161     /* colon before the first slash, if any */
162     /* rsync :: protocol specification - anyway, adding scheme:// won't help */
163     goto ok;
164
165   int vallen= strlen(value);
166
167   value= masprintf("%s%s%s", defprotocol, value,
168                    vallen && value[vallen-1]=='/' ? "" : "/");
169
170  ok:
171   sysassert(! setenv(envname,value,1) );
172 }
173
174 int main(int argc, char **argv) {
175   const char *arg;
176
177   sysassert( setlocale(LC_MESSAGES,"") );
178   sysassert( setlocale(LC_CTYPE,"en_GB.UTF-8") ||
179              setlocale(LC_CTYPE,"en.UTF-8") );
180
181 #define ARGVAL  ((*++argv) ? *argv : \
182                  (badusage("missing value for option %s",arg),(char*)0))
183
184 #define IS(s) (!strcmp(arg,(s)))
185
186   while ((arg=*++argv)) {
187     if (IS("--find-window-only"))      o_mode= mode_findwindow;
188     else if (IS("--screenshot-only"))  o_mode= mode_screenshot;
189     else if (IS("--show-charset"))     o_mode= mode_showcharset;
190     else if (IS("--analyse-only") ||
191              IS("--same"))             o_mode= mode_analyse;
192     else if (IS("--everything"))       o_mode= mode_all;
193     else if (IS("--find-island"))      o_flags |= ffs_printisland;
194     else if (IS("--single-page"))      o_flags |= ff_singlepage;
195     else if (IS("--quiet"))            o_quiet= 1;
196     else if (IS("--edit-charset"))     o_flags |= ff_editcharset;
197     else if (IS("--test-servers"))     o_flags |= ff_testservers;
198     else if (IS("--dict-local-only"))  o_flags &= ~ffs_dict;
199     else if (IS("--dict-read-only"))   o_flags &= (~ffs_dict | ff_dict_fetch);
200     else if (IS("--dict-anon"))        o_flags &= ~ff_dict_pirate;
201     else if (IS("--dict-submit"))      o_flags |= ff_dict_fetch|ff_dict_submit;
202     else if (IS("--raw-tsv"))          o_outmode_kind= omk_raw;
203     else if (IS("--upload"))           o_outmode_kind= omk_upload;
204     else if (IS("--arbitrage") ||
205              IS("--tsv") ||
206              IS("--best-prices"))      o_outmode_kind=omk_str,
207                                        o_outmode_str=arg+2;
208
209     else if (IS("--screenshot-file"))  o_screenshot_fn= ARGVAL;
210     else if (IS("--pctb-server"))         o_serv_pctb=        ARGVAL;
211     else if (IS("--dict-submit-server"))  o_serv_dict_submit= ARGVAL;
212     else if (IS("--dict-update-server"))  o_serv_dict_fetch=  ARGVAL;
213     else if (IS("--ocean"))            o_ocean=  ARGVAL;
214     else if (IS("--pirate"))           o_pirate= ARGVAL;
215 #define DF(f)                                   \
216     else if (IS("-D" #f))                       \
217       debug_flags |= dbg_##f;
218     DEBUG_FLAG_LIST
219 #undef DF
220     else if (IS("--window-id")) {
221       char *ep;
222       unsigned long windowid= strtoul(ARGVAL,&ep,0);
223       if (*ep) badusage("invalid window id");
224       set_yppclient_window(windowid);
225     } else
226       badusage("unknown option `%s'",arg);
227   }
228
229   /* Consequential changes to options */
230
231   if (o_mode & mf_analyse) {
232     if (!o_outmode_kind) {
233       if (o_flags & ff_printisland) {
234         o_outmode_kind= omk_none;
235         o_flags |= ff_singlepage;
236       } else {
237         o_outmode_kind= omk_upload;
238       }
239     }
240
241     if (o_outmode_kind==omk_upload) {
242       o_flags |= ffs_upload;
243       o_outmode_str= "upload";
244     }
245   }
246
247   /* Defaults */
248   
249   set_server("YPPSC_PCTB_PCTB",
250              "http://",          "pctb.ilk.org" /*pctb.crabdance.com*/,
251                                  "pctb.ilk.org",
252              o_serv_pctb,        o_flags & (ff_needisland|ff_upload));
253              
254   set_server("YPPSC_PCTB_DICT_UPDATE",
255              "rsync://",         "rsync.pctb.chiark.greenend.org.uk/pctb",
256                                  "rsync.pctb.chiark.greenend.org.uk/pctb/test",
257              o_serv_dict_fetch,   o_flags & ff_dict_fetch);
258
259   set_server("YPPSC_PCTB_DICT_SUBMIT",
260              "http://",           "dictup.pctb.chiark.greenend.org.uk",
261                                   "dictup.pctb.chiark.greenend.org.uk/test",
262              o_serv_dict_submit,  o_flags & ff_dict_submit);
263
264   if (!o_screenshot_fn)
265     o_screenshot_fn= masprintf("%s/#pages#.ppm",get_vardir());
266
267   /* Actually do the work */
268              
269   if (o_mode & mf_findwindow) {
270     screenshot_startup();
271     find_yppclient_window();
272   }
273   if (!ocean)  ocean=  o_ocean;
274   if (!pirate) pirate= o_pirate;
275   
276   if (o_flags & ff_needisland)
277     if (!ocean)
278       badusage("need --ocean option when not using actual YPP client window"
279                " (consider supplying --pirate too)");
280   if (ocean)
281     sysassert(! setenv("YPPSC_OCEAN",ocean,1) );
282   if (pirate && (o_flags & ff_dict_pirate))
283     sysassert(! setenv("YPPSC_PIRATE",pirate,1) );
284
285   switch (o_mode & mfm_special) {
286   case 0:                                      break;
287   case mode_showcharset:  ocr_showcharsets();  exit(0);
288   default:                                     abort();
289   }
290
291   if (o_mode & mf_screenshot) {
292     open_screenshot_file("w");
293     if (o_flags & ff_singlepage) take_one_screenshot();
294     else take_screenshots();
295     progress_log("OK for you to move the mouse now.");
296   }
297   if (o_mode & mf_readscreenshot) {
298     open_screenshot_file("r");
299     if (o_flags & ff_singlepage) read_one_screenshot();
300     else read_screenshots();
301   }
302   if (o_mode & mf_analyse) {
303     if (o_flags & ff_needisland) {
304       find_islandname(page0_rgbimage);
305       if (o_flags & ff_printisland)
306         printf("%s, %s\n", archipelago, island);
307       sysassert(! setenv("YPPSC_ISLAND",island,1) );
308     }
309     switch (o_outmode_kind) {
310     case omk_upload: case omk_str:   run_analysis();        break;
311     case omk_raw:                    analyse(stdout);       break;
312     case omk_none:                                          break;
313     default: abort();
314     }
315   }
316   progress_log("Finished.");
317   return 0;
318 }
319
320
321
322
323 DEFINE_VWRAPPERF(, progress, )
324 DEFINE_VWRAPPERF(, progress_log, )
325 DEFINE_VWRAPPERF(, progress_spinner, )
326 DEFINE_VWRAPPERF(, warning, )
327 DEFINE_VWRAPPERF(, fatal, NORET)
328
329 static int last_progress_len;
330      
331 static void vprogress_core(int spinner, const char *fmt, va_list al) {
332   int r;
333   
334   if (o_quiet) return;
335   if (!isatty(2)) return;
336   
337   if (last_progress_len)
338     putc('\r',stderr);
339
340   r= vfprintf(stderr,fmt,al);
341
342   if (spinner) {
343     putc(spinner,stderr);
344     r++;
345   }
346
347   if (r < last_progress_len) {
348     fprintf(stderr,"%*s", last_progress_len - r, "");
349     if (!r) putc('\r', stderr);
350     else while (last_progress_len-- > r) putc('\b',stderr);
351   }
352   last_progress_len= r;
353
354   if (ferror(stderr) || fflush(stderr)) _exit(16);
355 }
356    
357 void vprogress(const char *fmt, va_list al) { vprogress_core(0,fmt,al); }
358 void vprogress_spinner(const char *fmt, va_list al) {
359   static const char spinchars[]="/-\\";
360   static int spinner;
361
362   vprogress_core(spinchars[spinner],fmt,al);
363   spinner++;
364   spinner %= (sizeof(spinchars)-1);
365 }
366
367 void vprogress_log(const char *fmt, va_list al) {
368   if (o_quiet) return;
369   
370   progress("");
371   vfprintf(stderr,fmt,al);
372   putc('\n',stderr);
373   fflush(stderr);
374 }
375
376 void vwarning(const char *fmt, va_list al) {
377   progress("");
378   fputs("Warning: ",stderr);
379   vfprintf(stderr,fmt,al);
380   fputs("\n",stderr);
381   fflush(stderr);
382 }
383
384 void vfatal(const char *fmt, va_list al) {
385   progress("");
386   fputs("\n\nFatal error: ",stderr);
387   vfprintf(stderr,fmt,al);
388   fflush(stderr);
389   fputs("\n\n",stderr);
390   _exit(4);
391 }
392
393 void sysassert_fail(const char *file, int line, const char *what) {
394   int e= errno;
395   progress("");
396   fprintf(stderr,
397           "\nfatal operational error:\n"
398           " unsuccessful execution of: %s\n"
399           " %s:%d: %s\n\n",
400           what, file,line, strerror(e));
401   _exit(16);
402 }
403
404 void waitpid_check_exitstatus(pid_t pid, const char *what) { 
405   pid_t got;
406   int st;
407   for (;;) {
408     got= waitpid(pid, &st, 0);
409     if (pid==-1) { sysassert(errno==EINTR); continue; }
410     break;
411   }
412   sysassert( got==pid );
413
414   if (WIFEXITED(st)) {
415     if (WEXITSTATUS(st))
416       fatal("%s failed with nonzero exit status %d",
417             what, WEXITSTATUS(st));
418   } else if (WIFSIGNALED(st)) {
419     fatal("%s died due to signal %s%s", what,
420           strsignal(WTERMSIG(st)), WCOREDUMP(st)?" (core dumped)":"");
421   } else {
422     fatal("%s gave strange wait status %d", what, st);
423   }
424 }
425
426 char *masprintf(const char *fmt, ...) {
427   char *r;
428   va_list al;
429   va_start(al,fmt);
430   sysassert( vasprintf(&r,fmt,al) >= 0);
431   sysassert(r);
432   va_end(al);
433   return r;
434 }