chiark / gitweb /
8914bd64fa82d01b3283eeb2fcfb1e98df623f0e
[ypp-sc-tools.main.git] / pctb / pages.c
1 /*
2  * Interaction with the YPP client via X11
3  */
4 /*
5  *  This is part of ypp-sc-tools, a set of third-party tools for assisting
6  *  players of Yohoho Puzzle Pirates.
7  * 
8  *  Copyright (C) 2009 Ian Jackson <ijackson@chiark.greenend.org.uk>
9  * 
10  *  This program is free software: you can redistribute it and/or modify
11  *  it under the terms of the GNU General Public License as published by
12  *  the Free Software Foundation, either version 3 of the License, or
13  *  (at your option) any later version.
14  * 
15  *  This program is distributed in the hope that it will be useful,
16  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
17  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  *  GNU General Public License for more details.
19  * 
20  *  You should have received a copy of the GNU General Public License
21  *  along with this program.  If not, see <http://www.gnu.org/licenses/>.
22  * 
23  *  Yohoho and Puzzle Pirates are probably trademarks of Three Rings and
24  *  are used without permission.  This program is not endorsed or
25  *  sponsored by Three Rings.
26  */
27
28 /*
29  * Only this file #includes the X11 headers, as they're quite
30  * pollutant of the namespace.
31  */
32
33 #include "structure.h"
34
35 #include <X11/Xlib.h>
36 #include <X11/extensions/XTest.h>
37 #include <X11/keysym.h>
38 #include <X11/Xutil.h>
39
40 #include <X11/extensions/XShm.h>
41 #include <sys/ipc.h>
42 #include <sys/shm.h>
43
44 CanonImage *page_images[MAX_PAGES];
45 int npages;
46 RgbImage *page0_rgbimage;
47
48 const char *ocean, *pirate;
49
50 static XWindowAttributes attr;
51 static Window id;
52 static Display *disp;
53 static struct timeval tv_startup;
54 static unsigned wwidth, wheight;
55 static int max_relevant_y= -1;
56
57 static XImage *shmim;
58 static XShmSegmentInfo shminfo;
59
60 DEBUG_DEFINE_DEBUGF(pages)
61
62 #define xassert(what)                                   \
63   ((what) ? (void)0 :                                   \
64    fatal("X11 operation unexpectedly failed."           \
65          " %s:%d: %s\n", __FILE__,__LINE__,#what))
66
67 static KeyCode keycode(KeySym sym) {
68   return XKeysymToKeycode(disp,sym);
69 }
70
71 void screenshot_startup(void) {
72   progress("starting...");
73   disp= XOpenDisplay(0);
74   if (!disp) fatal("Unable to open X11 display.");
75   sysassert(! gettimeofday(&tv_startup,0) );
76 }
77
78 /*---------- pager ----------*/
79
80 typedef RgbImage Snapshot;
81
82 static double last_input;
83 static const double min_update_allowance= 0.25;
84
85 static double timestamp(void) {
86   struct timeval tv;
87   
88   sysassert(! gettimeofday(&tv,0) );
89   double t= (tv.tv_sec - tv_startup.tv_sec) +
90             (tv.tv_usec - tv_startup.tv_usec) * 1e-6;
91   debugf("PAGING %f\n",t);
92   return t;
93 }
94 static void delay(double need_sleep) {
95   debugf("PAGING     delay %f\n",need_sleep);
96   sysassert(! usleep(need_sleep * 1e6) );
97 }
98
99 static void sync_after_input(void) {
100   xassert( XSync(disp, False) );
101   last_input= timestamp();
102 }
103
104 static void translate_coords_toroot(int wx, int wy, int *rx, int *ry) {
105   Window dummy;
106   xassert( XTranslateCoordinates(disp, id,attr.root, wx,wy, rx,ry, &dummy) );
107 }
108
109 static void check_client_window_all_on_screen(void) {
110   Rect onroot;
111   unsigned rwidth, rheight;
112   Window dummy;
113   unsigned bd, depth;
114   int rxpos, rypos;
115
116   xassert( XGetGeometry(disp,attr.root, &dummy, &rxpos,&rypos,
117                         &rwidth, &rheight,
118                         &bd,&depth) );
119   
120   translate_coords_toroot(0,0, &onroot.tl.x,&onroot.tl.y);
121   translate_coords_toroot(wwidth-1,wheight-1, &onroot.br.x,&onroot.br.y);
122   if (!(onroot.tl.x >= 0 &&
123         onroot.tl.y >= 0 &&
124         onroot.br.x < rwidth &&
125         onroot.br.y < rheight))
126     fatal("YPP client window is not entirely on the screen.");
127 }
128
129 static void check_not_disturbed(void) {
130   XEvent ev;
131   int r;
132   
133   for (;;) {
134     r= XCheckMaskEvent(disp, ~0, &ev);
135     if (r==False) return;
136
137     switch (ev.type) {
138     case VisibilityNotify:
139       if (ev.xvisibility.state != VisibilityUnobscured)
140         fatal("YPP client window has become obscured.");
141       break;
142     case ConfigureNotify:
143       check_client_window_all_on_screen();
144       break;
145     case FocusOut:
146       fatal("Focus left YPP client window.");
147       break;
148     case FocusIn:
149       warning("focus entered YPP client window ?!");
150       break;
151     default:
152       fatal("Received unexpected X11 event (type code %d)!", ev.type);
153     }
154   }
155 }      
156
157 static void send_key(KeySym sym) {
158   check_not_disturbed();
159   XTestFakeKeyEvent(disp, keycode(sym),1, 10);
160   XTestFakeKeyEvent(disp, keycode(sym),0, 10);
161 }
162 static void mouse_1_updown_here(void) {
163   check_not_disturbed();
164   XTestFakeButtonEvent(disp,1,1, 50);
165   XTestFakeButtonEvent(disp,1,0, 50);
166 }
167 static void mouse_1_updown(int x, int y) {
168   check_not_disturbed();
169   int screen= XScreenNumberOfScreen(attr.screen);
170   int xpos, ypos;
171   translate_coords_toroot(x,y, &xpos,&ypos);
172   XTestFakeMotionEvent(disp, screen, xpos,ypos, 0);
173   mouse_1_updown_here();
174 }
175
176 static int pgupdown;
177
178 static void send_pgup_many(void) {
179   int i;
180   for (i=0; i<25; i++) {
181     send_key(XK_Prior);
182     pgupdown--;
183   }
184   debugf("PAGING   PageUp x %d\n",i);
185   sync_after_input();
186 }
187 static void send_pgdown(void) {
188   send_key(XK_Next);
189   pgupdown++;
190   debugf("PAGING   PageDown\n");
191   sync_after_input();
192 }
193 static void send_pgdown_torestore(void) {
194   debugf("PAGING   PageDown x %d\n", -pgupdown);
195   while (pgupdown < 0) {
196     send_key(XK_Next);
197     pgupdown++;
198   }
199   sync_after_input();
200 }
201
202 static void free_snapshot(Snapshot **io) {
203   free(*io);
204   *io= 0;
205 }
206
207 #define SAMPLEMASK 0xfful
208
209 typedef struct {
210   int lshift, rshift;
211 } ShMask;
212
213 static void compute_shift_mask(ShMask *sm, unsigned long ximage_mask) {
214   sm->lshift= 0;
215   sm->rshift= 0;
216   
217   for (;;) {
218     if (ximage_mask <= (SAMPLEMASK>>1)) {
219       sm->lshift++;  ximage_mask <<= 1;
220     } else if (ximage_mask > SAMPLEMASK) {
221       sm->rshift++;  ximage_mask >>= 1;
222     } else {
223       break;
224     }
225     assert(!(sm->lshift && sm->rshift));
226   }
227   assert(sm->lshift < LONG_BIT);
228   assert(sm->rshift < LONG_BIT);
229 }
230
231 static void rtimestamp(double *t, const char *wh) {
232   double n= timestamp();
233   debugf("PAGING                INTERVAL %f  %s\n", n-*t, wh);
234   *t= n;
235 }
236
237 static void snapshot(Snapshot **output) {
238   XImage *im_use, *im_free=0;
239
240   ShMask shiftmasks[3];
241
242   debugf("PAGING   snapshot\n");
243
244   double begin= timestamp();
245   if (shmim) {
246     xassert( XShmGetImage(disp,id,shmim, 0,0, AllPlanes) );
247     rtimestamp(&begin, "XShmGetImage");
248
249     size_t dsz= shmim->bytes_per_line * shmim->height;
250     im_use= im_free= mmalloc(sizeof(*im_use) + dsz);
251     *im_free= *shmim;
252     im_free->data= (void*)(im_free+1);
253     memcpy(im_free->data, shmim->data, dsz);
254     rtimestamp(&begin, "mmalloc/memcpy");
255   } else {
256     xassert( im_use= im_free=
257              XGetImage(disp,id, 0,0, wwidth,wheight, AllPlanes, ZPixmap) );
258     rtimestamp(&begin, "XGetImage");
259   }
260
261 #define COMPUTE_SHIFT_MASK(ix, rgb) \
262   compute_shift_mask(&shiftmasks[ix], im_use->rgb##_mask)
263   COMPUTE_SHIFT_MASK(0, red);
264   COMPUTE_SHIFT_MASK(1, green);
265   COMPUTE_SHIFT_MASK(2, blue);
266   
267   if (!*output)
268     *output= alloc_rgb_image(wwidth, wheight);
269
270   rtimestamp(&begin, "compute_shift_masks+alloc_rgb_image");
271
272   int x,y,i;
273   unsigned char *op= (*output)->data;
274   for (y=0; y<wheight; y++) {
275     for (x=0; x<wwidth; x++) {
276       long xrgb= XGetPixel(im_use,x,y);
277       for (i=0; i<3; i++) {
278         unsigned long sample=
279           ((xrgb << shiftmasks[i].lshift) >> shiftmasks[i].rshift)
280           & SAMPLEMASK;
281         *op++= sample;
282       }
283     }
284   }
285
286   rtimestamp(&begin,"w*h*XGetPixel");
287   if (im_free)
288     XDestroyImage(im_free);
289   
290   rtimestamp(&begin,"XDestroyImage");
291   check_not_disturbed();
292
293   debugf("PAGING   snapshot done.\n");
294 }
295
296 static int identical(const Snapshot *a, const Snapshot *b) {
297   if (!(a->w == b->w &&
298         a->h == b->h))
299     return 0;
300
301   int compare_to= a->h;
302   if (max_relevant_y && compare_to > max_relevant_y)
303     compare_to= max_relevant_y;
304   
305   return !memcmp(a->data, b->data, a->w * 3 * compare_to);
306 }
307
308 static void wait_for_stability(Snapshot **output,
309                                const Snapshot *previously,
310                                void (*with_keypress)(void),
311                                const char *fmt, ...)
312      FMT(4,5);
313
314 static void wait_for_stability(Snapshot **output,
315                                const Snapshot *previously,
316                                void (*with_keypress)(void),
317                                const char *fmt, ...) {
318   va_list al;
319   va_start(al,fmt);
320
321   Snapshot *last=0;
322   /* waits longer if we're going to return an image identical to previously
323    * if previously==0, all images are considered identical to it */
324
325   char *doing= masprintf(fmt,al);
326   progress("%s",doing);
327
328   debugf("PAGING  wait_for_stability"
329           "  last_input=%f previously=%p `%s'\n",
330           last_input, previously, doing);
331
332   for (;;) {
333     double at_snapshot= timestamp();
334     double need_sleep= min_update_allowance - (at_snapshot - last_input);
335     if (need_sleep > 0) { delay(need_sleep); continue; }
336
337     snapshot(output);
338
339     if (!with_keypress &&
340         !(previously && identical(*output,previously))) {
341       debugf("PAGING  wait_for_stability  simple\n");
342       break;
343     }
344
345     if (last && identical(*output,last)) {
346       debugf("PAGING  wait_for_stability  stabilised\n");
347       break;
348     }
349     
350     progress_spinner("%s",doing);
351
352     debugf("PAGING  wait_for_stability  retry\n");
353
354     free_snapshot(&last); last=*output; *output=0;
355
356     if (with_keypress)
357       with_keypress();
358
359     delay(0.5);
360   }
361
362   free_snapshot(&last);
363   free(doing);
364   debugf("PAGING  wait_for_stability done.\n");
365   va_end(al);
366 }
367
368 static void raise_and_get_details(void) {
369   int evbase,errbase,majver,minver;
370   int wxpos, wypos;
371   unsigned bd,depth;
372
373   progress("raising and checking YPP client window...");
374
375   debugf("PAGING raise_and_get_details\n");
376
377   int xtest= XTestQueryExtension(disp, &evbase,&errbase,&majver,&minver);
378   if (!xtest) fatal("X server does not support the XTEST extension.");
379
380   xassert( XRaiseWindow(disp, id) );
381   /* in case VisibilityNotify triggers right away before we have had a
382    * change to raise; to avoid falsely detecting lowering in that case */
383   
384   xassert( XSelectInput(disp, id,
385                         StructureNotifyMask|
386                         VisibilityChangeMask
387                         ) );
388
389   xassert( XRaiseWindow(disp, id) );
390   /* in case the window was lowered between our Raise and our SelectInput;
391    * to avoid failing to detect that lowering */
392
393   xassert( XGetWindowAttributes(disp, id, &attr) );
394   xassert( XGetGeometry(disp,id, &attr.root,
395                         &wxpos,&wypos, &wwidth,&wheight,
396                         &bd,&depth) );
397
398   if (!(wwidth >= 320 && wheight >= 320))
399     fatal("YPP client window is implausibly small?");
400
401   check_client_window_all_on_screen();
402
403   int shm= XShmQueryExtension(disp);
404     shm=0;
405   if (shm) {
406     xassert( shmim= XShmCreateImage(disp, attr.visual, attr.depth, ZPixmap,
407                                     0,&shminfo, wwidth,wheight) );
408
409     sigset_t oldset, all;
410     sigfillset(&all);
411     sysassert(! sigprocmask(SIG_BLOCK,&all,&oldset) );
412
413     int pfd[2];
414     pid_t cleaner;
415     sysassert(! pipe(pfd) );
416     sysassert( (cleaner= fork()) != -1 );
417     if (!cleaner) {
418       sysassert(! close(pfd[1]) );
419       for (;;) {
420         int r= read(pfd[0], &shminfo.shmid, sizeof(shminfo.shmid));
421         if (!r) exit(0);
422         if (r==sizeof(shminfo.shmid)) break;
423         assert(r==-1 && errno==EINTR);
424       }
425       for (;;) {
426         char bc;
427         int r= read(pfd[0],&bc,1);
428         if (r>=0) break;
429         assert(r==-1 && errno==EINTR);
430       }
431       sysassert(! shmctl(shminfo.shmid,IPC_RMID,0) );
432       exit(0);
433     }
434     sysassert(! close(pfd[0]) );
435
436     sysassert(! sigprocmask(SIG_SETMASK,&oldset,0) );
437
438     assert(shmim->height == wheight);
439     sysassert( (shminfo.shmid=
440                 shmget(IPC_PRIVATE, shmim->bytes_per_line * wheight,
441                        IPC_CREAT|0600)) >= 0 );
442
443     sysassert( write(pfd[1],&shminfo.shmid,sizeof(shminfo.shmid)) ==
444                sizeof(shminfo.shmid) );
445     sysassert( shminfo.shmaddr= shmat(shminfo.shmid,0,0) );
446     shmim->data= shminfo.shmaddr;
447     shminfo.readOnly= False;
448     xassert( XShmAttach(disp,&shminfo) );
449
450     close(pfd[1]); /* causes IPC_RMID */
451   }
452 }
453
454 static void set_focus_commodity(void) {
455   int screen= XScreenNumberOfScreen(attr.screen);
456
457   progress("taking control of YPP client window...");
458
459   debugf("PAGING set_focus\n");
460
461   mouse_1_updown(160,160);
462   sync_after_input();
463
464   delay(0.5);
465   xassert( XSelectInput(disp, id,
466                         StructureNotifyMask|
467                         VisibilityChangeMask|
468                         FocusChangeMask
469                         ) );
470
471   int xpos,ypos;
472   translate_coords_toroot(10,10, &xpos,&ypos);
473   XTestFakeMotionEvent(disp,screen, xpos,ypos, 0);
474
475   sync_after_input();
476
477   debugf("PAGING raise_and_set_focus done.\n");
478 }
479
480 static CanonImage *convert_page(Snapshot *sn, RgbImage *ri) {
481   CanonImage *im;
482
483   fprintf(screenshot_file,
484           "P6\n"
485           "%d %d\n"
486           "255\n", sn->w, sn->h);
487
488   CANONICALISE_IMAGE(im, sn->w, sn->h, {
489     int i;
490     rgb= 0;
491     for (i=0; i<3; i++) {
492       rgb <<= 8;
493       unsigned long sample= RI_PIXEL(sn,x,y)[i];
494       rgb |= sample;
495       fputc(sample, screenshot_file);
496     }
497     if (ri)
498       CANONIMG_ALSO_STORERGB(ri);
499   });
500
501   sysassert(!ferror(screenshot_file));
502   sysassert(!fflush(screenshot_file));
503
504   return im;
505 }
506
507 static void prepare_ypp_client(void) {
508   CanonImage *test;
509   Snapshot *current=0;
510   
511   /* find the window and check it's on the right kind of screen */
512   raise_and_get_details();
513   wait_for_stability(&current,0,0, "checking current YPP client screen...");
514
515 #if 0
516 timestamp();
517 snapshot(&current);
518 snapshot(&current);
519 snapshot(&current);
520 snapshot(&current);
521 snapshot(&current);
522 snapshot(&current);
523 snapshot(&current);
524 snapshot(&current);
525 snapshot(&current);
526 snapshot(&current);
527 timestamp();
528 #endif
529
530   test= convert_page(current, 0);
531   find_structure(test, &max_relevant_y);
532   check_correct_commodities();
533   free(test);
534   free_snapshot(&current);
535
536   progress("requesting status information...");
537   mouse_1_updown(250, wheight-10);
538   mouse_1_updown_here();
539   mouse_1_updown_here();
540   XSync(disp,False);
541   check_not_disturbed();
542   send_key(XK_slash);
543   send_key(XK_w);
544   send_key(XK_Return);
545   sync_after_input();
546   sysassert(! usleep(1000000) );
547 }
548
549 void take_screenshots(void) {
550   Snapshot *current=0, *last=0;
551
552   prepare_ypp_client();
553   
554   /* page to the top - keep pressing page up until the image stops changing */
555   set_focus_commodity();
556   wait_for_stability(&current,0, send_pgup_many,
557                      "paging up to top of commodity list...");
558
559   /* now to actually page down */
560   for (;;) {
561     debugf("paging page %d\n",npages);
562
563     if (!(npages < MAX_PAGES))
564       fatal("Paging down seems to generate too many pages - max is %d.",
565             MAX_PAGES);
566     
567     page_images[npages]= convert_page(current, 0);
568     free_snapshot(&last); last=current; current=0;
569
570     debugf("PAGING page %d converted\n",npages);
571
572     wait_for_stability(&current,last, 0,
573                        "collecting screenshot of page %d...",
574                        npages+1);
575
576     if (npages &&  /* first pagedown doesn't do much */
577         identical(current,last)) {
578       free_snapshot(&current);
579       break;
580     }
581
582     send_pgdown();
583     npages++;
584   }
585   progress("finishing with the YPP client...");
586   send_pgdown_torestore();
587
588   debugf("PAGING all done.\n");
589   progress_log("collected %d screenshots.",npages);
590 }    
591
592 void take_one_screenshot(void) {
593   Snapshot *current=0;
594
595   prepare_ypp_client();
596   wait_for_stability(&current,0,0, "taking screenshot...");
597   page0_rgbimage= alloc_rgb_image(current->w, current->h);
598   page_images[0]= convert_page(current, page0_rgbimage);
599   npages= 1;
600   progress_log("collected single screenshot.");
601 }
602
603 void set_yppclient_window(unsigned long wul) {
604   id= wul;
605 }
606
607 DEBUG_DEFINE_SOME_DEBUGF(findypp,debugfind)
608
609 void find_yppclient_window(void) {
610   Window root, gotroot, gotparent;
611   int screen;
612   int nfound=0;
613   
614   if (id) return;
615   
616   progress("looking for YPP client window...");
617
618   static const char prefix[]= "Puzzle Pirates - ";
619   static const char onthe[]= " on the ";
620   static const char suffix[]= " ocean";
621 #define S(x) (sizeof((x))-1)
622
623   Atom wm_name= XInternAtom(disp,"WM_NAME",True);
624   xassert(wm_name != None);
625
626   for (screen=0; screen<ScreenCount(disp); screen++) {
627     debugfind("FINDYPP screen %d\n", screen);
628     root= RootWindow(disp,screen);
629     unsigned int nchildren1;
630     Window *children1=0;
631
632     xassert( XQueryTree(disp,root,
633                   &gotroot,&gotparent,
634                   &children1,&nchildren1) );
635     debugfind("FINDYPP screen %d nchildren1=%d\n", screen, nchildren1);
636
637     int i;
638     for (i=0; i<nchildren1; i++) {
639       Window w1= children1[i];
640       unsigned int nchildren2;
641       Window *children2=0;
642
643       xassert( XQueryTree(disp,w1,
644                           &gotroot,&gotparent,
645                           &children2,&nchildren2) );
646       debugfind("FINDYPP screen %d c1[%2d]=0x%08lx nchildren2=%d\n",
647                 screen, i, (unsigned long)w1, nchildren2);
648
649       int j;
650       for (j=-1; j<(int)nchildren2; j++) {
651         Window w2= j<0 ? w1 : children2[j];
652         debugfind("FINDYPP screen %d c1[%2d]=0x%08lx c2[%2d]=0x%08lx",
653                   screen, i, (unsigned long)w1, j, (unsigned long)w2);
654
655         int gotfmt;
656         Atom gottype;
657         unsigned long len, gotbytesafter;
658         char *title;
659         unsigned char *gottitle=0;
660         xassert( !XGetWindowProperty(disp,w2, wm_name,0,512, False,
661                                      AnyPropertyType,&gottype, &gotfmt, &len,
662                                      &gotbytesafter, &gottitle) );
663         title= (char*)gottitle;
664
665         if (DEBUGP(findypp)) {
666           debugfind(" gf=%d len=%lu gba=%lu \"", gotfmt,len,gotbytesafter);
667           char *p;
668           for (p=title; p < title+len; p++) {
669             char c= *p;
670             if (c>=' ' && c<=126) fputc(c,debug);
671             else fprintf(debug,"\\x%02x",c & 0xff);
672           }
673           fputs("\": ",debug);
674         }
675
676 #define REQUIRE(pred)                                                      \
677         if (!(pred)) { debugfind(" failed test  %s\n", #pred); continue; } \
678         else
679
680         REQUIRE( gottype!=None );
681         REQUIRE( len );
682         REQUIRE( gotfmt==8 );
683
684         REQUIRE( len >= S(prefix) + 1 + S(onthe) + 1 + S(suffix) );
685
686         char *spc1= strchr(  title        + S(prefix), ' ');  REQUIRE(spc1);
687         char *spc2= strrchr((title + len) - S(suffix), ' ');  REQUIRE(spc2);
688
689         REQUIRE( (title + len) - spc1  >= S(onthe)  + S(suffix) );
690         REQUIRE(  spc2         - title >= S(prefix) + S(onthe) );
691
692         REQUIRE( !memcmp(title,                   prefix, S(prefix)) );
693         REQUIRE( !memcmp(title + len - S(suffix), suffix, S(suffix))  );
694         REQUIRE( !memcmp(spc1,                    onthe,  S(onthe))  );
695
696 #define ASSIGN(what, start, end)                                \
697         what= masprintf("%.*s", (end)-(start), start);          \
698         if (o_##what) REQUIRE( !strcasecmp(o_##what, what) );   \
699         else
700
701         ASSIGN(ocean,  spc1 + S(onthe),   (title + len) - S(suffix));
702         ASSIGN(pirate, title + S(prefix),  spc1);
703
704         debugfind(" YES!\n");
705         id= w2;
706         nfound++;
707         progress_log("found YPP client (0x%lx):"
708                      " %s ocean - %s.",
709                      (unsigned long)id, ocean, pirate);
710       }
711       if (children2) XFree(children2);
712     }
713     if (children1) XFree(children1);
714   }
715   if (nfound>1)
716     fatal("Found several possible YPP clients.   Close one,\n"
717           " disambiguate with --pirate or --ocean,"
718           " or specify --window-id.\n");
719   if (nfound<1)
720     fatal("Did not find %sYPP client."
721           " Use --window-id and/or report this as a fault.\n",
722           o_ocean || o_pirate ? "matching ": "");
723 }