chiark / gitweb /
sigpubkey/sigprivkey: Provide a hash_if
[secnet.git] / rsa.c
1 /*
2  * rsa.c: implementation of RSA with PKCS#1 padding
3  */
4 /*
5  * This file is Free Software.  It was originally written for secnet.
6  *
7  * Copyright 1995-2003 Stephen Early
8  * Copyright 2002-2014 Ian Jackson
9  * Copyright 2001      Simon Tatham
10  * Copyright 2013      Mark Wooding
11  *
12  * You may redistribute secnet as a whole and/or modify it under the
13  * terms of the GNU General Public License as published by the Free
14  * Software Foundation; either version 3, or (at your option) any
15  * later version.
16  *
17  * You may redistribute this file and/or modify it under the terms of
18  * the GNU General Public License as published by the Free Software
19  * Foundation; either version 2, or (at your option) any later
20  * version.
21  *
22  * This software is distributed in the hope that it will be useful,
23  * but WITHOUT ANY WARRANTY; without even the implied warranty of
24  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
25  * GNU General Public License for more details.
26  *
27  * You should have received a copy of the GNU General Public License
28  * along with this software; if not, see
29  * https://www.gnu.org/licenses/gpl.html.
30  */
31
32
33 #include <stdio.h>
34 #include <string.h>
35 #include <gmp.h>
36 #include "secnet.h"
37 #include "util.h"
38 #include "unaligned.h"
39
40 #define AUTHFILE_ID_STRING "SSH PRIVATE KEY FILE FORMAT 1.1\n"
41
42 #define mpp(s,n) do { char *p = mpz_get_str(NULL,16,n); printf("%s 0x%sL\n", s, p); free(p); } while (0)
43
44 struct rsacommon {
45     uint8_t *hashbuf;
46 };
47
48 struct rsapriv {
49     closure_t cl;
50     struct sigprivkey_if ops;
51     struct cloc loc;
52     struct rsacommon common;
53     MP_INT n;
54     MP_INT p, dp;
55     MP_INT q, dq;
56     MP_INT w;
57 };
58 struct rsapub {
59     closure_t cl;
60     struct sigpubkey_if ops;
61     struct cloc loc;
62     struct rsacommon common;
63     MP_INT e;
64     MP_INT n;
65 };
66 /* Sign data. NB data must be smaller than modulus */
67
68 #define RSA_MAX_MODBYTES 2048
69 /* The largest modulus I've seen is 15360 bits, which works out at 1920
70  * bytes.  Using keys this big is quite implausible, but it doesn't cost us
71  * much to support them.
72  */
73
74 static const char *hexchars="0123456789abcdef";
75
76 static void rsa_sethash(struct rsacommon *c, struct hash_if *hash,
77                         const struct hash_if **in_ops)
78 {
79     free(c->hashbuf);
80     c->hashbuf=safe_malloc(hash->hlen, "generate_msg");
81     *in_ops=hash;
82 }
83 static void rsa_pub_sethash(void *sst, struct hash_if *hash)
84 {
85     struct rsapub *st=sst;
86     rsa_sethash(&st->common, hash, &st->ops.hash);
87 }
88 static void rsa_priv_sethash(void *sst, struct hash_if *hash)
89 {
90     struct rsapriv *st=sst;
91     rsa_sethash(&st->common, hash, &st->ops.hash);
92 }
93
94 static void emsa_pkcs1(MP_INT *n, MP_INT *m,
95                        const uint8_t *data, int32_t datalen)
96 {
97     char buff[2*RSA_MAX_MODBYTES + 1];
98     int msize, i;
99
100     /* RSA PKCS#1 v1.5 signature padding:
101      *
102      * <------------ msize hex digits ---------->
103      *
104      * 00 01 ff ff .... ff ff 00 vv vv vv .... vv
105      *
106      *                           <--- datalen -->
107      *                                 bytes
108      *                         = datalen*2 hex digits
109      *
110      * NB that according to PKCS#1 v1.5 we're supposed to include a
111      * hash function OID in the data.  We don't do that (because we
112      * don't have the hash function OID to hand here), thus violating
113      * the spec in a way that affects interop but not security.
114      *
115      * -iwj 17.9.2002
116      */
117
118     msize=mpz_sizeinbase(n, 16);
119
120     if (datalen*2+6>=msize) {
121         fatal("rsa: message too big");
122     }
123
124     strcpy(buff,"0001");
125
126     for (i=0; i<datalen; i++) {
127         buff[msize+(-datalen+i)*2]=hexchars[(data[i]&0xf0)>>4];
128         buff[msize+(-datalen+i)*2+1]=hexchars[data[i]&0xf];
129     }
130     
131     buff[msize-datalen*2-2]= '0';
132     buff[msize-datalen*2-1]= '0';
133  
134     for (i=4; i<msize-datalen*2-2; i++)
135        buff[i]='f';
136
137     buff[msize]=0;
138
139     mpz_set_str(m, buff, 16);
140 }
141
142 static bool_t rsa_sign(void *sst, uint8_t *data, int32_t datalen,
143                        struct buffer_if *msg)
144 {
145     struct rsapriv *st=sst;
146     MP_INT a, b, u, v, tmp, tmp2;
147     string_t signature = 0;
148     bool_t ok;
149
150     mpz_init(&a);
151     mpz_init(&b);
152
153     hash_hash(st->ops.hash,data,datalen,st->common.hashbuf);
154     /* Construct the message representative. */
155     emsa_pkcs1(&st->n, &a, st->common.hashbuf, st->ops.hash->hlen);
156
157     /*
158      * Produce an RSA signature (a^d mod n) using the Chinese
159      * Remainder Theorem. We compute:
160      * 
161      *   u = a^dp mod p    (== a^d mod p, since dp == d mod (p-1))
162      *   v = a^dq mod q    (== a^d mod q, similarly)
163      * 
164      * We also know w == iqmp * q, which has the property that w ==
165      * 0 mod q and w == 1 mod p. So (1-w) has the reverse property
166      * (congruent to 0 mod p and to 1 mod q). Hence we now compute
167      * 
168      *   b = w * u + (1-w) * v
169      *     = w * (u-v) + v
170      * 
171      * so that b is congruent to a^d both mod p and mod q. Hence b,
172      * reduced mod n, is the required signature.
173      */
174     mpz_init(&tmp);
175     mpz_init(&tmp2);
176     mpz_init(&u);
177     mpz_init(&v);
178
179     mpz_powm_sec(&u, &a, &st->dp, &st->p);
180     mpz_powm_sec(&v, &a, &st->dq, &st->q);
181     mpz_sub(&tmp, &u, &v);
182     mpz_mul(&tmp2, &tmp, &st->w);
183     mpz_add(&tmp, &tmp2, &v);
184     mpz_mod(&b, &tmp, &st->n);
185
186     mpz_clear(&tmp);
187     mpz_clear(&tmp2);
188     mpz_clear(&u);
189     mpz_clear(&v);
190
191     signature=write_mpstring(&b);
192
193     uint8_t *op = buf_append(msg,2);
194     if (!op) { ok=False; goto out; }
195     size_t l = strlen(signature);
196     assert(l < 65536);
197     put_uint16(op, l);
198     op = buf_append(msg,l);
199     if (!op) { ok=False; goto out; }
200     memcpy(op, signature, l);
201
202     ok = True;
203
204  out:
205     free(signature);
206     mpz_clear(&b);
207     mpz_clear(&a);
208     return ok;
209 }
210
211 static bool_t rsa_sig_unpick(void *sst, struct buffer_if *msg,
212                              struct alg_msg_data *sig)
213 {
214     uint8_t *lp = buf_unprepend(msg, 2);
215     if (!lp) return False;
216     sig->len = get_uint16(lp);
217     sig->start = buf_unprepend(msg, sig->len);
218     if (!sig->start) return False;
219
220     /* In `rsa_sig_check' below, we assume that we can write a nul
221      * terminator following the signature.  Make sure there's enough space.
222      */
223     if (msg->start >= msg->base + msg->alloclen)
224         return False;
225
226     return True;
227 }
228
229 static sig_checksig_fn rsa_sig_check;
230 static bool_t rsa_sig_check(void *sst, uint8_t *data, int32_t datalen,
231                             const struct alg_msg_data *sig)
232 {
233     struct rsapub *st=sst;
234     MP_INT a, b, c;
235     bool_t ok;
236
237     mpz_init(&a);
238     mpz_init(&b);
239     mpz_init(&c);
240
241     hash_hash(st->ops.hash,data,datalen,st->common.hashbuf);
242     emsa_pkcs1(&st->n, &a, st->common.hashbuf, st->ops.hash->hlen);
243
244     /* Terminate signature with a '0' - already checked that this will fit */
245     int save = sig->start[sig->len];
246     sig->start[sig->len] = 0;
247     mpz_set_str(&b, sig->start, 16);
248     sig->start[sig->len] = save;
249
250     mpz_powm(&c, &b, &st->e, &st->n);
251
252     ok=(mpz_cmp(&a, &c)==0);
253
254     mpz_clear(&c);
255     mpz_clear(&b);
256     mpz_clear(&a);
257
258     return ok;
259 }
260
261 static list_t *rsapub_apply(closure_t *self, struct cloc loc, dict_t *context,
262                             list_t *args)
263 {
264     struct rsapub *st;
265     item_t *i;
266     string_t e,n;
267
268     NEW(st);
269     st->cl.description="rsapub";
270     st->cl.type=CL_SIGPUBKEY;
271     st->cl.apply=NULL;
272     st->cl.interface=&st->ops;
273     st->ops.st=st;
274     st->ops.sethash=rsa_pub_sethash;
275     st->common.hashbuf=NULL;
276     st->ops.unpick=rsa_sig_unpick;
277     st->ops.check=rsa_sig_check;
278     st->ops.hash=0;
279     st->loc=loc;
280
281     i=list_elem(args,0);
282     if (i) {
283         if (i->type!=t_string) {
284             cfgfatal(i->loc,"rsa-public","first argument must be a string\n");
285         }
286         e=i->data.string;
287         if (mpz_init_set_str(&st->e,e,10)!=0) {
288             cfgfatal(i->loc,"rsa-public","encryption key \"%s\" is not a "
289                      "decimal number string\n",e);
290         }
291     } else {
292         cfgfatal(loc,"rsa-public","you must provide an encryption key\n");
293     }
294     if (mpz_sizeinbase(&st->e, 256) > RSA_MAX_MODBYTES) {
295         cfgfatal(loc, "rsa-public", "implausibly large public exponent\n");
296     }
297     
298     i=list_elem(args,1);
299     if (i) {
300         if (i->type!=t_string) {
301             cfgfatal(i->loc,"rsa-public","second argument must be a string\n");
302         }
303         n=i->data.string;
304         if (mpz_init_set_str(&st->n,n,10)!=0) {
305             cfgfatal(i->loc,"rsa-public","modulus \"%s\" is not a decimal "
306                      "number string\n",n);
307         }
308     } else {
309         cfgfatal(loc,"rsa-public","you must provide a modulus\n");
310     }
311     if (mpz_sizeinbase(&st->n, 256) > RSA_MAX_MODBYTES) {
312         cfgfatal(loc, "rsa-public", "implausibly large modulus\n");
313     }
314     return new_closure(&st->cl);
315 }
316
317 static uint32_t keyfile_get_int(struct cloc loc, FILE *f)
318 {
319     uint32_t r;
320     r=fgetc(f)<<24;
321     r|=fgetc(f)<<16;
322     r|=fgetc(f)<<8;
323     r|=fgetc(f);
324     cfgfile_postreadcheck(loc,f);
325     return r;
326 }
327
328 static uint16_t keyfile_get_short(struct cloc loc, FILE *f)
329 {
330     uint16_t r;
331     r=fgetc(f)<<8;
332     r|=fgetc(f);
333     cfgfile_postreadcheck(loc,f);
334     return r;
335 }
336
337 static list_t *rsapriv_apply(closure_t *self, struct cloc loc, dict_t *context,
338                              list_t *args)
339 {
340     struct rsapriv *st;
341     FILE *f;
342     cstring_t filename;
343     item_t *i;
344     long length;
345     uint8_t *b, *c;
346     int cipher_type;
347     MP_INT e,d,iqmp,tmp,tmp2,tmp3;
348     bool_t valid;
349
350     NEW(st);
351     st->cl.description="rsapriv";
352     st->cl.type=CL_SIGPRIVKEY;
353     st->cl.apply=NULL;
354     st->cl.interface=&st->ops;
355     st->ops.st=st;
356     st->ops.sethash=rsa_priv_sethash;
357     st->common.hashbuf=NULL;
358     st->ops.sign=rsa_sign;
359     st->ops.hash=0;
360     st->loc=loc;
361
362     /* Argument is filename pointing to SSH1 private key file */
363     i=list_elem(args,0);
364     if (i) {
365         if (i->type!=t_string) {
366             cfgfatal(i->loc,"rsa-private","first argument must be a string\n");
367         }
368         filename=i->data.string;
369     } else {
370         filename=NULL; /* Make compiler happy */
371         cfgfatal(loc,"rsa-private","you must provide a filename\n");
372     }
373
374     f=fopen(filename,"rb");
375     if (!f) {
376         if (just_check_config) {
377             Message(M_WARNING,"rsa-private (%s:%d): cannot open keyfile "
378                     "\"%s\"; assuming it's valid while we check the "
379                     "rest of the configuration\n",loc.file,loc.line,filename);
380             goto assume_valid;
381         } else {
382             fatal_perror("rsa-private (%s:%d): cannot open file \"%s\"",
383                          loc.file,loc.line,filename);
384         }
385     }
386
387     /* Check that the ID string is correct */
388     length=strlen(AUTHFILE_ID_STRING)+1;
389     b=safe_malloc(length,"rsapriv_apply");
390     if (fread(b,length,1,f)!=1 || memcmp(b,AUTHFILE_ID_STRING,length)!=0) {
391         cfgfatal_maybefile(f,loc,"rsa-private","failed to read magic ID"
392                            " string from SSH1 private keyfile \"%s\"\n",
393                            filename);
394     }
395     free(b);
396
397     cipher_type=fgetc(f);
398     keyfile_get_int(loc,f); /* "Reserved data" */
399     if (cipher_type != 0) {
400         cfgfatal(loc,"rsa-private","we don't support encrypted keyfiles\n");
401     }
402
403     /* Read the public key */
404     keyfile_get_int(loc,f); /* Not sure what this is */
405     length=(keyfile_get_short(loc,f)+7)/8;
406     if (length>RSA_MAX_MODBYTES) {
407         cfgfatal(loc,"rsa-private","implausible length %ld for modulus\n",
408                  length);
409     }
410     b=safe_malloc(length,"rsapriv_apply");
411     if (fread(b,length,1,f) != 1) {
412         cfgfatal_maybefile(f,loc,"rsa-private","error reading modulus\n");
413     }
414     mpz_init(&st->n);
415     read_mpbin(&st->n,b,length);
416     free(b);
417     length=(keyfile_get_short(loc,f)+7)/8;
418     if (length>RSA_MAX_MODBYTES) {
419         cfgfatal(loc,"rsa-private","implausible length %ld for e\n",length);
420     }
421     b=safe_malloc(length,"rsapriv_apply");
422     if (fread(b,length,1,f)!=1) {
423         cfgfatal_maybefile(f,loc,"rsa-private","error reading e\n");
424     }
425     mpz_init(&e);
426     read_mpbin(&e,b,length);
427     free(b);
428     
429     length=keyfile_get_int(loc,f);
430     if (length>1024) {
431         cfgfatal(loc,"rsa-private","implausibly long (%ld) key comment\n",
432                  length);
433     }
434     c=safe_malloc(length+1,"rsapriv_apply");
435     if (fread(c,length,1,f)!=1) {
436         cfgfatal_maybefile(f,loc,"rsa-private","error reading key comment\n");
437     }
438     c[length]=0;
439
440     /* Check that the next two pairs of characters are identical - the
441        keyfile is not encrypted, so they should be */
442
443     if (keyfile_get_short(loc,f) != keyfile_get_short(loc,f)) {
444         cfgfatal(loc,"rsa-private","corrupt keyfile\n");
445     }
446
447     /* Read d */
448     length=(keyfile_get_short(loc,f)+7)/8;
449     if (length>RSA_MAX_MODBYTES) {
450         cfgfatal(loc,"rsa-private","implausibly long (%ld) decryption key\n",
451                  length);
452     }
453     b=safe_malloc(length,"rsapriv_apply");
454     if (fread(b,length,1,f)!=1) {
455         cfgfatal_maybefile(f,loc,"rsa-private",
456                            "error reading decryption key\n");
457     }
458     mpz_init(&d);
459     read_mpbin(&d,b,length);
460     free(b);
461     /* Read iqmp (inverse of q mod p) */
462     length=(keyfile_get_short(loc,f)+7)/8;
463     if (length>RSA_MAX_MODBYTES) {
464         cfgfatal(loc,"rsa-private","implausibly long (%ld)"
465                  " iqmp auxiliary value\n", length);
466     }
467     b=safe_malloc(length,"rsapriv_apply");
468     if (fread(b,length,1,f)!=1) {
469         cfgfatal_maybefile(f,loc,"rsa-private",
470                            "error reading decryption key\n");
471     }
472     mpz_init(&iqmp);
473     read_mpbin(&iqmp,b,length);
474     free(b);
475     /* Read q (the smaller of the two primes) */
476     length=(keyfile_get_short(loc,f)+7)/8;
477     if (length>RSA_MAX_MODBYTES) {
478         cfgfatal(loc,"rsa-private","implausibly long (%ld) q value\n",
479                  length);
480     }
481     b=safe_malloc(length,"rsapriv_apply");
482     if (fread(b,length,1,f)!=1) {
483         cfgfatal_maybefile(f,loc,"rsa-private",
484                            "error reading q value\n");
485     }
486     mpz_init(&st->q);
487     read_mpbin(&st->q,b,length);
488     free(b);
489     /* Read p (the larger of the two primes) */
490     length=(keyfile_get_short(loc,f)+7)/8;
491     if (length>RSA_MAX_MODBYTES) {
492         cfgfatal(loc,"rsa-private","implausibly long (%ld) p value\n",
493                  length);
494     }
495     b=safe_malloc(length,"rsapriv_apply");
496     if (fread(b,length,1,f)!=1) {
497         cfgfatal_maybefile(f,loc,"rsa-private",
498                            "error reading p value\n");
499     }
500     mpz_init(&st->p);
501     read_mpbin(&st->p,b,length);
502     free(b);
503     
504     if (fclose(f)!=0) {
505         fatal_perror("rsa-private (%s:%d): fclose",loc.file,loc.line);
506     }
507
508     /*
509      * Now verify the validity of the key, and set up the auxiliary
510      * values for fast CRT signing.
511      */
512     valid=False;
513     i=list_elem(args,1);
514     mpz_init(&tmp);
515     mpz_init(&tmp2);
516     mpz_init(&tmp3);
517     if (i && i->type==t_bool && i->data.bool==False) {
518         Message(M_INFO,"rsa-private (%s:%d): skipping RSA key validity "
519                 "check\n",loc.file,loc.line);
520     } else {
521         /* Verify that p*q is equal to n. */
522         mpz_mul(&tmp, &st->p, &st->q);
523         if (mpz_cmp(&tmp, &st->n) != 0)
524             goto done_checks;
525
526         /*
527          * Verify that d*e is congruent to 1 mod (p-1), and mod
528          * (q-1). This is equivalent to it being congruent to 1 mod
529          * lambda(n) = lcm(p-1,q-1).  The usual `textbook' condition,
530          * that d e == 1 (mod (p-1)(q-1)) is sufficient, but not
531          * actually necessary.
532          */
533         mpz_mul(&tmp, &d, &e);
534         mpz_sub_ui(&tmp2, &st->p, 1);
535         mpz_mod(&tmp3, &tmp, &tmp2);
536         if (mpz_cmp_si(&tmp3, 1) != 0)
537             goto done_checks;
538         mpz_sub_ui(&tmp2, &st->q, 1);
539         mpz_mod(&tmp3, &tmp, &tmp2);
540         if (mpz_cmp_si(&tmp3, 1) != 0)
541             goto done_checks;
542
543         /* Verify that q*iqmp is congruent to 1 mod p. */
544         mpz_mul(&tmp, &st->q, &iqmp);
545         mpz_mod(&tmp2, &tmp, &st->p);
546         if (mpz_cmp_si(&tmp2, 1) != 0)
547             goto done_checks;
548     }
549     /* Now we know the key is valid (or we don't care). */
550     valid = True;
551     
552     /*
553      * Now we compute auxiliary values dp, dq and w to allow us
554      * to use the CRT optimisation when signing.
555      * 
556      *   dp == d mod (p-1)      so that a^dp == a^d mod p, for all a
557      *   dq == d mod (q-1)      similarly mod q
558      *   w == iqmp * q          so that w == 0 mod q, and w == 1 mod p
559      */
560     mpz_init(&st->dp);
561     mpz_init(&st->dq);
562     mpz_init(&st->w);
563     mpz_sub_ui(&tmp, &st->p, 1);
564     mpz_mod(&st->dp, &d, &tmp);
565     mpz_sub_ui(&tmp, &st->q, 1);
566     mpz_mod(&st->dq, &d, &tmp);
567     mpz_mul(&st->w, &iqmp, &st->q);
568     
569 done_checks:
570     if (!valid) {
571         cfgfatal(loc,"rsa-private","file \"%s\" does not contain a "
572                  "valid RSA key!\n",filename);
573     }
574     mpz_clear(&tmp);
575     mpz_clear(&tmp2);
576     mpz_clear(&tmp3);
577
578     free(c);
579     mpz_clear(&e);
580     mpz_clear(&d);
581     mpz_clear(&iqmp);
582
583 assume_valid:
584     return new_closure(&st->cl);
585 }
586
587 void rsa_module(dict_t *dict)
588 {
589     add_closure(dict,"rsa-private",rsapriv_apply);
590     add_closure(dict,"rsa-public",rsapub_apply);
591 }