]> Pileus Git - ~andy/fetchmail/blob - sink.c
74244e105ae71ff401c1a479bb7b4eea1da6da07
[~andy/fetchmail] / sink.c
1 /*
2  * sink.c -- forwarding/delivery support for fetchmail
3  *
4  * The interface of this module (open_sink(), stuff_line(), close_sink(),
5  * release_sink()) seals off the delivery logic from the protocol machine,
6  * so the latter won't have to care whether it's shipping to an [SL]MTP
7  * listener daemon or an MDA pipe.
8  *
9  * Copyright 1998 by Eric S. Raymond
10  * For license terms, see the file COPYING in this directory.
11  */
12
13 #include  "config.h"
14 #include  <stdio.h>
15 #include  <errno.h>
16 #include  <string.h>
17 #include  <signal.h>
18 #include  <time.h>
19 #ifdef HAVE_MEMORY_H
20 #include  <memory.h>
21 #endif /* HAVE_MEMORY_H */
22 #if defined(STDC_HEADERS)
23 #include  <stdlib.h>
24 #endif
25 #if defined(HAVE_UNISTD_H)
26 #include  <unistd.h>
27 #endif
28 #if defined(HAVE_STDARG_H)
29 #include  <stdarg.h>
30 #else
31 #include  <varargs.h>
32 #endif
33 #include  <ctype.h>
34 #include  <time.h>
35
36 #include  "fetchmail.h"
37 #include  "socket.h"
38 #include  "smtp.h"
39 #include  "i18n.h"
40
41 /* BSD portability hack...I know, this is an ugly place to put it */
42 #if !defined(SIGCHLD) && defined(SIGCLD)
43 #define SIGCHLD SIGCLD
44 #endif
45
46 /* makes the open_sink()/close_sink() pair non-reentrant */
47 static int lmtp_responses;
48
49 void smtp_close(struct query *ctl, int sayquit)
50 /* close the socket to SMTP server */
51 {
52     if (ctl->smtp_socket != -1)
53     {
54         if (sayquit)
55             SMTP_quit(ctl->smtp_socket);
56         SockClose(ctl->smtp_socket);
57         ctl->smtp_socket = -1;
58     }
59     batchcount = 0;
60 }
61
62 int smtp_open(struct query *ctl)
63 /* try to open a socket to the appropriate SMTP server for this query */ 
64 {
65     char *parsed_host = NULL;
66
67     /* maybe it's time to close the socket in order to force delivery */
68     if (NUM_NONZERO(ctl->batchlimit)) {
69         if (batchcount == ctl->batchlimit)
70             smtp_close(ctl, 1);
71         batchcount++;
72     }
73
74     /* if no socket to any SMTP host is already set up, try to open one */
75     if (ctl->smtp_socket == -1) 
76     {
77         /* 
78          * RFC 1123 requires that the domain name in HELO address is a
79          * "valid principal domain name" for the client host. If we're
80          * running in invisible mode, violate this with malice
81          * aforethought in order to make the Received headers and
82          * logging look right.
83          *
84          * In fact this code relies on the RFC1123 requirement that the
85          * SMTP listener must accept messages even if verification of the
86          * HELO name fails (RFC1123 section 5.2.5, paragraph 2).
87          *
88          * How we compute the true mailhost name to pass to the
89          * listener doesn't affect behavior on RFC1123-violating
90          * listeners that check for name match; we're going to lose
91          * on those anyway because we can never give them a name
92          * that matches the local machine fetchmail is running on.
93          * What it will affect is the listener's logging.
94          */
95         struct idlist   *idp;
96         const char *id_me = run.invisible ? ctl->server.truename : fetchmailhost;
97         int oldphase = phase;
98
99         errno = 0;
100
101         /*
102          * Run down the SMTP hunt list looking for a server that's up.
103          * Use both explicit hunt entries (value TRUE) and implicit 
104          * (default) ones (value FALSE).
105          */
106         oldphase = phase;
107         phase = LISTENER_WAIT;
108
109         set_timeout(ctl->server.timeout);
110         for (idp = ctl->smtphunt; idp; idp = idp->next)
111         {
112             char        *cp;
113 #ifdef INET6_ENABLE 
114             char        *portnum = SMTP_PORT;
115 #else
116             int         portnum = SMTP_PORT;
117 #endif /* INET6_ENABLE */
118
119             xalloca(parsed_host, char *, strlen(idp->id) + 1);
120
121             ctl->smtphost = idp->id;  /* remember last host tried. */
122             if(ctl->smtphost[0]=='/')
123                 ctl->listener = LMTP_MODE;
124
125             strcpy(parsed_host, idp->id);
126             if ((cp = strrchr(parsed_host, '/')))
127             {
128                 *cp++ = 0;
129 #ifdef INET6_ENABLE 
130                 portnum = cp;
131 #else
132                 portnum = atoi(cp);
133 #endif /* INET6_ENABLE */
134             }
135
136             if (ctl->smtphost[0]=='/'){
137                 if ((ctl->smtp_socket = UnixOpen(ctl->smtphost))==-1)
138                     continue;
139             } else
140                 if ((ctl->smtp_socket = SockOpen(parsed_host,portnum,NULL,
141                                              ctl->server.plugout)) == -1)
142                     continue;
143
144             /* return immediately for ODMR */
145             if (ctl->server.protocol == P_ODMR)
146             {
147                set_timeout(0);
148                phase = oldphase;
149                return(ctl->smtp_socket); /* success */
150             }
151
152             /* are we doing SMTP or LMTP? */
153             SMTP_setmode(ctl->listener);
154
155             /* first, probe for ESMTP */
156             if (SMTP_ok(ctl->smtp_socket) == SM_OK &&
157                     SMTP_ehlo(ctl->smtp_socket, id_me, 
158                               ctl->server.esmtp_name, ctl->server.esmtp_password,
159                               &ctl->server.esmtp_options) == SM_OK)
160                break;  /* success */
161
162             /*
163              * RFC 1869 warns that some listeners hang up on a failed EHLO,
164              * so it's safest not to assume the socket will still be good.
165              */
166             smtp_close(ctl, 0);
167
168             /* if opening for ESMTP failed, try SMTP */
169             if ((ctl->smtp_socket = SockOpen(parsed_host,portnum,NULL,
170                                              ctl->server.plugout)) == -1)
171                 continue;
172
173             if (SMTP_ok(ctl->smtp_socket) == SM_OK && 
174                     SMTP_helo(ctl->smtp_socket, id_me) == SM_OK)
175                 break;  /* success */
176
177             smtp_close(ctl, 0);
178         }
179         set_timeout(0);
180         phase = oldphase;
181     }
182
183     /*
184      * RFC 1123 requires that the domain name part of the
185      * RCPT TO address be "canonicalized", that is a FQDN
186      * or MX but not a CNAME.  Some listeners (like exim)
187      * enforce this.  Now that we have the actual hostname,
188      * compute what we should canonicalize with.
189      * 
190      * make sure we do not forget to drop the /port if
191      * using LMTP (hmh)
192      */
193     if (ctl->listener == LMTP_MODE && !ctl->smtpaddress) 
194     {
195         if (parsed_host && parsed_host[0] != 0)
196                 ctl->destaddr = xstrdup(parsed_host);
197         else 
198                 ctl->destaddr = (ctl->smtphost && ctl->smtphost[0] != '/') ? ctl->smtphost : "localhost";
199     } 
200     else 
201         ctl->destaddr = ctl->smtpaddress ? ctl->smtpaddress : ( ctl->smtphost && ctl->smtphost[0] != '/' ? ctl->smtphost : "localhost");
202
203     if (outlevel >= O_DEBUG && ctl->smtp_socket != -1)
204         report(stdout, GT_("forwarding to %s\n"), ctl->smtphost);
205
206     return(ctl->smtp_socket);
207 }
208
209 static void sanitize(char *s)
210 /* replace unsafe shellchars by an _ */
211 {
212     const static char *ok_chars = " 1234567890!@%-_=+:,./abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ";
213     char *cp;
214
215     for (cp = s; *(cp += strspn(cp, ok_chars)); /* NO INCREMENT */)
216         *cp = '_';
217 }
218
219 static int send_bouncemail(struct query *ctl, struct msgblk *msg,
220                            int userclass, char *message,
221                            int nerrors, char *errors[])
222 /* bounce back an error report a la RFC 1892 */
223 {
224     char daemon_name[18 + HOSTLEN] = "FETCHMAIL-DAEMON@";
225     char boundary[BUFSIZ], *bounce_to;
226     int sock;
227
228     /* don't bounce in reply to undeliverable bounces */
229     if (!msg->return_path[0] || strcmp(msg->return_path, "<>") == 0)
230         return(FALSE);
231
232     bounce_to = (run.bouncemail ? msg->return_path : run.postmaster);
233
234     SMTP_setmode(SMTP_MODE);
235
236     /* can't just use fetchmailhost here, it might be localhost */
237     strcat(daemon_name, host_fqdn());
238
239     /* we need only SMTP for this purpose */
240     if ((sock = SockOpen("localhost", SMTP_PORT, NULL, NULL)) == -1
241                 || SMTP_ok(sock) != SM_OK 
242                 || SMTP_helo(sock, fetchmailhost) != SM_OK
243                 || SMTP_from(sock, daemon_name, (char *)NULL) != SM_OK
244                 || SMTP_rcpt(sock, bounce_to) != SM_OK
245                 || SMTP_data(sock) != SM_OK)
246         return(FALSE);
247
248     /* our first duty is to keep the sacred foo counters turning... */
249 #ifdef HAVE_SNPRINTF
250     snprintf(boundary, sizeof(boundary),
251 #else
252     sprintf(boundary,
253 #endif /* HAVE_SNPRINTF */
254             "foo-mani-padme-hum-%d-%d-%ld", 
255             (int)getpid(), (int)getppid(), time((time_t *)NULL));
256
257     if (outlevel >= O_VERBOSE)
258         report(stdout, GT_("SMTP: (bounce-message body)\n"));
259     else
260         /* this will usually go to sylog... */
261         report(stderr, GT_("mail from %s bounced to %s\n"),
262                daemon_name, bounce_to);
263
264     /* bouncemail headers */
265     SockPrintf(sock, "Return-Path: <>\r\n");
266     SockPrintf(sock, "From: %s\r\n", daemon_name);
267     SockPrintf(sock, "To: %s\r\n", bounce_to);
268     SockPrintf(sock, "MIME-Version: 1.0\r\n");
269     SockPrintf(sock, "Content-Type: multipart/report; report-type=delivery-status;\r\n\tboundary=\"%s\"\r\n", boundary);
270     SockPrintf(sock, "\r\n");
271
272     /* RFC1892 part 1 -- human-readable message */
273     SockPrintf(sock, "--%s\r\n", boundary); 
274     SockPrintf(sock,"Content-Type: text/plain\r\n");
275     SockPrintf(sock, "\r\n");
276     SockWrite(sock, message, strlen(message));
277     SockPrintf(sock, "\r\n");
278     SockPrintf(sock, "\r\n");
279
280     if (nerrors)
281     {
282         struct idlist   *idp;
283         int             nusers;
284         
285         /* RFC1892 part 2 -- machine-readable responses */
286         SockPrintf(sock, "--%s\r\n", boundary); 
287         SockPrintf(sock,"Content-Type: message/delivery-status\r\n");
288         SockPrintf(sock, "\r\n");
289         SockPrintf(sock, "Reporting-MTA: dns; %s\r\n", fetchmailhost);
290
291         nusers = 0;
292         for (idp = msg->recipients; idp; idp = idp->next)
293             if (idp->val.status.mark == userclass)
294             {
295                 char    *error;
296                 /* Minimum RFC1894 compliance + Diagnostic-Code field */
297                 SockPrintf(sock, "\r\n");
298                 SockPrintf(sock, "Final-Recipient: rfc822; %s@%s\r\n", 
299                            idp->id, fetchmailhost);
300                 SockPrintf(sock, "Last-Attempt-Date: %s\r\n", rfc822timestamp());
301                 SockPrintf(sock, "Action: failed\r\n");
302
303                 if (nerrors == 1)
304                     /* one error applies to all users */
305                     error = errors[0];
306                 else if (nerrors > nusers)
307                 {
308                     SockPrintf(sock, "Internal error: SMTP error count doesn't match number of recipients.\r\n");
309                     break;
310                 }
311                 else
312                     /* errors correspond 1-1 to selected users */
313                     error = errors[nusers++];
314                 
315                 if (strlen(error) > 9 && isdigit(error[4])
316                         && error[5] == '.' && isdigit(error[6])
317                         && error[7] == '.' && isdigit(error[8]))
318                     /* Enhanced status code available, use it */
319                     SockPrintf(sock, "Status: %5.5s\r\n", &(error[4]));
320                 else
321                     /* Enhanced status code not available, fake one */
322                     SockPrintf(sock, "Status: %c.0.0\r\n", error[0]);
323                 SockPrintf(sock, "Diagnostic-Code: %s\r\n", error);
324             }
325         SockPrintf(sock, "\r\n");
326     }
327
328     /* RFC1892 part 3 -- headers of undelivered message */
329     SockPrintf(sock, "--%s\r\n", boundary); 
330     SockPrintf(sock, "Content-Type: text/rfc822-headers\r\n");
331     SockPrintf(sock, "\r\n");
332     SockWrite(sock, msg->headers, strlen(msg->headers));
333     SockPrintf(sock, "\r\n");
334     SockPrintf(sock, "--%s--\r\n", boundary); 
335
336     if (SMTP_eom(sock) != SM_OK || SMTP_quit(sock))
337         return(FALSE);
338
339     SockClose(sock);
340
341     return(TRUE);
342 }
343
344 static int handle_smtp_report(struct query *ctl, struct msgblk *msg)
345 /* handle SMTP errors based on the content of SMTP_response */
346 /* return of PS_REFUSED deletes mail from the server; PS_TRANSIENT keeps it */
347 {
348     int smtperr = atoi(smtp_response);
349     char *responses[1];
350
351     xalloca(responses[0], char *, strlen(smtp_response)+1);
352     strcpy(responses[0], smtp_response);
353
354 #ifdef __UNUSED__
355     /*
356      * Don't do this!  It can really mess you up if, for example, you're
357      * reporting an error with a single RCPT TO address among several;
358      * RSET discards the message body and it doesn't get sent to the
359      * valid recipients.
360      */
361     SMTP_rset(ctl->smtp_socket);    /* stay on the safe side */
362     if (outlevel >= O_DEBUG)
363         report(stdout, GT_("Saved error is still %d\n"), smtperr);
364 #endif /* __UNUSED */
365
366     /*
367      * Note: send_bouncemail message strings are not made subject
368      * to gettext translation because (a) they're going to be 
369      * embedded in a text/plain 7bit part, and (b) they're
370      * going to be associated with listener error-response
371      * messages, which are probably in English (none of the
372      * MTAs I know about are internationalized).
373      */
374     if (str_find(&ctl->antispam, smtperr))
375     {
376         /*
377          * SMTP listener explicitly refuses to deliver mail
378          * coming from this address, probably due to an
379          * anti-spam domain exclusion.  Respect this.  Don't
380          * try to ship the message, and don't prevent it from
381          * being deleted.  There's no point in bouncing the
382          * email either since most spammers don't put their
383          * real return email address anywhere in the headers
384          * (unless the user insists with the SET SPAMBOUNCE
385          * config option).
386          *
387          * Default values:
388          *
389          * 571 = sendmail's "unsolicited email refused"
390          * 550 = exim's new antispam response (temporary)
391          * 501 = exim's old antispam response
392          * 554 = Postfix antispam response.
393          *
394          */
395         if (run.spambounce)
396                 send_bouncemail(ctl, msg, XMIT_ACCEPT,
397                         "Our spam filter rejected this transaction.\r\n", 
398                         1, responses);
399         return(PS_REFUSED);
400     }
401
402     /*
403      * Suppress error message only if the response specifically 
404      * meant `excluded for policy reasons'.  We *should* see
405      * an error when the return code is less specific.
406      */
407     if (smtperr >= 400)
408         report(stderr, GT_("%cMTP error: %s\n"), 
409               ctl->listener,
410               responses[0]);
411
412     switch (smtperr)
413     {
414     case 552: /* message exceeds fixed maximum message size */
415         /*
416          * Permanent no-go condition on the
417          * ESMTP server.  Don't try to ship the message, 
418          * and allow it to be deleted.
419          */
420         if (run.bouncemail)
421             send_bouncemail(ctl, msg, XMIT_ACCEPT,
422                         "This message was too large (SMTP error 552).\r\n", 
423                         1, responses);
424         return(PS_REFUSED);
425   
426     case 553: /* invalid sending domain */
427         /*
428          * These latter days 553 usually means a spammer is trying to
429          * cover his tracks.  We never bouncemail on these, because 
430          * (a) the return address is invalid by definition, and 
431          * (b) we wouldn't want spammers to get confirmation that
432          * this address is live, anyway.
433          */
434 #ifdef __DONT_FEED_THE_SPAMMERS__
435         if (run.bouncemail)
436             send_bouncemail(ctl, msg, XMIT_ACCEPT,
437                         "Invalid address in MAIL FROM (SMTP error 553).\r\n", 
438                         1, responses);
439 #endif /* __DONT_FEED_THE_SPAMMERS__ */
440         return(PS_REFUSED);
441
442     default:
443         /* bounce non-transient errors back to the sender */
444         if (smtperr >= 500 && smtperr <= 599)
445             if (send_bouncemail(ctl, msg, XMIT_ACCEPT,
446                                 "General SMTP/ESMTP error.\r\n", 
447                                 1, responses))
448                 return(run.bouncemail ? PS_REFUSED : PS_TRANSIENT);
449         /*
450          * We're going to end up here on 4xx errors, like:
451          *
452          * 451: temporarily unable to identify sender (exim)
453          * 452: temporary out-of-queue-space condition on the ESMTP server.
454          *
455          * These are temporary errors.  Don't try to ship the message,
456          * and suppress deletion so it can be retried on a future
457          * retrieval cycle.
458          *
459          * Bouncemail *might* be appropriate here as a delay
460          * notification (note; if we ever add this, we must make
461          * sure the RFC1894 Action field is "delayed" rather than
462          * "failed").  But it's not really necessary because
463          * these are not actual failures, we're very likely to be
464          * able to recover on the next cycle.
465          */
466         return(PS_TRANSIENT);
467     }
468 }
469
470 /* these are shared by open_sink and stuffline */
471 static FILE *sinkfp;
472
473 int stuffline(struct query *ctl, char *buf)
474 /* ship a line to the given control block's output sink (SMTP server or MDA) */
475 {
476     int n, oldphase;
477     char *last;
478
479     /* The line may contain NUL characters. Find the last char to use
480      * -- the real line termination is the sequence "\n\0".
481      */
482     last = buf;
483     while ((last += strlen(last)) && (last[-1] != '\n'))
484         last++;
485
486     /* fix message lines that have only \n termination (for qmail) */
487     if (ctl->forcecr)
488     {
489         if (last - 1 == buf || last[-2] != '\r')
490         {
491             last[-1] = '\r';
492             *last++  = '\n';
493             *last    = '\0';
494         }
495     }
496
497     oldphase = phase;
498     phase = FORWARDING_WAIT;
499
500     /*
501      * SMTP byte-stuffing.  We only do this if the protocol does *not*
502      * use .<CR><LF> as EOM.  If it does, the server will already have
503      * decorated any . lines it sends back up.
504      */
505     if (*buf == '.')
506     {
507         if (ctl->server.base_protocol->delimited)       /* server has already byte-stuffed */
508         {
509             if (ctl->mda)
510                 ++buf;
511             else
512                 /* writing to SMTP, leave the byte-stuffing in place */;
513         }
514         else /* if (!protocol->delimited)       -- not byte-stuffed already */
515         {
516             if (!ctl->mda)
517                 SockWrite(ctl->smtp_socket, buf, 1);    /* byte-stuff it */
518             else
519                 /* leave it alone */;
520         }
521     }
522
523     /* we may need to strip carriage returns */
524     if (ctl->stripcr)
525     {
526         char    *sp, *tp;
527
528         for (sp = tp = buf; sp < last; sp++)
529             if (*sp != '\r')
530                 *tp++ =  *sp;
531         *tp = '\0';
532         last = tp;
533     }
534
535     n = 0;
536     if (ctl->mda || ctl->bsmtp)
537         n = fwrite(buf, 1, last - buf, sinkfp);
538     else if (ctl->smtp_socket != -1)
539         n = SockWrite(ctl->smtp_socket, buf, last - buf);
540
541     phase = oldphase;
542
543     return(n);
544 }
545
546 static int open_bsmtp_sink(struct query *ctl, struct msgblk *msg,
547               int *good_addresses, int *bad_addresses)
548 /* open a BSMTP stream */
549 {
550     struct      idlist *idp;
551
552     if (strcmp(ctl->bsmtp, "-") == 0)
553         sinkfp = stdout;
554     else
555         sinkfp = fopen(ctl->bsmtp, "a");
556
557     /* see the ap computation under the SMTP branch */
558     fprintf(sinkfp, 
559             "MAIL FROM: %s", (msg->return_path[0]) ? msg->return_path : user);
560
561     if (ctl->pass8bits || (ctl->mimemsg & MSG_IS_8BIT))
562         fputs(" BODY=8BITMIME", sinkfp);
563     else if (ctl->mimemsg & MSG_IS_7BIT)
564         fputs(" BODY=7BIT", sinkfp);
565
566     /* exim's BSMTP processor does not handle SIZE */
567     /* fprintf(sinkfp, " SIZE=%d", msg->reallen); */
568
569     fprintf(sinkfp, "\r\n");
570
571     /*
572      * RFC 1123 requires that the domain name part of the
573      * RCPT TO address be "canonicalized", that is a FQDN
574      * or MX but not a CNAME.  Some listeners (like exim)
575      * enforce this.  Now that we have the actual hostname,
576      * compute what we should canonicalize with.
577      */
578     ctl->destaddr = ctl->smtpaddress ? ctl->smtpaddress : "localhost";
579
580     *bad_addresses = 0;
581     for (idp = msg->recipients; idp; idp = idp->next)
582         if (idp->val.status.mark == XMIT_ACCEPT)
583         {
584             if (ctl->smtpname)
585                 fprintf(sinkfp, "RCPT TO: %s\r\n", ctl->smtpname);
586             else if (strchr(idp->id, '@'))
587                 fprintf(sinkfp,
588                         "RCPT TO: %s\r\n", idp->id);
589             else
590                 fprintf(sinkfp,
591                         "RCPT TO: %s@%s\r\n", idp->id, ctl->destaddr);
592             *good_addresses = 0;
593         }
594
595     fputs("DATA\r\n", sinkfp);
596
597     if (ferror(sinkfp))
598     {
599         report(stderr, GT_("BSMTP file open or preamble write failed\n"));
600         return(PS_BSMTP);
601     }
602
603     return(PS_SUCCESS);
604 }
605
606 /* this is experimental and will be removed if double bounces are reported */
607 #define EXPLICIT_BOUNCE_ON_BAD_ADDRESS
608
609 static int open_smtp_sink(struct query *ctl, struct msgblk *msg,
610               int *good_addresses, int *bad_addresses)
611 /* open an SMTP stream */
612 {
613     const char  *ap;
614     struct      idlist *idp;
615     char                options[MSGBUFSIZE]; 
616     char                addr[HOSTLEN+USERNAMELEN+1];
617 #ifdef EXPLICIT_BOUNCE_ON_BAD_ADDRESS
618     char                **from_responses;
619 #endif /* EXPLICIT_BOUNCE_ON_BAD_ADDRESS */
620     int         total_addresses;
621     int         force_transient_error;
622
623     /*
624      * Compute ESMTP options.
625      */
626     options[0] = '\0';
627     if (ctl->server.esmtp_options & ESMTP_8BITMIME) {
628          if (ctl->pass8bits || (ctl->mimemsg & MSG_IS_8BIT))
629             strcpy(options, " BODY=8BITMIME");
630          else if (ctl->mimemsg & MSG_IS_7BIT)
631             strcpy(options, " BODY=7BIT");
632     }
633
634     if ((ctl->server.esmtp_options & ESMTP_SIZE) && msg->reallen > 0)
635         sprintf(options + strlen(options), " SIZE=%d", msg->reallen);
636
637     /*
638      * Try to get the SMTP listener to take the Return-Path
639      * address as MAIL FROM.  If it won't, fall back on the
640      * remotename and mailserver host.  This won't affect replies,
641      * which use the header From address anyway; the MAIL FROM
642      * address is a place for the SMTP listener to send
643      * bouncemail.  The point is to guarantee a FQDN in the MAIL
644      * FROM line -- some SMTP listeners, like smail, become
645      * unhappy otherwise.
646      *
647      * RFC 1123 requires that the domain name part of the
648      * MAIL FROM address be "canonicalized", that is a
649      * FQDN or MX but not a CNAME.  We'll assume the Return-Path
650      * header is already in this form here (it certainly
651      * is if rewrite is on).  RFC 1123 is silent on whether
652      * a nonexistent hostname part is considered canonical.
653      *
654      * This is a potential problem if the MTAs further upstream
655      * didn't pass canonicalized From/Return-Path lines, *and* the
656      * local SMTP listener insists on them. 
657      *
658      * Handle the case where an upstream MTA is setting a return
659      * path equal to "@".  Ghod knows why anyone does this, but 
660      * it's been reported to happen in mail from Amazon.com and
661      * Motorola.
662      */
663     if (!msg->return_path[0] || (0 == strcmp(msg->return_path, "@")))
664     {
665 #ifdef HAVE_SNPRINTF
666         snprintf(addr, sizeof(addr),
667 #else
668         sprintf(addr,
669 #endif /* HAVE_SNPRINTF */
670               "%s@%s", ctl->remotename, ctl->server.truename);
671         ap = addr;
672     }
673     else if (strchr(msg->return_path,'@') || strchr(msg->return_path,'!'))
674         ap = msg->return_path;
675     else                /* in case Return-Path existed but was local */
676     {
677 #ifdef HAVE_SNPRINTF
678         snprintf(addr, sizeof(addr),
679 #else
680         sprintf(addr,
681 #endif /* HAVE_SNPRINTF */
682                 "%s@%s", msg->return_path, ctl->server.truename);
683         ap = addr;
684     }
685
686     if (SMTP_from(ctl->smtp_socket, ap, options) != SM_OK)
687     {
688         int err = handle_smtp_report(ctl, msg);
689
690         SMTP_rset(ctl->smtp_socket);    /* stay on the safe side */
691         return(err);
692     }
693
694     /*
695      * Now list the recipient addressees
696      */
697     total_addresses = 0;
698     for (idp = msg->recipients; idp; idp = idp->next)
699         total_addresses++;
700 #ifdef EXPLICIT_BOUNCE_ON_BAD_ADDRESS
701     xalloca(from_responses, char **, sizeof(char *) * total_addresses);
702 #endif /* EXPLICIT_BOUNCE_ON_BAD_ADDRESS */
703     for (idp = msg->recipients; idp; idp = idp->next)
704         if (idp->val.status.mark == XMIT_ACCEPT)
705         {
706             if (strchr(idp->id, '@'))
707                 strcpy(addr, idp->id);
708             else {
709                 if (ctl->smtpname) {
710 #ifdef HAVE_SNPRINTF
711                     snprintf(addr, sizeof(addr), "%s", ctl->smtpname);
712 #else
713                     sprintf(addr, "%s", ctl->smtpname);
714 #endif /* HAVE_SNPRINTF */
715
716                 } else {
717 #ifdef HAVE_SNPRINTF
718                   snprintf(addr, sizeof(addr), "%s@%s", idp->id, ctl->destaddr);
719 #else
720                   sprintf(addr, "%s@%s", idp->id, ctl->destaddr);
721 #endif /* HAVE_SNPRINTF */
722                 }
723             }
724             if (SMTP_rcpt(ctl->smtp_socket, addr) == SM_OK)
725                 (*good_addresses)++;
726             else
727             {
728 #ifdef EXPLICIT_BOUNCE_ON_BAD_ADDRESS
729                     char errbuf[POPBUFSIZE];
730 #endif /* EXPLICIT_BOUNCE_ON_BAD_ADDRESS */
731                 if (handle_smtp_report(ctl, msg) == PS_TRANSIENT)
732                     force_transient_error = 1;
733
734 #ifdef EXPLICIT_BOUNCE_ON_BAD_ADDRESS
735 #ifdef HAVE_SNPRINTF
736                 snprintf(errbuf, sizeof(errbuf), "%s: %s",
737                                 idp->id, smtp_response);
738 #else
739                 strncpy(errbuf, idp->id, sizeof(errbuf));
740                 strcat(errbuf, ": ");
741                 strcat(errbuf, smtp_response);
742 #endif /* HAVE_SNPRINTF */
743
744                 xalloca(from_responses[*bad_addresses], 
745                         char *, 
746                         strlen(errbuf)+1);
747                 strcpy(from_responses[*bad_addresses], errbuf);
748 #endif /* EXPLICIT_BOUNCE_ON_BAD_ADDRESS */
749
750                 (*bad_addresses)++;
751                 idp->val.status.mark = XMIT_RCPTBAD;
752                 if (outlevel >= O_VERBOSE)
753                     report(stderr, 
754                           GT_("%cMTP listener doesn't like recipient address `%s'\n"),
755                           ctl->listener, addr);
756             }
757         }
758
759 #ifdef EXPLICIT_BOUNCE_ON_BAD_ADDRESS
760     /*
761      * This should not be necessary, because the SMTP listener itself
762      * should genrate a bounce for the bad address.
763      */
764     if (*bad_addresses)
765         send_bouncemail(ctl, msg, XMIT_RCPTBAD,
766                         "Some addresses were rejected by the MDA fetchmail forwards to.\r\n",
767                         *bad_addresses, from_responses);
768 #endif /* EXPLICIT_BOUNCE_ON_BAD_ADDRESS */
769
770     /*
771      * It's tempting to do local notification only if bouncemail was
772      * insufficient -- that is, to add && total_addresses > *bad_addresses
773      * to the test here.  The problem with this theory is that it would
774      * make initial diagnosis of a broken multidrop configuration very
775      * hard -- most single-recipient messages would just invisibly bounce.
776      */
777     if (!(*good_addresses)) 
778     {
779         if (force_transient_error) {
780                 /* do not risk dataloss due to overengineered multidrop
781                  * crap. If one of the recipients returned PS_TRANSIENT,
782                  * we return exactly that.
783                  */
784                 SMTP_rset(ctl->smtp_socket);        /* required by RFC1870 */
785                 return(PS_TRANSIENT);
786         }
787         if (!run.postmaster[0])
788         {
789             if (outlevel >= O_VERBOSE)
790                 report(stderr, GT_("no address matches; no postmaster set.\n"));
791             SMTP_rset(ctl->smtp_socket);        /* required by RFC1870 */
792             return(PS_REFUSED);
793         }
794         if (strchr(run.postmaster, '@'))
795             strncpy(addr, run.postmaster, sizeof(addr));
796         else
797         {
798 #ifdef HAVE_SNPRINTF
799             snprintf(addr, sizeof(addr), "%s@%s", run.postmaster, ctl->destaddr);
800 #else
801             sprintf(addr, "%s@%s", run.postmaster, ctl->destaddr);
802 #endif /* HAVE_SNPRINTF */
803         }
804
805         if (SMTP_rcpt(ctl->smtp_socket, addr) != SM_OK)
806         {
807             report(stderr, GT_("can't even send to %s!\n"), run.postmaster);
808             SMTP_rset(ctl->smtp_socket);        /* required by RFC1870 */
809             return(PS_REFUSED);
810         }
811
812         if (outlevel >= O_VERBOSE)
813             report(stderr, GT_("no address matches; forwarding to %s.\n"), run.postmaster);
814     }
815
816     /* 
817      * Tell the listener we're ready to send data.
818      * Some listeners (like zmailer) may return antispam errors here.
819      */
820     if (SMTP_data(ctl->smtp_socket) != SM_OK)
821     {
822         SMTP_rset(ctl->smtp_socket);    /* stay on the safe side */
823         return(handle_smtp_report(ctl, msg));
824     }
825
826     /*
827      * We need to stash this away in order to know how many
828      * response lines to expect after the LMTP end-of-message.
829      */
830     lmtp_responses = *good_addresses;
831
832     return(PS_SUCCESS);
833 }
834
835 static int open_mda_sink(struct query *ctl, struct msgblk *msg,
836               int *good_addresses, int *bad_addresses)
837 /* open a stream to a local MDA */
838 {
839 #ifdef HAVE_SIGACTION
840     struct      sigaction sa_new;
841 #endif /* HAVE_SIGACTION */
842     struct      idlist *idp;
843     int length = 0, fromlen = 0, nameslen = 0;
844     char        *names = NULL, *before, *after, *from = NULL;
845
846     ctl->destaddr = "localhost";
847
848     for (idp = msg->recipients; idp; idp = idp->next)
849         if (idp->val.status.mark == XMIT_ACCEPT)
850             (*good_addresses)++;
851
852     length = strlen(ctl->mda);
853     before = xstrdup(ctl->mda);
854
855     /* get user addresses for %T (or %s for backward compatibility) */
856     if (strstr(before, "%s") || strstr(before, "%T"))
857     {
858         /*
859          * We go through this in order to be able to handle very
860          * long lists of users and (re)implement %s.
861          */
862         nameslen = 0;
863         for (idp = msg->recipients; idp; idp = idp->next)
864             if ((idp->val.status.mark == XMIT_ACCEPT))
865                 nameslen += (strlen(idp->id) + 1);      /* string + ' ' */
866         if ((*good_addresses == 0))
867             nameslen = strlen(run.postmaster);
868
869         names = (char *)xmalloc(nameslen + 1);  /* account for '\0' */
870         if (*good_addresses == 0)
871             strcpy(names, run.postmaster);
872         else
873         {
874             names[0] = '\0';
875             for (idp = msg->recipients; idp; idp = idp->next)
876                 if (idp->val.status.mark == XMIT_ACCEPT)
877                 {
878                     strcat(names, idp->id);
879                     strcat(names, " ");
880                 }
881             names[--nameslen] = '\0';   /* chop trailing space */
882         }
883
884         /* sanitize names in order to contain only harmless shell chars */
885         sanitize(names);
886     }
887
888     /* get From address for %F */
889     if (strstr(before, "%F"))
890     {
891         from = xstrdup(msg->return_path);
892
893         /* sanitize from in order to contain *only* harmless shell chars */
894         sanitize(from);
895
896         fromlen = strlen(from);
897     }
898
899     /* do we have to build an mda string? */
900     if (names || from) 
901     {           
902         char    *sp, *dp;
903
904         /* find length of resulting mda string */
905         sp = before;
906         while ((sp = strstr(sp, "%s"))) {
907             length += nameslen - 2;     /* subtract %s */
908             sp += 2;
909         }
910         sp = before;
911         while ((sp = strstr(sp, "%T"))) {
912             length += nameslen - 2;     /* subtract %T */
913             sp += 2;
914         }
915         sp = before;
916         while ((sp = strstr(sp, "%F"))) {
917             length += fromlen - 2;      /* subtract %F */
918             sp += 2;
919         }
920
921         after = xmalloc(length + 1);
922
923         /* copy mda source string to after, while expanding %[sTF] */
924         for (dp = after, sp = before; (*dp = *sp); dp++, sp++) {
925             if (sp[0] != '%')   continue;
926
927             /* need to expand? BTW, no here overflow, because in
928             ** the worst case (end of string) sp[1] == '\0' */
929             if (sp[1] == 's' || sp[1] == 'T') {
930                 strcpy(dp, names);
931                 dp += nameslen;
932                 sp++;   /* position sp over [sT] */
933                 dp--;   /* adjust dp */
934             } else if (sp[1] == 'F') {
935                 strcpy(dp, from);
936                 dp += fromlen;
937                 sp++;   /* position sp over F */
938                 dp--;   /* adjust dp */
939             }
940         }
941
942         if (names) {
943             free(names);
944             names = NULL;
945         }
946         if (from) {
947             free(from);
948             from = NULL;
949         }
950
951         free(before);
952
953         before = after;
954     }
955
956
957     if (outlevel >= O_DEBUG)
958         report(stdout, GT_("about to deliver with: %s\n"), before);
959
960 #ifdef HAVE_SETEUID
961     /*
962      * Arrange to run with user's permissions if we're root.
963      * This will initialize the ownership of any files the
964      * MDA creates properly.  (The seteuid call is available
965      * under all BSDs and Linux)
966      */
967     seteuid(ctl->uid);
968 #endif /* HAVE_SETEUID */
969
970     sinkfp = popen(before, "w");
971     free(before);
972     before = NULL;
973
974 #ifdef HAVE_SETEUID
975     /* this will fail quietly if we didn't start as root */
976     seteuid(0);
977 #endif /* HAVE_SETEUID */
978
979     if (!sinkfp)
980     {
981         report(stderr, GT_("MDA open failed\n"));
982         return(PS_IOERR);
983     }
984
985     /*
986      * We need to disable the normal SIGCHLD handling here because 
987      * sigchld_handler() would reap away the error status, returning
988      * error status instead of 0 for successful completion.
989      */
990 #ifndef HAVE_SIGACTION
991     signal(SIGCHLD, SIG_DFL);
992 #else
993     memset (&sa_new, 0, sizeof sa_new);
994     sigemptyset (&sa_new.sa_mask);
995     sa_new.sa_handler = SIG_DFL;
996     sigaction (SIGCHLD, &sa_new, NULL);
997 #endif /* HAVE_SIGACTION */
998
999     return(PS_SUCCESS);
1000 }
1001
1002 int open_sink(struct query *ctl, struct msgblk *msg,
1003               int *good_addresses, int *bad_addresses)
1004 /* set up sinkfp to be an input sink we can ship a message to */
1005 {
1006     *bad_addresses = *good_addresses = 0;
1007
1008     if (ctl->bsmtp)             /* dump to a BSMTP batch file */
1009         return(open_bsmtp_sink(ctl, msg, good_addresses, bad_addresses));
1010     /* 
1011      * Try to forward to an SMTP or LMTP listener.  If the attempt to 
1012      * open a socket fails, fall through to attempt delivery via
1013      * local MDA.
1014      */
1015     else if (!ctl->mda && smtp_open(ctl) != -1)
1016         return(open_smtp_sink(ctl, msg, good_addresses, bad_addresses));
1017
1018     /*
1019      * Awkward case.  User didn't specify an MDA.  Our attempt to get a
1020      * listener socket failed.  Try to cope anyway -- initial configuration
1021      * may have found procmail.
1022      */
1023     else if (!ctl->mda)
1024     {
1025         report(stderr, GT_("%cMTP connect to %s failed\n"),
1026                ctl->listener,
1027                ctl->smtphost ? ctl->smtphost : "localhost");
1028
1029 #ifndef FALLBACK_MDA
1030         /* No fallback MDA declared.  Bail out. */
1031         return(PS_SMTP);
1032 #else
1033         /*
1034          * If user had things set up to forward offsite, no way
1035          * we want to deliver locally!
1036          */
1037         if (ctl->smtphost && strcmp(ctl->smtphost, "localhost"))
1038             return(PS_SMTP);
1039
1040         /* 
1041          * User was delivering locally.  We have a fallback MDA.
1042          * Latch it in place, logging the error, and fall through.
1043          * Set stripcr as we would if MDA had been the initial transport
1044          */
1045         ctl->mda = FALLBACK_MDA;
1046         if (!ctl->forcecr)
1047             ctl->stripcr = TRUE;
1048
1049         report(stderr, GT_("can't raise the listener; falling back to %s"),
1050                          FALLBACK_MDA);
1051 #endif
1052     }
1053
1054     if (ctl->mda)               /* must deliver through an MDA */
1055         return(open_mda_sink(ctl, msg, good_addresses, bad_addresses));
1056
1057     return(PS_SUCCESS);
1058 }
1059
1060 void release_sink(struct query *ctl)
1061 /* release the per-message output sink, whether it's a pipe or SMTP socket */
1062 {
1063     if (ctl->bsmtp && sinkfp)
1064         fclose(sinkfp);
1065     else if (ctl->mda)
1066     {
1067         if (sinkfp)
1068         {
1069             pclose(sinkfp);
1070             sinkfp = (FILE *)NULL;
1071         }
1072         deal_with_sigchld(); /* Restore SIGCHLD handling to reap zombies */
1073     }
1074 }
1075
1076 int close_sink(struct query *ctl, struct msgblk *msg, flag forward)
1077 /* perform end-of-message actions on the current output sink */
1078 {
1079     if (ctl->mda)
1080     {
1081         int rc;
1082
1083         /* close the delivery pipe, we'll reopen before next message */
1084         if (sinkfp)
1085         {
1086             rc = pclose(sinkfp);
1087             sinkfp = (FILE *)NULL;
1088         }
1089         else
1090             rc = 0;
1091
1092         deal_with_sigchld(); /* Restore SIGCHLD handling to reap zombies */
1093
1094         if (rc)
1095         {
1096             report(stderr, 
1097                    GT_("MDA returned nonzero status %d\n"), rc);
1098             return(FALSE);
1099         }
1100     }
1101     else if (ctl->bsmtp && sinkfp)
1102     {
1103         int error;
1104
1105         /* implicit disk-full check here... */
1106         fputs(".\r\n", sinkfp);
1107         error = ferror(sinkfp);
1108         if (strcmp(ctl->bsmtp, "-"))
1109             if (fclose(sinkfp) == EOF) error = 1;
1110         if (error)
1111         {
1112             report(stderr, 
1113                    GT_("Message termination or close of BSMTP file failed\n"));
1114             return(FALSE);
1115         }
1116     }
1117     else if (forward)
1118     {
1119         /* write message terminator */
1120         if (SMTP_eom(ctl->smtp_socket) != SM_OK)
1121         {
1122             if (handle_smtp_report(ctl, msg) != PS_REFUSED)
1123             {
1124                 SMTP_rset(ctl->smtp_socket);    /* stay on the safe side */
1125                 return(FALSE);
1126             }
1127             else
1128             {
1129                 report(stderr, GT_("SMTP listener refused delivery\n"));
1130                 SMTP_rset(ctl->smtp_socket);    /* stay on the safe side */
1131                 return(TRUE);
1132             }
1133         }
1134
1135         /*
1136          * If this is an SMTP connection, SMTP_eom() ate the response.
1137          * But could be this is an LMTP connection, in which case we have to
1138          * interpret either (a) a single 503 response meaning there
1139          * were no successful RCPT TOs, or (b) a variable number of
1140          * responses, one for each successful RCPT TO.  We need to send
1141          * bouncemail on each failed response and then return TRUE anyway,
1142          * otherwise the message will get left in the queue and resent
1143          * to people who got it the first time.
1144          */
1145         if (ctl->listener == LMTP_MODE)
1146         {
1147             if (lmtp_responses == 0)
1148             {
1149                 SMTP_ok(ctl->smtp_socket); 
1150
1151                 /*
1152                  * According to RFC2033, 503 is the only legal response
1153                  * if no RCPT TO commands succeeded.  No error recovery
1154                  * is really possible here, as we have no idea what
1155                  * insane thing the listener might be doing if it doesn't
1156                  * comply.
1157                  */
1158                 if (atoi(smtp_response) == 503)
1159                     report(stderr, GT_("LMTP delivery error on EOM\n"));
1160                 else
1161                     report(stderr,
1162                           GT_("Unexpected non-503 response to LMTP EOM: %s\n"),
1163                           smtp_response);
1164
1165                 /*
1166                  * It's not completely clear what to do here.  We choose to
1167                  * interpret delivery failure here as a transient error, 
1168                  * the same way SMTP delivery failure is handled.  If we're
1169                  * wrong, an undead message will get stuck in the queue.
1170                  */
1171                 return(FALSE);
1172             }
1173             else
1174             {
1175                 int     i, errors;
1176                 char    **responses;
1177
1178                 /* eat the RFC2033-required responses, saving errors */ 
1179                 xalloca(responses, char **, sizeof(char *) * lmtp_responses);
1180                 for (errors = i = 0; i < lmtp_responses; i++)
1181                 {
1182                     if (SMTP_ok(ctl->smtp_socket) == SM_OK)
1183                         responses[i] = (char *)NULL;
1184                     else
1185                     {
1186                         xalloca(responses[errors], 
1187                                 char *, 
1188                                 strlen(smtp_response)+1);
1189                         strcpy(responses[errors], smtp_response);
1190                         errors++;
1191                     }
1192                 }
1193
1194                 if (errors == 0)
1195                     return(TRUE);       /* all deliveries succeeded */
1196                 else
1197                     /*
1198                      * One or more deliveries failed.
1199                      * If we can bounce a failures list back to the
1200                      * sender, and the postmaster does not want to
1201                      * deal with the bounces return TRUE, deleting the
1202                      * message from the server so it won't be
1203                      * re-forwarded on subsequent poll cycles.
1204                      */
1205                   return(send_bouncemail(ctl, msg, XMIT_ACCEPT,
1206                                          "LSMTP partial delivery failure.\r\n",
1207                                          errors, responses));
1208             }
1209         }
1210     }
1211
1212     return(TRUE);
1213 }
1214
1215 int open_warning_by_mail(struct query *ctl, struct msgblk *msg)
1216 /* set up output sink for a mailed warning to calling user */
1217 {
1218     int good, bad;
1219
1220     /*
1221      * Dispatching warning email is a little complicated.  The problem is
1222      * that we have to deal with three distinct cases:
1223      *
1224      * 1. Single-drop running from user account.  Warning mail should
1225      * go to the local name for which we're collecting (coincides
1226      * with calling user).
1227      *
1228      * 2. Single-drop running from root or other privileged ID, with rc
1229      * file generated on the fly (Ken Estes's weird setup...)  Mail
1230      * should go to the local name for which we're collecting (does not 
1231      * coincide with calling user).
1232      * 
1233      * 3. Multidrop.  Mail must go to postmaster.  We leave the recipients
1234      * member null so this message will fall through to run.postmaster.
1235      *
1236      * The zero in the reallen element means we won't pass a SIZE
1237      * option to ESMTP; the message length would be more trouble than
1238      * it's worth to compute.
1239      */
1240     struct msgblk reply = {NULL, NULL, "FETCHMAIL-DAEMON@", 0};
1241     int status;
1242
1243     strcat(reply.return_path, ctl->smtpaddress ? ctl->smtpaddress :
1244             fetchmailhost);
1245
1246     if (!MULTIDROP(ctl))                /* send to calling user */
1247     {
1248         save_str(&reply.recipients, ctl->localnames->id, XMIT_ACCEPT);
1249         status = open_sink(ctl, &reply, &good, &bad);
1250         free_str_list(&reply.recipients);
1251     }
1252     else                                /* send to postmaster  */
1253         status = open_sink(ctl, &reply, &good, &bad);
1254     stuff_warning(ctl, "Date: %s", rfc822timestamp());
1255     return(status);
1256 }
1257
1258 #if defined(HAVE_STDARG_H)
1259 void stuff_warning(struct query *ctl, const char *fmt, ... )
1260 #else
1261 void stuff_warning(struct query *ctl, fmt, va_alist)
1262 struct query *ctl;
1263 const char *fmt;        /* printf-style format */
1264 va_dcl
1265 #endif
1266 /* format and ship a warning message line by mail */
1267 {
1268     char        buf[POPBUFSIZE];
1269     va_list ap;
1270
1271     /*
1272      * stuffline() requires its input to be writeable (for CR stripping),
1273      * so we needed to copy the message to a writeable buffer anyway in
1274      * case it was a string constant.  We make a virtue of that necessity
1275      * here by supporting stdargs/varargs.
1276      */
1277 #if defined(HAVE_STDARG_H)
1278     va_start(ap, fmt) ;
1279 #else
1280     va_start(ap);
1281 #endif
1282 #ifdef HAVE_VSNPRINTF
1283     vsnprintf(buf, sizeof(buf), fmt, ap);
1284 #else
1285     vsprintf(buf, fmt, ap);
1286 #endif
1287     va_end(ap);
1288
1289 #ifdef HAVE_SNPRINTF
1290     snprintf(buf+strlen(buf), sizeof(buf)-strlen(buf), "\r\n");
1291 #else
1292     strcat(buf, "\r\n");
1293 #endif /* HAVE_SNPRINTF */
1294
1295     stuffline(ctl, buf);
1296 }
1297
1298 void close_warning_by_mail(struct query *ctl, struct msgblk *msg)
1299 /* sign and send mailed warnings */
1300 {
1301     stuff_warning(ctl, GT_("--\r\n\t\t\t\tThe Fetchmail Daemon\r\n"));
1302     close_sink(ctl, msg, TRUE);
1303 }
1304
1305 /* sink.c ends here */