Pileus Git - ~andy/fetchmail/blob - fetchmail-FAQ.html

   1 <!doctype HTML public "-//W3O//DTD W3 HTML 3.2//EN">
   2 <HTML>
   3 <HEAD>
   4 <TITLE>The Fetchmail FAQ</TITLE>
   5 <link rev=made href="mailto:esr@snark.thyrsus.com">
   6 <meta name="description" content="Frequently asked questions about fetchmail.">
   7 <meta name="keywords" content="fetchmail, POP, POP2, POP3, IMAP, remote mail">
   8 </HEAD>
   9 <BODY>
  10 <table width="100%" cellpadding=0><tr>
  11 <td width="30%">Back to <a href="index.html">Fetchmail Home Page</a>
  12 <td width="30%" align=center>To <a href="/~esr/sitemap.html">Site Map</a>
  13 <td width="30%" align=right>$Date: 1998/10/17 16:24:27 $
  14 </table>
  15 <HR>
  16 <H1>Frequently Asked Questions About Fetchmail</H1>
  17
  18 Before reporting any bug, please read <a href="#G3">G3</a> for advice
  19 on how to include diagnostic information that will get your bug fixed
  20 as quickly as possible. <p>
  21
  22 If you have a question or answer you think ought to be added to this FAQ list,
  23 mail it to fetchmail's maintainer, Eric S. Raymond, at
  24 <A HREF="mailto:esr@thyrsus.com">esr@snark.thyrsus.com</A>.<p>
  25
  26 <h1>General questions:</h1>
  27
  28 <a href="#G1">G1. What is fetchmail and why should I bother?</a><br>
  29 <a href="#G2">G2. Where do I find the latest FAQ and fetchmail sources?</a><br>
  30 <a href="#G3">G3. I think I've found a bug.  Will you fix it?</a><br>
  31 <a href="#G4">G4. I have this idea for a neat feature. Will you add it?</a><br>
  32 <a href="#G5">G5. Is there a mailing list for exchanging tips?</a><br>
  33 <a href="#G6">G6. So, what's this I hear about a fetchmail paper?</a><br>
  34 <a href="#G7">G7. What is the best server to use with fetchmail?</a><br>
  35 <a href="#G8">G8. How can I avoid sending my password en clair?</a><br>
  36 <a href="#G9">G9. Is any special configuration needed to use a dynamic
  37 IP address?</a><br>
  38 <a href="#G10">G10. Is any special configuration needed to use firewalls?</a><br>
  39
  40 <h1>Build-time problems:</h1>
  41
  42 <a href="#B1">B1. Lex bombs out while building the fetchmail lexer.</a><br>
  43 <a href="#B2">B2. I get link failures when I try to build fetchmail.</a><br>
  44
  45 <h1>Fetchmail configuration file grammar questions:</h1>
  46
  47 <a href="#F1">F1. Why does my old .fetchmailrc no longer work?</a><br>
  48 <a href="#F2">F2. The .fetchmailrc parser won't accept my all-numeric user name.</a><br>
  49 <a href="#F3">F3. The .fetchmailrc parser won't accept my host or username beginning with `no'.</a><br>
  50 <a href="#F4">F4. I'm migrating from popclient.  How do I need to modify my .poprc?</a><br>
  51 <a href="#F5">F5. I'm getting a `parse error' message I don't understand.</a><br>
  52
  53 <h1>Configuration questions:</h1>
  54
  55 <a href="#C1">C1. Why do I need a .fetchmailrc when running as root on my own machine?</a><br>
  56 <a href="#C2">C2. How can I arrange for a fetchmail daemon to get killed when I log out?</a><br>
  57 <a href="#C3">C3. How do I know what interface and address to use with --interface?</a><br>
  58 <a href="#C4">C4. How can I set up support for sendmail's anti-spam features?</a><br>
  59
  60 <h1>How to make fetchmail play nice with various MTAs:</h1>
  61
  62 <a href="#T1">T1. How can I use fetchmail with sendmail?</a><br>
  63 <a href="#T2">T2. How can I use fetchmail with qmail?</a><br>
  64 <a href="#T3">T3. How can I use fetchmail with exim?</a><br>
  65 <a href="#T4">T4. How can I use fetchmail with smail?</a><br>
  66 <a href="#T5">T5. How can I use fetchmail with SCO's MMDF?</a><br>
  67 <a href="#T6">T6. How can I use fetchmail with Lotus Notes?</a><br>
  68
  69 <h1>How to make fetchmail work with nonstandard servers:</h1>
  70
  71 <a href="#S1">S1. How can I use fetchmail with Microsoft Exchange?</a><br>
  72 <a href="#S2">S2. How can I use fetchmail with Compuserve RPA?</a><br>
  73 <a href="#S3">S3. How can I use fetchmail with Demon Internet's SDPS?</a><br>
  74 <a href="#S4">S4. How can I use fetchmail with usa.net's servers?</a><br>
  75 <a href="#S5">S5. How can I use fetchmail with HP OpenMail?</a><br>
  76 <a href="#S6">S6. How can I use fetchmail with geocities POP3 servers?</a><br>
  77
  78 <h1>How to set up well-known security and authentication methods:</h1>
  79
  80 <a href="#K1">K1. How can I use fetchmail with SOCKS?</a><br>
  81 <a href="#K2">K2. How can I use fetchmail with IPv6 and IPsec?</a><br>
  82 <a href="#K3">K3. How can I get fetchmail to work with ssh?</a><br>
  83 <a href="#K4">K4. What do I have to do to use the IMAP-GSS protocol?</a><br>
  84
  85 <h1>Runtime fatal errors:</h1>
  86
  87 <a href="#R1">R1. Fetchmail isn't working, and -v shows `SMTP connect failed' messages.</a><br>
  88 <a href="#R2">R2. When I try to configure an MDA, fetchmail doesn't work.</a><br>
  89 <a href="#R3">R3. Fetchmail dumps core when given an invalid rc file.</a><br>
  90 <a href="#R4">R4. Fetchmail dumps core in -V mode, but operates normally otherwise.</a><br>
  91 <a href="#R5">R5. Fetchmail dumps core when I use a .netrc file but works otherwise.</a><br>
  92 <a href="#R6">R6. Running fetchmail in daemon mode doesn't work.</a><br>
  93 <a href="#R7">R7. Fetchmail hangs when used with pppd.</a><br>
  94 <a href="#R8">R8. Fetchmail randomly dies with socket errors.</a><br>
  95
  96 <h1>Disappearing mail</h1>
  97
  98 <a href="#D1">D1. I think I've set up fetchmail correctly, but I'm not getting any mail.</a><br>
  99 <a href="#D2">D2. All my mail seems to disappear after an interrupt.</a><br>
 100 <a href="#D3">D3. Mail that was being fetched when I interrupted my fetchmail seems to have been vanished.</a></br>
 101
 102 <h1>Multidrop-mode problems:</h1>
 103
 104 <a href="#M1">M1. I've declared local names, but all my multidrop mail is going to root anyway.</a><br>
 105 <a href="#M2">M2. I can't seem to get fetchmail to route to a local domain properly.</a><br>
 106 <a href="#M3">M3. I tried to run a mailing list using multidrop, and I have a mail loop!</a><br>
 107 <a href="#M4">M4. My multidrop fetchmail seems to be having DNS problems.</a><br>
 108 <a href="#M5">M5. I'm seeing long DNS delays before each message is processed.</a><br>
 109 <a href="#M6">M6. How do I get multidrop mode to work with majordomo?</a>
 110 <a href="#M7">M7. Multidrop mode isn't parsing envelope addresses from
 111 my Received headers as it should.</a>
 112
 113 <h1>Mangled mail:</h1>
 114
 115 <a href="#X1">X1. Spurious blank lines are appearing in the headers of fetched mail.</a><br>
 116 <a href="#X2">X2. My mail client can't see a Subject line.</a><br>
 117 <a href="#X3">X3. Messages containing "From" at start of line are being split.</a><br>
 118 <a href="#X4">X4. My mail is being mangled in a new and different way.</a><br>
 119 <a href="#X5">X5. Using POP3, retrievals seems to be fetching too much!</a><br>
 120
 121 <h1>Other Problems:</h1>
 122
 123 <a href="#O1">O1. The --logfile option doesn't work if the logfile doesn't exist.</a><br>
 124 <a href="#O2">O2. Every time I get a POP or IMAP message the header is
 125 dumped to all my terminal sessions.</a><br>
 126 <a href="#O3">O3. Does fetchmail reread its rc file every poll cycle?</a><br>
 127 <a href="#O4">O4. Why do deleted messages show up again when I take
 128 a line hit while downloading?</a><br>
 129 <a href="#O5">O5. Why is fetched mail being logged with my name, not the real From address?</a><br>
 130 <a href="#O6">O6. I'm seeing long sendmail delays at start of each poll cycle.</a><br>
 131 <a href="#O7">O7. Why doesn't fetchmail deliver mail in date-sorted order?</a><br>
 132
 133 <h1>Answers:</h1>
 134 <hr>
 135 <h2><a name="G1">G1. What is fetchmail and why should I bother?</a></h2>
 136
 137 Fetchmail is a one-stop solution to the remote mail retrieval problem
 138 for Unix machines, quite useful to anyone with an intermittent PPP or
 139 SLIP connection to a remote mailserver.  It can collect mail using any
 140 variant of POP or IMAP and forwards via port 25 to the local SMTP
 141 listener, enabling all the normal forwarding/filtering/aliasing
 142 mechanisms that would apply to local mail or mail arriving via a
 143 full-time TCP/IP connection.<p>
 144
 145 Fetchmail is not a toy or a coder's learning exercise, but an
 146 industrial-strength tool capable of transparently handling every
 147 retrieval demand from those of a simple single-user ISP connection up
 148 to mail retrieval and rerouting for an entire client domain.
 149 Fetchmail is easy to configure, unobtrusive in operation, powerful,
 150 feature-rich, and well documented. <P>
 151
 152 Fetchmail is <a href="http://www.opensource.org">Open Source</a>
 153 software.  The openness of the sources is the strongest assurance of
 154 quality you can have.  Extensive peer review by a large,
 155 multi-platform user community has shown that fetchmail is as near
 156 bulletproof as the underlying protocols permit.<p>
 157
 158 If you found this FAQ in the distribution, see the README for fetchmail's
 159 full feature list.<p>
 160
 161 <hr>
 162 <h2><a name="G2">G2. Where do I find the latest FAQ and fetchmail
 163 sources?</a></h2>
 164
 165 The latest HTML FAQ is available alongside the latest fetchmail
 166 sources at the fetchmail home page:
 167 <a href="http://www.tuxedo.org/~esr/fetchmail">
 168 http://www.tuxedo.org/~esr/fetchmail</a>.  You can also usually find
 169 both in the <a
 170 href="http://sunsite.unc.edu/pub/Linux/system/mail/pop/!INDEX.html">POP
 171 mail tools directory on Sunsite</a>.<p>
 172
 173 A text dump of this FAQ is included in the fetchmail
 174 distribution. Because it freezes at distribution release time, it may
 175 not be completely current.<p>
 176
 177 <hr>
 178 <h2><a name="G3">G3.  I think I've found a bug.  Will you fix it?</a></h2>
 179
 180 Yes I will, provided you include enough diagnostic information for me
 181 to go on.  Send bugs to <a
 182 href="mailto:fetchmail-friends@ccil.org">fetchmail-friends</a>.  When reporting
 183 bugs, please include the following:
 184
 185 <ol>
 186 <li>Your operating system and compiler version.
 187 <li>The name and version of the SMTP listener or MDA you are forwarding to.
 188 <li>Any command-line options you used.
 189 <li>The output of fetchmail -V called with whatever other
 190     command-line options you used.
 191 </ol>
 192
 193 Often, the first thing I will do when you report a bug is tell you to
 194 upgrade to the newest version, and then see if the problem reproduces.
 195 So you'll probably save us both time if you upgrade and test with
 196 the latest version <em>before</em> sending in a bug report.<P>
 197
 198 It is helpful if you include your .fetchmailrc file, but not necessary
 199 unless your symptom seems to involve an error in configuration parsing.<p>
 200
 201 If fetchmail seems to run and fetch mail, but the headers look mangled
 202 (that is headers are missing, or blank lines are inserted in the
 203 headers) then read the FAQ items in section <a href="#X1">X</a>
 204 before submitting a bug report.  Pay special attention to the item on
 205 <a href="#generic_mangling">diagnosing mail mangling</a>.  There are
 206 lots of ways for other programs in the mail chain to screw up that
 207 look like fetchmail's fault, but you may be able to fix these by
 208 tweaking your configuration.<P>
 209
 210 A transcript of the failed session with -v -v (yes, that's
 211 <em>two</em> -v options, enabling debug mode) will almost always be useful.
 212 It is very important that the transcript include your POP/IMAP server's
 213 greeting line, so I can identify it in case of server problems.  This
 214 transcript will not reveal your passwords, which are specially masked
 215 out precisely so the transcript can be passed around.<P>
 216
 217 If the bug involves a core dump or hang, a gdb stack trace is good to have.
 218 (Bear in mind that you can attach gdb to a running but hung process by
 219 giving the process ID as a second argument.)  You will need to
 220 reconfigure with <p>
 221
 222 <LISTING>
 223 CFLAGS=-g LDFLAGS=" " ./configure
 224 </LISTING>
 225
 226 and then rebuild in order to generate a version that can be gdb-traced.<p>
 227
 228 Best of all is a mail file which, when fetched, will reproduce the
 229 bug under the latest (current) version.<p>
 230
 231 Any bug I can reproduce will usually get fixed very quickly, often
 232 within 48 hours.  Bugs I can't reproduce are a crapshoot.  If the
 233 solution isn't obvious when I first look, it may evade me for a long
 234 time (or to put it another way, fetchmail is well enough tested that the
 235 easy bugs have long since been found).  So if you want your bug fixed
 236 rapidly, it is not just sufficient but nearly <em>necessary</em> that
 237 you give me a way to reproduce it.<p>
 238
 239 <hr>
 240 <h2><a name="G4">G4.  I have this idea for a neat feature.  Will you add it?</a></h2>
 241
 242 Probably not.  Most of the feature suggestions I get are for ways to
 243 set various kinds of administrative policy or add more spam filtering
 244 (the most common one, which I used to get about four million times a week
 245 and got <em>really</em> tired of, is for tin-like kill files).<p>
 246
 247 You can do spam filtering better with procmail or mailagent on the
 248 server side and (if you're the server sysadmin) sendmail.cf domain
 249 exclusions.  You can do other policy things better with the
 250 <CODE>mda</CODE> option and script wrappers around fetchmail.  If
 251 it's a prime-time-vs.-non-prime-time issue, ask yourself whether a
 252 wrapper script called from crontab would do the job.<p>
 253
 254 I'm not going to do these; fetchmail's job is transport, not policy, and I
 255 refuse to change it from doing one thing well to attempting many things badly.
 256 One of my objectives is to keep fetchmail simple so it stays reliable.<p>
 257
 258 Furthermore, since about version 4.3.0 fetchmail has passed out of active
 259 development and been essentially stable.  It is no longer my top
 260 project, and I am going to be quite reluctant to add features that
 261 might either jeopardize its stability or or involve me in large
 262 amounts of coding.<p>
 263
 264 All that said, if you have a feature idea that really is about a transport
 265 problem that can't be handled anywhere but fetchmail, lay it on me.  I'm
 266 very accommodating about good ideas.<p>
 267
 268 <hr>
 269 <h2><a name="G5">G5. Is there a mailing list for exchanging tips?</a></h2>
 270
 271 There is a fetchmail-friends list for people who want to discuss fixes
 272 and improvements in fetchmail and help co-develop it.  It's at <a
 273 href="mailto:fetchmail-friends@thyrsus.com">fetchmail-friends@thyrsus.com</a>.
 274 There is also an announcements-only list, <em>fetchmail-announce@thyrsus.com</em>.<P>
 275
 276 Both lists are SmartList reflectors; sign up in the usual way with a
 277 message containing the word "subscribe" in the subject line sent to
 278 <a href="mailto:fetchmail-friends-request@thyrsus.com?subject=subscribe">
 279 fetchmail-friends-request@thyrsus.com</a> or
 280 <a href="mailto:fetchmail-announce-request@thyrsus.com?subject=subscribe">
 281 fetchmail-announce-request@thyrsus.com</a>. (Similarly, "unsubscribe"
 282 in the Subject line unsubscribes you, and "help" returns general list help) <p>
 283
 284 <hr>
 285 <h2><a name="G6">G6. So, what's this I hear about a fetchmail paper?</a></h2>
 286
 287 Now it can be told!  The fetchmail development was also a sociological
 288 experiment, an extended test to see if my theory about the critical
 289 features of the Linux development model is correct.<p>
 290
 291 The experiment was a success.  I wrote a paper about it titled <a
 292 href="http://www.tuxedo.org/~esr/writings/cathedral.html">The
 293 Cathedral and the Bazaar</a> which was first presented at Linux
 294 Kongress '97 in Bavaria and very well received there. It was also
 295 given at Atlanta Linux Expo, Linux Pro '97 in Warsaw, and the first
 296 Perl Conference, at UniForum '98, and was the basis of an invited
 297 presentation at Usenix '98.  The folks at Netscape tell me it helped
 298 them decide to <a
 299 href="http://www.netscape.com/newsref/pr/newsrelease558.html"> give
 300 away the source for Netscape Communicator</a>).<p>
 301
 302 If you're reading a non-HTML dump of this FAQ, you can find the paper
 303 on the Web with a search for that title.<p>
 304
 305 <hr>
 306 <h2><a name="G7">G7. What is the best server to use with fetchmail?</a></h2>
 307
 308 The short answer: IMAP4rev1 running over Unix.<P>
 309
 310 Here's a longer answer: <P>
 311
 312 Fetchmail will work with any POP, IMAP, or ESMTP/ETRN server that
 313 conforms to the relevant RFCs (and even some outright broken ones like
 314 <a href="#S1">Microsoft Exchange</a>).  This doesn't mean it works
 315 equally well with all, however.  POP2 servers, and POP3 servers
 316 without LAST, limit fetchmail's capabilities in various ways described
 317 on the manual page.<P>
 318
 319 Most modern Unixes (and effectively all Linux/*BSD systems) come with
 320 POP3 support preconfigured (but beware of the horribly broken POP3
 321 server mentioned in <a href="#D2">D2</a>).  An increasing minority
 322 also feature IMAP (you can detect IMAP support by running fetchmail in
 323 AUTO mode, or by using the `Probe for a server' function in the
 324 fetchmailconf utility).<P>
 325
 326 If you have the option, we recommend using or installing an IMAP4rev1
 327 server; it has the best facilities for tracking message `seen' states.
 328 It also recovers from interrupted connections more gracefully than
 329 POP3, and enables some significant performance optimizations.<P>
 330
 331 Don't be fooled by NT/Exchange propaganda.  M$ Exchange is just plain
 332 broken (see item <a href="#S1">S1</a>) and NT cannot handle the
 333 sustained load of a high-volume remote mail server.  Even Microsoft
 334 itself knows better than to try this; their own Hotmail service runs
 335 over Solaris!  For extended discussion, see John Kirch's excellent <a
 336 href="http://www.kirch.net/unix-nt.html">white paper</a> on Unix
 337 vs. NT performance.<P>
 338
 339 You can find sources for IMAP software at <a
 340 href="http://www.imap.org">The IMAP Connection</a>; we like the
 341 open-source <a href="ftp://ftp.cac.washington.edu/imap/">UW IMAP</a>
 342 server, which is the reference implementation of IMAP.  UW IMAP's
 343 support for GSSAPI gives you a good way to authenticate without
 344 sending a password en clair.<P>
 345
 346 Source for a high-quality supported implementation of POP is available
 347 from the <a href="ftp://ftp.qualcomm.com/eudora/servers/unix/popper/">Eudora
 348 FTP site</a>.  Don't use 2.5, which has a rather restrictive license.
 349 The 2.5.2 version appears to restore the open-source license of
 350 previous versions.
 351 <P>
 352
 353 <hr>
 354 <h2><a name="G8">G8. How can I avoid sending my password en clair?</a></h2>
 355
 356 Depending on what your mail server you are talking to, this ranges
 357 from trivial to impossible.  It may even be next to useless.<P>
 358
 359 Most people use fetchmail over phone wires, which are hard to tap.
 360 Anybody with the skill and resources to do this could get into your
 361 server mailbox with much less effort by subverting the server host.
 362 So if your provider setup is modem wires going straight into a service
 363 box, you probably don't need to worry.<P>
 364
 365 In general there is little point in trying to secure your fetchmail
 366 transaction unless you trust the security of the server host you are
 367 retrieving mail from.  Your vulnerability is more likely to be an
 368 insecure local network on the server end (e.g. to somebody with a TCP/IP
 369 packet sniffer intercepting Ethernet traffic between the modem
 370 concentrator you dial in to and the mailserver host).<P>
 371
 372 Having realized this, you need to ask whether password encryption
 373 alone will really address your security exposure.  If you think you
 374 might be snooped, it's better to use end-to-end encryption on your
 375 whole mail stream so none of it can be read.  One of the advantages of
 376 fetchmail over conventional SMTP-push delivery is that you may be able
 377 to arrange this by using ssh(1); see <a href="#K3">K3</a>.<P>
 378
 379 If ssh/sshd isn't available, or you find it too complicated for you to
 380 set up, password encryption will at least keep a malicious cracker
 381 from deleting your mail, and require him to either tap your connection
 382 continuously or crack root on the server in order to read it.<P>
 383
 384 You can deduce what encryptions your mail server has available by
 385 by looking at the server greeting line (and, for IMAP, the
 386 response to a CAPABILITY query).  Do a <code>fetchmail -v</code>
 387 to see these, or telnet direct to the server port (110 for POP3, 143 for
 388 IMAP).<P>
 389
 390 The facility you are most likely to have available is APOP.  This is a
 391 POP3 feature supported by many servers (fetchmailconf's autoprobe
 392 facility will detect it and tell you if you have it).  If you see
 393 something in the greeting line that looks like an
 394 angle-bracket-enclosed Internet address with a numeric left-hand part,
 395 that's an APOP challenge (it will vary each time you log in).  You can
 396 register a secret on the host (using <code>popauth(8)</code> or some
 397 program like it).  Specify the secret as your password in your
 398 .fetchmailrc; it will be used to encrypt the current challenge, and
 399 the encrypted form will be sent back the the server for
 400 verification.<P>
 401
 402 Alternatively, you may have Kerberos available. This may require you
 403 to set up some magic files in your home directory on your client
 404 machine, but means you can omit specifying any password at all.<P>
 405
 406 Fetchmail supports two different Kerberos schemes.  One is a
 407 POP3 variant called KPOP; consult the documentation of your mail
 408 server to see if you have it (one clue is the string "krb-IV" in the
 409 greeting line on port 110).  The other is an IMAP facility described
 410 by RFC1731. You can tell if this one is present by looking for
 411 AUTH=KERBEROS_V4 in the CAPABILITY response.<P>
 412
 413 If you are fetching mail from a CompuServe POP3 account, you can use
 414 their RPA authentication (which works much like APOP).  See <a
 415 href="#S2">S2</a> for details.<P>
 416
 417 Your POP3 server may have the RFC1938 OTP capability to use one-time
 418 passwords (if it doesn't, you can get OTP patches for the 2.2 version
 419 of the Qualcomm popper from <a href="#cmetz">Craig Metz</a>). To check
 420 this, look for the string "otp-" in the greeting line.  If you see it,
 421 and your fetchmail was built with OPIE support compiled in (see the
 422 distribution INSTALL file), fetchmail will detect it also.  When using
 423 OTP, you will specify a password but it will not be sent en clair.<P>
 424
 425 Sadly, there is at present (July 1998) no OTP or APOP-like
 426 facility generally available on IMAP servers.  However, there do exist
 427 patches which will OTP-enable the University of Washington IMAP
 428 daemon, version 4.2-FINAL.  And we have a report that the GSSAPI
 429 support in fetchmail works with the GSSAPI support in the most recent
 430 version of UW IMAP.<P>
 431
 432 You can get both POP3 and IMAP OTP patches from <a name="cmetz">Craig
 433 Metz</A>, over FTP via either
 434 <a href="ftp://ftp.inner.net/pub/opie/patches">
 435 ftp://ftp.inner.net/pub/opie/patches</a> (IPv4) or
 436 <a href="ftp://ftp.ipv6.inner.net/pub/opie/patches">
 437 ftp://ftp.ipv6.inner.net/pub/opie/patches</a> (IPv6).<P>
 438
 439 These patches use a SASL authentication method named "X-OTP" because there is
 440 not currently a standard way to do this; fetchmail also uses this method, so
 441 the two will interoperate happily.  They better, because this is how Craig gets
 442 his mail ;-)<P>
 443
 444 (One important win of OTP is that it's not subject to EAR restrictions.)<P>
 445
 446 <hr>
 447 <h2><a name="G9">G9. Is any special configuration needed to use a dynamic IP address?</a></h2>
 448
 449 Yes. In order to avoid giving indigestion to certain picky MTAs
 450 (notably <a href="#T3">exim</a>), fetchmail always makes the RCPT TO
 451 address it feeds the MTA a fully qualified one with a hostname part.
 452 Normally it does this by appending @ and your client machine's
 453 hostname.<P>
 454
 455 This, however, can create problems when fetchmail is running in daemon
 456 mode and outlasts the dynamic IP address assignment your client
 457 machine had when it started up.<P>
 458
 459 Since the new IP address (looked up at RCPT TO interpretation time)
 460 doesn't match the original, the most benign possible result is that
 461 your MTA thinks it's seeing a relaying attempt and refuses.  More
 462 frequently, fetchmail will try to connect to a nonexistent host
 463 address and time out.  Worst case, you could up forwarding your mail
 464 to the wrong machine!<P>
 465
 466 Use the <code>smtpaddress</code> option to force the appended hostname
 467 to one with a (fixed) IP address of 127.0.0.1 in your
 468 <code>/etc/hosts</code>.  (The name `localhost' will usually work; or
 469 you can use the IP address itself).<P>
 470
 471 Only one fetchmail option interacts directly with your IP address,
 472 `<code>interface</code>'.  This option can be used to set the gateway
 473 device and restrict the IP address range fetchmail will use. Such a
 474 restriction is sometimes useful for security reasons, especially on
 475 multihomed sites.  See <a href="http:#C3">C3</a>.<P>
 476
 477 I recommend against trying to set up the <code>interface</code> option
 478 when initially developing your poll configuration -- it's never
 479 necessary to do this just to get a link working.  Get the link working
 480 first, observe the actual address range you see on connections, and
 481 add an <code>interface</code> option (if you need one) later.<P>
 482
 483 If you're using a dynamic-IP configuration, one other (non-fetchmail)
 484 problem you may run into with outgoing mail is that some sites will
 485 bounce your email because the hostname your giving them isn't real
 486 (and doesn't match what they get doing a reverse DNS on your
 487 dynamically-assigned IP address).  If this happens, you need to hack
 488 your sendmail so it masquerades as your host.  Setting<P>
 489
 490 <pre>
 491 DMsmarthost.here
 492 </pre>
 493
 494 in your <code>sendmail.cf</code> will work, or you can set<P>
 495
 496 <pre>
 497 MASQUERADE_AS(smarthost.here)
 498 </pre>
 499
 500 in the m4 configuration and do a reconfigure.  (In both cases, replace
 501 <code>smarthost.here</code> with the actual name of your mailhost.)
 502 See the <a href="http://www.lege.com/sendmail-FAQ.txt">sendmail
 503 FAQ</a> for more details.<P>
 504
 505 <hr>
 506 <h2><a name="G10">G10. Is any special configuration needed to use firewalls?</a></h2>
 507
 508 No.  You can use fetchmail with SOCKS, the standard tool for
 509 indirecting TCP/IP through a firewall.  You can find out about SOCKS,
 510 and download the SOCKS software including server and client code, at
 511 the <a href="http://www.socks.nec.com/">SOCKS distribution
 512 site</a>.)<P>
 513
 514 The specific recipe for using fetchmail with a firewall is at <a
 515 href="#K1">K1</a><P>
 516
 517 <hr>
 518 <h2><a name="B1">B1. Lex bombs out while building the fetchmail lexer.</a></h2>
 519
 520 In the immortal words of Alan Cox the last time this came up: ``Take
 521 the Solaris lex and stick it up the backside of a passing Sun
 522 salesman, then install <a
 523 href="ftp://prep.ai.mit.edu/~ftp/pub/gnu">flex</a> and use that.  All
 524 will be happier.''<P>
 525
 526 I couldn't have put it better myself, and ain't going to try now.<P>
 527
 528 <hr>
 529 <h2><a name="B2">B2. I get link failures when I try to build fetchmail.</a></h2>
 530
 531 If you get errors resembling these<P>
 532
 533 <pre>
 534 mxget.o(.text+0x35): undefined referenceto `__res_search'
 535 mxget.o(.text+0x99): undefined reference to`__dn_skipname'
 536 mxget.o(.text+0x11c): undefined reference to`__dn_expand'
 537 mxget.o(.text+0x187): undefined reference to`__dn_expand'
 538 make: *** [fetchmail] Error 1
 539 </pre>
 540
 541 then you must add "-lresolv" to the LOADLIBS line in your Makefile
 542 once you have installed the `bind' package.<P>
 543
 544 <hr>
 545 <h2><a name="F1">F1. Why does my old .fetchmailrc file no longer work?</a></h2>
 546
 547 <h3>If your file predates 4.5.5</h3>
 548
 549 If the <code>dns</code> option is on (the default), you may need to
 550 make sure that any hostname you specify (for mail hosts or for an SMTP
 551 target) is a canonical fully-qualified hostname).  In order to avoid
 552 DNS overhead and complications, fetchmail no longer tries to derive
 553 the fetchmail client machine's canonical DNS name at startup.<P>
 554
 555 <h3>If your file predates 4.0.6:</h3>
 556
 557 Just after the `<CODE>via</CODE>' option was introduced, I realized
 558 that the interactions between the `<CODE>via</CODE>',
 559 `<CODE>aka</CODE>', and `<CODE>localdomains</CODE>' options were out
 560 of control.  Their behavior had become complex and confusing, so much so
 561 that I was no longer sure I understood it myself.  Users were being
 562 unpleasantly surprised.<P>
 563
 564 Rather than add more options or crock the code, I re-thought it.  The
 565 redesign simplified the code and made the options more orthogonal, but
 566 may have broken some complex multidrop configurations.
 567
 568 Any multidrop configurations that depended on the name just after the
 569 `<CODE>poll</CODE>' or `<CODE>skip</CODE>' keyword being still
 570 interpreted as a DNS name for address-matching purposes, even in the
 571 presence of a `<CODE>via</CODE>' option, will break.<P>
 572
 573 It is theoretically possible that other unusual configurations (such
 574 as those using a non-FQDN poll name to generate Kerberos IV tickets) might
 575 also break; the old behavior was sufficiently murky that we can't be
 576 sure.  If you think this has happened to you, contact the maintainer.<P>
 577
 578 <h3>If your file predates 3.9.5:</h3>
 579
 580 The `<code>remote</code>' keyword has been changed to `<code>folder</code>'.
 581 If you try to use the old keyword, the parser will utter a warning.<P>
 582
 583 <h3>If your file predates 3.9:</h3>
 584
 585 It could be because you're using a .fetchmailrc that's written in the
 586 old popclient syntax without an explicit `<CODE>username</CODE>'
 587 keyword leading the first user entry attached to a server entry.
 588
 589 This error can be triggered by having a user option such as `<CODE>keep</CODE>'
 590 or `<CODE>fetchall</CODE>' before the first explicit username.  For
 591 example, if you write<p>
 592
 593 <pre>
 594 poll openmail protocol pop3
 595         keep user "Hal DeVore" there is hdevore here
 596 </pre>
 597
 598 the `<CODE>keep</CODE>' option will generate an entire user entry with
 599 the default username (the name of fetchmail's invoking user).<p>
 600
 601 The popclient compatibility syntax was removed in 4.0.  It complicated
 602 the configuration file grammar and confused users.<p>
 603
 604 <h3>If your file predates 2.8:</h3>
 605
 606 The `<CODE>interface</CODE>', `<CODE>monitor</CODE>' and
 607 `<CODE>batchlimit</CODE>' options changed after 2.8.<p>
 608
 609 They used to be global options with `<CODE>set</CODE>' syntax like the
 610 batchlimit and logfile options.  Now they're per-server options, like
 611 `<CODE>protocol</CODE>'.<p>
 612
 613 If you had something like<p>
 614
 615 <pre>
 616         set interface = "sl0/10.0.2.15"
 617 </pre>
 618
 619 in your .fetchmailrc file, simply delete that line and insert
 620 `interface sl0/10.0.2.15' in the server options part of your `defaults'
 621 declaration.<p>
 622
 623 Do similarly for any `<CODE>monitor</CODE>' or `<CODE>batchlimit</CODE>' options.<p>
 624
 625 <hr>
 626 <h2><a name="F2">F2. The .fetchmailrc parser won't accept my all-numeric user name.</a></h2>
 627
 628 So put string quotes around it. :-)<p>
 629
 630 The configuration file parser treats any all-numeric token as a
 631 number, which will confuse it when it's expecting a name.  String
 632 quoting forces the token's class.<p>
 633
 634 <hr>
 635 <h2><a name="F3">F3. The .fetchmailrc parser won't accept my host or username beginning with `no'.</a></h2>
 636
 637 You're caught in an unfortunate crack between the newer-style syntax
 638 for negated options (`no keep', `no rewrite' etc.) and the older style
 639 run-on syntax (`nokeep', `norewrite' etc.).<p>
 640
 641 You can work around this easily.  Just put string quotes around your
 642 token.<p>
 643
 644 I haven't fixed this because there is no good fix for it short of
 645 implementing a token pushback stack in the lexer.  That's more
 646 additional complexity than I'm willing to add to banish a very
 647 marginal bug with an easy workaround.<p>
 648
 649 <hr>
 650 <h2><a name="F4">F4. I'm migrating from popclient.  How do I need to modify my .poprc?</a></h2>
 651
 652 If you have been using popclient (the ancestor of this program)
 653 at version 3.0b6 or later, start with this<p>
 654
 655 <pre>
 656 (cd; mv .poprc .fetchmailrc)
 657 </pre>
 658
 659 and do <code>fetchmail -V</code> to see if fetchmail's parser understands
 660 your configuration.<p>
 661
 662 Be aware that some of popclient's unnecessary options have been
 663 removed (see the NOTES file in the distribution for explanation).  You
 664 can't deliver to a local mail file or to standard output any more, and
 665 using an MDA for delivery is discouraged.  If you throw those options
 666 away, fetchmail will now forward your mail into your system's normal
 667 Internet-mail delivery path.<p>
 668
 669 Actually, using an MDA is now almost always the wrong thing; the MDA
 670 facility has been retained only for people who can't or won't run a
 671 sendmail-like SMTP listener on port 25. The default, SMTP forwarding
 672 to port 25, is better for at least three major reasons.  One: it feeds
 673 retrieved POP and IMAP mail into your system's normal delivery path
 674 along with local mail and normal Internet mail, so all your normal
 675 filtering/aliasing/forwarding setup for local mail works.  Two:
 676 because the port 25 listener returns a positive acknowledge, fetchmail
 677 can be sure you're not going to lose mail to a disk-full or some other
 678 resource-exhaustion problem.  Three: it means fetchmail doesn't have
 679 to know where the system mailboxes are, or futz with file locking
 680 (which makes two fewer places for it to potentially mess up).<p>
 681
 682 If you used to use <CODE>-mda "procmail -d</CODE>
 683 <em>&lt;you&gt;</em><CODE>"</CODE> or something similar, forward to port
 684 25 and do "<CODE>| procmail -d</CODE> <em>&lt;you&gt;</em><CODE>"</CODE> in
 685 your ~/.forward file.<p>
 686
 687 As long as your new .fetchmailrc file does not use the removed
 688 `localfolder' option or `<CODE>limit</CODE>' (which now takes a
 689 maximum byte size rather than a line count), a straight move or copy
 690 of your .poprc will often work.  (The new run control file syntax also
 691 has to be a little stricter about the order of options than the old,
 692 in order to support multiple user descriptions per server; thus you
 693 may have to rearrange things a bit.)<p>
 694
 695 Run control files in the minimal .poprc format (without the `username'
 696 token) will trigger a warning.  To eliminate this warning, add the
 697 `<CODE>username</CODE>' keyword before your first user entry per server (it is
 698 already required before second and subsequent user entries per server.<p>
 699
 700 In some future version the `<CODE>username</CODE>' keyword will be required.<p>
 701
 702 <hr>
 703 <h2><a name="F5">F5. I'm getting a `parse error' message I don't understand.</a></h2>
 704
 705 The most common cause of mysterious parse errors is putting a server
 706 option after a user option.  Check the manual page; you'll probably
 707 find that by moving one or more options closer to the `poll' keyword
 708 you can eliminate the problem.<p>
 709
 710 Yes, I know these ordering restrictions are hard to understand.
 711 Unfortunately, they're necessary in order to allow the `defaults'
 712 feature to work.<P>
 713
 714 <hr>
 715 <h2><a name="C1">C1. Why do I need a .fetchmailrc when running as root on my own machine?</a></h2>
 716
 717 Ian T. Zimmerman &lt;itz@rahul.net&gt; asked:<p>
 718
 719 On the machine where I'm the only real user, I run fetchmail as root
 720 from a cron job, like this:<p>
 721
 722 <pre>
 723     fetchmail -u "itz" -p POP3 -s bolero.rahul.net
 724 </pre>
 725
 726 This used to work as is (with no .fetchmailrc file in root's home
 727 directory) with the last version I had (1.7 or 1.8, I don't
 728 remember).  But with 2.0, it RECPs all mail to the local root user,
 729 unless I create a .fetchmailrc in root's home directory containing:<p>
 730
 731 <pre>
 732      skip bolero.rahul.net proto POP3
 733           user itz is itz
 734 </pre>
 735
 736 It won't work if the second line is just "<CODE>user itz</CODE>".  This is silly.<p>
 737
 738 It seems fetchmail decides to RECP the `default local user' (ie. the
 739 uid running fetchmail) unless there are local aliases, and the
 740 `default' aliases (itz->itz) don't count.  They should.<p>
 741
 742 Answer:<p>
 743
 744 No they shouldn't.   I thought about this for a while, and I don't much
 745 like the conclusion I reached, but it's unavoidable.  The problem is
 746 that fetchmail has no way to know, in general, that a local user `itz'
 747 actually exists.<p>
 748
 749 "Ah!" you say, "Why doesn't it check the password file to see if the remote
 750 name matches a local one?"  Well, there are two reasons.<p>
 751
 752 One: it's not always possible.  Suppose you have an SMTP host declared
 753 that's not the machine fetchmail is running on?  You lose.<p>
 754
 755 Two: How do you know server itz and SMTP-host itz are the same person?
 756 They might not be, and fetchmail shouldn't assume they are unless
 757 local-itz can explicitly produce credentials to prove it (that is, the
 758 server-itz password in local-itz's .fetchmailrc file.).<p>
 759
 760 Once you start running down possible failure modes and thinking about
 761 ways to tinker with the mapping rules, you'll quickly find that all the
 762 alternatives to the present default are worse or unacceptably
 763 more complicated or both.<p>
 764
 765 <hr>
 766 <h2><a name="C2">C2. How can I arrange for a fetchmail daemon to get killed when I log out?</a></h2>
 767
 768 The easiest way to dispatch fetchmail on logout (which will work
 769 reliably onlif you have just one login going at any time) is to
 770 arrange for the command `fetchmail -q' to be called on logout.  Under
 771 bash, you can arrange this by putting `fetchmail -q' in the file
 772 `~/.bash_logout'.  Most csh variants execute `~/.logout' on logout.
 773 For other shells, consult your shell manual page.<p>
 774
 775 Automatic startup/shutdown of fetchmail is a little harder to arrange
 776 if you may have multiple login sessions going.  In the contrib
 777 subdirectory of the fetchmail distribution there is some shell code
 778 you can add to your .bash_login and .bash_logout profiles that will
 779 accomplish this.  Thank James Laferriere &lt;babydr@nwrain.net&gt; for
 780 it.<p>
 781
 782 <hr>
 783 <h2><a name="C3">C3. How do I know what interface and address to use with --interface?</a></h2>
 784
 785 This depends a lot on your local networking configuration (and right
 786 now you can't use it at all except under Linux).  However, here are
 787 some important rules of thumb that can help.  If they don't work, ask
 788 your local sysop or your Internet provider.<p>
 789
 790 First, you may not need to use --interface at all.  If your machine
 791 only ever does SLIP or PPP to one provider, it's almost certainly by a
 792 point to point modem connection to your provider's local subnet that's
 793 pretty secure against snooping (unless someone can tap your phone or
 794 the provider's local subnet!).  Under these circumstances, specifying
 795 an interface address is fairly pointless.<p>
 796
 797 What the option is really for is sites that use more than one
 798 provider.  Under these circumstances, typically one of your provider
 799 IP addresses is your mailserver (reachable fairly securely via the
 800 modem and provider's subnet) but the others might ship your packets
 801 (including your password) over unknown portions of the general
 802 Internet that could be vulnerable to snooping.  What you'll use
 803 --interface for is to make sure your password only goes over the
 804 one secure link.<p>
 805
 806 To determine the device:<p>
 807
 808 <ol>
 809 <li> If you're using a SLIP link, the correct device is probably sl0.
 810 <li> If you're using a PPP link, the correct device is probably ppp0.
 811 <li> If you're using a direct connection over a local network such as
 812      an ethernet, use the command `netstat -r' to look at your routing table.
 813      Try to match your mailserver name to a destination entry; if you don't
 814      see it in the first column, use the `default' entry.  The device name
 815      will be in the rightmost column.
 816 </ol>
 817
 818 To determine the address and netmask:<p>
 819
 820 <ol>
 821 <li> If you're talking to slirp, the correct address is probably 10.0.2.15,
 822      with no netmask specified.  (It's possible to configure slirp to present
 823      other addresses, but that's the default.)
 824
 825 <li> If you have a static IP address, run `ifconfig &lt;device&gt;', where &lt;device&gt;
 826      is whichever one you've determined.  Use the IP address given after
 827      "inet addr:".  That is the IP address for your end of the link, and is
 828      what you need.  You won't need to specify a netmask.
 829
 830 <li> If you have a dynamic IP address, your connection IP will vary randomly
 831      over some given range (that is, some number of the least significant bits
 832      change from connection to connection).  You need to declare an address
 833      with the variable bits zero and a complementary netmask that sets
 834      the range.
 835 </ol>
 836
 837 To illustrate the rule for dynamic IP addresses, let's suppose you're
 838 hooked up via SLIP and your IP provider tells you that the dynamic
 839 address pool is 255 addresses ranging from 205.164.136.1 to
 840 205.164.136.255.  Then<p>
 841
 842 <pre>
 843         interface "sl0/205.164.136.0/255.255.255.0"
 844 </pre>
 845
 846 would work.  To range over any value of the last two octets
 847 (65536 addresses) you would use<p>
 848
 849 <pre>
 850         interface "sl0/205.164.0.0/255.255.0.0"
 851 </pre>
 852
 853 <hr>
 854 <h2><a name="C4">C4. How can I set up support for sendmail's anti-spam features?</a></h2>
 855
 856 This answer covers versions of sendmail from 8.8.7 (the version
 857 installed in Red Hat 5.1) upwards.  If you have an older version,
 858 upgrade to sendmail 8.9.<P>
 859
 860 Stock sendmails can now do anti-spam exclusions based on a database of
 861 filter rules.  The human-readable form of the database is at
 862 <tt>/etc/mail/deny</tt>. The database itself is at
 863 <tt>/etc/mail/deny.db</tt>.<P>
 864
 865 <P>The table itself uses email addresses, domain names, and network
 866 numbers as keys.  For example,</P>
 867 <PRE>
 868 spammer@aol.com         REJECT
 869 cyberspammer.com        REJECT
 870 192.168.212             REJECT
 871 </PRE>
 872 <P>would refuse mail from spammer@aol.com, any user from
 873 cyberspammer.com (or any host within the cyberspammer.com domain), and
 874 any host on the 192.168.212.* network.  (This feature can be used to
 875 do other things as well; see the <a
 876 href="http://www.sendmail.org/m4/anti-spam.html">sendmail
 877 documentattion</a> for details)</P>
 878
 879 To actually set up the database, run
 880
 881 <pre>
 882 makemap hash deny &lt;deny
 883 </pre>
 884 in /etc/mail.<P>
 885
 886 To test, send a message to your mailing address from that host and
 887 then pop off the message with fetchmail, using the -v argument.  You
 888 can monitor the SMTP transaction, and when the FROM address is parsed,
 889 if sendmail sees that it is an address in spamlist, fetchmail will
 890 flush and delete it.<p>
 891
 892 Under no circumstances put your <strong>mailhost</strong> or <strong>any host
 893 you accept mail from</strong> using fetchmail into your reject file.  You
 894 <strong>will</strong> lose mail if you do this!!!<p>
 895
 896 <hr>
 897 <h2><a name="T1">T1. How can I use fetchmail with sendmail?</a></h2>
 898
 899 For most sendmails, no special configuration is required.  Eric Allman
 900 tells me that if <code>FEATURE(always_add_domain)</code> is included
 901 in sendmail's configuration, you can leave the <code>rewrite</code>
 902 option off.<P>
 903
 904 G&uuml;nther Leber reports that Digital Unix sendmails won't work with
 905 fetchmail.  The symptom is an error message "<code>553 Local configuration
 906 error, hostname not recognized as local</code>". The problem is that
 907 fetchmail normally feeds sendmail with the client machine's host
 908 address in the MAIL FROM line.  These sendmails think this means
 909 they're seeing the result of a mail loop and suppress the mail.  You
 910 may be able to work around this by running in <code>--invisible</code> mode.<P>
 911
 912 If you want to support multidrop mode, and you can get access to your
 913 mailserver's sendmail.cf file, it's a good idea to add this rule:<P>
 914
 915 <pre>
 916 H?l?Delivered-To: $u
 917 </pre>
 918
 919 and declare `<CODE>envelope "Delivered-To:"</CODE>'. This will cause the
 920 mailserver's sendmail to reliably write the appropriate envelope
 921 address into each message before fetchmail sees it, and tell fetchmail
 922 which header it is.  With this change, multidrop mode should work
 923 reliably even when the Received header omits the envelope address
 924 (which will typically be the case when the message has multiple
 925 recipients). <P>
 926
 927 <hr>
 928 <h2><a name="T2">T2. How can I use fetchmail with qmail?</a></h2>
 929
 930 Turn on the <CODE>forcecr</CODE> option; qmail's listener mode doesn't like
 931 header or message lines terminated with bare linefeeds.<p>
 932
 933 (This information is thanks to Robert de Bath
 934 &lt;robert@mayday.cix.co.uk&gt;.)<p>
 935
 936 If a mailhost is using the qmail package (see <a
 937 href="http://pobox.com/~djb/qmail.html">http://pobox.com/~djb/qmail.html</a>)
 938 then, providing the local hosts are also using qmail, it is possible
 939 to set up one fetchmail link to be reliably collect the mail for an
 940 entire domain.<p>
 941
 942 One of the basic features of qmail is the `Delivered-To:' message
 943 header.  Whenever qmail delivers a message to a local mailbox it puts
 944 the username and hostname of the envelope recipient on this line.  The
 945 major reason for this is to prevent mail loops. <p>
 946
 947 To set up qmail to batch mail for a disconnected site the ISP-mailhost
 948 will have normally put that site in its `virtualhosts' control file so
 949 it will add a prefix to all mail addresses for this site. This results
 950 in mail sent to 'username@userhost.userdom.dom.com' having a
 951 'Delivered-To:' line of the form:<p>
 952
 953 <pre>
 954        Delivered-To: mbox-userstr-username@userhost.userdom.dom.com
 955 </pre>
 956
 957 A single host maildrop will be slightly simpler:
 958
 959 <pre>
 960        Delivered-To: mbox-userstr-username@userhost.dom.com
 961 </pre>
 962
 963 The ISP can make the 'mbox-userstr-' prefix anything they choose
 964 but a string matching the user host name is likely.<p>
 965
 966 To use this line you must:<p>
 967
 968 <ol>
 969 <li>Ensure the option `envelope Delivered-To:' is in the fetchmail
 970     config file.
 971
 972 <li>Ensure you have a localdomains containing 'userdom.dom.com' or
 973     `userhost.dom.com' respectively.
 974 </ol>
 975
 976 So far this reliably delivers messages to the correct machine of the
 977 local network, to deliver to the correct user the 'mbox-userstr-'
 978 prefix must be stripped off of the user name. This can be done by
 979 setting up an alias within the qmail MTA on each local machine.
 980 Simply create a dot-qmail file called '.qmail-mbox-userstr-default'
 981 in the alias directory (normally /var/qmail/alias) with the contents:<p>
 982
 983 <pre>
 984       | ../bin/qmail-inject -a -f"$SENDER" "${LOCAL#mbox-userstr-}@$HOST}"
 985 </pre>
 986
 987 Note this <em>does</em> require a modern /bin/sh.<p>
 988
 989 Luca Olivetti adds:<P>
 990
 991 If you aren't using qmail locally, or you don't want to set up the
 992 alias mechanism described above, you can use the option `<code>qvirtual
 993 "mbox-userstr-"</code>' in your fetchmail config file to strip the prefix
 994 from the local user name.<p>
 995
 996 <hr>
 997 <h2><a name="T3">T3. How can I use fetchmail with exim?</a></h2><p>
 998
 999 By default, the exim listener enforces the the RFC1123 requirement
1000 that MAIL FROM and RCPT TO addresses you pass to it have to be canonical
1001 (e.g. with a fully qualified hostname part).  <p>
1002
1003 Fetchmail always passes fully qualified RCPT TO addresses.  But
1004 MAIL FROM is a potential problem if the MTAs upstream from your fetchmail
1005 don't necessarily pass canonicalized From and Return-Path addresses,
1006 and fetchmail's <CODE>rewrite</CODE> option is off.  The specific case
1007 where this has come up involves bounce messages generated by sendmail
1008 on your mailer host, which have the (un-canonicalized) origin address
1009 MAILER-DAEMON.<p>
1010
1011 The right way to fix this is to enable the <CODE>rewrite</CODE> option and
1012 have fetchmail canonicalize From and Return-Path addresses with the
1013 mailserver hostname before exim sees them.  This option is enabled by
1014 default, so it won't be off unless you turned it off.<p>
1015
1016 If you must run with <CODE>rewrite</CODE> off, there is a switch in exim's
1017 configuration files that allows it to accept domainless MAIL FROM
1018 addresses; you will have to flip it by putting the line <p>
1019
1020 <pre>
1021         sender_unqualified_hosts = localhost
1022 </pre>
1023
1024 in the main section of the exim configuration file.  Note that this
1025 will result in such messages having an incorrect domain name attached
1026 to their return address (your SMTP listener's hostname rather than
1027 that of the remote mail server). <p>
1028
1029 <hr>
1030 <h2><a name="T4">T4. How can I use fetchmail with smail?</a></h2><p>
1031
1032 Smail 3.2 is very nearly plug-compatible with sendmail, and may work
1033 fine out of the box.<P>
1034
1035 We have one report that when processing multiple messages from a
1036 single fetchmail session, smail sometimes delivers them in an
1037 order other than received-date order.  This can be annoying because it
1038 scrambles conversational threads.  This is not fetchmail's problem,
1039 it is an smail `feature' and has been reported to the maintainers
1040 as a bug.<P>
1041
1042 Very recent smail versions require an <code>-smtp_hello_verify</code>
1043 option in the smail config file.  This overrides smail's check to see
1044 that the HELO address is actually that of the client machine, which
1045 is never going to be the case when fetchmail is in the picture.
1046 According to RFC1123 an SMTP listener <em>must</em> allow this
1047 mismatch, so smail's new behavior (introduced sometime between
1048 3.2.0.90 and 3.2.0.95) is a bug.<P>
1049
1050 <hr>
1051 <h2><a name="T5">T5. How can I use fetchmail with SCO's MMDF?</a></h2><p>
1052
1053 We're told this is possible, but difficult and tricky (and we don't
1054 have the recipe for it).  Our informant suggests dropping MMDF and
1055 using sendmail instead.<P>
1056
1057 <hr>
1058 <h2><a name="T6">T6. How can I use fetchmail with Lotus Notes?</a></h2><p>
1059
1060 The Lotus Notes SMTP gateway tries to deduce when it should convert \n
1061 to \r\n, but its rules are not the intuitive and correct-for-RFC822
1062 ones.  Use `forcecr'.<P>
1063
1064 <hr>
1065 <h2><a name="S1">S1. How can I use fetchmail with Microsoft Exchange?</a></h2><p>
1066
1067 M$ Exchange violates the POP3 RFCs.  Its LIST command does not reveal
1068 the real sizes of mail in the pop mailbox, but the sizes of the
1069 compressed versions in the exchange mail database (thanks to Arjan De
1070 Vet and Guido Van Rooij for alerting us to this problem).<P>
1071
1072 Fetchmail works with M$ Exchange, despite this braindamage.  Two
1073 features are compromised.  One is that the --limit option will not
1074 work right (it will check against compressed and not actual sizes).
1075 The other is that a too-small SIZE argument may be passed to your
1076 ESMTP listener, assuming you're using one (this should not be a
1077 problem unless the actual size of the message is above the listener's
1078 configured length limit).<P>
1079
1080 Somewhat belatedly, I've learned that there's supposed to be a
1081 registry bit that can fix this breakage:<P>
1082
1083 <pre>
1084 HKEY_LOCAL_MACHINE\System\CurrentControlSet\Services\MsExchangeIs\Parameters
1085 System\Pop3 Compatibility
1086 </pre>
1087
1088 This is a bitmask that controls the variations from the standard protocol.
1089 The bits defined are:<P>
1090
1091 <DL>
1092 <DT>0x00000001:
1093 <DD>Report exact message sizes for the LIST command
1094 <DT>0x00000002:
1095 <DD>Allow arbitrary linear whitespace between commands and arguments
1096 <DT>0x00000004:
1097 <DD>Enable the LAST command
1098 <DT>0x00000008:
1099 <DD>Allow an empty PASS command (needed for users with blank
1100 passwords, but illegal in the protocol)
1101 <DT>0x00000010:
1102 <DD>Relax the length restrictions for arguments to commands (protocol
1103 requires 40, but some user names may be longer than that).
1104 <DT>0x00000020:
1105 <DD>Allow spaces in the argument to the USER command.
1106 </DL>
1107
1108 There's another one that may be useful to know about:<P>
1109
1110 <pre>
1111 KEY_LOCAL_MACHINE\System\CurrentControlSet\Services\MsExchangeIs\Parameters
1112 System\Pop3 Performance
1113 </pre>
1114
1115 <DL>
1116 <DT>0x00000001:
1117 <DD>Render messages to a temporary stream instead of sending directly
1118 from the database (should always be on)
1119 <DT>0x00000002:
1120 Flag unrenderable messages (instead of just failing commands)
1121 (should only be on if you are seeing the problems reported
1122 in KB Q168109)
1123 <DT>0x00000004:
1124 <DD>Return from the QUIT command before all messages have been deleted.
1125 </DL>
1126
1127 The Microsoft pod-person who revealed this information to me admitted
1128 that he couldn't find it anywhere in their public knowledge base.<P>
1129
1130 You can mess with these bits.  Or, better yet, you can lose that
1131 brain-dead Microsoft crap and install a real operating system on your
1132 mailserver.<P>
1133
1134 <hr>
1135 <h2><a name="S2">S2. How can I use fetchmail with CompuServe RPA?</a></h2>
1136
1137 First, make sure your fetchmail has the RPA support compiled in.
1138 Stock fetchmail binaries (such as you might get from an RPM) don't.
1139 You can check this by looking at the output of <code>fetchmail -V</code>;
1140 if you see the string "+RPA" after the version ID you're good to go,
1141 otherwise you'll have to build your own from sources (see the INSTALL
1142 file in the source distribution for directions).<P>
1143
1144 Give your CompuServe pass-phrase in lower case as your password.  Add
1145 `@compuserve.com' to your user ID so that it looks like `user
1146 &lt;UserID&gt;@compuserve.com', where &lt;UserID&gt; can be either
1147 your numerical userID or your E-mail nickname. An RPA-enabled
1148 fetchmail will automatically check for csi.com in the POP server's
1149 greeting line.  If that's found, and your user ID ends with
1150 `@compuserve.com', it will query the server to see if it
1151 is RPA-capable, and if so do an RPA transaction rather than a
1152 plain-text password handshake.<P>
1153
1154 <strong>Warning:</strong> the verbose output of fetchmail will show
1155 your pass-phrase in Unicode!<P>
1156
1157 These two .fetchmailrc entries show the difference between an RPA and
1158 non-RPA configuration:
1159
1160 <pre>
1161 # This version will use RPA
1162 poll csi.com via "pop.site1.csi.com" with proto POP3 and options no dns
1163     user "CSERVE_USER@compuserve.com" there with password "CSERVE_PASSWORD"
1164         is LOCAL_USER here options fetchall stripcr
1165
1166 # This version will not use RPA
1167 poll non-rpa.csi.com via "pop.site1.csi.com" with proto POP3 and options no dns
1168     user "CSERVE_USER" there with password "CSERVE_POP3_PASSWORD"
1169        is LOCAL_USER here options fetchall stripcr
1170 </pre>
1171
1172 <hr>
1173 <h2><a name="S3">S3. How can I use fetchmail with Demon Internet's SDPS?</a></h2>
1174
1175 Demon Internet's SDPS service is an implementation of POP3. All messages
1176 have a Received: header added when they enter the maildrop, like this:
1177
1178 <pre>
1179    Received: from punt-1.mail.demon.net by mailstore for fred@xyz.demon.co.uk
1180              id 899963657:10:27896:0; Thu, 09 Jul 98 05:54:17 GMT
1181 </pre>
1182
1183 To enable multi-drop mode you need to tell fetchmail that 'mailstore' is
1184 the name of the host which accepted the mail, and let it know the
1185 hostname part(s) of your E-mail address. The following example assumes
1186 that your hostname is xyz.demon.co.uk, and that you have also bought
1187 "mail forwarding" for the domain my-company.co.uk (in which case your
1188 MTA must also be configured to accept mail sent to user@my-company.co.uk)
1189
1190 <pre>
1191      poll pop3.demon.co.uk proto pop3 aka mailstore no dns:
1192        localdomains xyz.demon.co.uk my-company.co.uk
1193        user xyz is * fetchall
1194 </pre>
1195
1196 The `fetchall' command ensures that all mail is downloaded. If you
1197 want to leave mail on the server use `uidl' and `keep'; Demon does not
1198 implement the obsolete `top' command, because SDPS combines messages
1199 residing on two separate punt clusters into a single POP3 maildrop.
1200 Note that Demon may delete mail on the server which is more than 30
1201 days old; see their <a
1202 href="http://www.demon.net/services/mail/pop3.html">POP3 page</a> for
1203 details.<P>
1204
1205 <h3>The SDPS extension</h3>
1206
1207 There's a different way to solve this problem.  It's not necessary on
1208 Demon Internet, since fetchmail can parse Received addresses, but the
1209 person who implemented this didn't know that. It may be useful if
1210 Demon Internet ever changes mail transports.<P>
1211
1212 SDPS includes a non-standard extension for retrieving the envelope of a
1213 message (*ENV), which fetchmail optionally supports if compiled with the
1214 --enable-SDPS option. If you have it, the first line of the fetchmail -V
1215 response will include the string "+SDPS".<P>
1216
1217 Once you have SDPS compiled in, fetchmail in POP3 mode will
1218 automatically detect when it's talking to a Demon Internet host in
1219 multidrop mode, and use the *ENV extension to get an envelope To address.<P>
1220
1221 The autodetection works by looking at the hostname in the POP3
1222 greeting line; if you're accessing Demon Internet through a proxy it
1223 may fail. To force SDPS mode, pick "sdps" as your protocol.<P>
1224
1225 <hr>
1226 <h2><a name="S4">S4. How can I use fetchmail with usa.net's servers?</a></h2>
1227
1228 Enable `<CODE>fetchall</CODE>'.  A user reports that the 2.2 version
1229 of USA.NET's POP server reports that you must use the
1230 `<CODE>fetchall</CODE>' option to make sure that all of the mail is
1231 retrieved, otherwise some may be left on the server.  This is almost
1232 certainly a server bug.<P>
1233
1234 The usa.net servers (at least in their 2.2 version, June 1998) don't
1235 handle the TOP command properly, either.  Regardless of the argument
1236 you give it, they retrieve only about 10 lines of the message.
1237 Fetchmail normally uses TOP for message retrieval in order to avoid
1238 marking messages seen, but `<CODE>fetchall</CODE>' forces it to use
1239 RETR instead.<P>
1240
1241 So, set the `<CODE>fetchall</CODE>' option.<P>
1242
1243 (Note: Other failure modes have been reported on usa.net's servers.
1244 They seem to be chronically flaky.  We recommend finding another
1245 provider.)<P>
1246
1247 <hr>
1248 <h2><a name="S5">S5. How can I use fetchmail with HP OpenMail?</a></h2>
1249
1250 No special configuration is required, but OpenMail has an annoying bug
1251 similar to the big one in <a href="#S1">Microsoft Exchange</a>.
1252 The message sizes it gives in the LIST are rounded to the nearest 1024
1253 bytes.  It also has a nasty habit of discarding headers it doesn't
1254 recognize, such as X- and Resent- headers.<P>
1255
1256 As with M$ Exchange, the only real fix for these problems is to get a
1257 POP (or preferably IMAP) server that isn't brain-dead.<P>
1258
1259 <hr>
1260 <h2><a name="K1">K1. How can I use fetchmail with SOCKS?</a></h2>
1261
1262 Daniel Sobral &lt<a href="mailto:dcs@gns.com.br">dcs@gns.com.br</a>
1263 gave us the following recipe:<P>
1264
1265 <OL>
1266 <LI> Install socks5. You don't need to have a socks server, you just
1267      want the "runsocks" program.
1268 <LI> Set the environment variable SOCKS_SERVER to the server you'll be
1269      using. Alternatively, you may set SOCKS4_SERVER and/or
1270      SOCKS5_SERVER. Eg:
1271 <pre>
1272         export SOCKS5_SERVER=socks.my.domain.com
1273 </pre>
1274 <LI> Set SOCKS5_USER and SOCKS5_PASSWD if needed.
1275 <LI> Run fetchmail through runsocks. Just like this:
1276 <pre>
1277         runsocks fetchmail [parameters to fetchmail]
1278 </pre>
1279 </OL>
1280
1281 It wasn't that hard, was it? :-)<P>
1282
1283 <hr>
1284 <h2><a name="#S6">S6. How can I use fetchmail with geocities POP3 servers?</a></h2>
1285
1286 Nathan Cutler reports that the the mail.geocities.com POP3 servers
1287 fail to include the first Received line of the message in the send to
1288 fetchmail.  This can solve problems if your MUA interprets Received
1289 continuations as body lines and doesn't parse any of the following
1290 headers.<P>
1291
1292 Workaround:
1293 <pre>
1294 mda "sed -e1,2D | formail | /usr/bin/procmail -d &lt;user&gt;
1295 </pre>
1296
1297 Fix: Get an email provider that doesn't suck.  Geocities's pop-up adds
1298 are lame, you should boycott them anyway.<P>
1299
1300 <hr>
1301 <h2><a name="K2">K2. How can I use fetchmail with IPv6 and IPsec?</a></h2>
1302
1303 To use fetchmail with IPv6, you need a system that supports IPv6, the "Basic
1304 Socket Interface Extensions for IPv6" (RFC 2133), and the inet6-apps kit.
1305 This currently means that you need to have a BSD/OS or NetBSD system with
1306 the NRL IPv6+IPsec software distribution or a Linux system with the latest
1307 experimental kernel and net-tools. It should not be hard to build fetchmail on
1308 other IPv6 implementations if you can port the inet6-apps kit.<P>
1309
1310 To use fetchmail with network security (read: IPsec), you need a system that
1311 supports IPsec, the API described in the "Network Security API for Sockets"
1312 (draft-metz-net-security-api-01.txt), and the inet6-apps kit. This currently
1313 means that you need to have a BSD/OS or NetBSD system with the NRL IPv6+IPsec
1314 software distribution. A Linux IPsec implementation supporting this API will
1315 probably appear in the coming months.<P>
1316
1317 The NRL IPv6+IPsec software distribution can be obtained from: <a
1318 href="http://web.mit.edu/network/isakmp">http://web.mit.edu/network/isakmp</a>
1319 <P>
1320
1321 The inet6-apps kit can be obtained from <a
1322 href="ftp://ftp.ipv6.inner.net/pub/ipv6">ftp://ftp.ipv6.inner.net/pub/ipv6</a>
1323 (via IPv6) or <a href="ftp://ftp.inner.net/pub/ipv6">
1324 ftp://ftp.inner.net/pub/ipv6</a> (via IPv4).<P>
1325
1326 More information on using IPv6 with Linux can be obtained from:
1327 <UL>
1328 <LI>
1329 <a href="http://www.bieringer.de/linux/IPv6/IPv6-HOWTO/IPv6-HOWTO.html">
1330 http://www.bieringer.de/linux/IPv6/IPv6-HOWTO/IPv6-HOWTO.html</a>
1331 <LI>
1332 <a href="http://www.ipv6.inner.net/ipv6">http://www.ipv6.inner.net/ipv6</a>
1333 (via IPv6)
1334 <LI>
1335 <a href="http://www.inner.net/ipv6">http://www.inner.net/ipv6</a> (via IPv4)
1336 </UL>
1337
1338 <hr>
1339 <h2><a name="K3">K3. How can I get fetchmail to work with ssh?</a></h2>
1340
1341 We have two recipes for this.  The first is a little easier to set up,
1342 but only supports one user at a time.<P>
1343
1344 First, a lightly edited version of a recipe from Masafumi NAKANE:<p>
1345
1346 1. You must have ssh (the ssh client) on the local host and sshd (ssh
1347 server) on the remote mail server.  And you have to configure ssh so
1348 you can login to the sshd server host without a password.  (Refer to ssh
1349 man page for several authentication methods.)<p>
1350
1351 2. Add something like following to your .fetchmailrc file: <p>
1352
1353 <pre>
1354 poll mailhost port 1234 via localhost with proto pop3:
1355         preconnect "ssh -f -L 1234:mailhost:110 mailhost sleep 20 &lt;/dev/null &gt;/dev/null";
1356 </pre>
1357
1358 (Note that 1234 can be an arbitrary port number.  Privileged ports can
1359 be specified only by root.)  The effect of this ssh command is to
1360 forward connections made to localhost port 1234 (in above example) to
1361 mailhost's 110.<p>
1362
1363 This configuration will enable secure mail transfer.  All the
1364 conversation between fetchmail and remote pop server will be
1365 encrypted.<p>
1366
1367 If sshd is not running on the remote mail server, you can specify
1368 intermediate host running it.  If you do this, however, communication
1369 between the machine running sshd and the POP server will not be encrypted.
1370 And the preconnect line would be like this:<p>
1371
1372 <pre>
1373 preconnect "ssh -f -L 1234:mailhost:110 sshdhost sleep 20 &lt;/dev/null &gt;/dev/null"
1374 </pre>
1375
1376 You can work this trick with IMAP too, but the port number 110 in the
1377 above would need to become 143.<p>
1378
1379 Second, a recipe from Charlie Brady &lt;cbrady@ind.tansu.com.au&gt;:<p>
1380
1381 Charlie says: "The [previous] recipe certainly works, but
1382 the solution I post here is better in a few respects":
1383
1384 <UL>
1385 <LI>this method will not fail if two or more users attempt to use fetchmail
1386     simultaneously.
1387 <LI>you are able to use the full facilities of tcpd to control access
1388 <LI>this method does not depend on the preconnect feature of fetchmail, so
1389     can be used for tunneling of other services as well.
1390 </UL>
1391
1392 Here are the steps:
1393
1394 <OL>
1395 <LI>
1396 Make sure that the "socket" program is installed on the server
1397 machine. Presently it lives at <a
1398 href="ftp://sunsite.unc.edu/pub/linux/system/network/misc/socket-1.1.tar.gz">
1399 ftp://sunsite.unc.edu/pub/linux/system/network/misc/socket-1.1.tar.gz</a>,
1400 but watch out for a change in version number.<P>
1401 <LI>
1402 Set up an unprivileged account on your system with a .ssh directory
1403 containing an SSH identity file "identity" with no pass phrase,
1404 "identity.pub" and "known_hosts" containing the host key of your
1405 mailhost. Let's call this account "noddy".
1406 <LI>
1407 On mailhost, set up no-password access for noddy@yourhost. Add to your
1408 SSH authorised_keys file:
1409
1410 <PRE>
1411 command="socket localhost 110",no-port-forwarding 1024 ......
1412 </PRE>
1413
1414 where "<code>1024</code> ......" is the content of noddy's identity.pub file.
1415 <LI>
1416 Create a script /usr/local/bin/ssh.fm and make it executable:
1417
1418 <PRE>
1419 #! /bin/sh
1420 exec ssh -q -C -l your.login.id -e none mailhost socket localhost 110
1421 </PRE>
1422 <LI>
1423 Add an entry in inetd.conf for whatever port you choose to use - say:
1424
1425 <PRE>
1426 1234 stream tcp nowait noddy /usr/sbin/tcpd /usr/local/bin/ssh.fm
1427 </PRE>
1428 <LI>
1429 Send a HUP signal to your inetd.
1430 </OL>
1431
1432 Now just use localhost:1234 to access your POP server.<P>
1433
1434 <hr>
1435 <h2><a name="K4">K4. What do I have to do to use the IMAP-GSS protocol?</a></h2>
1436
1437 Fetchmail can use RFC1731 GSSAPI authorization to safely identify you
1438 to your IMAP server, as long as you can share Kerberos V credentials
1439 with your mail host and you have a GSSAPI-capable IMAP server.
1440 UW-IMAP (available via FTP at <a
1441 href="ftp://ftp.cac.washington.edu/mail/">ftp.cac.washington.edu</a>)
1442 is the only one I'm aware of and the one I recommend anyway for other
1443 reasons. You'll need version 4.1-FINAL or greater though, and it has
1444 to have GSS support compiled in.<p>
1445
1446 Neither UW-IMAP nor fetchmail compile in support for GSS by default, since
1447 it requires libraries from the Kerberos V distribution (available via FTP at
1448 <a href="ftp://athena-dist.mit.edu/pub/ATHENA/kerberos">athena-dist.mit.edu</a>
1449 but mind the export restrictions). If you have these, compiling in GSS support
1450 is simple: add a <pre>--with-gssapi=[/path/to/krb5/root]</pre> option to
1451 configure. For instance, I have all of my kerberos V libraries installed under
1452 /usr/krb5 so I run <pre>configure --with-gssapi=/usr/krb5</pre>.<p>
1453
1454 Setting up Kerberos V authentication is beyond the scope of this FAQ
1455 (you may find Jim Rome's paper <a
1456 href="http://www.ornl.gov/~jar/HowToKerb.html"> How to Kerberize your
1457 site</a> helpful), but you'll at least need to add a credential for
1458 imap/[mailhost] to the keytab of the mail server (IMAP doesn't just
1459 use the host key). Then you'll need to have your credentials ready on
1460 your machine (cf. kinit).<p>
1461
1462 After that things are very simple. Set your protocol to imap-gss in your
1463 .fetchmailrc, and omit the password, since imap-gss doesn't need one. You
1464 can specify a username if you want, but this is only useful if your mailbox
1465 belongs to a username different from your kerberos principal. <p>
1466
1467 Now you don't have to worry about your password appearing in cleartext in
1468 your .fetchmailrc, or across the network.<p>
1469
1470 <hr>
1471 <h2><a name="R1">R1. Fetchmail isn't working, and -v shows `SMTP connect failed' messages.</a></h2>
1472
1473 Fetchmail itself is probably working, but your SMTP port 25 listener
1474 is down or inaccessible.<p>
1475
1476 The first thing to check is if you can telnet to port 25 on your smtp
1477 host (which is normally `localhost' unless you've specified an smtp
1478 option in your .fetchmailrc or on the command line) and get a greeting
1479 line from the listener.  If the SMTP host is inaccessible or the listener
1480 is down, fix that first.<p>
1481
1482 If the listener seems to be up when you test with telnet, the most
1483 benign and typical problem is that the listener had a momentary seizure
1484 due to resource exhaustion while fetchmail was polling it -- process
1485 table full or some other problem that stopped the listener process
1486 from forking.  If your SMTP host is not `localhost' or something else
1487 in /etc/hosts, the fetchmail glitch could also have been caused by
1488 transient nameserver failure. <p>
1489
1490 Try running fetchmail -v again; if it succeeds, you had one of these
1491 kinds of transient glitch.  You can ignore these hiccups, because a
1492 future fetchmail run will get the mail through. <p>
1493
1494 If the listener tests up, but you have chronic failures trying to
1495 connect to it anyway, your problem is more serious.  One way to work
1496 around chronic SMTP connect problems is to use --mda.  But this only
1497 attacks the symptom; you may have a DNS or TCP routing problem.  You
1498 should really try to figure out what's going on underneath before it
1499 bites you some other way. <p>
1500
1501 We have one report (from toby@eskimo.com) that you can sometimes solve
1502 such problems by doing an <CODE>smtp</CODE> declaration with an IP
1503 address that your routing table maps to something other than the
1504 loopback device (he used ppp0).<p>
1505
1506 We also have a report that this error can be caused by having an
1507 /etc/hosts file that associates your client host name with more than
1508 one IP address.<P>
1509
1510 It's also possible that your DNS configuration isn't
1511 looking at <code>/etc/hosts</code> at all.  If you're using libc5,
1512 look at <code>/etc/resolv.conf</code>; it should say something like
1513
1514 <pre>
1515         order hosts,bind
1516 </pre>
1517
1518 so your <code>/etc/hosts</code> file is checked first.  If you're
1519 running GNU libc6, check your <code>/etc/nsswitch</code> file.  Make
1520 sure it says something like
1521
1522 <pre>
1523         order hosts,bind
1524 </pre>
1525
1526 again, in order to make sure <code>/etc/hosts</code> is seen first.<P>
1527
1528 We had another report from a Linux user of fetchmail 2.1 who solved his SMTP
1529 connection problem by removing the reference to -lresolv from his link
1530 line and relinking.  Apparently in some older Linux distributions the
1531 libc bind library version works better.<p>
1532
1533 As of 2.2, the configure script has been hacked so the bind library is
1534 linked only if it is actually needed.  So under Linux it won't be, and
1535 this particular cause should go away.<p>
1536
1537 <hr>
1538 <h2><a name="R2">R2. When I try to configure an MDA, fetchmail doesn't work.</a></h2>
1539
1540 (I hear this one from people who have run into the blank-line problem in <a href="#X1">X1</a>.)<p>
1541
1542 Try sending yourself test mail and retrieving it using the
1543 command-line options `<CODE>-k -m cat</CODE>'.  This will dump exactly what
1544 fetchmail retrieves to standard output (plus the Received line
1545 fetchmail itself adds to the headers). <p>
1546
1547 If the dump doesn't match what shows up in your mailbox when you
1548 configure an MDA, your MDA is mangling the message.  If it doesn't
1549 match what you sent, then fetchmail or something on the server is
1550 broken.<p>
1551
1552 <hr>
1553 <h2><a name="#R3">R3. Fetchmail dumps core when given an invalid rc file.</a></h2>
1554
1555 This is usually reported from AIX or Ultrix, but has even been known
1556 to happen on Linuxes without a recent version of <code>flex</code>
1557 installed.  The problem appears to be a result of building with an
1558 archaic version of lex.<P>
1559
1560 Workaround: fix the syntax of your .fetchmailrc file.<P>
1561
1562 Fix: build and install the latest version of <a
1563 href="ftp://prep.ai.mit.edu/~ftp/pub/gnu">flex</a> from the Free
1564 Software Foundation.  An FSF <a
1565 href="http://www.gnu.ai.mit.edu/order/ftp.html">mirror site</a>
1566 will help you get it faster.<P>
1567
1568 <hr>
1569 <h2><a name="R4">R4. Fetchmail dumps core in -V mode, but operates normally otherwise.</a></h2>
1570
1571 We've had this reported to us under Linux using libc-5.4.17 and gcc-2.7.2.
1572 It does not occur with libc-5.3.12 or earlier versions.<p>
1573
1574 Workaround: link with GNU malloc rather than the stock C library malloc.<p>
1575
1576 We're told there is some problem with the malloc() code in that
1577 version which makes it fragile in the presence of multiple free()
1578 calls on the same pointer (the malloc arena gets corrupted).
1579 Unfortunately it appears from doing gdb traces that whatever free()
1580 calls producing the problem are being made by the C library itself, not the
1581 fetchmail code (they're all from within fclose, and not an fclose called
1582 by fetchmail, either).<p>
1583
1584 <hr>
1585 <h2><a name="R5">R5. Fetchmail dumps core when I use a .netrc file but works otherwise.</a></h2>
1586
1587 We have a report that under Solaris 2.5 using gcc-2.7.2, if fetchmail
1588 is compiled with -O or -O2, it segfaults on startup when reading a
1589 .netrc.<p>
1590
1591 You can work around this by disabling optimization.<p>
1592
1593 There may be an actual bug here that the optimizer exposes; the stack
1594 trace says the segfault is in free() and has all the earmarks of a heap-
1595 corruption screw.  But the symptom doesn't reproduce under Linux with the
1596 same .fetchmailrc and .netrc.<p>
1597
1598 <hr>
1599 <h2><a name="R6">R6. Running fetchmail in daemon mode doesn't work.</a><br></h2>
1600
1601 We have one report from a Solaris 4.1.4 user that trying to run
1602 fetchmail in detached daemon mode doesn't work, but that using the
1603 same options with -N (nodetach) is OK.<P>
1604
1605 If this happens, you have a specific portability problem with the code
1606 in daemon.c that detaches and backgrounds the daemon fetchmail. Tell
1607 me about it so I can try to fix it.  As a workaround, you can start
1608 fetchmail with -N and an ampersand to background it.<P>
1609
1610 This should not happen under Linux or any truly POSIX-conformant Unix.<P>
1611
1612 <hr>
1613 <h2><a name="R7">R7. Fetchmail hangs when used with pppd.</a></h2>
1614
1615 Your problem may be with pppd's `demand' option.  We have a report that
1616 fetchmail doesn't play well with it, but works with pppd if `demand'
1617 is turned off.  We have no idea why this is.<p>
1618
1619 <hr>
1620 <h2><a name="R8">R8. Fetchmail randomly dies with socket errors.</a></h2>
1621
1622 Check the MTU value in your PPP interface reported by
1623 <code>/sbin/ifconfig</code>.  If it's over 600, change it in your PPP
1624 options file.  (<code>/etc/ppp/options</code> on my box).  Here are
1625 option values that work:<P>
1626
1627 <pre>
1628   mtu 552
1629   mru 552
1630 </pre>
1631
1632 <hr>
1633 <h2><a name="D1">D1. I think I've set up fetchmail correctly, but I'm not getting any mail.</a></h2>
1634
1635 Maybe you have a .forward or alias set up that you've forgotten about.  You
1636 should probably remove it.<p>
1637
1638 Or maybe you're trying to run fetchmail in multidrop mode as root
1639 without a .fetchmailrc file.  This doesn't do what you think it
1640 should; see question <a href="#C1">C1</a>.<p>
1641
1642 Or you may not be connecting to the SMTP listener.   Run fetchmail -v
1643 and see <a href="#R1">R1</a>.<p>
1644
1645 <hr>
1646 <h2><a name="D2">D2. All my mail seems to disappear after an interrupt.</a></h2>
1647
1648 One POP3 daemon used in the Berkeley Unix world that reports itself as
1649 POP3 version 1.004 actually throws the queue away. 1.005 fixed that.
1650 If you're running this one, upgrade immediately.  (It also truncates
1651 long lines at column 1024)<P>
1652
1653 Many POP servers, if an interruption occurs, will restore the whole
1654 mail queue after about 10 minutes.  Others will restore it right
1655 away. If you have an interruption and don't see it right away, cross
1656 your fingers and wait ten minutes before retrying.<P>
1657
1658 Some servers (such as Microsoft's NTMail) are mis-designed to restore
1659 the entire queue, including messages you have deleted.  If you have
1660 one of these and it flakes out on you a lot, try setting a small
1661 <code>--fetchlimit</code> value.  This will result in more IP connects
1662 to the server, but will mean it actually executes changes to the queue
1663 more often.<P>
1664
1665 Qualcomm's qpopper, used at many BSD Unix sites, is better behaved.
1666 If its connection is dropped, it will first execute all DELE commands (as
1667 though you had issued a QUIT -- this is a technical violation of
1668 the POP3 RFCs, but a good idea in a world of flaky phone lines). Then it
1669 will re-queue any message that was being downloaded at hangup time.
1670 Still, qpopper may require a noticeable amount of time to do deletions
1671 and clean up its queue.  (Fetchmail waits a bit before retrying in
1672 order to avoid a `lock busy' error.)<P>
1673
1674 <hr>
1675 <h2><a name="D3">D3. Mail that was being fetched when I interrupted my fetchmail seems to have been vanished.</a></h2>
1676
1677 Fetchmail only sends a delete mail request to the server when either
1678 (a) it gets a positive delivery acknowledgement from the SMTP
1679 listener, or (b) it gets an error 571 (the spam-filter error) from the
1680 listener.  No interrupt can cause it to lose mail.<p>
1681
1682 However, IMAP2bis has a design problem in that its normal fetch
1683 command marks a message `seen' as soon as the fetch command to get it
1684 is sent down.  If for some reason the message isn't actually delivered
1685 (you take a line hit during the download, or your port 25 listener
1686 can't find enough free disk space, or you interrupt the delivery in
1687 mid-message) that `seen' message can lurk invisibly in your server
1688 mailbox forever.<p>
1689
1690 Workaround: add the `<CODE>fetchall</CODE>' keyword to your fetch options.<p>
1691
1692 Solution: switch to an <a href="http://www.imap.org">IMAP</a> server.<p>
1693
1694 <hr>
1695 <h2><a name="M1">M1. I've declared local names, but all my multidrop
1696 mail is going to root anyway.</a></h2>
1697
1698 Somehow your fetchmail is never matching the hostname part of
1699 recipient names to the name of the mailserver machine.  This probably
1700 means it is unable to recognize hostname parts as being DNS names of
1701 the mailserver, and indicates some kind of DNS configuration
1702 problem either on the server or your client machine. <p>
1703
1704 The easiest workaround is to add a `<CODE>via</CODE>' option (if
1705 necessary) and add enough aka declarations to cover all of your
1706 mailserver's aliases, then say `<CODE>no dns</CODE>'.  This will take
1707 DNS out of the picture (though it means mail may be uncollected if
1708 it's sent to an alias of the mailserver that you don't have
1709 listed). <p>
1710
1711 It would be better to fix your DNS, however.  DNS problems can hurt
1712 you in lots of ways, for example by making your machines
1713 intermittently or permanently unreachable to the rest of the net.<P>
1714
1715 <hr>
1716 <h2><a name="M2">M2. I can't seem to get fetchmail to route to a local domain properly.</a></h2>
1717
1718 A lot of people want to use fetchmail as a poor man's internetwork
1719 mail gateway, picking up mail accumulated for a whole domain in a single
1720 server mailbox and then routing based on what's in the To/Cc/Bcc lines.<p>
1721
1722 In general, this is not really a good idea.  It would be smarter to
1723 just let the mail sit in the mailserver's queue and use fetchmail's
1724 ETRN mode to trigger SMTP sends periodically (of course, this means
1725 you have to poll more frequently than the mailserver's expiry period).
1726 If you can't arrange this, try setting up a UUCP feed.<P>
1727
1728 If neither of these alternatives is available, multidrop mode may do
1729 (though you <em>are</em> going to get hurt by some mailing list
1730 software; see the caveats under THE USE AND ABUSE OF MULTIDROP
1731 MAILBOXES on the man page).  If you want to try it, the way to do it
1732 is with the `<CODE>localdomains</CODE>' option.<p>
1733
1734 In general, if you use localdomains you need to make sure of two other
1735 things: <p>
1736
1737 <strong>1. You've actually set up your .fetchmailrc entry to invoke multidrop mode.</strong><p>
1738
1739 Many people set a `<CODE>localdomains</CODE>' list and then forget
1740 that fetchmail wants to see more than one name (or the wildcard `*')
1741 in a `<CODE>here</CODE>' list before it will do multidrop routing.<p>
1742
1743 <strong>2. You may have to set `no envelope'.</strong><p>
1744
1745 Normally, multidrop mode tries to deduce an envelope address from a message
1746 before parsing the To/Cc/Bcc lines (this enables it to avoid losing to mailing
1747 list software that doesn't put a recipient addess in the To lines).<p>
1748
1749 Some ways of accumulating a whole domain's messages in a single server
1750 mailbox mean it all ends up with a single envelope address that is
1751 useless for rerouting purposes.  You may have to set `<CODE>no
1752 envelope</CODE>' to prevent fetchmail from being bamboozled by this.<p>
1753
1754 Check also answer <a href="#T1">T1</a> on a reliable way to do multidrop
1755 delivery if your ISP (or your mail redirection provider) is using qmail.<p>
1756
1757 <hr>
1758 <h2><a name="M3">M3. I tried to run a mailing list using multidrop, and I have a mail loop!</a></h2>
1759
1760 This isn't fetchmail's fault.  Check your mailing list.  If the list
1761 expansion includes yourself or anybody else at your mailserver (that is, not on
1762 the client side) you've created a mail loop.  Just chop the host part off any
1763 local addresses in the list.<p>
1764
1765 If you use sendmail, you can check the list expansion with
1766 <CODE>sendmail -bv</CODE>.<p>
1767
1768 <hr>
1769 <h2><a name="M4">M4. My multidrop fetchmail seems to be having DNS problems.</a></h2>
1770
1771 We have one report from a Linux user (not the same one as in <a
1772 href="#R1">R1</a>!) who solved this problem by removing the reference
1773 to -lresolv from his link line and relinking.  Apparently in some
1774 older Linux distributions the libc5 bind library version works
1775 better.<p>
1776
1777 As of 2.2, the configure script has been hacked so the bind library is linked
1778 only if it is actually needed.  So under Linux it won't be, and this problem
1779 should go away.<p>
1780
1781 <hr>
1782 <h2><a name="M5">M5. I'm seeing long DNS delays before each message is processed.</a></h2>
1783
1784 Use the `<CODE>aka</CODE>' option to pre-declare as many of your
1785 mailserver's DNS names as you can.  When an address's host part
1786 matches an aka name, no DNS lookup needs to be done to check it.<p>
1787
1788 If you're sure you've pre-declared all of your mailserver's DNS dames,
1789 you can use the `<CODE>no dns</CODE>' option to prevent other hostname
1790 parts from being looked up at all.<p>
1791
1792 Sometimes delays are unavoidable.  Some SMTP listeners try to call DNS
1793 on the From-address hostname as a way of checking that the address is valid.<p>
1794
1795 <hr>
1796 <h2><a name="M6">M6. How do I get multidrop mode to work with majordomo?</a></h2>
1797
1798 In order for sendmail to execute the command strings in the majordomo
1799 alias file, it is necessary for sendmail to think that the mail it
1800 receives via SMTP really is destined for a local user name.  A normal
1801 virtual-domain setup results in delivery to the default mailbox,
1802 rather than expansion through majordomo.<P>
1803
1804 Michael &lt;michael@bizsystems.com&gt; gave us a recipe for dealing
1805 with this case that pairs a run control file like this:<P>
1806
1807 <pre>
1808 poll your.pop3.server proto pop3:
1809     no envelope no dns
1810     localdomains virtual.localdomain1.com virtual.localdomain2.com ...
1811     user yourISPusername is root * here,
1812     password yourISPpassword fetchall
1813 </pre>
1814
1815 with a hack on your local sendmail.cf like this:<P>
1816
1817 <pre>
1818 #############################################
1819 #  virtual info, local hack for ruleset 98  #
1820 #############################################
1821
1822 # domains to treat as direct mapped local domain
1823
1824 CVvirtual.localdomain1.com virtual.localdomain2.com ...
1825 ---------------------------
1826 in ruleset 98 add
1827 -------------------------
1828 # handle virtual users
1829
1830 R$+ &lt;@ $=V . &gt;          $: $1 &lt; @ $j . &gt;
1831 R&lt; @ &gt; $+ &lt; @ $=V . &gt;   $: $1 &lt; @ $j . &gt;
1832 R&lt; @ &gt; $+               $: $1
1833 R&lt; error : $- $+ &gt; $*   $#error $@ $1 $: $2
1834 R&lt; $+ &gt; $+ &lt; @ $+ &gt;     $: $&gt;97 $1
1835 </pre>
1836
1837 This ruleset just strips virtual domain names off the addresses of incoming
1838 mail.  Your sendmail must be 8.8 or newer for this to work.  Michael
1839 says:<P>
1840
1841 <BLOCKQUOTE>
1842 I use this scheme with 2 virtual domains and the default ISP
1843 user+domain and service about 30 mail accounts + majordomo on my
1844 inside pop3 server with fetchmail and sendmail 8.83<P>
1845 </BLOCKQUOTE>
1846
1847 <hr>
1848 <h2><a href="M7">M7. Multidrop mode isn't parsing envelope addresses from
1849 my Received headers as it should.</a></h2>
1850
1851 It may happen that you're getting what appear to be well-formed
1852 sendmail Received headers, but fetchmail can't seem to extract an
1853 envelope address from them.  There can be a couple of reasons for
1854 this.<P>
1855
1856 <h3>Spurious Received lines need to be skipped:</h3>
1857
1858 First, fetchmail might be looking at the wrong Received header.
1859 Normally it looks only on the first one it sees, on the theory that
1860 that one was last added and is going to be the one containing your
1861 mailserver's theory of who the message was addressed to.<P>
1862
1863 Some (unusual) mailserver configurations will generate extra Received
1864 lines which you need to skip.  To arrange this, use the optional
1865 skip prefix argument of the `envelope' option; you may need to say
1866 something like `<code>envelope 1 Received</code>' or `<code>envelope 2
1867 Received</code>'.
1868
1869 <h3>The `by' clause doesn't contain a mailserver alias:</h3>
1870
1871 When fetchmail parses a Received line that looks like
1872
1873 <pre>
1874 Received: from send103.yahoomail.com (send103.yahoomail.com [205.180.60.92])
1875     by iserv.ttns.net (8.8.5/8.8.5) with SMTP id RAA10088
1876     for <ksturgeon@fbceg.org>; Wed, 9 Sep 1998 17:01:59 -0700
1877 </pre>
1878
1879 it checks to see if `iserv.ttns.net' is a DNS alias of your mailserver
1880 before accepting `ksturgeon@fbceg.org' as an envelope address.  This
1881 check might fail if your DNS were misconfigured, or if you were using `no dns'
1882 and had failed to declare iserv.ttns.net as an alias of your server.<P>
1883
1884 <hr>
1885 <h2><a name="X1">X1. Spurious blank lines are appearing in the headers of fetched mail.</a></h2>
1886
1887 What's probably happening is that the POP/IMAP daemon on your
1888 mailserver is inserting a non-RFC822 header (like X-POP3-Rcpt:) and
1889 something in your delivery path (most likely an old version of the
1890 <em>deliver</em> program, which sendmail often calls to do local delivery) is
1891 failing to recognize it as a header.<p>
1892
1893 This is not fetchmail's problem.  The first thing to try is installing
1894 a current version of <em>deliver</em>.  If this doesn't work, try to
1895 figure out which other program in your mail path is inserting the
1896 blank line and replace that.  If you can't do either of these things,
1897 pick a different MDA (such as procmail) and declare it with the
1898 `<CODE>mda</CODE>' option.<p>
1899
1900 <hr>
1901 <h2><a name="X2">X2. My mail client can't see a Subject line.</a></h2>
1902
1903 First, see <a href="#X1">X1</a>.  This is quite probably the same
1904 problem (X-POP3-Rcpt header or something similar being inserted by
1905 the server and choked on by an old version of <em>deliver</em>).<p>
1906
1907 The O'Reilly sendmail book does warn that IDA sendmail doesn't process
1908 X- headers correctly.  If this is your problem, all I can suggest is
1909 replacing IDA sendmail, because it's broken and not RFC822 conformant.<p>
1910
1911 <hr>
1912 <h2><a name="X3">X3. Messages containing "From" at start of line are being split.</a></h2>
1913
1914 If you know the messages aren't split in your server mailbox, then this
1915 is a problem with your POP/IMAP server, your client-side SMTP listener or
1916 your local delivery agent.  Fetchmail cannot split messages.<p>
1917
1918 Some POP server daemons ignore Content-Length headers and split messages on
1919 From lines.  We have one report that the 2.1 version of the BSD popper
1920 program (as distributed on Solaris 2.5 and elsewhere) is broken this way.<p>
1921
1922 You can test this.  Declare an mda of `cat' and send yourself one
1923 piece of mail containing "From" at start of a line.  If you see a
1924 split message, your POP/IMAP server is at fault.  Upgrade to a more
1925 recent version.<p>
1926
1927 Sendmail and other SMTP listeners don't split RFC822 messages either.
1928 What's probably happening is either sendmail's local delivery agent or
1929 your mail reader are not quite RFC822-conformant and are breaking
1930 messages on what it thinks are Unix-style From headers.  You can
1931 figure out which by looking at your client-side mailbox with vi or
1932 more.  If the message is already split in your mailbox, your local
1933 delivery agent is the problem.  If it's not, your mailreader is the
1934 problem.<p>
1935
1936 If you can't replace the offending program, take a look at your
1937 sendmail.cf file.  There will likely be a line something like<p>
1938
1939 <pre>
1940 Mlocal, P=/usr/bin/procmail, F=lsDFMShP, S=10, R=20/40, A=procmail -Y -d $u
1941 </pre>
1942
1943 describing your local delivery agent.  Try inserting the `E' option in the
1944 flags part (the F= string).  This will make sendmail turn each dangerous
1945 start-of-line From into a >From, preventing programs further downstream
1946 from acting up.<p>
1947
1948 <hr>
1949 <h2><a name="generic_mangling"><a name="X4">X4. My mail is being mangled in a new and different way</a></a></h2>
1950
1951 The first thing you need to do is pin down what program is doing the
1952 mangling.  We don't like getting bug reports about fetchmail that are
1953 actually due to some other program's malfeasance, so please go through
1954 this diagnostic sequence before sending us a complaint.<P>
1955
1956 There are five possible culprits to consider, listed here in the order
1957 they pass your mail:<P>
1958
1959 <ol>
1960 <li> Programs upstream of your server mailbox.
1961 <li> The POP or IMAP server on your mailserver host.
1962 <li> The fetchmail program itself.
1963 <li> Your local sendmail.
1964 <li> Your LDA (local delivery agent), as called by sendmail or
1965 specified by <code>mda</CODE>.
1966 </ol>
1967
1968 Often it happens that fetchmail itself is OK, but using it exposes
1969 pre-existing bugs in your downstream software, or your downstream
1970 software has a bad interaction with POP/IMAP.  You need to pin down
1971 exactly where the message is being garbled in order to deduce what is
1972 actually going on.<P>
1973
1974 The first thing to do is send yourself a test message, and retrieve it
1975 with a .fetchmailrc entry containing the following (or by running with
1976 the equivalent command-line options):<P>
1977
1978 <pre>
1979     mda "cat >MBOX" keep fetchall
1980 </pre>
1981
1982 This will capture exactly what fetchmail gets from the server, except
1983 for (a) the extra Received header line fetchmail prepends, (b) header address
1984 changes due to <code>rewrite</code>, and (c) any changes due to the
1985 <code>forcecr</code> and <code>stripcr</code> options.  MBOX will in fact
1986 contain what programs downstream of fetchmail see.<P>
1987
1988 The most common causes of mangling are bugs and misconfigurations in
1989 those downstream programs.  If MBOX looks unmangled, you will know
1990 that is what is going on and that it is not fetchmail's problem.  Take
1991 a look at the other FAQ items in this section for possible clues about
1992 how to fix your problem.<P>
1993
1994 If MBOX looks mangled, the next thing to do is compare it with your
1995 actual server mailbox (if possible).  That's why you specified
1996 <code>keep</code>, so the server copy would not be deleted.  If your
1997 server mailbox looks mangled, programs upstream of your server mailbox
1998 are at fault.  Unfortunately there is probably little you can do about
1999 this aside from complaining to your site postmaster, and nothing at
2000 all fetchmail can do about it!<P>
2001
2002 More likely you'll find that the server copy looks OK.  In that case
2003 either the POP/IMAP server or fetchmail is doing the mangling.  To
2004 determine which, you'll need to telnet to the server port and simulate
2005 a fetchmail session yourself.  This is not actually hard (both POP3
2006 and IMAP are simple, text-only, line-oriented protocols) but requires
2007 some attention to detail.  You should be able to use a fetchmail -v
2008 log as a model for a session, but remember that the "*" in your LOGIN
2009 or PASS command dump has to be replaced with your actual password.<P>
2010
2011 The objective of manually simulating fetchmail is so you can see
2012 exactly what fetchmail sees.  If you see a mangled message, then your
2013 server is at fault, and you probably need to complain to your
2014 mailserver administrators.  However, we like to know what the broken
2015 servers are so we can warn people away from them.  So please send
2016 us a transcript of the session including the mangling <em>and the
2017 server's initial greeting line</em>.  Please tell us anything else
2018 you think might be useful about the server, like the server host's
2019 operating system.<P>
2020
2021 If your manual fetchmail simulation shows an unmangled message,
2022 congratulations.  You've found an actual fetchmail bug.  Complain
2023 to us and we'll fix it.  Please include the session transcript of
2024 your manual fetchmail simulation along with the other things described
2025 in the FAQ entry on <a href="#G3">reporting bugs</a>.
2026
2027 <hr>
2028 <h2><a name="O1">O1. The --logfile option doesn't work if the logfile doesn't exist.</a></h2>
2029
2030 This is a feature, not a bug.  It's in line with normal practice for
2031 system daemons and allows you to suppress logging by removing the log,
2032 without hacking potentially fragile startup scripts.  To get around
2033 it, just touch(1) the logfile before you run fetchmail (this will have
2034 no effect on the contents of the logfile if it already exists).<P>
2035
2036 <hr>
2037 <h2><a name="X5">X5. Using POP3, retrievals seems to be fetching too much!</a></h2>
2038
2039 This may happen in versions of fetchmail after 4.4.1 and before 4.4.8.
2040 Versions after 4.4.1 use POP3's TOP command rather than RETR, in order
2041 to avoid marking the message seen (leaving it unseen is helpful for
2042 later recovery if you lose your connection in the middle of a
2043 retrieval).<P>
2044
2045 Versions of fetchmail from 4.4.2 through 4.4.7 had a bad interaction
2046 with Eudora qpopper versions 2.3 and later.  The TOP bounds check was
2047 fooled by an overflow condition in the TOP argument.  Decrementing the
2048 TOP argument in 4.4.7 fixed this.<P>
2049
2050 Fix: Upgrade to a later version of fetchmail.<P>
2051
2052 Workaround: set the <code>fetchall</code> option.  Under POP3 in these
2053 fetchmail version only, this had the side effect of forcing RETR
2054 use.<P>
2055
2056 <hr>
2057 <h2><a name="O2">O2. Every time I get a POP or IMAP message the header
2058 is dumped to all my terminal sessions.</a></h2>
2059
2060 Fetchmail uses the local sendmail to perform final delivery, which
2061 Netscape and other clients doesn't do; the announcement of new messages
2062 is done by a daemon that sendmail pokes. There should be a ``biff''
2063 command to control this.  Type
2064
2065 <PRE>
2066 biff n
2067 </PRE>
2068
2069 to turn it off. If this doesn't work, try the command
2070
2071 <PRE>
2072 chmod -x `tty`
2073 </PRE>
2074
2075 which is essentially what <code>biff -n</code> will do. If this
2076 doesn't work, comment out any reference to ``comsat'' in your
2077 /etc/inetd.conf file and restart inetd.<P>
2078
2079 In Slackware Linux distributions, the last line in /etc/profile is
2080
2081 <PRE>
2082 biff y
2083 </PRE>
2084
2085 Change this to
2086
2087 <PRE>
2088 biff n
2089 </PRE>
2090
2091 to solve the problem system-wide.<P>
2092
2093 <hr>
2094 <h2><a name="O3">O3. Does fetchmail reread its rc file every poll cycle?</a></h2>
2095
2096 No.  Fetchmail only reads the rc file once, when it starts up.  To
2097 force an rc file reread, do <code>fetchmail -q; fetchmail</code>.<P>
2098
2099 <hr>
2100 <h2><a name="O4">O4. Why do deleted messages show up again when I take
2101 a line hit while downloading?</a></h2>
2102
2103 Because you're using a POP3 other than Qualcomm qpopper, or an IMAP
2104 with a long expunge interval.<P>
2105
2106 According to the POP3 RFCs, deletes aren't actually performed until
2107 you issue the end-of-session QUIT command.  Fetchmail cannot fix this,
2108 because doing it right takes cooperation from the server. There are
2109 two possible remedies:<P>
2110
2111 One is to switch to qpopper (the free POP3 server from Qualcomm,
2112 the Eudora people).  The qpopper software violates the POP3 RFCs by
2113 doing an expunge (removing deleted messages) on a line hangup, as well
2114 as on processing a QUIT command.<P>
2115
2116 The other (which we recommend) is to switch to <a
2117 href="http://www.imap.org">IMAP</a>.  IMAP has an explicit expunge
2118 command and fetchmail normally uses it to delete messages immediately
2119 after they are downloaded.<P>
2120
2121 If you get very unlucky, you might take a line hit in the window
2122 between the delete and the expunge.  If you've set a longer expunge
2123 interval, the window gets wider.  This problem should correct itself
2124 the next time you complete a successful query.<P>
2125
2126 <hr>
2127 <h2><a name="O5">O5. Why is fetched mail being logged with my name, not the real From address?</a></h2>
2128
2129 Because logging is done based on the address indicated by the sending
2130 SMTP's MAIL FROM, and some listeners are picky about that address.<p>
2131
2132 Some SMTP listeners get upset if you try to hand them a MAIL FROM
2133 address naming a different host than the originating site for your
2134 connection.  This is a feature, not a bug -- it's supposed to help
2135 prevent people from forging mail with a bogus origin site.  (RFC 1123
2136 says you shouldn't do this exclusion...)<p>
2137
2138 Since the originating site of a fetchmail delivery connection is
2139 localhost, this effectively means these picky listeners will barf on
2140 any MAIL FROM address fetchmail hands them with an @ in it!<p>
2141
2142 Versions 2.1 and up try the header From address first and fall back to
2143 the calling-user ID.  So if your SMTP listener isn't picky, the log
2144 will look right.<p>
2145
2146 <hr>
2147 <h2><a name="O6">O6. I'm seeing long sendmail delays at start of each poll cycle.</a></h2>
2148
2149 Sendmail does a hostname lookup when it first starts up, and also each
2150 time it gets a HELO in listener mode.<p>
2151
2152 Your resolver configuration may be causing one of these lookups to
2153 fail and time out.  Check <code>/etc/resolv.conf</code> and
2154 <code>/etc/hosts</code> file. Make sure your hostname and FQDN are
2155 both in <code>/etc/hosts</code>, and that hosts is looked at before
2156 DNS is queried.  You probably also want your remote mail server(s) to
2157 be in the hosts file.<p>
2158
2159 You can suppress the startup-time lookup if need to by reconfiguring
2160 with <code>FEATURE(nodns)</code>.<p>
2161
2162 Configuring your bind library to cache DNS lookups locally may help,
2163 and is a good idea for speeding up other services as well.  Switching to
2164 a faster MTA like qmail or exim might help. <p>
2165
2166 <hr>
2167 <h2><a name="O7">O7. Why doesn't fetchmail deliver mail in date-sorted order?</a></h2>
2168
2169 Because that's not the order the server hands it to fetchmail in.<P>
2170
2171 Fetchmail getting mail from a POP server delivers mail in the order
2172 that your server delivers mail.  Fetchmail can't do anything about
2173 this; it's a limitation of the underlying POP protocol.<P>
2174
2175 In theory it might be possible for fetchmail in IMAP mode to sort
2176 messages by date, but this would be in violation of two basics of
2177 fetchmail's design philosophy: (a) to be as simple and transparent a
2178 pipe as possible, and (b) to <em>hide</em>, rather than emphasize, the
2179 differences between the remote-fetch protocols it uses.<P>
2180
2181 Re-ordering messages is a user-agent function, anyway.<P>
2182
2183 <HR>
2184 <table width="100%" cellpadding=0><tr>
2185 <td width="30%">Back to <a href="index.html">Fetchmail Home Page</a>
2186 <td width="30%" align=center>To <a href="/~esr/sitemap.html">Site Map</a>
2187 <td width="30%" align=right>$Date: 1998/10/17 16:24:27 $
2188 </table>
2189
2190 <P><ADDRESS>Eric S. Raymond <A HREF="mailto:esr@thyrsus.com">&lt;esr@snark.thyrsus.com&gt;</A></ADDRESS>
2191 </BODY>
2192 </HTML>