Fixed description of n with mhstore -clobber auto/suffix.
[mmh] / man / mhstore.man
1 .\"
2 .\" %nmhwarning%
3 .\"
4 .TH MHSTORE %manext1% "%nmhdate%" MH.6.8 [%nmhversion%]
5 .SH NAME
6 mhstore \- store contents of MIME messages into files
7 .SH SYNOPSIS
8 .HP 5
9 .na
10 .B mhstore
11 .RI [ +folder ]
12 .RI [ msgs ]
13 .RB [ \-file
14 .IR file ]
15 .RB [ \-part
16 .IR number ]
17 \&...
18 .RB [ \-type
19 .IR content ]
20 \&...
21 .RB [ \-auto " | " \-noauto ]
22 .RB [ \-clobber
23 .IR always " | " auto " | " suffix " | " ask " | " never ]
24 .RB [ \-rcache
25 .IR policy ]
26 .RB [ \-wcache
27 .IR policy ]
28 .RB [ \-check " | " \-nocheck ]
29 .RB [ \-version ]
30 .RB [ \-help ]
31 .ad
32 .SH DESCRIPTION
33 The
34 .B mhstore
35 command allows you to store the contents of a
36 collection of MIME (multi-media) messages into files or other
37 messages.
38 .PP
39 .B mhstore
40 manipulates multi-media messages as specified in
41 RFC\-2045 thru RFC\-2049.
42 .PP
43 By default,
44 .B mhstore
45 will store all the parts of each message.
46 Each part will be store in a separate file.  The header fields of
47 the message are not stored.  By using the
48 .B \-part
49 and
50 .B \-type
51 switches, you may limit the scope of
52 .B mhstore
53 to particular
54 subparts (of a multipart content) and/or particular content types.
55 .PP
56 The option
57 .B \-file
58 .I file
59 directs
60 .B mhstore
61 to use the specified
62 file as the source message, rather than a message from a folder.
63 If you specify this file as \*(lq-\*(rq, then
64 .B mhstore
65 will
66 accept the source message on the standard input.  Note that the
67 file, or input from standard input should be a validly formatted
68 message, just like any other
69 .B nmh
70 message.  It should
71 .B NOT
72 be in mail drop format (to convert a file in mail drop format to
73 a folder of
74 .B nmh
75 messages, see
76 .BR inc (1)).
77 .PP
78 A part specification consists of a series of numbers separated by
79 dots.  For example, in a multipart content containing three parts,
80 these would be named as 1, 2, and 3, respectively.  If part 2 was
81 also a multipart content containing two parts, these would be named
82 as 2.1 and 2.2, respectively.  Note that the
83 .B \-part
84 switch is
85 effective for only messages containing a multipart content.  If a
86 message has some other kind of content, or if the part is itself
87 another multipart content, the
88 .B \-part
89 switch will not prevent
90 the content from being acted upon.
91 .PP
92 A content specification consists of a content type and a subtype.
93 The initial list of \*(lqstandard\*(rq content types and subtypes
94 can be found in RFC\-2046.
95 .PP
96 A list of commonly used contents is briefly reproduced here:
97 .PP
98 .RS 5
99 .nf
100 .ta \w'application  'u
101 Type    Subtypes
102 ----    --------
103 text    plain, enriched
104 multipart       mixed, alternative, digest, parallel
105 message rfc822, partial, external-body
106 application     octet-stream, postscript
107 image   jpeg, gif, png
108 audio   basic
109 video   mpeg
110 .fi
111 .RE
112 .PP
113 A legal MIME message must contain a subtype specification.
114 .PP
115 To specify a content, regardless of its subtype, just use the name
116 of the content, e.g., \*(lqaudio\*(rq.  To specify a specific
117 subtype, separate the two with a slash, e.g., \*(lqaudio/basic\*(rq.
118 Note that regardless of the values given to the
119 .B \-type
120 switch,
121 a multipart content (of any subtype listed above) is always acted
122 upon.  Further note that if the
123 .B \-type
124 switch is used, and it is
125 desirable to act on a message/external-body content, then the
126 .B \-type
127 switch must be used twice: once for message/external-body
128 and once for the content externally referenced.
129 .SS "Checking the Contents"
130 The
131 .B \-check
132 switch tells
133 .B mhstore
134 to check each content for
135 an integrity checksum.  If a content has such a checksum (specified
136 as a Content-MD5 header field), then
137 .B mhstore
138 will attempt to
139 verify the integrity of the content.
140 .SS "Storing the Contents"
141 The
142 .B mhstore
143 will store the contents of the named messages in
144 \*(lqnative\*(rq (decoded) format.  Two things must be determined:
145 the directory to store the content, and the filenames.  Files are
146 written in the directory given by the \*(lqnmh-storage\*(rq profile
147 entry, e.g.,
148 .PP
149 .RS 5
150 nmh-storage: /tmp
151 .RE
152 .PP
153 If this entry isn't present,
154 the current working directory is used.
155 .PP
156 If the
157 .B \-auto
158 switch is given, then
159 .B mhstore
160 will check if
161 the message contains information indicating the filename that should
162 be used to store the content.  This information should be specified
163 as the attribute \*(lqname=filename\*(rq in the \*(lqContent-Type\*(rq header
164 for the content you are storing.  For security reasons, this filename
165 will be ignored if it begins with the character '/', '.', '|', or '!',
166 or if it contains the character '%'.  For the sake of security,
167 this switch is not the default, and it is recommended that you do
168 NOT put the
169 .B \-auto
170 switch in your
171 .I \&.mh\(ruprofile
172 file.
173 .PP
174 If the
175 .B \-auto
176 switch is not given (or is being ignored for security
177 reasons) then
178 .B mhstore
179 will look in the user's profile for a
180 \*(lqformatting string\*(rq to determine how the different contents
181 should be stored.  First,
182 .B mhstore
183 will look for an entry of
184 the form:
185 .PP
186 .RS 5
187 mhstore-store-<type>/<subtype>
188 .RE
189 .PP
190 to determine the formatting string.  If this isn't found,
191 .B mhstore
192 will look for an entry of the form:
193 .PP
194 .RS 5
195 mhstore-store-<type>
196 .RE
197 .PP
198 to determine the formatting string.
199 .PP
200 If the formatting string starts with a \*(lq+\*(rq character, then
201 content is stored in the named folder.  A formatting string consisting
202 solely of a \*(lq+\*(rq character is interpreted to be the current
203 folder.
204 .PP
205 If the formatting string consists solely of a \*(lq-\*(rq character,
206 then the content is sent to the standard output.
207 .PP
208 If the formatting string starts with a '|', then the display string
209 will represent a command for
210 .B mhstore
211 to execute which should
212 ultimately store the content.  The content will be passed to the
213 standard input of the command.  Before the command is executed,
214 .B mhstore
215 will change to the appropriate directory, and any
216 escapes (given below) in the display string will be expanded.
217 .PP
218 Otherwise the formatting string will represent a pathname in which
219 to store the content.  If the formatting string starts with a '/',
220 then the content will be stored in the full path given, else the
221 file name will be relative to the value of \*(lqnmh-storage\*(rq or
222 the current working directory.  Any escapes (given below) will be
223 expanded, except for the a-escape.  Note that if \*(lqnmh-storage\*(rq
224 is not an absolute path, it will be relative to the folder that
225 contains the message(s).
226 .PP
227 A command or pathname formatting string may contain the following
228 escapes.  If the content isn't part of a multipart (of any subtype
229 listed above) content, the p-escapes are ignored.
230 .PP
231 .RS 5
232 .nf
233 .ta \w'%P  'u
234 %a      Parameters from Content-type  (only valid with command)
235 %m      Insert message number
236 %P      Insert part number with leading dot
237 %p      Insert part number without leading dot
238 %t      Insert content type
239 %s      Insert content subtype
240 %%      Insert character %
241 .fi
242 .RE
243 .PP
244 If no formatting string is found,
245 .B mhstore
246 will check to see
247 if the content is application/octet-stream with parameter
248 \*(lqtype=tar\*(rq.  If so,
249 .B mhstore
250 will choose an appropriate
251 filename.  If the content is not application/octet-stream, then
252 .B mhstore
253 will check to see if the content is a message.  If
254 so,
255 .B mhstore
256 will use the value \*(lq+\*(rq.  As a last resort,
257 .B mhstore
258 will use the value \*(lq%m%P.%s\*(rq.
259 .PP
260 Example profile entries might be:
261 .PP
262 .RS 5
263 .nf
264 mhstore-store-text: %m%P.txt
265 mhstore-store-text: +inbox
266 mhstore-store-message/partial: +
267 mhstore-store-audio/basic: | raw2audio -e ulaw -s 8000 -c 1 > %m%P.au
268 mhstore-store-image/jpeg: %m%P.jpg
269 mhstore-store-application/PostScript: %m%P.ps
270 .fi
271 .RE
272 .PP
273 .SS "Overwriting Existing Files"
274 The
275 .B \-clobber
276 switch controls whether
277 .B mhstore
278 should overwrite existing files.  The allowed values for this switch
279 and corresponding behavior when
280 .B mhstore
281 encounters an existing file are:
282 .PP
283 .RS 5
284 .nf
285 .ta \w'suffix  'u
286 always    Overwrite existing file (default)
287 auto      Create new file of form name-n.extension
288 suffix    Create new file of form name.extension.n
289 ask       Prompt the user to specify whether or not to overwrite
290           the existing file
291 never     Do not overwrite existing file
292 .fi
293 .RE
294 .PP
295 With
296 .I auto
297 and
298 .IR suffix ,
299 .I n
300 is the lowest unused number, starting from one, in the same form.  If
301 a filename does not have an extension (following a '.'), then
302 .I auto
303 and
304 .I suffix
305 create a new file of the form
306 .I name-n
307 and
308 .IR name.n ,
309 respectively.  With
310 .I never
311 and
312 .IR ask ,
313 the exit status of
314 .B mhstore
315 will be the number of files that were requested but not stored.
316 .PP
317 With
318 .IR ask ,
319 if standard input is connected to a terminal,
320 the user is prompted to respond
321 .IR yes ,
322 .IR no ,
323 or
324 .I rename
325 to whether the file should be overwritten.  The responses
326 can be abbreviated.  If the user responds with
327 .IR rename ,
328 then
329 .B mhstore
330 prompts the user for the name of the new file to be created.  If it is
331 a relative path name (does not begin with '/'), then it is relative to
332 the current directory.  If it is an absolute or relative path to a
333 directory that does not exist, the user will be prompted whether to
334 create the directory.  If standard input is not connected to a
335 terminal,
336 .I ask
337 behaves the same as
338 .IR always .
339 .SS "Reassembling Messages of Type message/partial"
340 .B mhstore
341 is also able to reassemble messages that have been
342 split into multiple messages of type \*(lqmessage/partial\*(rq.
343 .PP
344 When asked to store a content containing a partial message,
345 .B mhstore
346 will try to locate all of the portions and combine
347 them accordingly.  The default is to store the combined parts as
348 a new message in the current folder, although this can be changed
349 using formatting strings as discussed above.  Thus, if someone has
350 sent you a message in several parts (such as the output from
351 .BR sendfiles ),
352 you can easily reassemble them all into a single
353 message in the following fashion:
354 .PP
355 .RS 5
356 .nf
357 % mhlist 5-8
358  msg part  type/subtype             size description
359    5       message/partial           47K part 1 of 4
360    6       message/partial           47K part 2 of 4
361    7       message/partial           47K part 3 of 4
362    8       message/partial           18K part 4 of 4
363 % mhstore 5-8
364 reassembling partials 5,6,7,8 to folder inbox as message 9
365 % mhlist -verbose 9
366  msg part  type/subtype             size description
367    9       application/octet-stream 118K
368              (extract with uncompress | tar xvpf -)
369              type=tar
370              conversions=compress
371 .fi
372 .RE
373 .PP
374 This will store exactly one message, containing the sum of the
375 parts.  It doesn't matter whether the partials are specified in
376 order, since
377 .B mhstore
378 will sort the partials, so that they
379 are combined in the correct order.  But if
380 .B mhstore
381 can not
382 locate every partial necessary to reassemble the message, it will
383 not store anything.
384 .SS "External Access"
385 For contents of type message/external-body,
386 \fImhstore\fR supports these access-types:
387 .PP
388 .IP \(bu 4
389 afs
390 .IP \(bu 4
391 anon-ftp
392 .IP \(bu 4
393 ftp
394 .IP \(bu 4
395 local-file
396 .IP \(bu 4
397 mail-server
398 .PP
399 For the \*(lqanon-ftp\*(rq and \*(lqftp\*(rq access types,
400 .B mhstore
401 will look for the \*(lqnmh-access-ftp\*(rq
402 profile entry, e.g.,
403 .PP
404 .RS 5
405 nmh-access-ftp: myftp.sh
406 .RE
407 .PP
408 to determine the pathname of a program to perform the FTP retrieval.
409 This program is invoked with these arguments:
410 .PP
411 .RS 5
412 .nf
413 domain name of FTP-site
414 username
415 password
416 remote directory
417 remote filename
418 local filename
419 \*(lqascii\*(rq or \*(lqbinary\*(rq
420 .fi
421 .RE
422 .PP
423 The program should terminate with an exit status of zero if the
424 retrieval is successful, and a non-zero exit status otherwise.
425 .SS "The Content Cache"
426 When
427 .B mhstore
428 encounters an external content containing a
429 \*(lqContent-ID:\*(rq field, and if the content allows caching, then
430 depending on the caching behavior of
431 .BR mhstore ,
432 the content might be read from or written to a cache.
433 .PP
434 The caching behavior of
435 .B mhstore
436 is controlled with the
437 .B \-rcache
438 and
439 .B \-wcache
440 switches, which define the policy for reading from,
441 and writing to, the cache, respectively.  One of four policies may be
442 specified: \*(lqpublic\*(rq, indicating that
443 .B mhstore
444 should make use
445 of a publically-accessible content cache; \*(lqprivate\*(rq, indicating
446 that
447 .B mhstore
448 should make use of the user's private content cache;
449 \*(lqnever\*(rq, indicating that
450 .B mhstore
451 should never make use of
452 caching; and, \*(lqask\*(rq, indicating that
453 .B mhstore
454 should ask the user.
455 .PP
456 There are two directories where contents may be cached: the profile entry
457 \*(lqnmh-cache\*(rq names a directory containing world-readable contents, and,
458 the profile entry \*(lqnmh-private-cache\*(rq names a directory containing
459 private contents.  The former should be an absolute (rooted) directory
460 name.
461 .PP
462 For example,
463 .PP
464 .RS 5
465 nmh-cache: /tmp
466 .RE
467 .PP
468 might be used if you didn't care that the cache got wiped after each
469 reboot of the system.  The latter is interpreted relative to the user's
470 nmh directory, if not rooted, e.g.,
471 .PP
472 .RS 5
473 nmh-private-cache: .cache
474 .RE
475 .PP
476 (which is the default value).
477 .SS "User Environment"
478 Because the display environment in which
479 .B mhstore
480 operates may vary for
481 different machines,
482 .B mhstore
483 will look for the environment variable
484 .BR $MHSTORE .
485 If present, this specifies the name of an additional
486 user profile which should be read.  Hence, when a user logs in on a
487 particular machine, this environment variable should be set to
488 refer to a file containing definitions useful for that machine.
489 Finally,
490 .B mhstore
491 will attempt to consult one other additional
492 user profile, e.g.,
493 .PP
494 .RS 5
495 %etcdir%/mhn.defaults
496 .RE
497 .PP
498 which is created automatically during
499 .B nmh
500 installation.
501
502 .SH FILES
503 .fc ^ ~
504 .nf
505 .ta \w'%etcdir%/ExtraBigFileName  'u
506 ^$HOME/\&.mh\(ruprofile~^The user profile
507 ^$MHSTORE~^Additional profile entries
508 ^%etcdir%/mhn.defaults~^System default MIME profile entries
509 .fi
510
511 .SH "PROFILE COMPONENTS"
512 .fc ^ ~
513 .nf
514 .ta 2.4i
515 .ta \w'ExtraBigProfileName  'u
516 ^Path:~^To determine the user's nmh directory
517 ^Current\-Folder:~^To find the default current folder
518 ^nmh-access-ftp:~^Program to retrieve contents via FTP
519 ^nmh-cache~^Public directory to store cached external contents
520 ^nmh-private-cache~^Personal directory to store cached external contents
521 ^nmh-storage~^Directory to store contents
522 ^mhstore-store-<type>*~^Template for storing contents
523 .fi
524
525 .SH "SEE ALSO"
526 mhbuild(1), mhlist(1), mhshow(1), sendfiles(1)
527
528 .SH DEFAULTS
529 .nf
530 .RB ` +folder "' defaults to the current folder"
531 .RB ` msgs "' defaults to cur"
532 .RB ` \-noauto '
533 .RB ` \-clobber\ always '
534 .RB ` \-nocheck '
535 .RB ` \-rcache\ ask '
536 .RB ` \-wcache\ ask '
537
538 .SH CONTEXT
539 If a folder is given, it will become the current folder.  The last
540 message selected will become the current message.
541
542 .SH BUGS
543 Partial messages contained within a multipart content are not reassembled.