470714c9b1e289d68c4f0411af0daecfc7b91eb2
[mmh] / man / mhstore.man
1 .\"
2 .\" %nmhwarning%
3 .\"
4 .TH MHSTORE %manext1% "%nmhdate%" MH.6.8 [%nmhversion%]
5 .SH NAME
6 mhstore \- store contents of MIME messages into files
7 .SH SYNOPSIS
8 .HP 5
9 .na
10 .B mhstore
11 .RI [ +folder ]
12 .RI [ msgs ]
13 .RB [ \-file
14 .IR file ]
15 .RB [ \-part
16 .IR number ]
17 \&...
18 .RB [ \-type
19 .IR content ]
20 \&...
21 .RB [ \-auto " | " \-noauto ]
22 .RB [ \-rcache
23 .IR policy ]
24 .RB [ \-wcache
25 .IR policy ]
26 .RB [ \-check " | " \-nocheck ]
27 .RB [ \-version ]
28 .RB [ \-help ]
29 .ad
30 .SH DESCRIPTION
31 The
32 .B mhstore
33 command allows you to store the contents of a
34 collection of MIME (multi-media) messages into files or other
35 messages.
36 .PP
37 .B mhstore
38 manipulates multi-media messages as specified in
39 RFC\-2045 thru RFC\-2049.
40 .PP
41 By default,
42 .B mhstore
43 will store all the parts of each message.
44 Each part will be store in a separate file.  The header fields of
45 the message are not stored.  By using the
46 .B \-part
47 and
48 .B \-type
49 switches, you may limit the scope of
50 .B mhstore
51 to particular
52 subparts (of a multipart content) and/or particular content types.
53 .PP
54 The option
55 .B \-file
56 .I file
57 directs
58 .B mhstore
59 to use the specified
60 file as the source message, rather than a message from a folder.
61 If you specify this file as \*(lq-\*(rq, then
62 .B mhstore
63 will
64 accept the source message on the standard input.  Note that the
65 file, or input from standard input should be a validly formatted
66 message, just like any other
67 .B nmh
68 message.  It should
69 .B NOT
70 be in mail drop format (to convert a file in mail drop format to
71 a folder of
72 .B nmh
73 messages, see
74 .BR inc (1)).
75 .PP
76 A part specification consists of a series of numbers separated by
77 dots.  For example, in a multipart content containing three parts,
78 these would be named as 1, 2, and 3, respectively.  If part 2 was
79 also a multipart content containing two parts, these would be named
80 as 2.1 and 2.2, respectively.  Note that the
81 .B \-part
82 switch is
83 effective for only messages containing a multipart content.  If a
84 message has some other kind of content, or if the part is itself
85 another multipart content, the
86 .B \-part
87 switch will not prevent
88 the content from being acted upon.
89 .PP
90 A content specification consists of a content type and a subtype.
91 The initial list of \*(lqstandard\*(rq content types and subtypes
92 can be found in RFC\-2046.
93 .PP
94 A list of commonly used contents is briefly reproduced here:
95 .PP
96 .RS 5
97 .nf
98 .ta \w'application  'u
99 Type    Subtypes
100 ----    --------
101 text    plain, enriched
102 multipart       mixed, alternative, digest, parallel
103 message rfc822, partial, external-body
104 application     octet-stream, postscript
105 image   jpeg, gif, png
106 audio   basic
107 video   mpeg
108 .fi
109 .RE
110 .PP
111 A legal MIME message must contain a subtype specification.
112 .PP
113 To specify a content, regardless of its subtype, just use the name
114 of the content, e.g., \*(lqaudio\*(rq.  To specify a specific
115 subtype, separate the two with a slash, e.g., \*(lqaudio/basic\*(rq.
116 Note that regardless of the values given to the
117 .B \-type
118 switch,
119 a multipart content (of any subtype listed above) is always acted
120 upon.  Further note that if the
121 .B \-type
122 switch is used, and it is
123 desirable to act on a message/external-body content, then the
124 .B \-type
125 switch must be used twice: once for message/external-body
126 and once for the content externally referenced.
127 .SS "Checking the Contents"
128 The
129 .B \-check
130 switch tells
131 .B mhstore
132 to check each content for
133 an integrity checksum.  If a content has such a checksum (specified
134 as a Content-MD5 header field), then
135 .B mhstore
136 will attempt to
137 verify the integrity of the content.
138 .SS "Storing the Contents"
139 The
140 .B mhstore
141 will store the contents of the named messages in
142 \*(lqnative\*(rq (decoded) format.  Two things must be determined:
143 the directory to store the content, and the filenames.  Files are
144 written in the directory given by the \*(lqnmh-storage\*(rq profile
145 entry, e.g.,
146 .PP
147 .RS 5
148 nmh-storage: /tmp
149 .RE
150 .PP
151 If this entry isn't present,
152 the current working directory is used.
153 .PP
154 If the
155 .B \-auto
156 switch is given, then
157 .B mhstore
158 will check if
159 the message contains information indicating the filename that should
160 be used to store the content.  This information should be specified
161 as the attribute \*(lqname=filename\*(rq in the \*(lqContent-Type\*(rq header
162 for the content you are storing.  For security reasons, this filename
163 will be ignored if it begins with the character '/', '.', '|', or '!',
164 or if it contains the character '%'.  For the sake of security,
165 this switch is not the default, and it is recommended that you do
166 NOT put the
167 .B \-auto
168 switch in your
169 .I \&.mh\(ruprofile
170 file.
171 .PP
172 If the
173 .B \-auto
174 switch is not given (or is being ignored for security
175 reasons) then
176 .B mhstore
177 will look in the user's profile for a
178 \*(lqformatting string\*(rq to determine how the different contents
179 should be stored.  First,
180 .B mhstore
181 will look for an entry of
182 the form:
183 .PP
184 .RS 5
185 mhstore-store-<type>/<subtype>
186 .RE
187 .PP
188 to determine the formatting string.  If this isn't found,
189 .B mhstore
190 will look for an entry of the form:
191 .PP
192 .RS 5
193 mhstore-store-<type>
194 .RE
195 .PP
196 to determine the formatting string.
197 .PP
198 If the formatting string starts with a \*(lq+\*(rq character, then
199 content is stored in the named folder.  A formatting string consisting
200 solely of a \*(lq+\*(rq character is interpreted to be the current
201 folder.
202 .PP
203 If the formatting string consists solely of a \*(lq-\*(rq character,
204 then the content is sent to the standard output.
205 .PP
206 If the formatting string starts with a '|', then the display string
207 will represent a command for
208 .B mhstore
209 to execute which should
210 ultimately store the content.  The content will be passed to the
211 standard input of the command.  Before the command is executed,
212 .B mhstore
213 will change to the appropriate directory, and any
214 escapes (given below) in the display string will be expanded.
215 .PP
216 Otherwise the formatting string will represent a pathname in which
217 to store the content.  If the formatting string starts with a '/',
218 then the content will be stored in the full path given, else the
219 file name will be relative to the value of \*(lqnmh-storage\*(rq or
220 the current working directory.  Any escapes (given below) will be
221 expanded, except for the a-escape.  Note that if \*(lqnmh-storage\*(rq
222 is not an absolute path, it will be relative to the folder that
223 contains the message(s).
224 .PP
225 A command or pathname formatting string may contain the following
226 escapes.  If the content isn't part of a multipart (of any subtype
227 listed above) content, the p-escapes are ignored.
228 .PP
229 .RS 5
230 .nf
231 .ta \w'%P  'u
232 %a      Parameters from Content-type  (only valid with command)
233 %m      Insert message number
234 %P      Insert part number with leading dot
235 %p      Insert part number without leading dot
236 %t      Insert content type
237 %s      Insert content subtype
238 %%      Insert character %
239 .fi
240 .RE
241 .PP
242 If no formatting string is found,
243 .B mhstore
244 will check to see
245 if the content is application/octet-stream with parameter
246 \*(lqtype=tar\*(rq.  If so,
247 .B mhstore
248 will choose an appropriate
249 filename.  If the content is not application/octet-stream, then
250 .B mhstore
251 will check to see if the content is a message.  If
252 so,
253 .B mhstore
254 will use the value \*(lq+\*(rq.  As a last resort,
255 .B mhstore
256 will use the value \*(lq%m%P.%s\*(rq.
257 .PP
258 Example profile entries might be:
259 .PP
260 .RS 5
261 .nf
262 mhstore-store-text: %m%P.txt
263 mhstore-store-text: +inbox
264 mhstore-store-message/partial: +
265 mhstore-store-audio/basic: | raw2audio -e ulaw -s 8000 -c 1 > %m%P.au
266 mhstore-store-image/jpeg: %m%P.jpg
267 mhstore-store-application/PostScript: %m%P.ps
268 .fi
269 .RE
270 .PP
271 .SS "Reassembling Messages of Type message/partial"
272 .B mhstore
273 is also able to reassemble messages that have been
274 split into multiple messages of type \*(lqmessage/partial\*(rq.
275 .PP
276 When asked to store a content containing a partial message,
277 .B mhstore
278 will try to locate all of the portions and combine
279 them accordingly.  The default is to store the combined parts as
280 a new message in the current folder, although this can be changed
281 using formatting strings as discussed above.  Thus, if someone has
282 sent you a message in several parts (such as the output from
283 .BR sendfiles ),
284 you can easily reassemble them all into a single
285 message in the following fashion:
286 .PP
287 .RS 5
288 .nf
289 % mhlist 5-8
290  msg part  type/subtype             size description
291    5       message/partial           47K part 1 of 4
292    6       message/partial           47K part 2 of 4
293    7       message/partial           47K part 3 of 4
294    8       message/partial           18K part 4 of 4
295 % mhstore 5-8
296 reassembling partials 5,6,7,8 to folder inbox as message 9
297 % mhlist -verbose 9
298  msg part  type/subtype             size description
299    9       application/octet-stream 118K
300              (extract with uncompress | tar xvpf -)
301              type=tar
302              conversions=compress
303 .fi
304 .RE
305 .PP
306 This will store exactly one message, containing the sum of the
307 parts.  It doesn't matter whether the partials are specified in
308 order, since
309 .B mhstore
310 will sort the partials, so that they
311 are combined in the correct order.  But if
312 .B mhstore
313 can not
314 locate every partial necessary to reassemble the message, it will
315 not store anything.
316 .SS "External Access"
317 For contents of type message/external-body,
318 \fImhstore\fR supports these access-types:
319 .PP
320 .IP \(bu 4
321 afs
322 .IP \(bu 4
323 anon-ftp
324 .IP \(bu 4
325 ftp
326 .IP \(bu 4
327 local-file
328 .IP \(bu 4
329 mail-server
330 .PP
331 For the \*(lqanon-ftp\*(rq and \*(lqftp\*(rq access types,
332 .B mhstore
333 will look for the \*(lqnmh-access-ftp\*(rq
334 profile entry, e.g.,
335 .PP
336 .RS 5
337 nmh-access-ftp: myftp.sh
338 .RE
339 .PP
340 to determine the pathname of a program to perform the FTP retrieval.
341 This program is invoked with these arguments:
342 .PP
343 .RS 5
344 .nf
345 domain name of FTP-site
346 username
347 password
348 remote directory
349 remote filename
350 local filename
351 \*(lqascii\*(rq or \*(lqbinary\*(rq
352 .fi
353 .RE
354 .PP
355 The program should terminate with an exit status of zero if the
356 retrieval is successful, and a non-zero exit status otherwise.
357 .SS "The Content Cache"
358 When
359 .B mhstore
360 encounters an external content containing a
361 \*(lqContent-ID:\*(rq field, and if the content allows caching, then
362 depending on the caching behavior of
363 .BR mhstore ,
364 the content might be read from or written to a cache.
365 .PP
366 The caching behavior of
367 .B mhstore
368 is controlled with the
369 .B \-rcache
370 and
371 .B \-wcache
372 switches, which define the policy for reading from,
373 and writing to, the cache, respectively.  One of four policies may be
374 specified: \*(lqpublic\*(rq, indicating that
375 .B mhstore
376 should make use
377 of a publically-accessible content cache; \*(lqprivate\*(rq, indicating
378 that
379 .B mhstore
380 should make use of the user's private content cache;
381 \*(lqnever\*(rq, indicating that
382 .B mhstore
383 should never make use of
384 caching; and, \*(lqask\*(rq, indicating that
385 .B mhstore
386 should ask the user.
387 .PP
388 There are two directories where contents may be cached: the profile entry
389 \*(lqnmh-cache\*(rq names a directory containing world-readable contents, and,
390 the profile entry \*(lqnmh-private-cache\*(rq names a directory containing
391 private contents.  The former should be an absolute (rooted) directory
392 name.
393 .PP
394 For example,
395 .PP
396 .RS 5
397 nmh-cache: /tmp
398 .RE
399 .PP
400 might be used if you didn't care that the cache got wiped after each
401 reboot of the system.  The latter is interpreted relative to the user's
402 nmh directory, if not rooted, e.g.,
403 .PP
404 .RS 5
405 nmh-private-cache: .cache
406 .RE
407 .PP
408 (which is the default value).
409 .SS "User Environment"
410 Because the display environment in which
411 .B mhstore
412 operates may vary for
413 different machines,
414 .B mhstore
415 will look for the environment variable
416 .BR $MHSTORE .
417 If present, this specifies the name of an additional
418 user profile which should be read.  Hence, when a user logs in on a
419 particular machine, this environment variable should be set to
420 refer to a file containing definitions useful for that machine.
421 Finally,
422 .B mhstore
423 will attempt to consult one other additional
424 user profile, e.g.,
425 .PP
426 .RS 5
427 %etcdir%/mhn.defaults
428 .RE
429 .PP
430 which is created automatically during
431 .B nmh
432 installation.
433
434 .SH FILES
435 .fc ^ ~
436 .nf
437 .ta \w'%etcdir%/ExtraBigFileName  'u
438 ^$HOME/\&.mh\(ruprofile~^The user profile
439 ^$MHSTORE~^Additional profile entries
440 ^%etcdir%/mhn.defaults~^System default MIME profile entries
441 .fi
442
443 .SH "PROFILE COMPONENTS"
444 .fc ^ ~
445 .nf
446 .ta 2.4i
447 .ta \w'ExtraBigProfileName  'u
448 ^Path:~^To determine the user's nmh directory
449 ^Current\-Folder:~^To find the default current folder
450 ^nmh-access-ftp:~^Program to retrieve contents via FTP
451 ^nmh-cache~^Public directory to store cached external contents
452 ^nmh-private-cache~^Personal directory to store cached external contents
453 ^nmh-storage~^Directory to store contents
454 ^mhstore-store-<type>*~^Template for storing contents
455 .fi
456
457 .SH "SEE ALSO"
458 mhbuild(1), mhlist(1), mhshow(1), sendfiles(1)
459
460 .SH DEFAULTS
461 .nf
462 .RB ` +folder "' defaults to the current folder"
463 .RB ` msgs "' defaults to cur"
464 .RB ` \-noauto '
465 .RB ` \-nocheck '
466 .RB ` \-rcache\ ask '
467 .RB ` \-wcache\ ask '
468
469 .SH CONTEXT
470 If a folder is given, it will become the current folder.  The last
471 message selected will become the current message.
472
473 .SH BUGS
474 Partial messages contained within a multipart content are not reassembled.