Merge branch 'pick' into master

scan and pick is merged and pick matching is streamlined

merge pick and scan manpage

Now only one manpage for scan and pick is dokumentating
the usage of pick/scan.

add raw option to mhl

raw allows to output a header as in the input, no changes are done
by mhl. This is written for whatnow2. whatnow2 shall safe some data
in the draft and use mhl with ignore to remove this data. Also other tools can
use mhl to filter some header fields out of a message without changing the
message itself.

whatnow2 handle mhuse

If mhuse is set don't write new envirement to the metafile. mhuse
is set, when comp -use is used.

strict use "" in whatnow2

mhl implement simple globbing

ignores now supports simple globbing

fix indention in uip/mhl.c

Trailing withspace handling in mhl

If a component has trailing whitespace, e.g., body:component="> ", mhl
now trims that whitespace off when filtering blank text lines. Also add
a rtrim flag to mhl. This flag removes trailing whitespace in filtert text.

The implementation was done by David Levine <levinedl@acm.org> for nmh
commit ea0a6d8112a918809bd03d8126411040d22f2bb8
commit 1aa8f3e11e6d83ee4806abaa132ab9466f02ca5f

read the defaultfolder from the profile

context_read now creates the inbox specified in the profile,
instand of create the compiletime default.

pick implement rfc2047

fix logic bug in pick GREPaction

GREPaction now check the header field correct

remove free of static memory

Fix blind list alias expansion

The first alias contained in a blind list is now expanded. The
mh-alias(5) man page was updated to show that blind lists must not be
terminated with, or contain, a trailing semicolon [Bug #15604].

Fix test/tests/show/test-longlines

Although it worked correct on the server, it did not in terminals
which have a number of columns set, like those connected to a screen.
The test now sets `-width 2000' for mhl(1) via the test config.

Fix test/tests/send/test-mimeify

The size differences came from generated values of the Content-ID
headers. They depend on the hostname and thus vary in length. leading
to different MIME part sizes. The solution is replacing all
Content-IDs with static values. The helper function replace_contentid()
is added to commons.sh.

Add test for empty sequence patch by c_14

i.e. for commit 850190587ff71010fc63e44ca01a93a44c96f58e

Ignore folders with an empty sequence in new

This solves the issue where `new' lists folders that have an empty
sequence (e.g. the unseen sequence), this also prevents `fnext' and
`fprev' from navigating to such folders.

Use the same mh_hostname() function from test/common.h in mhsign(1)

Fix tests to run on OpenBSD

  Use a hardcoded sequence for there's no seq(1) in OpenBSD.

  awk(1) doesn't support interval regular expression syntax ({n,m})
  on some BSDs.

  hostname(1) has no -f flag on OpenBSD and. Try it first and
  fallback to `uname -n`.

  Omit explicit template in mktemp(1) call.

Remove tests/inc/test-eom-align

Reimplemented m_getfld2() makes it obsolete.

Extend test for long lines with CRLF

spost accept body lines with 998 characters

check for crlf in m_getfld2

now header fields witch lines 998 chars and crlf
are accepted.

Add test to check for correct handling of long lines

Accept header lines of exactly 998 characters

Fix parallel `make install'

Prior to this commit, running make install with -j > 1 caused an (easily
reproducible) race condition where make tried linking commands that
hadn't been installed yet.

Better wording in README concerning compatibility

fix install of scan

now scan is removed bevore it is linked

found by Jan <jan@subpath.de>

Add example to pick.1 for handling empty result set in the shell

This commit bases on a patch provided by Vasily Kolobkov
<polezaivsani@openmailbox.org>. Actually, he also brought the
topic up on the mailing list. Thanks!

Also adjust the man page from nmh's special sequence name `all'
to mmh's name `a' for it.

fix undefined behavior in fmt_trim()

It now writes the output in the input char *. This is only a temporaly
fix.

cpstripped: Add braces to make code more legible.

add a test to test-scan-multibyte

Tests for splitting within a multibyte character.

fmt_scan: support multibyte characters in putstr decoding

Fixes an issue where the string output by scan with a putstr format is
truncated within a multibyte character causing terminal corruption

replace scan with pick

port -file switch to pick

now scan can full replaced by pick

pick option -thread

The -thread option allows to pick mails of a specific thread. The
thread is choosen by a mail in the option argument.

complete rewrite of pick

this make the code cleaner and removes the
regex implementation. The mail itself is now read
by pick and the match functions only check if the
field match.

mh_xstrdup arguments now const

this is better to avoid errors and required
by my pick rewrite

add -format to pick

this leads to remove scan

decode rfc2047 header in mhparse

attachment filenames are mostly rfc2047 encoded. Now all
mime header are decoded to avoid problems.

mhpgp: use trusted header field copies to replace original header fields

Enigmail provides so called ``protected-headers'', which are copies
of some main mail header fields to protect them from forgery.

Mhpgp(1) works in a rough way and simply adds this MIME part
to the main header, and this resulted in a doubling of those header
fields.

Now those original headers are removed if trusted copies are
provided within the encrpyted MIME part.

Fix `anno -delete': preserve newline in folded header fields

Fix mhsign for gpg2: Expiry date format

Gnupg2 uses --fixed-list-mode by default for --with-colons.
Gnupg1 needs this option explicitly to generate the same output
format (timestamps) for expiry dates.

Thanks to Jan Unterbrink for reporting the bug.

fix oldstyle whom

Check if msg struct have selected messages before
accessing a message.

Fix uip/whom.c for C89 compatibility

Fix sbr/parse_msgs.c for C89 compatibility

add() first parameter (s2) is now const

allow msgs as parameters for whom

now you can write ``whom c'' instand of ``whom `mhpath c`''

quote path variables in whatnow2.sh

without qoutes this causes error with spaces or other
special charecter in the path or filename.

make dateparsing case insensitive

Acourding to RFC 5322 and 5234 the date field
is case insenitive

mhparse add support for CRLF

multipart mime content wasn't able to parse, if the
mail use CRLF line endings.

Accept binary encoding for messages/*

Acording to RFC 2046 binary encoding is allowed for messages/*.
Also ignore other encodings.

mhsign manpage: mention hostname bug

whatnow2: remove get_attachmentheader()

Remove unused code

The unsude code is: struct zone, macro strbase64, macro isatom,
function unset_unseen(), function pref_encoding(), function cpydgst(),
macro base64len

Grammer and layout fixes anno.man1

Grammer and layout fixes in ali.man1

fix bug in whatnow2 attach

redesign version string

Now we have two version nummbers one for the tool
and one for the lib. Also the version number is changed
everytime the object is rebuild.

Fix segfault in mhstore

The bug was introduced by 6306992cd580d47c217edb1ae98d58b24d5be8c9
It didn't handle MIME parts without Content-Disposition headers.

Fix repllistcomps: use the correct header

No need to define the month and day names a second time

... just use the definition that already is available.

Add support for simplified ISO 8601/RFC 3339 dates

It is now possible to use:
pick -after 2016-02-15 -and -before 2016-08-31T16:30:00+02:00

At the same time drop support for the highly ambiguous date format
XX-XX-YY.

Replace lookup tables for obscure hashes with more readable code

Time-performance doesn't matter here. If you think differently,
demonstrate it convincingly!

Remove not used code (JLR define)

I don't yet understand what the code does but we've never used
it and didn't miss it, thus it appears to be a good decision to
just remove it.

fix build in a diffrent folder

Build in diffrent folder is a feature required by
the test suite.

This is a fixup for commit 94ac6bb

Factor trim format function out

Also clarify that it trims both, leading and trailing whitespace.

(Note that it is a special trim function. We cannot simply replace
it with sbr/trim.c. Nonetheless, its readability is somehow bad.)

Add %(unmailto) format function for List-Post headers

With the unmailto format function it is possible to extract
the address from a List-Post header, which e.g. is:
List-Post: <mailto:mmh@marmaro.de>
Applying  %(unmailto{list-post})  extracts: ``mmh@marmaro.de'',
which then can be used as recipient address for list replies.
A format file (to be used with ``repl -form repllistcomps'')
is included.

Generate the command list in mmh-intro(7)

This implementation does handle the aliases of folder(1) and
flist(1), but not the ones of show(1) and new(1). Hence the
commands next(1), prev(1), fnext(1), fprev(1) and unseen(1)
don't appear on the list.

Adjusted some of the short descriptions based on the version
in the manual command list.

Make mhstore(1) use "filename" attr of Content-Disposition

Before, only the "name" attr of Content-Type was used as the filename
to store attachments. The "filename" attr of Content-Disposition
(which is the much more appropriate value) was ignored, thus often
resulting in the attachment being stored with a default name like
20.2.pdf, for instance.

remove msg-hook config option

This is removed, because I don't see this is necesarry and it's
not a good idea to pass a user provided string direct in a
format string.

Fix unreproducible build

Hostname and date of compilation are no longer embeded in version
string. See https://reproducible-builds.org

Fix spelling errors, including binaries ones

Signed-off-by: Dmitry Bogatov <KAction@gnu.org>

Fix missing va_end call in uip/mhmisc.c

Fix misspelled variable in uip/whatnow2.sh

This make the error message better

Fix out-of-bounds error when incorporating email from stdin

Before this patch, if +inbox is empty, following error happened:

$ inc -file - < /dev/null

Incorporating new mail into inbox...

inc: no messages incorporated, continuing...
inc: Bug: message out of bounds

This happened due improper call to `seq_setunseen', which implicitly
assumed that there is at least one message (it does not handle case
where both mp->hghmsg and mh->lowmsg are 0).

Bug does not happens with command `inc -file empty', since file
is checked for being empty before any read attempts.

Signed-off-by: Dmitry Bogatov <KAction@gnu.org>

Fix FILE resource leaks in uip/distsbr.c

add Sendmail option to spost manpage

Thanks Dmitry Bogatov

add uip/whatnow2 to .gitignore

Bump version number

This is mmh-0.3

fix whatnow2 send

in the last commit whatnow2 send was changed
to keep the metafile. This don't work with the
``exec send''. Now the send() is renamed to
sendfunktion and the ``exec'' is removed.

del metafile in whatnow2 only if send don't fail

If send fails, you want to keep the metafile. Without this dist wold
only work, if send works on the first time. Also some metainfo don't
get lost.

touch the DISTINCLUDE in mmhdist target

This avoids rebuilding this files. So autoconf and flex
is not need for a normal user.

Add "delete" to "delete" pattern in whatnow2's case construct

The attached patch modifies whatnow2 so that calling `whatnow2 delete`
works as may be expected.  Without this change, the "delete" function
in whatnow2 was called only when whatnow2 was executed as one of the
following.

* whatnow2 del
* whatnow2 dele
* whatnow2 delet

better error handling in whatnow2

if the command is unknown then usage is printed and if usage is
called with an argument other then 0 exit 1 is forced.

fix bug in decode_rfc2047()

If iconv() returns an error and the source encoding
is utf-8, the character jump has an of by one: the
source string is incresed by one possition more the
the length is decreased.

Update comment in script concerning the VCS

We're not using CVS anymore, but a VCS -- doesn't matter which one.

fix dist

Because of always mimeify the dist hasn't work anymore.
This is fixed by skipping attach() and signandenc(), if
it's handled as a redistribution message.

Add more tests to tests/test-send-mimeify

Fix typo in whatnow2 function "display"

The attached patch fixes a typo in the whatnow2's "display" function.
[ -z instand of [ -n for a check if a variable is empty.

add a test for repl on a ASCII only system

This should create the same output as with utf-8.
But the Umlaut should be displayed as '?'. This isn't
the case at the moment.

Fix typo in whatnow2.sh

command call is done with `command` not "command"

Test if MIME creation works

Test if send uses mhbuild only, if it is usefull. A message
already in MIME-Formate should not cause a fail.

unset MM_CHARSET in tests/scan/test-scan-multibyte

If MM_CHARSET is set to anything other then ascii this
test probaly fail, but the test is mean to run on a ascii
only envirement.

Adjust tests/bad-input/test-header for m_gefld2()

With the m_gefld2 change mmh ignores more errors. This causes
a diffrent behaviour in some cases.

Fix tests/mhparam/test-mhparam

The behaviour of readconfig() has changed. This causes
another behaviour for mhparam.

send: Always MIMEify and pass already MIMIfied drafts through

Even if technically not necessary, MIMEify the draft. This simplifies
the code at hardly any cost.

To still be able to create arbitrary complex MIME structures, make
send(1) pass already MIMEified drafts through, without automatically
invoking mhbuild(1) on them a second time (which would fail). This
way, you can manually invoke mhbuild(1) and afterward call send(1)
... and everything will work just as expected.

Also documented this in the man page, and additionally added a
paragraph about the signing and encrypting feature of send(1), which
wasn't documented yet.

mhsign should work now

Allow send(1) to send from folder other than +drafts

This allows having multiple draft folders or queueing drafts
for automatic sending.