]> git.notmuchmail.org Git - notmuch/blob - test/basic
changelog stanza for 0.17-4
[notmuch] / test / basic
1 #!/usr/bin/env bash
2 #
3 # Copyright (c) 2005 Junio C Hamano
4 #
5
6 test_description='the test framework itself.'
7
8 ################################################################
9 # It appears that people try to run tests without building...
10
11 if ! test -x ../notmuch
12 then
13         echo >&2 'You do not seem to have built notmuch yet.'
14         exit 1
15 fi
16
17 . ./test-lib.sh
18
19 ################################################################
20 # Test harness
21 test_expect_success 'success is reported like this' '
22     :
23 '
24 test_set_prereq HAVEIT
25 haveit=no
26 test_expect_success HAVEIT 'test runs if prerequisite is satisfied' '
27     test_have_prereq HAVEIT &&
28     haveit=yes
29 '
30
31 clean=no
32 test_expect_success 'tests clean up after themselves' '
33     test_when_finished clean=yes
34 '
35
36 cleaner=no
37 test_expect_code 1 'tests clean up even after a failure' '
38     test_when_finished cleaner=yes &&
39     (exit 1)
40 '
41
42 if test $clean$cleaner != yesyes
43 then
44         say "bug in test framework: cleanup commands do not work reliably"
45         exit 1
46 fi
47
48 test_expect_code 2 'failure to clean up causes the test to fail' '
49     test_when_finished "(exit 2)"
50 '
51
52 # Ensure that all tests are being run
53 test_begin_subtest 'Ensure that all available tests will be run by notmuch-test'
54 eval $(sed -n -e '/^TESTS="$/,/^"$/p' $TEST_DIRECTORY/notmuch-test)
55 tests_in_suite=$(for i in $TESTS; do echo $i; done | sort)
56 available=$(find "$TEST_DIRECTORY" -maxdepth 1 -type f \
57    '(' -perm -100 -o -perm -10 -o -perm -1 ')' \
58     ! -name aggregate-results.sh        \
59     ! -name arg-test                    \
60     ! -name hex-xcode                   \
61     ! -name notmuch-test                \
62     ! -name parse-time                  \
63     ! -name random-corpus               \
64     ! -name smtp-dummy                  \
65     ! -name symbol-test                 \
66     ! -name test-verbose                \
67     | sed 's,.*/,,' | sort)
68 test_expect_equal "$tests_in_suite" "$available"
69
70 EXPECTED=$TEST_DIRECTORY/test.expected-output
71 suppress_diff_date() {
72     sed -e 's/\(.*\-\-\- test-verbose\.4\.\expected\).*/\1/' \
73         -e 's/\(.*\+\+\+ test-verbose\.4\.\output\).*/\1/'
74 }
75
76 test_begin_subtest "Ensure that test output is suppressed unless the test fails"
77 output=$(cd $TEST_DIRECTORY; ./test-verbose 2>&1 | suppress_diff_date)
78 expected=$(cat $EXPECTED/test-verbose-no | suppress_diff_date)
79 test_expect_equal "$output" "$expected"
80
81 test_begin_subtest "Ensure that -v does not suppress test output"
82 output=$(cd $TEST_DIRECTORY; ./test-verbose -v 2>&1 | suppress_diff_date)
83 expected=$(cat $EXPECTED/test-verbose-yes | suppress_diff_date)
84 # Do not include the results of test-verbose in totals
85 rm $TEST_DIRECTORY/test-results/test-verbose
86 rm -r $TEST_DIRECTORY/tmp.test-verbose
87 test_expect_equal "$output" "$expected"
88
89
90 ################################################################
91 # Test mail store prepared in test-lib.sh
92
93 test_expect_success \
94     'test that mail store was created' \
95     'test -d "${MAIL_DIR}"'
96
97
98 find "${MAIL_DIR}" -type f -print >should-be-empty
99 test_expect_success \
100     'mail store should be empty' \
101     'cmp -s /dev/null should-be-empty'
102
103 test_expect_success \
104     'NOTMUCH_CONFIG is set and points to an existing file' \
105     'test -f "${NOTMUCH_CONFIG}"'
106
107 test_expect_success \
108     'PATH is set to this repository' \
109     'test "`echo $PATH|cut -f1 -d: | sed -e 's,/test/valgrind/bin$,,'`" = "`dirname ${TEST_DIRECTORY}`"'
110
111 test_done