Add full-text indexing using the GMime library for parsing.
[notmuch] / notmuch-private.h
1 /* notmuch-private.h - Internal interfaces for notmuch.
2  *
3  * Copyright © 2009 Carl Worth
4  *
5  * This program is free software: you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation, either version 3 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program.  If not, see http://www.gnu.org/licenses/ .
17  *
18  * Author: Carl Worth <cworth@cworth.org>
19  */
20
21 #ifndef NOTMUCH_PRIVATE_H
22 #define NOTMUCH_PRIVATE_H
23
24 #ifndef _GNU_SOURCE
25 #define _GNU_SOURCE /* For getline and asprintf */
26 #endif
27 #include <stdio.h>
28
29 #include "notmuch.h"
30
31 NOTMUCH_BEGIN_DECLS
32
33 #include <stdlib.h>
34 #include <stdarg.h>
35 #include <sys/types.h>
36 #include <sys/stat.h>
37 #include <sys/mman.h>
38 #include <string.h>
39 #include <errno.h>
40 #include <fcntl.h>
41 #include <unistd.h>
42 #include <ctype.h>
43 #include <assert.h>
44
45 #include <talloc.h>
46
47 #include "xutil.h"
48
49 #ifdef DEBUG
50 # define DEBUG_DATABASE_SANITY 1
51 # define DEBUG_QUERY 1
52 #endif
53
54 #define COMPILE_TIME_ASSERT(pred) ((void)sizeof(char[1 - 2*!(pred)]))
55
56 /* There's no point in continuing when we've detected that we've done
57  * something wrong internally (as opposed to the user passing in a
58  * bogus value).
59  *
60  * Note that PRINTF_ATTRIBUTE comes from talloc.h
61  */
62 int
63 _internal_error (const char *format, ...) PRINTF_ATTRIBUTE (1, 2);
64
65 /* There's no point in continuing when we've detected that we've done
66  * something wrong internally (as opposed to the user passing in a
67  * bogus value).
68  *
69  * Note that __location__ comes from talloc.h.
70  */
71 #define INTERNAL_ERROR(format, ...)                     \
72     _internal_error (format " (%s).\n",                 \
73                      ##__VA_ARGS__, __location__)
74
75 #define unused(x) x __attribute__ ((unused))
76
77 /* Thanks to Andrew Tridgell's (SAMBA's) talloc for this definition of
78  * unlikely. The talloc source code comes to us via the GNU LGPL v. 3.
79  */
80 /* these macros gain us a few percent of speed on gcc */
81 #if (__GNUC__ >= 3)
82 /* the strange !! is to ensure that __builtin_expect() takes either 0 or 1
83    as its first argument */
84 #ifndef likely
85 #define likely(x)   __builtin_expect(!!(x), 1)
86 #endif
87 #ifndef unlikely
88 #define unlikely(x) __builtin_expect(!!(x), 0)
89 #endif
90 #else
91 #ifndef likely
92 #define likely(x) (x)
93 #endif
94 #ifndef unlikely
95 #define unlikely(x) (x)
96 #endif
97 #endif
98
99 typedef enum {
100     NOTMUCH_VALUE_TIMESTAMP = 0,
101     NOTMUCH_VALUE_MESSAGE_ID
102 } notmuch_value_t;
103
104 /* Xapian (with flint backend) complains if we provide a term longer
105  * than this, but I haven't yet found a way to query the limit
106  * programmatically. */
107 #define NOTMUCH_TERM_MAX 245
108
109 typedef enum _notmuch_private_status {
110     /* First, copy all the public status values. */
111     NOTMUCH_PRIVATE_STATUS_SUCCESS = NOTMUCH_STATUS_SUCCESS,
112     NOTMUCH_PRIVATE_STATUS_OUT_OF_MEMORY = NOTMUCH_STATUS_OUT_OF_MEMORY,
113     NOTMUCH_PRIVATE_STATUS_XAPIAN_EXCEPTION = NOTMUCH_STATUS_XAPIAN_EXCEPTION,
114     NOTMUCH_PRIVATE_STATUS_FILE_NOT_EMAIL = NOTMUCH_STATUS_FILE_NOT_EMAIL,
115     NOTMUCH_PRIVATE_STATUS_NULL_POINTER = NOTMUCH_STATUS_NULL_POINTER,
116     NOTMUCH_PRIVATE_STATUS_TAG_TOO_LONG = NOTMUCH_STATUS_TAG_TOO_LONG,
117
118     /* Then add our own private values. */
119     NOTMUCH_PRIVATE_STATUS_TERM_TOO_LONG,
120     NOTMUCH_PRIVATE_STATUS_NO_DOCUMENT_FOUND,
121
122     NOTMUCH_PRIVATE_STATUS_LAST_STATUS
123 } notmuch_private_status_t;
124
125 /* Coerce a notmuch_private_status_t value to a notmuch_status_t
126  * value, generating an internal error if the private value is equal
127  * to or greater than NOTMUCH_STATUS_LAST_STATUS. (The idea here is
128  * that the caller has previously handled any expected
129  * notmuch_private_status_t values.)
130  */
131 #define COERCE_STATUS(private_status, format, ...)                      \
132     ((private_status >= (notmuch_private_status_t) NOTMUCH_STATUS_LAST_STATUS)\
133      ?                                                                  \
134      (notmuch_status_t) _internal_error (format " (%s).\n",             \
135                                          ##__VA_ARGS__,                 \
136                                          __location__)                  \
137      :                                                                  \
138      (notmuch_status_t) private_status)
139
140 /* database.cc */
141
142 /* Lookup a prefix value by name.
143  *
144  * XXX: This should really be static inside of message.cc, and we can
145  * do that once we convert database.cc to use the
146  * _notmuch_message_add/remove_term functions. */
147 const char *
148 _find_prefix (const char *name);
149
150 /* thread.cc */
151
152 notmuch_thread_t *
153 _notmuch_thread_create (const void *talloc_owner,
154                         notmuch_database_t *notmuch,
155                         const char *thread_id);
156
157 void
158 _notmuch_thread_add_tag (notmuch_thread_t *thread, const char *tag);
159
160 void
161 _notmuch_thread_set_subject (notmuch_thread_t *thread, const char *subject);
162
163 /* message.cc */
164
165 notmuch_message_t *
166 _notmuch_message_create (const void *talloc_owner,
167                          notmuch_database_t *notmuch,
168                          unsigned int doc_id,
169                          notmuch_private_status_t *status);
170
171 notmuch_message_t *
172 _notmuch_message_create_for_message_id (const void *talloc_owner,
173                                         notmuch_database_t *notmuch,
174                                         const char *message_id,
175                                         notmuch_status_t *status);
176
177 const char *
178 _notmuch_message_get_subject (notmuch_message_t *message);
179
180 notmuch_private_status_t
181 _notmuch_message_add_term (notmuch_message_t *message,
182                            const char *prefix_name,
183                            const char *value);
184
185 notmuch_private_status_t
186 _notmuch_message_remove_term (notmuch_message_t *message,
187                               const char *prefix_name,
188                               const char *value);
189
190 notmuch_private_status_t
191 _notmuch_message_gen_terms (notmuch_message_t *message,
192                             const char *prefix_name,
193                             const char *text);
194
195 void
196 _notmuch_message_set_filename (notmuch_message_t *message,
197                                const char *filename);
198
199 void
200 _notmuch_message_add_thread_id (notmuch_message_t *message,
201                                 const char *thread_id);
202
203 void
204 _notmuch_message_ensure_thread_id (notmuch_message_t *message);
205
206 void
207 _notmuch_message_set_date (notmuch_message_t *message,
208                            const char *date);
209
210 void
211 _notmuch_message_sync (notmuch_message_t *message);
212
213 /* index.cc */
214
215 notmuch_status_t
216 _notmuch_message_index_file (notmuch_message_t *message,
217                              const char *filename);
218
219 /* message-file.c */
220
221 /* XXX: I haven't decided yet whether these will actually get exported
222  * into the public interface in notmuch.h
223  */
224
225 typedef struct _notmuch_message_file notmuch_message_file_t;
226
227 /* Open a file containing a single email message.
228  *
229  * The caller should call notmuch_message_close when done with this.
230  *
231  * Returns NULL if any error occurs.
232  */
233 notmuch_message_file_t *
234 notmuch_message_file_open (const char *filename);
235
236 /* Like notmuch_message_file_open but with 'ctx' as the talloc owner. */
237 notmuch_message_file_t *
238 _notmuch_message_file_open_ctx (void *ctx, const char *filename);
239
240 /* Close a notmuch message preivously opened with notmuch_message_open. */
241 void
242 notmuch_message_file_close (notmuch_message_file_t *message);
243
244 /* Restrict 'message' to only save the named headers.
245  *
246  * When the caller is only interested in a short list of headers,
247  * known in advance, calling this function can avoid wasted time and
248  * memory parsing/saving header values that will never be needed.
249  *
250  * The variable arguments should be a list of const char * with a
251  * final '(const char *) NULL' to terminate the list.
252  *
253  * If this function is called, it must be called before any calls to
254  * notmuch_message_get_header for this message.
255  *
256  * After calling this function, if notmuch_message_get_header is
257  * called with a header name not in this list, then NULL will be
258  * returned even if that header exists in the actual message.
259  */
260 void
261 notmuch_message_file_restrict_headers (notmuch_message_file_t *message, ...);
262
263 /* Identical to notmuch_message_restrict_headers but accepting a va_list. */
264 void
265 notmuch_message_file_restrict_headersv (notmuch_message_file_t *message,
266                                         va_list va_headers);
267
268 /* Get the value of the specified header from the message.
269  *
270  * The header name is case insensitive.
271  *
272  * The returned value is owned by the notmuch message and is valid
273  * only until the message is closed. The caller should copy it if
274  * needing to modify the value or to hold onto it for longer.
275  *
276  * Returns NULL if the message does not contain a header line matching
277  * 'header'.
278  */
279 const char *
280 notmuch_message_file_get_header (notmuch_message_file_t *message,
281                                  const char *header);
282
283 /* date.c */
284
285 /* Parse an RFC 8222 date string to a time_t value.
286  *
287  * The tz_offset argument can be used to also obtain the time-zone
288  * offset, (but can be NULL if the call is not interested in that).
289  *
290  * Returns 0 on error.
291  */
292 time_t
293 notmuch_parse_date (const char *str, int *tz_offset);
294
295 /* sha1.c */
296
297 char *
298 notmuch_sha1_of_string (const char *str);
299
300 char *
301 notmuch_sha1_of_file (const char *filename);
302
303 /* tags.c */
304
305 notmuch_tags_t *
306 _notmuch_tags_create (void *ctx);
307
308 void
309 _notmuch_tags_add_tag (notmuch_tags_t *tags, const char *tag);
310
311 void
312 _notmuch_tags_prepare_iterator (notmuch_tags_t *tags);
313
314 NOTMUCH_END_DECLS
315
316 #endif