Move index_file out from main() into its own function.
[notmuch] / notmuch-index-message.cc
index 44b1b03a1e180bc8625b13dcd02f8ddf73f1a453..79b3bf3845c14ca1a1de487db68312daaad2f43e 100644 (file)
@@ -187,6 +187,55 @@ add_terms_address_addrs (Xapian::Document doc,
     }
 }
 
+static const char *
+skip_re_in_subject (const char *subject)
+{
+    const char *s = subject;
+
+    while (*s) {
+       while (*s && isspace (*s))
+           s++;
+       if (strncasecmp (s, "re:", 3) == 0)
+           s += 3;
+       else
+           break;
+    }
+
+    return s;
+}
+
+/* Add a term for each message-id in the References header of the
+ * message. */
+static void
+add_terms_references (Xapian::Document doc,
+                     GMimeMessage *message)
+{
+    const char *refs, *end, *next;
+    char *term;
+
+    refs = g_mime_object_get_header (GMIME_OBJECT (message), "references");
+
+    while (*refs) {
+       while (*refs && isspace (*refs))
+           refs++;
+       if (*refs == '<')
+           refs++;
+       end = refs;
+       while (*end && !isspace (*end))
+           end++;
+       next = end;
+       end--;
+       if (end > refs && *end == '>')
+           end--;
+       if (end > refs) {
+           term = g_strndup (refs, end - refs + 1);
+           add_term (doc, "ref", term);
+           g_free (term);
+       }
+       refs = next;
+    }
+}
+
 /* Generate terms for the body of a message, given the filename of the
  * message and the offset at which the headers of the message end,
  * (and hence the body begins). */
@@ -270,16 +319,18 @@ gen_terms_body (Xapian::TermGenerator term_gen,
     g_io_channel_close (channel);
 }
 
-
-int
-main (int argc, char **argv)
+static void
+index_file (Xapian::WritableDatabase db,
+           Xapian::TermGenerator term_gen,
+           const char *filename)
 {
+    Xapian::Document doc;
+
     GMimeStream *stream;
     GMimeParser *parser;
     GMimeMessage *message;
     InternetAddressList *addresses;
 
-    const char *database_path, *filename;
     FILE *file;
 
     const char *value, *from;
@@ -288,108 +339,117 @@ main (int argc, char **argv)
     struct tm gm_time_tm;
     char date_str[16]; /* YYYYMMDDHHMMSS + 1 for Y100k compatibility ;-) */
 
-    if (argc < 3) {
-       fprintf (stderr, "Usage: %s <path-to-xapian-database> <mail-message>\n",
-                argv[0]);
-       exit (1);
-    }
-
-    database_path = argv[1];
-    filename = argv[2];
-
     file = fopen (filename, "r");
     if (! file) {
        fprintf (stderr, "Error opening %s: %s\n", filename, strerror (errno));
        exit (1);
     }
 
-    g_mime_init (0);
-
     stream = g_mime_stream_file_new (file);
 
     parser = g_mime_parser_new_with_stream (stream);
 
     message = g_mime_parser_construct_message (parser);
 
-    try {
-       Xapian::WritableDatabase db;
-       Xapian::TermGenerator term_gen;
-       Xapian::Document doc;
+    doc = Xapian::Document ();
 
-       doc = Xapian::Document ();
+    doc.set_data (filename);
 
-       doc.set_data (filename);
+    term_gen.set_stemmer (Xapian::Stem ("english"));
 
-       db = Xapian::WritableDatabase (database_path,
-                                      Xapian::DB_CREATE_OR_OPEN);
+    term_gen.set_document (doc);
 
-       term_gen = Xapian::TermGenerator ();
-       term_gen.set_stemmer (Xapian::Stem ("english"));
+    from = g_mime_message_get_sender (message);
+    addresses = internet_address_list_parse_string (from);
 
-       term_gen.set_document (doc);
+    gen_terms_address_names (term_gen, addresses, "from_name");
 
-       from = g_mime_message_get_sender (message);
-       addresses = internet_address_list_parse_string (from);
+    addresses = g_mime_message_get_all_recipients (message);
+    gen_terms_address_names (term_gen, addresses, "to_name");
 
-       gen_terms_address_names (term_gen, addresses, "from_name");
+    value = g_mime_message_get_subject (message);
+    value = skip_re_in_subject (value);
+    gen_terms (term_gen, "subject", value);
+    gen_terms (term_gen, "body", value);
 
-       addresses = g_mime_message_get_all_recipients (message);
-       gen_terms_address_names (term_gen, addresses, "to_name");
+    gen_terms_body (term_gen, filename,
+                   g_mime_parser_get_headers_end (parser));
 
-       value = g_mime_message_get_subject (message);
-       gen_terms (term_gen, "subject", value);
-       gen_terms (term_gen, "body", value);
+    add_terms_references (doc, message);
 
-       gen_terms_body (term_gen, filename,
-                       g_mime_parser_get_headers_end (parser));
+    from = g_mime_message_get_sender (message);
+    addresses = internet_address_list_parse_string (from);
 
-       from = g_mime_message_get_sender (message);
-       addresses = internet_address_list_parse_string (from);
+    add_terms_address_addrs (doc, addresses, "from_email");
 
-       add_terms_address_addrs (doc, addresses, "from_email");
+    add_terms_address_addrs (doc,
+                            g_mime_message_get_all_recipients (message),
+                            "to_email");
 
-       add_terms_address_addrs (doc,
-                                g_mime_message_get_all_recipients (message),
-                                "to_email");
+    g_mime_message_get_date (message, &time, NULL);
 
-       g_mime_message_get_date (message, &time, NULL);
+    gmtime_r (&time, &gm_time_tm);
 
-       gmtime_r (&time, &gm_time_tm);
+    if (strftime (date_str, sizeof (date_str),
+                 "%Y%m%d%H%M%S", &gm_time_tm) == 0) {
+       fprintf (stderr, "Internal error formatting time\n");
+       exit (1);
+    }
 
-       if (strftime (date_str, sizeof (date_str),
-                     "%Y%m%d%H%M%S", &gm_time_tm) == 0) {
-           fprintf (stderr, "Internal error formatting time\n");
-           exit (1);
-       }
+    add_term (doc, "date", date_str);
 
-       add_term (doc, "date", date_str);
+    add_term (doc, "label", "inbox");
+    add_term (doc, "label", "unread");
+    add_term (doc, "type", "mail");
+    add_term (doc, "source_id", "1");
 
-       add_term (doc, "label", "inbox");
-       add_term (doc, "label", "unread");
-       add_term (doc, "type", "mail");
+    value = g_mime_message_get_message_id (message);
+    add_term (doc, "msgid", value);
+    add_term (doc, "thread", value);
 
-       value = g_mime_message_get_message_id (message);
-       add_term (doc, "msgid", value);
+    doc.add_value (NOTMUCH_VALUE_MESSAGE_ID, value);
+    doc.add_value (NOTMUCH_VALUE_THREAD, value);
 
-       add_term (doc, "source_id", "1");
+    doc.add_value (NOTMUCH_VALUE_DATE, Xapian::sortable_serialise (time));
 
-       add_term (doc, "thread", value);
+    db.add_document (doc);
 
-       doc.add_value (NOTMUCH_VALUE_MESSAGE_ID, value);
-       doc.add_value (NOTMUCH_VALUE_THREAD, value);
+    g_object_unref (message);
+    g_object_unref (parser);
+    g_object_unref (stream);
+}
 
-       doc.add_value (NOTMUCH_VALUE_DATE, Xapian::sortable_serialise (time));
+int
+main (int argc, char **argv)
+{
+    const char *database_path, *filename;
 
-       db.add_document (doc);
+    if (argc < 3) {
+       fprintf (stderr, "Usage: %s <path-to-xapian-database> <mail-message>\n",
+                argv[0]);
+       exit (1);
+    }
+
+    database_path = argv[1];
+    filename = argv[2];
+
+    g_mime_init (0);
+
+    try {
+       Xapian::WritableDatabase db;
+       Xapian::TermGenerator term_gen;
+
+       db = Xapian::WritableDatabase (database_path,
+                                      Xapian::DB_CREATE_OR_OPEN);
+
+       term_gen = Xapian::TermGenerator ();
+
+       index_file (db, term_gen, filename);
 
     } catch (const Xapian::Error &error) {
        cerr << "A Xapian exception occurred: " << error.get_msg () << endl;
        exit (1);
     }
 
-    g_object_unref (message);
-    g_object_unref (parser);
-    g_object_unref (stream);
-
     return 0;
 }