Revert "Disallow '?' in filename when saving message part on Windows."
[claws.git] / src / common / utils.c
1 /*
2  * Claws Mail -- a GTK+ based, lightweight, and fast e-mail client
3  * Copyright (C) 1999-2016 Hiroyuki Yamamoto & The Claws Mail Team
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 3 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program. If not, see <http://www.gnu.org/licenses/>.
17  *
18  * The code of the g_utf8_substring function below is owned by
19  * Matthias Clasen <matthiasc@src.gnome.org>/<mclasen@redhat.com>
20  * and is got from GLIB 2.30: https://git.gnome.org/browse/glib/commit/
21  *  ?h=glib-2-30&id=9eb65dd3ed5e1a9638595cbe10699c7606376511
22  *
23  * GLib 2.30 is licensed under GPL v2 or later and:
24  * Copyright (C) 1999 Tom Tromey
25  * Copyright (C) 2000 Red Hat, Inc.
26  *
27  * https://git.gnome.org/browse/glib/tree/glib/gutf8.c
28  *  ?h=glib-2-30&id=9eb65dd3ed5e1a9638595cbe10699c7606376511
29  */
30
31 #ifdef HAVE_CONFIG_H
32 #  include "config.h"
33 #include "claws-features.h"
34 #endif
35
36 #include "defs.h"
37
38 #include <glib.h>
39 #include <gio/gio.h>
40
41 #include <glib/gi18n.h>
42
43 #ifdef USE_PTHREAD
44 #include <pthread.h>
45 #endif
46
47 #include <stdio.h>
48 #include <string.h>
49 #include <ctype.h>
50 #include <errno.h>
51 #include <sys/param.h>
52 #ifndef G_OS_WIN32
53 #include <sys/socket.h>
54 #endif
55
56 #if (HAVE_WCTYPE_H && HAVE_WCHAR_H)
57 #  include <wchar.h>
58 #  include <wctype.h>
59 #endif
60 #include <stdlib.h>
61 #include <sys/stat.h>
62 #include <unistd.h>
63 #include <stdarg.h>
64 #include <sys/types.h>
65 #if HAVE_SYS_WAIT_H
66 #  include <sys/wait.h>
67 #endif
68 #include <dirent.h>
69 #include <time.h>
70 #include <regex.h>
71
72 #ifdef G_OS_UNIX
73 #include <sys/utsname.h>
74 #endif
75
76 #include <fcntl.h>
77
78 #ifdef G_OS_WIN32
79 #  include <direct.h>
80 #  include <io.h>
81 #  include <w32lib.h>
82 #endif
83
84 #include "utils.h"
85 #include "socket.h"
86 #include "../codeconv.h"
87 #include "tlds.h"
88
89 #define BUFFSIZE        8192
90
91 static gboolean debug_mode = FALSE;
92
93 #if !GLIB_CHECK_VERSION(2, 26, 0)
94 guchar *g_base64_decode_wa(const gchar *text, gsize *out_len)
95 {
96         guchar *ret;
97         gsize input_length;
98         gint state = 0;
99         guint save = 0;
100
101         input_length = strlen(text);
102
103         ret = g_malloc0((input_length / 4) * 3 + 1);
104
105         *out_len = g_base64_decode_step(text, input_length, ret, &state, &save);
106
107         return ret;
108 }
109 #endif
110
111 /* Return true if we are running as root.  This function should beused
112    instead of getuid () == 0.  */
113 gboolean superuser_p (void)
114 {
115 #ifdef G_OS_WIN32
116   return w32_is_administrator ();
117 #else
118   return !getuid();
119 #endif  
120 }
121
122 GSList *slist_copy_deep(GSList *list, GCopyFunc func)
123 {
124 #if GLIB_CHECK_VERSION(2, 34, 0)
125         return g_slist_copy_deep(list, func, NULL);
126 #else
127         GSList *res = g_slist_copy(list);
128         GSList *walk = res;
129         while (walk) {
130                 walk->data = func(walk->data, NULL);
131                 walk = walk->next;
132         }
133         return res;
134 #endif
135 }
136
137 void list_free_strings(GList *list)
138 {
139         list = g_list_first(list);
140
141         while (list != NULL) {
142                 g_free(list->data);
143                 list = list->next;
144         }
145 }
146
147 void slist_free_strings(GSList *list)
148 {
149         while (list != NULL) {
150                 g_free(list->data);
151                 list = list->next;
152         }
153 }
154
155 void slist_free_strings_full(GSList *list)
156 {
157 #if GLIB_CHECK_VERSION(2,28,0)
158         g_slist_free_full(list, (GDestroyNotify)g_free);
159 #else
160         g_slist_foreach(list, (GFunc)g_free, NULL);
161         g_slist_free(list);
162 #endif
163 }
164
165 static void hash_free_strings_func(gpointer key, gpointer value, gpointer data)
166 {
167         g_free(key);
168 }
169
170 void hash_free_strings(GHashTable *table)
171 {
172         g_hash_table_foreach(table, hash_free_strings_func, NULL);
173 }
174
175 gint str_case_equal(gconstpointer v, gconstpointer v2)
176 {
177         return g_ascii_strcasecmp((const gchar *)v, (const gchar *)v2) == 0;
178 }
179
180 guint str_case_hash(gconstpointer key)
181 {
182         const gchar *p = key;
183         guint h = *p;
184
185         if (h) {
186                 h = g_ascii_tolower(h);
187                 for (p += 1; *p != '\0'; p++)
188                         h = (h << 5) - h + g_ascii_tolower(*p);
189         }
190
191         return h;
192 }
193
194 void ptr_array_free_strings(GPtrArray *array)
195 {
196         gint i;
197         gchar *str;
198
199         cm_return_if_fail(array != NULL);
200
201         for (i = 0; i < array->len; i++) {
202                 str = g_ptr_array_index(array, i);
203                 g_free(str);
204         }
205 }
206
207 gint to_number(const gchar *nstr)
208 {
209         register const gchar *p;
210
211         if (*nstr == '\0') return -1;
212
213         for (p = nstr; *p != '\0'; p++)
214                 if (!g_ascii_isdigit(*p)) return -1;
215
216         return atoi(nstr);
217 }
218
219 /* convert integer into string,
220    nstr must be not lower than 11 characters length */
221 gchar *itos_buf(gchar *nstr, gint n)
222 {
223         g_snprintf(nstr, 11, "%d", n);
224         return nstr;
225 }
226
227 /* convert integer into string */
228 gchar *itos(gint n)
229 {
230         static gchar nstr[11];
231
232         return itos_buf(nstr, n);
233 }
234
235 #define divide(num,divisor,i,d)         \
236 {                                       \
237         i = num >> divisor;             \
238         d = num & ((1<<divisor)-1);     \
239         d = (d*100) >> divisor;         \
240 }
241
242
243 /*!
244  * \brief Convert a given size in bytes in a human-readable string
245  *
246  * \param size  The size expressed in bytes to convert in string
247  * \return      The string that respresents the size in an human-readable way
248  */
249 gchar *to_human_readable(goffset size)
250 {
251         static gchar str[14];
252         static gchar *b_format = NULL, *kb_format = NULL, 
253                      *mb_format = NULL, *gb_format = NULL;
254         register int t = 0, r = 0;
255         if (b_format == NULL) {
256                 b_format  = _("%dB");
257                 kb_format = _("%d.%02dKB");
258                 mb_format = _("%d.%02dMB");
259                 gb_format = _("%.2fGB");
260         }
261         
262         if (size < (goffset)1024) {
263                 g_snprintf(str, sizeof(str), b_format, (gint)size);
264                 return str;
265         } else if (size >> 10 < (goffset)1024) {
266                 divide(size, 10, t, r);
267                 g_snprintf(str, sizeof(str), kb_format, t, r);
268                 return str;
269         } else if (size >> 20 < (goffset)1024) {
270                 divide(size, 20, t, r);
271                 g_snprintf(str, sizeof(str), mb_format, t, r);
272                 return str;
273         } else {
274                 g_snprintf(str, sizeof(str), gb_format, (gfloat)(size >> 30));
275                 return str;
276         }
277 }
278
279 /* strcmp with NULL-checking */
280 gint strcmp2(const gchar *s1, const gchar *s2)
281 {
282         if (s1 == NULL || s2 == NULL)
283                 return -1;
284         else
285                 return strcmp(s1, s2);
286 }
287 /* strstr with NULL-checking */
288 gchar *strstr2(const gchar *s1, const gchar *s2)
289 {
290         if (s1 == NULL || s2 == NULL)
291                 return NULL;
292         else
293                 return strstr(s1, s2);
294 }
295 /* compare paths */
296 gint path_cmp(const gchar *s1, const gchar *s2)
297 {
298         gint len1, len2;
299         int rc;
300 #ifdef G_OS_WIN32
301         gchar *s1buf, *s2buf;
302 #endif
303
304         if (s1 == NULL || s2 == NULL) return -1;
305         if (*s1 == '\0' || *s2 == '\0') return -1;
306
307 #ifdef G_OS_WIN32
308         s1buf = g_strdup (s1);
309         s2buf = g_strdup (s2);
310         subst_char (s1buf, '/', G_DIR_SEPARATOR);
311         subst_char (s2buf, '/', G_DIR_SEPARATOR);
312         s1 = s1buf;
313         s2 = s2buf;
314 #endif /* !G_OS_WIN32 */
315
316         len1 = strlen(s1);
317         len2 = strlen(s2);
318
319         if (s1[len1 - 1] == G_DIR_SEPARATOR) len1--;
320         if (s2[len2 - 1] == G_DIR_SEPARATOR) len2--;
321
322         rc = strncmp(s1, s2, MAX(len1, len2));
323 #ifdef G_OS_WIN32
324         g_free (s1buf);
325         g_free (s2buf);
326 #endif /* !G_OS_WIN32 */
327         return rc;
328 }
329
330 /* remove trailing return code */
331 gchar *strretchomp(gchar *str)
332 {
333         register gchar *s;
334
335         if (!*str) return str;
336
337         for (s = str + strlen(str) - 1;
338              s >= str && (*s == '\n' || *s == '\r');
339              s--)
340                 *s = '\0';
341
342         return str;
343 }
344
345 /* remove trailing character */
346 gchar *strtailchomp(gchar *str, gchar tail_char)
347 {
348         register gchar *s;
349
350         if (!*str) return str;
351         if (tail_char == '\0') return str;
352
353         for (s = str + strlen(str) - 1; s >= str && *s == tail_char; s--)
354                 *s = '\0';
355
356         return str;
357 }
358
359 /* remove CR (carriage return) */
360 gchar *strcrchomp(gchar *str)
361 {
362         register gchar *s;
363
364         if (!*str) return str;
365
366         s = str + strlen(str) - 1;
367         if (*s == '\n' && s > str && *(s - 1) == '\r') {
368                 *(s - 1) = '\n';
369                 *s = '\0';
370         }
371
372         return str;
373 }
374
375 gint file_strip_crs(const gchar *file)
376 {
377         FILE *fp = NULL, *outfp = NULL;
378         gchar buf[4096];
379         gchar *out = get_tmp_file();
380         if (file == NULL)
381                 goto freeout;
382
383         fp = g_fopen(file, "rb");
384         if (!fp)
385                 goto freeout;
386
387         outfp = g_fopen(out, "wb");
388         if (!outfp) {
389                 fclose(fp);
390                 goto freeout;
391         }
392
393         while (fgets(buf, sizeof (buf), fp) != NULL) {
394                 strcrchomp(buf);
395                 if (fputs(buf, outfp) == EOF) {
396                         fclose(fp);
397                         fclose(outfp);
398                         goto unlinkout;
399                 }
400         }
401
402         fclose(fp);
403         if (fclose(outfp) == EOF) {
404                 goto unlinkout;
405         }
406         
407         if (move_file(out, file, TRUE) < 0)
408                 goto unlinkout;
409         
410         g_free(out);
411         return 0;
412 unlinkout:
413         claws_unlink(out);
414 freeout:
415         g_free(out);
416         return -1;
417 }
418
419 /* Similar to `strstr' but this function ignores the case of both strings.  */
420 gchar *strcasestr(const gchar *haystack, const gchar *needle)
421 {
422         size_t haystack_len = strlen(haystack);
423
424         return strncasestr(haystack, haystack_len, needle);
425 }
426
427 gchar *strncasestr(const gchar *haystack, gint haystack_len, const gchar *needle)
428 {
429         register size_t needle_len;
430
431         needle_len   = strlen(needle);
432
433         if (haystack_len < needle_len || needle_len == 0)
434                 return NULL;
435
436         while (haystack_len >= needle_len) {
437                 if (!g_ascii_strncasecmp(haystack, needle, needle_len))
438                         return (gchar *)haystack;
439                 else {
440                         haystack++;
441                         haystack_len--;
442                 }
443         }
444
445         return NULL;
446 }
447
448 gpointer my_memmem(gconstpointer haystack, size_t haystacklen,
449                    gconstpointer needle, size_t needlelen)
450 {
451         const gchar *haystack_ = (const gchar *)haystack;
452         const gchar *needle_ = (const gchar *)needle;
453         const gchar *haystack_cur = (const gchar *)haystack;
454         size_t haystack_left = haystacklen;
455
456         if (needlelen == 1)
457                 return memchr(haystack_, *needle_, haystacklen);
458
459         while ((haystack_cur = memchr(haystack_cur, *needle_, haystack_left))
460                != NULL) {
461                 if (haystacklen - (haystack_cur - haystack_) < needlelen)
462                         break;
463                 if (memcmp(haystack_cur + 1, needle_ + 1, needlelen - 1) == 0)
464                         return (gpointer)haystack_cur;
465                 else{
466                         haystack_cur++;
467                         haystack_left = haystacklen - (haystack_cur - haystack_);
468                 }
469         }
470
471         return NULL;
472 }
473
474 /* Copy no more than N characters of SRC to DEST, with NULL terminating.  */
475 gchar *strncpy2(gchar *dest, const gchar *src, size_t n)
476 {
477         register const gchar *s = src;
478         register gchar *d = dest;
479
480         while (--n && *s)
481                 *d++ = *s++;
482         *d = '\0';
483
484         return dest;
485 }
486
487
488 /* Examine if next block is non-ASCII string */
489 gboolean is_next_nonascii(const gchar *s)
490 {
491         const gchar *p;
492
493         /* skip head space */
494         for (p = s; *p != '\0' && g_ascii_isspace(*p); p++)
495                 ;
496         for (; *p != '\0' && !g_ascii_isspace(*p); p++) {
497                 if (*(guchar *)p > 127 || *(guchar *)p < 32)
498                         return TRUE;
499         }
500
501         return FALSE;
502 }
503
504 gint get_next_word_len(const gchar *s)
505 {
506         gint len = 0;
507
508         for (; *s != '\0' && !g_ascii_isspace(*s); s++, len++)
509                 ;
510
511         return len;
512 }
513
514 static void trim_subject_for_compare(gchar *str)
515 {
516         gchar *srcp;
517
518         eliminate_parenthesis(str, '[', ']');
519         eliminate_parenthesis(str, '(', ')');
520         g_strstrip(str);
521
522         srcp = str + subject_get_prefix_length(str);
523         if (srcp != str)
524                 memmove(str, srcp, strlen(srcp) + 1);
525 }
526
527 static void trim_subject_for_sort(gchar *str)
528 {
529         gchar *srcp;
530
531         g_strstrip(str);
532
533         srcp = str + subject_get_prefix_length(str);
534         if (srcp != str)
535                 memmove(str, srcp, strlen(srcp) + 1);
536 }
537
538 /* compare subjects */
539 gint subject_compare(const gchar *s1, const gchar *s2)
540 {
541         gchar *str1, *str2;
542
543         if (!s1 || !s2) return -1;
544         if (!*s1 || !*s2) return -1;
545
546         Xstrdup_a(str1, s1, return -1);
547         Xstrdup_a(str2, s2, return -1);
548
549         trim_subject_for_compare(str1);
550         trim_subject_for_compare(str2);
551
552         if (!*str1 || !*str2) return -1;
553
554         return strcmp(str1, str2);
555 }
556
557 gint subject_compare_for_sort(const gchar *s1, const gchar *s2)
558 {
559         gchar *str1, *str2;
560
561         if (!s1 || !s2) return -1;
562
563         Xstrdup_a(str1, s1, return -1);
564         Xstrdup_a(str2, s2, return -1);
565
566         trim_subject_for_sort(str1);
567         trim_subject_for_sort(str2);
568
569         return g_utf8_collate(str1, str2);
570 }
571
572 void trim_subject(gchar *str)
573 {
574         register gchar *srcp;
575         gchar op, cl;
576         gint in_brace;
577
578         g_strstrip(str);
579
580         srcp = str + subject_get_prefix_length(str);
581
582         if (*srcp == '[') {
583                 op = '[';
584                 cl = ']';
585         } else if (*srcp == '(') {
586                 op = '(';
587                 cl = ')';
588         } else
589                 op = 0;
590
591         if (op) {
592                 ++srcp;
593                 in_brace = 1;
594                 while (*srcp) {
595                         if (*srcp == op)
596                                 in_brace++;
597                         else if (*srcp == cl)
598                                 in_brace--;
599                         srcp++;
600                         if (in_brace == 0)
601                                 break;
602                 }
603         }
604         while (g_ascii_isspace(*srcp)) srcp++;
605         memmove(str, srcp, strlen(srcp) + 1);
606 }
607
608 void eliminate_parenthesis(gchar *str, gchar op, gchar cl)
609 {
610         register gchar *srcp, *destp;
611         gint in_brace;
612
613         destp = str;
614
615         while ((destp = strchr(destp, op))) {
616                 in_brace = 1;
617                 srcp = destp + 1;
618                 while (*srcp) {
619                         if (*srcp == op)
620                                 in_brace++;
621                         else if (*srcp == cl)
622                                 in_brace--;
623                         srcp++;
624                         if (in_brace == 0)
625                                 break;
626                 }
627                 while (g_ascii_isspace(*srcp)) srcp++;
628                 memmove(destp, srcp, strlen(srcp) + 1);
629         }
630 }
631
632 void extract_parenthesis(gchar *str, gchar op, gchar cl)
633 {
634         register gchar *srcp, *destp;
635         gint in_brace;
636
637         destp = str;
638
639         while ((srcp = strchr(destp, op))) {
640                 if (destp > str)
641                         *destp++ = ' ';
642                 memmove(destp, srcp + 1, strlen(srcp));
643                 in_brace = 1;
644                 while(*destp) {
645                         if (*destp == op)
646                                 in_brace++;
647                         else if (*destp == cl)
648                                 in_brace--;
649
650                         if (in_brace == 0)
651                                 break;
652
653                         destp++;
654                 }
655         }
656         *destp = '\0';
657 }
658
659 static void extract_parenthesis_with_skip_quote(gchar *str, gchar quote_chr,
660                                          gchar op, gchar cl)
661 {
662         register gchar *srcp, *destp;
663         gint in_brace;
664         gboolean in_quote = FALSE;
665
666         destp = str;
667
668         while ((srcp = strchr_with_skip_quote(destp, quote_chr, op))) {
669                 if (destp > str)
670                         *destp++ = ' ';
671                 memmove(destp, srcp + 1, strlen(srcp));
672                 in_brace = 1;
673                 while(*destp) {
674                         if (*destp == op && !in_quote)
675                                 in_brace++;
676                         else if (*destp == cl && !in_quote)
677                                 in_brace--;
678                         else if (*destp == quote_chr)
679                                 in_quote ^= TRUE;
680
681                         if (in_brace == 0)
682                                 break;
683
684                         destp++;
685                 }
686         }
687         *destp = '\0';
688 }
689
690 void extract_quote(gchar *str, gchar quote_chr)
691 {
692         register gchar *p;
693
694         if ((str = strchr(str, quote_chr))) {
695                 p = str;
696                 while ((p = strchr(p + 1, quote_chr)) && (p[-1] == '\\')) {
697                         memmove(p - 1, p, strlen(p) + 1);
698                         p--;
699                 }
700                 if(p) {
701                         *p = '\0';
702                         memmove(str, str + 1, p - str);
703                 }
704         }
705 }
706
707 /* Returns a newly allocated string with all quote_chr not at the beginning
708    or the end of str escaped with '\' or the given str if not required. */
709 gchar *escape_internal_quotes(gchar *str, gchar quote_chr)
710 {
711         register gchar *p, *q;
712         gchar *qstr;
713         int k = 0, l = 0;
714
715         if (str == NULL || *str == '\0')
716                 return str;
717
718         /* search for unescaped quote_chr */
719         p = str;
720         if (*p == quote_chr)
721                 ++p, ++l;
722         while (*p) {
723                 if (*p == quote_chr && *(p - 1) != '\\' && *(p + 1) != '\0')
724                         ++k;
725                 ++p, ++l;
726         }
727         if (!k) /* nothing to escape */
728                 return str;
729
730         /* unescaped quote_chr found */
731         qstr = g_malloc(l + k + 1);
732         p = str;
733         q = qstr;
734         if (*p == quote_chr) {
735                 *q = quote_chr;
736                 ++p, ++q;
737         }
738         while (*p) {
739                 if (*p == quote_chr && *(p - 1) != '\\' && *(p + 1) != '\0')
740                         *q++ = '\\';
741                 *q++ = *p++;
742         }
743         *q = '\0';
744
745         return qstr;
746 }
747
748 void eliminate_address_comment(gchar *str)
749 {
750         register gchar *srcp, *destp;
751         gint in_brace;
752
753         destp = str;
754
755         while ((destp = strchr(destp, '"'))) {
756                 if ((srcp = strchr(destp + 1, '"'))) {
757                         srcp++;
758                         if (*srcp == '@') {
759                                 destp = srcp + 1;
760                         } else {
761                                 while (g_ascii_isspace(*srcp)) srcp++;
762                                 memmove(destp, srcp, strlen(srcp) + 1);
763                         }
764                 } else {
765                         *destp = '\0';
766                         break;
767                 }
768         }
769
770         destp = str;
771
772         while ((destp = strchr_with_skip_quote(destp, '"', '('))) {
773                 in_brace = 1;
774                 srcp = destp + 1;
775                 while (*srcp) {
776                         if (*srcp == '(')
777                                 in_brace++;
778                         else if (*srcp == ')')
779                                 in_brace--;
780                         srcp++;
781                         if (in_brace == 0)
782                                 break;
783                 }
784                 while (g_ascii_isspace(*srcp)) srcp++;
785                 memmove(destp, srcp, strlen(srcp) + 1);
786         }
787 }
788
789 gchar *strchr_with_skip_quote(const gchar *str, gint quote_chr, gint c)
790 {
791         gboolean in_quote = FALSE;
792
793         while (*str) {
794                 if (*str == c && !in_quote)
795                         return (gchar *)str;
796                 if (*str == quote_chr)
797                         in_quote ^= TRUE;
798                 str++;
799         }
800
801         return NULL;
802 }
803
804 void extract_address(gchar *str)
805 {
806         cm_return_if_fail(str != NULL);
807         eliminate_address_comment(str);
808         if (strchr_with_skip_quote(str, '"', '<'))
809                 extract_parenthesis_with_skip_quote(str, '"', '<', '>');
810         g_strstrip(str);
811 }
812
813 void extract_list_id_str(gchar *str)
814 {
815         if (strchr_with_skip_quote(str, '"', '<'))
816                 extract_parenthesis_with_skip_quote(str, '"', '<', '>');
817         g_strstrip(str);
818 }
819
820 static GSList *address_list_append_real(GSList *addr_list, const gchar *str, gboolean removecomments)
821 {
822         gchar *work;
823         gchar *workp;
824
825         if (!str) return addr_list;
826
827         Xstrdup_a(work, str, return addr_list);
828
829         if (removecomments)
830                 eliminate_address_comment(work);
831         workp = work;
832
833         while (workp && *workp) {
834                 gchar *p, *next;
835
836                 if ((p = strchr_with_skip_quote(workp, '"', ','))) {
837                         *p = '\0';
838                         next = p + 1;
839                 } else
840                         next = NULL;
841
842                 if (removecomments && strchr_with_skip_quote(workp, '"', '<'))
843                         extract_parenthesis_with_skip_quote
844                                 (workp, '"', '<', '>');
845
846                 g_strstrip(workp);
847                 if (*workp)
848                         addr_list = g_slist_append(addr_list, g_strdup(workp));
849
850                 workp = next;
851         }
852
853         return addr_list;
854 }
855
856 GSList *address_list_append(GSList *addr_list, const gchar *str)
857 {
858         return address_list_append_real(addr_list, str, TRUE);
859 }
860
861 GSList *address_list_append_with_comments(GSList *addr_list, const gchar *str)
862 {
863         return address_list_append_real(addr_list, str, FALSE);
864 }
865
866 GSList *references_list_prepend(GSList *msgid_list, const gchar *str)
867 {
868         const gchar *strp;
869
870         if (!str) return msgid_list;
871         strp = str;
872
873         while (strp && *strp) {
874                 const gchar *start, *end;
875                 gchar *msgid;
876
877                 if ((start = strchr(strp, '<')) != NULL) {
878                         end = strchr(start + 1, '>');
879                         if (!end) break;
880                 } else
881                         break;
882
883                 msgid = g_strndup(start + 1, end - start - 1);
884                 g_strstrip(msgid);
885                 if (*msgid)
886                         msgid_list = g_slist_prepend(msgid_list, msgid);
887                 else
888                         g_free(msgid);
889
890                 strp = end + 1;
891         }
892
893         return msgid_list;
894 }
895
896 GSList *references_list_append(GSList *msgid_list, const gchar *str)
897 {
898         GSList *list;
899
900         list = references_list_prepend(NULL, str);
901         list = g_slist_reverse(list);
902         msgid_list = g_slist_concat(msgid_list, list);
903
904         return msgid_list;
905 }
906
907 GSList *newsgroup_list_append(GSList *group_list, const gchar *str)
908 {
909         gchar *work;
910         gchar *workp;
911
912         if (!str) return group_list;
913
914         Xstrdup_a(work, str, return group_list);
915
916         workp = work;
917
918         while (workp && *workp) {
919                 gchar *p, *next;
920
921                 if ((p = strchr_with_skip_quote(workp, '"', ','))) {
922                         *p = '\0';
923                         next = p + 1;
924                 } else
925                         next = NULL;
926
927                 g_strstrip(workp);
928                 if (*workp)
929                         group_list = g_slist_append(group_list,
930                                                     g_strdup(workp));
931
932                 workp = next;
933         }
934
935         return group_list;
936 }
937
938 GList *add_history(GList *list, const gchar *str)
939 {
940         GList *old;
941         gchar *oldstr;
942
943         cm_return_val_if_fail(str != NULL, list);
944
945         old = g_list_find_custom(list, (gpointer)str, (GCompareFunc)strcmp2);
946         if (old) {
947                 oldstr = old->data;
948                 list = g_list_remove(list, old->data);
949                 g_free(oldstr);
950         } else if (g_list_length(list) >= MAX_HISTORY_SIZE) {
951                 GList *last;
952
953                 last = g_list_last(list);
954                 if (last) {
955                         oldstr = last->data;
956                         list = g_list_remove(list, last->data);
957                         g_free(oldstr);
958                 }
959         }
960
961         list = g_list_prepend(list, g_strdup(str));
962
963         return list;
964 }
965
966 void remove_return(gchar *str)
967 {
968         register gchar *p = str;
969
970         while (*p) {
971                 if (*p == '\n' || *p == '\r')
972                         memmove(p, p + 1, strlen(p));
973                 else
974                         p++;
975         }
976 }
977
978 void remove_space(gchar *str)
979 {
980         register gchar *p = str;
981         register gint spc;
982
983         while (*p) {
984                 spc = 0;
985                 while (g_ascii_isspace(*(p + spc)))
986                         spc++;
987                 if (spc)
988                         memmove(p, p + spc, strlen(p + spc) + 1);
989                 else
990                         p++;
991         }
992 }
993
994 void unfold_line(gchar *str)
995 {
996         register gchar *ch;
997         register gunichar c;
998         register gint len;
999
1000         ch = str; /* iterator for source string */
1001
1002         while (*ch != 0) {
1003                 c = g_utf8_get_char_validated(ch, -1);
1004
1005                 if (c == (gunichar)-1 || c == (gunichar)-2) {
1006                         /* non-unicode byte, move past it */
1007                         ch++;
1008                         continue;
1009                 }
1010
1011                 len = g_unichar_to_utf8(c, NULL);
1012
1013                 if (!g_unichar_isdefined(c) || !g_unichar_isprint(c) ||
1014                                 g_unichar_isspace(c)) {
1015                         /* replace anything bad or whitespacey with a single space */
1016                         *ch = ' ';
1017                         ch++;
1018                         if (len > 1) {
1019                                 /* move rest of the string forwards, since we just replaced
1020                                  * a multi-byte sequence with one byte */
1021                                 memmove(ch, ch + len-1, strlen(ch + len-1) + 1);
1022                         }
1023                 } else {
1024                         /* A valid unicode character, copy it. */
1025                         ch += len;
1026                 }
1027         }
1028 }
1029
1030 void subst_char(gchar *str, gchar orig, gchar subst)
1031 {
1032         register gchar *p = str;
1033
1034         while (*p) {
1035                 if (*p == orig)
1036                         *p = subst;
1037                 p++;
1038         }
1039 }
1040
1041 void subst_chars(gchar *str, gchar *orig, gchar subst)
1042 {
1043         register gchar *p = str;
1044
1045         while (*p) {
1046                 if (strchr(orig, *p) != NULL)
1047                         *p = subst;
1048                 p++;
1049         }
1050 }
1051
1052 void subst_for_filename(gchar *str)
1053 {
1054         if (!str)
1055                 return;
1056 #ifdef G_OS_WIN32
1057         subst_chars(str, "\t\r\n\\/*:", '_');
1058 #else
1059         subst_chars(str, "\t\r\n\\/*", '_');
1060 #endif
1061 }
1062
1063 void subst_for_shellsafe_filename(gchar *str)
1064 {
1065         if (!str)
1066                 return;
1067         subst_for_filename(str);
1068         subst_chars(str, " \"'|&;()<>'!{}[]",'_');
1069 }
1070
1071 gboolean is_ascii_str(const gchar *str)
1072 {
1073         const guchar *p = (const guchar *)str;
1074
1075         while (*p != '\0') {
1076                 if (*p != '\t' && *p != ' ' &&
1077                     *p != '\r' && *p != '\n' &&
1078                     (*p < 32 || *p >= 127))
1079                         return FALSE;
1080                 p++;
1081         }
1082
1083         return TRUE;
1084 }
1085
1086 static const gchar * line_has_quote_char_last(const gchar * str, const gchar *quote_chars)
1087 {
1088         gchar * position = NULL;
1089         gchar * tmp_pos = NULL;
1090         int i;
1091
1092         if (str == NULL || quote_chars == NULL)
1093                 return NULL;
1094
1095         for (i = 0; i < strlen(quote_chars); i++) {
1096                 tmp_pos = strrchr (str, quote_chars[i]);
1097                 if(position == NULL
1098                                 || (tmp_pos != NULL && position <= tmp_pos) )
1099                         position = tmp_pos;
1100         }
1101         return position;
1102 }
1103
1104 gint get_quote_level(const gchar *str, const gchar *quote_chars)
1105 {
1106         const gchar *first_pos;
1107         const gchar *last_pos;
1108         const gchar *p = str;
1109         gint quote_level = -1;
1110
1111         /* speed up line processing by only searching to the last '>' */
1112         if ((first_pos = line_has_quote_char(str, quote_chars)) != NULL) {
1113                 /* skip a line if it contains a '<' before the initial '>' */
1114                 if (memchr(str, '<', first_pos - str) != NULL)
1115                         return -1;
1116                 last_pos = line_has_quote_char_last(first_pos, quote_chars);
1117         } else
1118                 return -1;
1119
1120         while (p <= last_pos) {
1121                 while (p < last_pos) {
1122                         if (g_ascii_isspace(*p))
1123                                 p++;
1124                         else
1125                                 break;
1126                 }
1127
1128                 if (strchr(quote_chars, *p))
1129                         quote_level++;
1130                 else if (*p != '-' && !g_ascii_isspace(*p) && p <= last_pos) {
1131                         /* any characters are allowed except '-','<' and space */
1132                         while (*p != '-' && *p != '<'
1133                                && !strchr(quote_chars, *p)
1134                                && !g_ascii_isspace(*p)
1135                                && p < last_pos)
1136                                 p++;
1137                         if (strchr(quote_chars, *p))
1138                                 quote_level++;
1139                         else
1140                                 break;
1141                 }
1142
1143                 p++;
1144         }
1145
1146         return quote_level;
1147 }
1148
1149 gint check_line_length(const gchar *str, gint max_chars, gint *line)
1150 {
1151         const gchar *p = str, *q;
1152         gint cur_line = 0, len;
1153
1154         while ((q = strchr(p, '\n')) != NULL) {
1155                 len = q - p + 1;
1156                 if (len > max_chars) {
1157                         if (line)
1158                                 *line = cur_line;
1159                         return -1;
1160                 }
1161                 p = q + 1;
1162                 ++cur_line;
1163         }
1164
1165         len = strlen(p);
1166         if (len > max_chars) {
1167                 if (line)
1168                         *line = cur_line;
1169                 return -1;
1170         }
1171
1172         return 0;
1173 }
1174
1175 const gchar * line_has_quote_char(const gchar * str, const gchar *quote_chars)
1176 {
1177         gchar * position = NULL;
1178         gchar * tmp_pos = NULL;
1179         int i;
1180
1181         if (str == NULL || quote_chars == NULL)
1182                 return NULL;
1183
1184         for (i = 0; i < strlen(quote_chars); i++) {
1185                 tmp_pos = strchr (str, quote_chars[i]);
1186                 if(position == NULL
1187                                 || (tmp_pos != NULL && position >= tmp_pos) )
1188                         position = tmp_pos;
1189         }
1190         return position;
1191 }
1192
1193 static gchar *strstr_with_skip_quote(const gchar *haystack, const gchar *needle)
1194 {
1195         register guint haystack_len, needle_len;
1196         gboolean in_squote = FALSE, in_dquote = FALSE;
1197
1198         haystack_len = strlen(haystack);
1199         needle_len   = strlen(needle);
1200
1201         if (haystack_len < needle_len || needle_len == 0)
1202                 return NULL;
1203
1204         while (haystack_len >= needle_len) {
1205                 if (!in_squote && !in_dquote &&
1206                     !strncmp(haystack, needle, needle_len))
1207                         return (gchar *)haystack;
1208
1209                 /* 'foo"bar"' -> foo"bar"
1210                    "foo'bar'" -> foo'bar' */
1211                 if (*haystack == '\'') {
1212                         if (in_squote)
1213                                 in_squote = FALSE;
1214                         else if (!in_dquote)
1215                                 in_squote = TRUE;
1216                 } else if (*haystack == '\"') {
1217                         if (in_dquote)
1218                                 in_dquote = FALSE;
1219                         else if (!in_squote)
1220                                 in_dquote = TRUE;
1221                 } else if (*haystack == '\\') {
1222                         haystack++;
1223                         haystack_len--;
1224                 }
1225
1226                 haystack++;
1227                 haystack_len--;
1228         }
1229
1230         return NULL;
1231 }
1232
1233 gchar **strsplit_with_quote(const gchar *str, const gchar *delim,
1234                             gint max_tokens)
1235 {
1236         GSList *string_list = NULL, *slist;
1237         gchar **str_array, *s, *new_str;
1238         guint i, n = 1, len;
1239
1240         cm_return_val_if_fail(str != NULL, NULL);
1241         cm_return_val_if_fail(delim != NULL, NULL);
1242
1243         if (max_tokens < 1)
1244                 max_tokens = G_MAXINT;
1245
1246         s = strstr_with_skip_quote(str, delim);
1247         if (s) {
1248                 guint delimiter_len = strlen(delim);
1249
1250                 do {
1251                         len = s - str;
1252                         new_str = g_strndup(str, len);
1253
1254                         if (new_str[0] == '\'' || new_str[0] == '\"') {
1255                                 if (new_str[len - 1] == new_str[0]) {
1256                                         new_str[len - 1] = '\0';
1257                                         memmove(new_str, new_str + 1, len - 1);
1258                                 }
1259                         }
1260                         string_list = g_slist_prepend(string_list, new_str);
1261                         n++;
1262                         str = s + delimiter_len;
1263                         s = strstr_with_skip_quote(str, delim);
1264                 } while (--max_tokens && s);
1265         }
1266
1267         if (*str) {
1268                 new_str = g_strdup(str);
1269                 if (new_str[0] == '\'' || new_str[0] == '\"') {
1270                         len = strlen(str);
1271                         if (new_str[len - 1] == new_str[0]) {
1272                                 new_str[len - 1] = '\0';
1273                                 memmove(new_str, new_str + 1, len - 1);
1274                         }
1275                 }
1276                 string_list = g_slist_prepend(string_list, new_str);
1277                 n++;
1278         }
1279
1280         str_array = g_new(gchar*, n);
1281
1282         i = n - 1;
1283
1284         str_array[i--] = NULL;
1285         for (slist = string_list; slist; slist = slist->next)
1286                 str_array[i--] = slist->data;
1287
1288         g_slist_free(string_list);
1289
1290         return str_array;
1291 }
1292
1293 gchar *get_abbrev_newsgroup_name(const gchar *group, gint len)
1294 {
1295         gchar *abbrev_group;
1296         gchar *ap;
1297         const gchar *p = group;
1298         const gchar *last;
1299
1300         cm_return_val_if_fail(group != NULL, NULL);
1301
1302         last = group + strlen(group);
1303         abbrev_group = ap = g_malloc(strlen(group) + 1);
1304
1305         while (*p) {
1306                 while (*p == '.')
1307                         *ap++ = *p++;
1308                 if ((ap - abbrev_group) + (last - p) > len && strchr(p, '.')) {
1309                         *ap++ = *p++;
1310                         while (*p != '.') p++;
1311                 } else {
1312                         strcpy(ap, p);
1313                         return abbrev_group;
1314                 }
1315         }
1316
1317         *ap = '\0';
1318         return abbrev_group;
1319 }
1320
1321 gchar *trim_string(const gchar *str, gint len)
1322 {
1323         const gchar *p = str;
1324         gint mb_len;
1325         gchar *new_str;
1326         gint new_len = 0;
1327
1328         if (!str) return NULL;
1329         if (strlen(str) <= len)
1330                 return g_strdup(str);
1331         if (g_utf8_validate(str, -1, NULL) == FALSE)
1332                 return g_strdup(str);
1333
1334         while (*p != '\0') {
1335                 mb_len = g_utf8_skip[*(guchar *)p];
1336                 if (mb_len == 0)
1337                         break;
1338                 else if (new_len + mb_len > len)
1339                         break;
1340
1341                 new_len += mb_len;
1342                 p += mb_len;
1343         }
1344
1345         Xstrndup_a(new_str, str, new_len, return g_strdup(str));
1346         return g_strconcat(new_str, "...", NULL);
1347 }
1348
1349 GList *uri_list_extract_filenames(const gchar *uri_list)
1350 {
1351         GList *result = NULL;
1352         const gchar *p, *q;
1353         gchar *escaped_utf8uri;
1354
1355         p = uri_list;
1356
1357         while (p) {
1358                 if (*p != '#') {
1359                         while (g_ascii_isspace(*p)) p++;
1360                         if (!strncmp(p, "file:", 5)) {
1361                                 q = p;
1362                                 q += 5;
1363                                 while (*q && *q != '\n' && *q != '\r') q++;
1364
1365                                 if (q > p) {
1366                                         gchar *file, *locale_file = NULL;
1367                                         q--;
1368                                         while (q > p && g_ascii_isspace(*q))
1369                                                 q--;
1370                                         Xalloca(escaped_utf8uri, q - p + 2,
1371                                                 return result);
1372                                         Xalloca(file, q - p + 2,
1373                                                 return result);
1374                                         *file = '\0';
1375                                         strncpy(escaped_utf8uri, p, q - p + 1);
1376                                         escaped_utf8uri[q - p + 1] = '\0';
1377                                         decode_uri_with_plus(file, escaped_utf8uri, FALSE);
1378                     /*
1379                      * g_filename_from_uri() rejects escaped/locale encoded uri
1380                      * string which come from Nautilus.
1381                      */
1382 #ifndef G_OS_WIN32
1383                                         if (g_utf8_validate(file, -1, NULL))
1384                                                 locale_file
1385                                                         = conv_codeset_strdup(
1386                                                                 file + 5,
1387                                                                 CS_UTF_8,
1388                                                                 conv_get_locale_charset_str());
1389                                         if (!locale_file)
1390                                                 locale_file = g_strdup(file + 5);
1391 #else
1392                                         locale_file = g_filename_from_uri(escaped_utf8uri, NULL, NULL);
1393 #endif
1394                                         result = g_list_append(result, locale_file);
1395                                 }
1396                         }
1397                 }
1398                 p = strchr(p, '\n');
1399                 if (p) p++;
1400         }
1401
1402         return result;
1403 }
1404
1405 /* Converts two-digit hexadecimal to decimal.  Used for unescaping escaped
1406  * characters
1407  */
1408 static gint axtoi(const gchar *hexstr)
1409 {
1410         gint hi, lo, result;
1411
1412         hi = hexstr[0];
1413         if ('0' <= hi && hi <= '9') {
1414                 hi -= '0';
1415         } else
1416                 if ('a' <= hi && hi <= 'f') {
1417                         hi -= ('a' - 10);
1418                 } else
1419                         if ('A' <= hi && hi <= 'F') {
1420                                 hi -= ('A' - 10);
1421                         }
1422
1423         lo = hexstr[1];
1424         if ('0' <= lo && lo <= '9') {
1425                 lo -= '0';
1426         } else
1427                 if ('a' <= lo && lo <= 'f') {
1428                         lo -= ('a'-10);
1429                 } else
1430                         if ('A' <= lo && lo <= 'F') {
1431                                 lo -= ('A' - 10);
1432                         }
1433         result = lo + (16 * hi);
1434         return result;
1435 }
1436
1437 gboolean is_uri_string(const gchar *str)
1438 {
1439         while (str && *str && g_ascii_isspace(*str))
1440                 str++;
1441         return (g_ascii_strncasecmp(str, "http://", 7) == 0 ||
1442                 g_ascii_strncasecmp(str, "https://", 8) == 0 ||
1443                 g_ascii_strncasecmp(str, "ftp://", 6) == 0 ||
1444                 g_ascii_strncasecmp(str, "www.", 4) == 0);
1445 }
1446
1447 gchar *get_uri_path(const gchar *uri)
1448 {
1449         while (uri && *uri && g_ascii_isspace(*uri))
1450                 uri++;
1451         if (g_ascii_strncasecmp(uri, "http://", 7) == 0)
1452                 return (gchar *)(uri + 7);
1453         else if (g_ascii_strncasecmp(uri, "https://", 8) == 0)
1454                 return (gchar *)(uri + 8);
1455         else if (g_ascii_strncasecmp(uri, "ftp://", 6) == 0)
1456                 return (gchar *)(uri + 6);
1457         else
1458                 return (gchar *)uri;
1459 }
1460
1461 gint get_uri_len(const gchar *str)
1462 {
1463         const gchar *p;
1464
1465         if (is_uri_string(str)) {
1466                 for (p = str; *p != '\0'; p++) {
1467                         if (!g_ascii_isgraph(*p) || strchr("()<>\"", *p))
1468                                 break;
1469                 }
1470                 return p - str;
1471         }
1472
1473         return 0;
1474 }
1475
1476 /* Decodes URL-Encoded strings (i.e. strings in which spaces are replaced by
1477  * plusses, and escape characters are used)
1478  */
1479 void decode_uri_with_plus(gchar *decoded_uri, const gchar *encoded_uri, gboolean with_plus)
1480 {
1481         gchar *dec = decoded_uri;
1482         const gchar *enc = encoded_uri;
1483
1484         while (*enc) {
1485                 if (*enc == '%') {
1486                         enc++;
1487                         if (isxdigit((guchar)enc[0]) &&
1488                             isxdigit((guchar)enc[1])) {
1489                                 *dec = axtoi(enc);
1490                                 dec++;
1491                                 enc += 2;
1492                         }
1493                 } else {
1494                         if (with_plus && *enc == '+')
1495                                 *dec = ' ';
1496                         else
1497                                 *dec = *enc;
1498                         dec++;
1499                         enc++;
1500                 }
1501         }
1502
1503         *dec = '\0';
1504 }
1505
1506 void decode_uri(gchar *decoded_uri, const gchar *encoded_uri)
1507 {
1508         decode_uri_with_plus(decoded_uri, encoded_uri, TRUE);
1509 }
1510
1511 static gchar *decode_uri_gdup(const gchar *encoded_uri)
1512 {
1513     gchar *buffer = g_malloc(strlen(encoded_uri)+1);
1514     decode_uri_with_plus(buffer, encoded_uri, FALSE);
1515     return buffer;
1516 }
1517
1518 gint scan_mailto_url(const gchar *mailto, gchar **from, gchar **to, gchar **cc, gchar **bcc,
1519                      gchar **subject, gchar **body, gchar ***attach, gchar **inreplyto)
1520 {
1521         gchar *tmp_mailto;
1522         gchar *p;
1523         const gchar *forbidden_uris[] = { ".gnupg/",
1524                                           "/etc/passwd",
1525                                           "/etc/shadow",
1526                                           ".ssh/",
1527                                           "../",
1528                                           NULL };
1529         gint num_attach = 0;
1530         gchar **my_att = NULL;
1531
1532         Xstrdup_a(tmp_mailto, mailto, return -1);
1533
1534         if (!strncmp(tmp_mailto, "mailto:", 7))
1535                 tmp_mailto += 7;
1536
1537         p = strchr(tmp_mailto, '?');
1538         if (p) {
1539                 *p = '\0';
1540                 p++;
1541         }
1542
1543         if (to && !*to)
1544                 *to = decode_uri_gdup(tmp_mailto);
1545
1546         my_att = g_malloc(sizeof(char *));
1547         my_att[0] = NULL;
1548
1549         while (p) {
1550                 gchar *field, *value;
1551
1552                 field = p;
1553
1554                 p = strchr(p, '=');
1555                 if (!p) break;
1556                 *p = '\0';
1557                 p++;
1558
1559                 value = p;
1560
1561                 p = strchr(p, '&');
1562                 if (p) {
1563                         *p = '\0';
1564                         p++;
1565                 }
1566
1567                 if (*value == '\0') continue;
1568
1569                 if (from && !g_ascii_strcasecmp(field, "from")) {
1570                         if (!*from) {
1571                                 *from = decode_uri_gdup(value);
1572                         } else {
1573                                 gchar *tmp = decode_uri_gdup(value);
1574                                 gchar *new_from = g_strdup_printf("%s, %s", *from, tmp);
1575                                 g_free(*from);
1576                                 *from = new_from;
1577                         }
1578                 } else if (cc && !g_ascii_strcasecmp(field, "cc")) {
1579                         if (!*cc) {
1580                                 *cc = decode_uri_gdup(value);
1581                         } else {
1582                                 gchar *tmp = decode_uri_gdup(value);
1583                                 gchar *new_cc = g_strdup_printf("%s, %s", *cc, tmp);
1584                                 g_free(*cc);
1585                                 *cc = new_cc;
1586                         }
1587                 } else if (bcc && !g_ascii_strcasecmp(field, "bcc")) {
1588                         if (!*bcc) {
1589                                 *bcc = decode_uri_gdup(value);
1590                         } else {
1591                                 gchar *tmp = decode_uri_gdup(value);
1592                                 gchar *new_bcc = g_strdup_printf("%s, %s", *bcc, tmp);
1593                                 g_free(*bcc);
1594                                 *bcc = new_bcc;
1595                         }
1596                 } else if (subject && !*subject &&
1597                            !g_ascii_strcasecmp(field, "subject")) {
1598                         *subject = decode_uri_gdup(value);
1599                 } else if (body && !*body && !g_ascii_strcasecmp(field, "body")) {
1600                         *body = decode_uri_gdup(value);
1601                 } else if (body && !*body && !g_ascii_strcasecmp(field, "insert")) {
1602                         gchar *tmp = decode_uri_gdup(value);
1603                         if (!g_file_get_contents(tmp, body, NULL, NULL)) {
1604                                 g_warning("couldn't set insert file '%s' in body", value);
1605                         }
1606                         g_free(tmp);
1607                 } else if (attach && !g_ascii_strcasecmp(field, "attach")) {
1608                         int i = 0;
1609                         gchar *tmp = decode_uri_gdup(value);
1610                         for (; forbidden_uris[i]; i++) {
1611                                 if (strstr(tmp, forbidden_uris[i])) {
1612                                         g_print("Refusing to attach '%s', potential private data leak\n",
1613                                                         tmp);
1614                                         g_free(tmp);
1615                                         break;
1616                                 }
1617                         }
1618                         if (tmp) {
1619                                 /* attach is correct */
1620                                 num_attach++;
1621                                 my_att = g_realloc(my_att, (sizeof(char *))*(num_attach+1));
1622                                 my_att[num_attach-1] = tmp;
1623                                 my_att[num_attach] = NULL;
1624                         }
1625                 } else if (inreplyto && !*inreplyto &&
1626                            !g_ascii_strcasecmp(field, "in-reply-to")) {
1627                         *inreplyto = decode_uri_gdup(value);
1628                 }
1629         }
1630
1631         if (attach)
1632                 *attach = my_att;
1633         return 0;
1634 }
1635
1636
1637 #ifdef G_OS_WIN32
1638 #include <windows.h>
1639 #ifndef CSIDL_APPDATA
1640 #define CSIDL_APPDATA 0x001a
1641 #endif
1642 #ifndef CSIDL_LOCAL_APPDATA
1643 #define CSIDL_LOCAL_APPDATA 0x001c
1644 #endif
1645 #ifndef CSIDL_FLAG_CREATE
1646 #define CSIDL_FLAG_CREATE 0x8000
1647 #endif
1648 #define DIM(v)               (sizeof(v)/sizeof((v)[0]))
1649
1650 #define RTLD_LAZY 0
1651 const char *
1652 w32_strerror (int w32_errno)
1653 {
1654   static char strerr[256];
1655   int ec = (int)GetLastError ();
1656
1657   if (w32_errno == 0)
1658     w32_errno = ec;
1659   FormatMessage (FORMAT_MESSAGE_FROM_SYSTEM, NULL, w32_errno,
1660                  MAKELANGID (LANG_NEUTRAL, SUBLANG_DEFAULT),
1661                  strerr, DIM (strerr)-1, NULL);
1662   return strerr;
1663 }
1664
1665 static __inline__ void *
1666 dlopen (const char * name, int flag)
1667 {
1668   void * hd = LoadLibrary (name);
1669   return hd;
1670 }
1671
1672 static __inline__ void *
1673 dlsym (void * hd, const char * sym)
1674 {
1675   if (hd && sym)
1676     {
1677       void * fnc = GetProcAddress (hd, sym);
1678       if (!fnc)
1679         return NULL;
1680       return fnc;
1681     }
1682   return NULL;
1683 }
1684
1685
1686 static __inline__ const char *
1687 dlerror (void)
1688 {
1689   return w32_strerror (0);
1690 }
1691
1692
1693 static __inline__ int
1694 dlclose (void * hd)
1695 {
1696   if (hd)
1697     {
1698       FreeLibrary (hd);
1699       return 0;
1700     }
1701   return -1;
1702 }
1703
1704 static HRESULT
1705 w32_shgetfolderpath (HWND a, int b, HANDLE c, DWORD d, LPSTR e)
1706 {
1707   static int initialized;
1708   static HRESULT (WINAPI * func)(HWND,int,HANDLE,DWORD,LPSTR);
1709
1710   if (!initialized)
1711     {
1712       static char *dllnames[] = { "shell32.dll", "shfolder.dll", NULL };
1713       void *handle;
1714       int i;
1715
1716       initialized = 1;
1717
1718       for (i=0, handle = NULL; !handle && dllnames[i]; i++)
1719         {
1720           handle = dlopen (dllnames[i], RTLD_LAZY);
1721           if (handle)
1722             {
1723               func = dlsym (handle, "SHGetFolderPathW");
1724               if (!func)
1725                 {
1726                   dlclose (handle);
1727                   handle = NULL;
1728                 }
1729             }
1730         }
1731     }
1732
1733   if (func)
1734     return func (a,b,c,d,e);
1735   else
1736     return -1;
1737 }
1738
1739 /* Returns a static string with the directroy from which the module
1740    has been loaded.  Returns an empty string on error. */
1741 static char *w32_get_module_dir(void)
1742 {
1743         static char *moddir;
1744
1745         if (!moddir) {
1746                 char name[MAX_PATH+10];
1747                 char *p;
1748
1749                 if ( !GetModuleFileNameA (0, name, sizeof (name)-10) )
1750                         *name = 0;
1751                 else {
1752                         p = strrchr (name, '\\');
1753                         if (p)
1754                                 *p = 0;
1755                         else
1756                                 *name = 0;
1757                 }
1758                 moddir = g_strdup (name);
1759         }
1760         return moddir;
1761 }
1762 #endif /* G_OS_WIN32 */
1763
1764 /* Return a static string with the locale dir. */
1765 const gchar *get_locale_dir(void)
1766 {
1767         static gchar *loc_dir;
1768
1769 #ifdef G_OS_WIN32
1770         if (!loc_dir)
1771                 loc_dir = g_strconcat(w32_get_module_dir(), G_DIR_SEPARATOR_S,
1772                                       "\\share\\locale", NULL);
1773 #endif
1774         if (!loc_dir)
1775                 loc_dir = LOCALEDIR;
1776         
1777         return loc_dir;
1778 }
1779
1780
1781 const gchar *get_home_dir(void)
1782 {
1783 #ifdef G_OS_WIN32
1784         static char home_dir_utf16[MAX_PATH] = "";
1785         static gchar *home_dir_utf8 = NULL;
1786         if (home_dir_utf16[0] == '\0') {
1787                 if (w32_shgetfolderpath
1788                             (NULL, CSIDL_APPDATA|CSIDL_FLAG_CREATE,
1789                              NULL, 0, home_dir_utf16) < 0)
1790                                 strcpy (home_dir_utf16, "C:\\Claws Mail");
1791                 home_dir_utf8 = g_utf16_to_utf8 ((const gunichar2 *)home_dir_utf16, -1, NULL, NULL, NULL);
1792         }
1793         return home_dir_utf8;
1794 #else
1795         static const gchar *homeenv = NULL;
1796
1797         if (homeenv)
1798                 return homeenv;
1799
1800         if (!homeenv && g_getenv("HOME") != NULL)
1801                 homeenv = g_strdup(g_getenv("HOME"));
1802         if (!homeenv)
1803                 homeenv = g_get_home_dir();
1804
1805         return homeenv;
1806 #endif
1807 }
1808
1809 static gchar *claws_rc_dir = NULL;
1810 static gboolean rc_dir_alt = FALSE;
1811 const gchar *get_rc_dir(void)
1812 {
1813
1814         if (!claws_rc_dir) {
1815                 claws_rc_dir = g_strconcat(get_home_dir(), G_DIR_SEPARATOR_S,
1816                                      RC_DIR, NULL);
1817                 debug_print("using default rc_dir %s\n", claws_rc_dir);
1818         }
1819         return claws_rc_dir;
1820 }
1821
1822 void set_rc_dir(const gchar *dir)
1823 {
1824         gchar *canonical_dir;
1825         if (claws_rc_dir != NULL) {
1826                 g_print("Error: rc_dir already set\n");
1827         } else {
1828                 int err = cm_canonicalize_filename(dir, &canonical_dir);
1829                 int len;
1830
1831                 if (err) {
1832                         g_print("Error looking for %s: %d(%s)\n",
1833                                 dir, -err, g_strerror(-err));
1834                         exit(0);
1835                 }
1836                 rc_dir_alt = TRUE;
1837
1838                 claws_rc_dir = canonical_dir;
1839                 
1840                 len = strlen(claws_rc_dir);
1841                 if (claws_rc_dir[len - 1] == G_DIR_SEPARATOR)
1842                         claws_rc_dir[len - 1] = '\0';
1843                 
1844                 debug_print("set rc_dir to %s\n", claws_rc_dir);
1845                 if (!is_dir_exist(claws_rc_dir)) {
1846                         if (make_dir_hier(claws_rc_dir) != 0) {
1847                                 g_print("Error: can't create %s\n",
1848                                 claws_rc_dir);
1849                                 exit(0);
1850                         }
1851                 }
1852         }
1853 }
1854
1855 gboolean rc_dir_is_alt(void) {
1856         return rc_dir_alt;
1857 }
1858
1859 const gchar *get_mail_base_dir(void)
1860 {
1861         return get_home_dir();
1862 }
1863
1864 const gchar *get_news_cache_dir(void)
1865 {
1866         static gchar *news_cache_dir = NULL;
1867         if (!news_cache_dir)
1868                 news_cache_dir = g_strconcat(get_rc_dir(), G_DIR_SEPARATOR_S,
1869                                              NEWS_CACHE_DIR, NULL);
1870
1871         return news_cache_dir;
1872 }
1873
1874 const gchar *get_imap_cache_dir(void)
1875 {
1876         static gchar *imap_cache_dir = NULL;
1877
1878         if (!imap_cache_dir)
1879                 imap_cache_dir = g_strconcat(get_rc_dir(), G_DIR_SEPARATOR_S,
1880                                              IMAP_CACHE_DIR, NULL);
1881
1882         return imap_cache_dir;
1883 }
1884
1885 const gchar *get_mime_tmp_dir(void)
1886 {
1887         static gchar *mime_tmp_dir = NULL;
1888
1889         if (!mime_tmp_dir)
1890                 mime_tmp_dir = g_strconcat(get_rc_dir(), G_DIR_SEPARATOR_S,
1891                                            MIME_TMP_DIR, NULL);
1892
1893         return mime_tmp_dir;
1894 }
1895
1896 const gchar *get_template_dir(void)
1897 {
1898         static gchar *template_dir = NULL;
1899
1900         if (!template_dir)
1901                 template_dir = g_strconcat(get_rc_dir(), G_DIR_SEPARATOR_S,
1902                                            TEMPLATE_DIR, NULL);
1903
1904         return template_dir;
1905 }
1906
1907 #ifdef G_OS_WIN32
1908 const gchar *w32_get_cert_file(void)
1909 {
1910         const gchar *cert_file = NULL;
1911         if (!cert_file)
1912                 cert_file = g_strconcat(w32_get_module_dir(),
1913                                  "\\share\\claws-mail\\",
1914                                 "ca-certificates.crt",
1915                                 NULL);  
1916         return cert_file;
1917 }
1918 #endif
1919
1920 /* Return the filepath of the claws-mail.desktop file */
1921 const gchar *get_desktop_file(void)
1922 {
1923 #ifdef DESKTOPFILEPATH
1924   return DESKTOPFILEPATH;
1925 #else
1926   return NULL;
1927 #endif
1928 }
1929
1930 /* Return the default directory for Plugins. */
1931 const gchar *get_plugin_dir(void)
1932 {
1933 #ifdef G_OS_WIN32
1934         static gchar *plugin_dir = NULL;
1935
1936         if (!plugin_dir)
1937                 plugin_dir = g_strconcat(w32_get_module_dir(),
1938                                          "\\lib\\claws-mail\\plugins\\",
1939                                          NULL);
1940         return plugin_dir;
1941 #else
1942         if (is_dir_exist(PLUGINDIR))
1943                 return PLUGINDIR;
1944         else {
1945                 static gchar *plugin_dir = NULL;
1946                 if (!plugin_dir)
1947                         plugin_dir = g_strconcat(get_rc_dir(), 
1948                                 G_DIR_SEPARATOR_S, "plugins", 
1949                                 G_DIR_SEPARATOR_S, NULL);
1950                 return plugin_dir;                      
1951         }
1952 #endif
1953 }
1954
1955
1956 #ifdef G_OS_WIN32
1957 /* Return the default directory for Themes. */
1958 const gchar *w32_get_themes_dir(void)
1959 {
1960         static gchar *themes_dir = NULL;
1961
1962         if (!themes_dir)
1963                 themes_dir = g_strconcat(w32_get_module_dir(),
1964                                          "\\share\\claws-mail\\themes",
1965                                          NULL);
1966         return themes_dir;
1967 }
1968 #endif
1969
1970 const gchar *get_tmp_dir(void)
1971 {
1972         static gchar *tmp_dir = NULL;
1973
1974         if (!tmp_dir)
1975                 tmp_dir = g_strconcat(get_rc_dir(), G_DIR_SEPARATOR_S,
1976                                       TMP_DIR, NULL);
1977
1978         return tmp_dir;
1979 }
1980
1981 gchar *get_tmp_file(void)
1982 {
1983         gchar *tmp_file;
1984         static guint32 id = 0;
1985
1986         tmp_file = g_strdup_printf("%s%ctmpfile.%08x",
1987                                    get_tmp_dir(), G_DIR_SEPARATOR, id++);
1988
1989         return tmp_file;
1990 }
1991
1992 const gchar *get_domain_name(void)
1993 {
1994 #ifdef G_OS_UNIX
1995         static gchar *domain_name = NULL;
1996         struct addrinfo hints, *res;
1997         char hostname[256];
1998         int s;
1999
2000         if (!domain_name) {
2001                 if (gethostname(hostname, sizeof(hostname)) != 0) {
2002                         perror("gethostname");
2003                         domain_name = "localhost";
2004                 } else {
2005                         memset(&hints, 0, sizeof(struct addrinfo));
2006                         hints.ai_family = AF_UNSPEC;
2007                         hints.ai_socktype = 0;
2008                         hints.ai_flags = AI_CANONNAME;
2009                         hints.ai_protocol = 0;
2010
2011                         s = getaddrinfo(hostname, NULL, &hints, &res);
2012                         if (s != 0) {
2013                                 fprintf(stderr, "getaddrinfo: %s\n", gai_strerror(s));
2014                                 domain_name = g_strdup(hostname);
2015                         } else {
2016                                 domain_name = g_strdup(res->ai_canonname);
2017                                 freeaddrinfo(res);
2018                         }
2019                 }
2020                 debug_print("domain name = %s\n", domain_name);
2021         }
2022
2023         return domain_name;
2024 #else
2025         return "localhost";
2026 #endif
2027 }
2028
2029 off_t get_file_size(const gchar *file)
2030 {
2031         GStatBuf s;
2032
2033         if (g_stat(file, &s) < 0) {
2034                 FILE_OP_ERROR(file, "stat");
2035                 return -1;
2036         }
2037
2038         return s.st_size;
2039 }
2040
2041 time_t get_file_mtime(const gchar *file)
2042 {
2043         GStatBuf s;
2044
2045         if (g_stat(file, &s) < 0) {
2046                 FILE_OP_ERROR(file, "stat");
2047                 return -1;
2048         }
2049
2050         return s.st_mtime;
2051 }
2052
2053 gboolean file_exist(const gchar *file, gboolean allow_fifo)
2054 {
2055         GStatBuf s;
2056
2057         if (file == NULL)
2058                 return FALSE;
2059
2060         if (g_stat(file, &s) < 0) {
2061                 if (ENOENT != errno) FILE_OP_ERROR(file, "stat");
2062                 return FALSE;
2063         }
2064
2065         if (S_ISREG(s.st_mode) || (allow_fifo && S_ISFIFO(s.st_mode)))
2066                 return TRUE;
2067
2068         return FALSE;
2069 }
2070
2071
2072 /* Test on whether FILE is a relative file name. This is
2073  * straightforward for Unix but more complex for Windows. */
2074 gboolean is_relative_filename(const gchar *file)
2075 {
2076         if (!file)
2077                 return TRUE;
2078 #ifdef G_OS_WIN32
2079         if ( *file == '\\' && file[1] == '\\' && strchr (file+2, '\\') )
2080                 return FALSE; /* Prefixed with a hostname - this can't
2081                                * be a relative name. */
2082
2083         if ( ((*file >= 'a' && *file <= 'z')
2084               || (*file >= 'A' && *file <= 'Z'))
2085              && file[1] == ':')
2086                 file += 2;  /* Skip drive letter. */
2087
2088         return !(*file == '\\' || *file == '/');
2089 #else
2090         return !(*file == G_DIR_SEPARATOR);
2091 #endif
2092 }
2093
2094
2095 gboolean is_dir_exist(const gchar *dir)
2096 {
2097         if (dir == NULL)
2098                 return FALSE;
2099
2100         return g_file_test(dir, G_FILE_TEST_IS_DIR);
2101 }
2102
2103 gboolean is_file_entry_exist(const gchar *file)
2104 {
2105         if (file == NULL)
2106                 return FALSE;
2107
2108         return g_file_test(file, G_FILE_TEST_EXISTS);
2109 }
2110
2111 gboolean dirent_is_regular_file(struct dirent *d)
2112 {
2113 #if !defined(G_OS_WIN32) && defined(HAVE_DIRENT_D_TYPE)
2114         if (d->d_type == DT_REG)
2115                 return TRUE;
2116         else if (d->d_type != DT_UNKNOWN)
2117                 return FALSE;
2118 #endif
2119
2120         return g_file_test(d->d_name, G_FILE_TEST_IS_REGULAR);
2121 }
2122
2123 gint change_dir(const gchar *dir)
2124 {
2125         gchar *prevdir = NULL;
2126
2127         if (debug_mode)
2128                 prevdir = g_get_current_dir();
2129
2130         if (g_chdir(dir) < 0) {
2131                 FILE_OP_ERROR(dir, "chdir");
2132                 if (debug_mode) g_free(prevdir);
2133                 return -1;
2134         } else if (debug_mode) {
2135                 gchar *cwd;
2136
2137                 cwd = g_get_current_dir();
2138                 if (strcmp(prevdir, cwd) != 0)
2139                         g_print("current dir: %s\n", cwd);
2140                 g_free(cwd);
2141                 g_free(prevdir);
2142         }
2143
2144         return 0;
2145 }
2146
2147 gint make_dir(const gchar *dir)
2148 {
2149         if (g_mkdir(dir, S_IRWXU) < 0) {
2150                 FILE_OP_ERROR(dir, "mkdir");
2151                 return -1;
2152         }
2153         if (g_chmod(dir, S_IRWXU) < 0)
2154                 FILE_OP_ERROR(dir, "chmod");
2155
2156         return 0;
2157 }
2158
2159 gint make_dir_hier(const gchar *dir)
2160 {
2161         gchar *parent_dir;
2162         const gchar *p;
2163
2164         for (p = dir; (p = strchr(p, G_DIR_SEPARATOR)) != NULL; p++) {
2165                 parent_dir = g_strndup(dir, p - dir);
2166                 if (*parent_dir != '\0') {
2167                         if (!is_dir_exist(parent_dir)) {
2168                                 if (make_dir(parent_dir) < 0) {
2169                                         g_free(parent_dir);
2170                                         return -1;
2171                                 }
2172                         }
2173                 }
2174                 g_free(parent_dir);
2175         }
2176
2177         if (!is_dir_exist(dir)) {
2178                 if (make_dir(dir) < 0)
2179                         return -1;
2180         }
2181
2182         return 0;
2183 }
2184
2185 gint remove_all_files(const gchar *dir)
2186 {
2187         GDir *dp;
2188         const gchar *file_name;
2189         gchar *tmp;
2190
2191         if ((dp = g_dir_open(dir, 0, NULL)) == NULL) {
2192                 g_warning("failed to open directory: %s", dir);
2193                 return -1;
2194         }
2195
2196         while ((file_name = g_dir_read_name(dp)) != NULL) {
2197                 tmp = g_strconcat(dir, G_DIR_SEPARATOR_S, file_name, NULL);
2198                 if (claws_unlink(tmp) < 0)
2199                         FILE_OP_ERROR(tmp, "unlink");
2200                 g_free(tmp);
2201         }
2202
2203         g_dir_close(dp);
2204
2205         return 0;
2206 }
2207
2208 gint remove_numbered_files(const gchar *dir, guint first, guint last)
2209 {
2210         GDir *dp;
2211         const gchar *dir_name;
2212         gchar *prev_dir;
2213         gint file_no;
2214
2215         if (first == last) {
2216                 /* Skip all the dir reading part. */
2217                 gchar *filename = g_strdup_printf("%s%s%u", dir, G_DIR_SEPARATOR_S, first);
2218                 if (is_dir_exist(filename)) {
2219                         /* a numbered directory with this name exists,
2220                          * remove the dot-file instead */
2221                         g_free(filename);
2222                         filename = g_strdup_printf("%s%s.%u", dir, G_DIR_SEPARATOR_S, first);
2223                 }
2224                 if (claws_unlink(filename) < 0) {
2225                         FILE_OP_ERROR(filename, "unlink");
2226                         g_free(filename);
2227                         return -1;
2228                 }
2229                 g_free(filename);
2230                 return 0;
2231         }
2232
2233         prev_dir = g_get_current_dir();
2234
2235         if (g_chdir(dir) < 0) {
2236                 FILE_OP_ERROR(dir, "chdir");
2237                 g_free(prev_dir);
2238                 return -1;
2239         }
2240
2241         if ((dp = g_dir_open(".", 0, NULL)) == NULL) {
2242                 g_warning("failed to open directory: %s", dir);
2243                 g_free(prev_dir);
2244                 return -1;
2245         }
2246
2247         while ((dir_name = g_dir_read_name(dp)) != NULL) {
2248                 file_no = to_number(dir_name);
2249                 if (file_no > 0 && first <= file_no && file_no <= last) {
2250                         if (is_dir_exist(dir_name)) {
2251                                 gchar *dot_file = g_strdup_printf(".%s", dir_name);
2252                                 if (is_file_exist(dot_file) && claws_unlink(dot_file) < 0) {
2253                                         FILE_OP_ERROR(dot_file, "unlink");
2254                                 }
2255                                 g_free(dot_file);
2256                                 continue;
2257                         }
2258                         if (claws_unlink(dir_name) < 0)
2259                                 FILE_OP_ERROR(dir_name, "unlink");
2260                 }
2261         }
2262
2263         g_dir_close(dp);
2264
2265         if (g_chdir(prev_dir) < 0) {
2266                 FILE_OP_ERROR(prev_dir, "chdir");
2267                 g_free(prev_dir);
2268                 return -1;
2269         }
2270
2271         g_free(prev_dir);
2272
2273         return 0;
2274 }
2275
2276 gint remove_numbered_files_not_in_list(const gchar *dir, GSList *numberlist)
2277 {
2278         GDir *dp;
2279         const gchar *dir_name;
2280         gchar *prev_dir;
2281         gint file_no;
2282         GHashTable *wanted_files;
2283         GSList *cur;
2284         GError *error = NULL;
2285
2286         if (numberlist == NULL)
2287             return 0;
2288
2289         prev_dir = g_get_current_dir();
2290
2291         if (g_chdir(dir) < 0) {
2292                 FILE_OP_ERROR(dir, "chdir");
2293                 g_free(prev_dir);
2294                 return -1;
2295         }
2296
2297         if ((dp = g_dir_open(".", 0, &error)) == NULL) {
2298                 g_message("Couldn't open current directory: %s (%d).\n",
2299                                 error->message, error->code);
2300                 g_error_free(error);
2301                 g_free(prev_dir);
2302                 return -1;
2303         }
2304
2305         wanted_files = g_hash_table_new(g_direct_hash, g_direct_equal);
2306         for (cur = numberlist; cur != NULL; cur = cur->next) {
2307                 /* numberlist->data is expected to be GINT_TO_POINTER */
2308                 g_hash_table_insert(wanted_files, cur->data, GINT_TO_POINTER(1));
2309         }
2310
2311         while ((dir_name = g_dir_read_name(dp)) != NULL) {
2312                 file_no = to_number(dir_name);
2313                 if (is_dir_exist(dir_name))
2314                         continue;
2315                 if (file_no > 0 && g_hash_table_lookup(wanted_files, GINT_TO_POINTER(file_no)) == NULL) {
2316                         debug_print("removing unwanted file %d from %s\n", file_no, dir);
2317                         if (is_dir_exist(dir_name)) {
2318                                 gchar *dot_file = g_strdup_printf(".%s", dir_name);
2319                                 if (is_file_exist(dot_file) && claws_unlink(dot_file) < 0) {
2320                                         FILE_OP_ERROR(dot_file, "unlink");
2321                                 }
2322                                 g_free(dot_file);
2323                                 continue;
2324                         }
2325                         if (claws_unlink(dir_name) < 0)
2326                                 FILE_OP_ERROR(dir_name, "unlink");
2327                 }
2328         }
2329
2330         g_dir_close(dp);
2331         g_hash_table_destroy(wanted_files);
2332
2333         if (g_chdir(prev_dir) < 0) {
2334                 FILE_OP_ERROR(prev_dir, "chdir");
2335                 g_free(prev_dir);
2336                 return -1;
2337         }
2338
2339         g_free(prev_dir);
2340
2341         return 0;
2342 }
2343
2344 gint remove_all_numbered_files(const gchar *dir)
2345 {
2346         return remove_numbered_files(dir, 0, UINT_MAX);
2347 }
2348
2349 gint remove_dir_recursive(const gchar *dir)
2350 {
2351         GStatBuf s;
2352         GDir *dp;
2353         const gchar *dir_name;
2354         gchar *prev_dir;
2355
2356         if (g_stat(dir, &s) < 0) {
2357                 FILE_OP_ERROR(dir, "stat");
2358                 if (ENOENT == errno) return 0;
2359                 return -(errno);
2360         }
2361
2362         if (!S_ISDIR(s.st_mode)) {
2363                 if (claws_unlink(dir) < 0) {
2364                         FILE_OP_ERROR(dir, "unlink");
2365                         return -(errno);
2366                 }
2367
2368                 return 0;
2369         }
2370
2371         prev_dir = g_get_current_dir();
2372         /* g_print("prev_dir = %s\n", prev_dir); */
2373
2374         if (!path_cmp(prev_dir, dir)) {
2375                 g_free(prev_dir);
2376                 if (g_chdir("..") < 0) {
2377                         FILE_OP_ERROR(dir, "chdir");
2378                         return -(errno);
2379                 }
2380                 prev_dir = g_get_current_dir();
2381         }
2382
2383         if (g_chdir(dir) < 0) {
2384                 FILE_OP_ERROR(dir, "chdir");
2385                 g_free(prev_dir);
2386                 return -(errno);
2387         }
2388
2389         if ((dp = g_dir_open(".", 0, NULL)) == NULL) {
2390                 g_warning("failed to open directory: %s", dir);
2391                 g_chdir(prev_dir);
2392                 g_free(prev_dir);
2393                 return -(errno);
2394         }
2395
2396         /* remove all files in the directory */
2397         while ((dir_name = g_dir_read_name(dp)) != NULL) {
2398                 /* g_print("removing %s\n", dir_name); */
2399
2400                 if (is_dir_exist(dir_name)) {
2401                         gint ret;
2402
2403                         if ((ret = remove_dir_recursive(dir_name)) < 0) {
2404                                 g_warning("can't remove directory: %s", dir_name);
2405                                 return ret;
2406                         }
2407                 } else {
2408                         if (claws_unlink(dir_name) < 0)
2409                                 FILE_OP_ERROR(dir_name, "unlink");
2410                 }
2411         }
2412
2413         g_dir_close(dp);
2414
2415         if (g_chdir(prev_dir) < 0) {
2416                 FILE_OP_ERROR(prev_dir, "chdir");
2417                 g_free(prev_dir);
2418                 return -(errno);
2419         }
2420
2421         g_free(prev_dir);
2422
2423         if (g_rmdir(dir) < 0) {
2424                 FILE_OP_ERROR(dir, "rmdir");
2425                 return -(errno);
2426         }
2427
2428         return 0;
2429 }
2430
2431 gint rename_force(const gchar *oldpath, const gchar *newpath)
2432 {
2433 #ifndef G_OS_UNIX
2434         if (!is_file_entry_exist(oldpath)) {
2435                 errno = ENOENT;
2436                 return -1;
2437         }
2438         if (is_file_exist(newpath)) {
2439                 if (claws_unlink(newpath) < 0)
2440                         FILE_OP_ERROR(newpath, "unlink");
2441         }
2442 #endif
2443         return g_rename(oldpath, newpath);
2444 }
2445
2446 /*
2447  * Append src file body to the tail of dest file.
2448  * Now keep_backup has no effects.
2449  */
2450 gint append_file(const gchar *src, const gchar *dest, gboolean keep_backup)
2451 {
2452         FILE *src_fp, *dest_fp;
2453         gint n_read;
2454         gchar buf[BUFSIZ];
2455
2456         gboolean err = FALSE;
2457
2458         if ((src_fp = g_fopen(src, "rb")) == NULL) {
2459                 FILE_OP_ERROR(src, "g_fopen");
2460                 return -1;
2461         }
2462
2463         if ((dest_fp = g_fopen(dest, "ab")) == NULL) {
2464                 FILE_OP_ERROR(dest, "g_fopen");
2465                 fclose(src_fp);
2466                 return -1;
2467         }
2468
2469         if (change_file_mode_rw(dest_fp, dest) < 0) {
2470                 FILE_OP_ERROR(dest, "chmod");
2471                 g_warning("can't change file mode: %s", dest);
2472         }
2473
2474         while ((n_read = fread(buf, sizeof(gchar), sizeof(buf), src_fp)) > 0) {
2475                 if (n_read < sizeof(buf) && ferror(src_fp))
2476                         break;
2477                 if (fwrite(buf, 1, n_read, dest_fp) < n_read) {
2478                         g_warning("writing to %s failed.", dest);
2479                         fclose(dest_fp);
2480                         fclose(src_fp);
2481                         claws_unlink(dest);
2482                         return -1;
2483                 }
2484         }
2485
2486         if (ferror(src_fp)) {
2487                 FILE_OP_ERROR(src, "fread");
2488                 err = TRUE;
2489         }
2490         fclose(src_fp);
2491         if (fclose(dest_fp) == EOF) {
2492                 FILE_OP_ERROR(dest, "fclose");
2493                 err = TRUE;
2494         }
2495
2496         if (err) {
2497                 claws_unlink(dest);
2498                 return -1;
2499         }
2500
2501         return 0;
2502 }
2503
2504 gint copy_file(const gchar *src, const gchar *dest, gboolean keep_backup)
2505 {
2506         FILE *src_fp, *dest_fp;
2507         gint n_read;
2508         gchar buf[BUFSIZ];
2509         gchar *dest_bak = NULL;
2510         gboolean err = FALSE;
2511
2512         if ((src_fp = g_fopen(src, "rb")) == NULL) {
2513                 FILE_OP_ERROR(src, "g_fopen");
2514                 return -1;
2515         }
2516         if (is_file_exist(dest)) {
2517                 dest_bak = g_strconcat(dest, ".bak", NULL);
2518                 if (rename_force(dest, dest_bak) < 0) {
2519                         FILE_OP_ERROR(dest, "rename");
2520                         fclose(src_fp);
2521                         g_free(dest_bak);
2522                         return -1;
2523                 }
2524         }
2525
2526         if ((dest_fp = g_fopen(dest, "wb")) == NULL) {
2527                 FILE_OP_ERROR(dest, "g_fopen");
2528                 fclose(src_fp);
2529                 if (dest_bak) {
2530                         if (rename_force(dest_bak, dest) < 0)
2531                                 FILE_OP_ERROR(dest_bak, "rename");
2532                         g_free(dest_bak);
2533                 }
2534                 return -1;
2535         }
2536
2537         if (change_file_mode_rw(dest_fp, dest) < 0) {
2538                 FILE_OP_ERROR(dest, "chmod");
2539                 g_warning("can't change file mode: %s", dest);
2540         }
2541
2542         while ((n_read = fread(buf, sizeof(gchar), sizeof(buf), src_fp)) > 0) {
2543                 if (n_read < sizeof(buf) && ferror(src_fp))
2544                         break;
2545                 if (fwrite(buf, 1, n_read, dest_fp) < n_read) {
2546                         g_warning("writing to %s failed.", dest);
2547                         fclose(dest_fp);
2548                         fclose(src_fp);
2549                         claws_unlink(dest);
2550                         if (dest_bak) {
2551                                 if (rename_force(dest_bak, dest) < 0)
2552                                         FILE_OP_ERROR(dest_bak, "rename");
2553                                 g_free(dest_bak);
2554                         }
2555                         return -1;
2556                 }
2557         }
2558
2559         if (ferror(src_fp)) {
2560                 FILE_OP_ERROR(src, "fread");
2561                 err = TRUE;
2562         }
2563         fclose(src_fp);
2564         if (fclose(dest_fp) == EOF) {
2565                 FILE_OP_ERROR(dest, "fclose");
2566                 err = TRUE;
2567         }
2568
2569         if (err) {
2570                 claws_unlink(dest);
2571                 if (dest_bak) {
2572                         if (rename_force(dest_bak, dest) < 0)
2573                                 FILE_OP_ERROR(dest_bak, "rename");
2574                         g_free(dest_bak);
2575                 }
2576                 return -1;
2577         }
2578
2579         if (keep_backup == FALSE && dest_bak)
2580                 claws_unlink(dest_bak);
2581
2582         g_free(dest_bak);
2583
2584         return 0;
2585 }
2586
2587 gint move_file(const gchar *src, const gchar *dest, gboolean overwrite)
2588 {
2589         if (overwrite == FALSE && is_file_exist(dest)) {
2590                 g_warning("move_file(): file %s already exists.", dest);
2591                 return -1;
2592         }
2593
2594         if (rename_force(src, dest) == 0) return 0;
2595
2596         if (EXDEV != errno) {
2597                 FILE_OP_ERROR(src, "rename");
2598                 return -1;
2599         }
2600
2601         if (copy_file(src, dest, FALSE) < 0) return -1;
2602
2603         claws_unlink(src);
2604
2605         return 0;
2606 }
2607
2608 gint copy_file_part_to_fp(FILE *fp, off_t offset, size_t length, FILE *dest_fp)
2609 {
2610         gint n_read;
2611         gint bytes_left, to_read;
2612         gchar buf[BUFSIZ];
2613
2614         if (fseek(fp, offset, SEEK_SET) < 0) {
2615                 perror("fseek");
2616                 return -1;
2617         }
2618
2619         bytes_left = length;
2620         to_read = MIN(bytes_left, sizeof(buf));
2621
2622         while ((n_read = fread(buf, sizeof(gchar), to_read, fp)) > 0) {
2623                 if (n_read < to_read && ferror(fp))
2624                         break;
2625                 if (fwrite(buf, 1, n_read, dest_fp) < n_read) {
2626                         return -1;
2627                 }
2628                 bytes_left -= n_read;
2629                 if (bytes_left == 0)
2630                         break;
2631                 to_read = MIN(bytes_left, sizeof(buf));
2632         }
2633
2634         if (ferror(fp)) {
2635                 perror("fread");
2636                 return -1;
2637         }
2638
2639         return 0;
2640 }
2641
2642 gint copy_file_part(FILE *fp, off_t offset, size_t length, const gchar *dest)
2643 {
2644         FILE *dest_fp;
2645         gboolean err = FALSE;
2646
2647         if ((dest_fp = g_fopen(dest, "wb")) == NULL) {
2648                 FILE_OP_ERROR(dest, "g_fopen");
2649                 return -1;
2650         }
2651
2652         if (change_file_mode_rw(dest_fp, dest) < 0) {
2653                 FILE_OP_ERROR(dest, "chmod");
2654                 g_warning("can't change file mode: %s", dest);
2655         }
2656
2657         if (copy_file_part_to_fp(fp, offset, length, dest_fp) < 0)
2658                 err = TRUE;
2659
2660         if (!err && fclose(dest_fp) == EOF) {
2661                 FILE_OP_ERROR(dest, "fclose");
2662                 err = TRUE;
2663         }
2664
2665         if (err) {
2666                 g_warning("writing to %s failed.", dest);
2667                 claws_unlink(dest);
2668                 return -1;
2669         }
2670
2671         return 0;
2672 }
2673
2674 /* convert line endings into CRLF. If the last line doesn't end with
2675  * linebreak, add it.
2676  */
2677 gchar *canonicalize_str(const gchar *str)
2678 {
2679         const gchar *p;
2680         guint new_len = 0;
2681         gchar *out, *outp;
2682
2683         for (p = str; *p != '\0'; ++p) {
2684                 if (*p != '\r') {
2685                         ++new_len;
2686                         if (*p == '\n')
2687                                 ++new_len;
2688                 }
2689         }
2690         if (p == str || *(p - 1) != '\n')
2691                 new_len += 2;
2692
2693         out = outp = g_malloc(new_len + 1);
2694         for (p = str; *p != '\0'; ++p) {
2695                 if (*p != '\r') {
2696                         if (*p == '\n')
2697                                 *outp++ = '\r';
2698                         *outp++ = *p;
2699                 }
2700         }
2701         if (p == str || *(p - 1) != '\n') {
2702                 *outp++ = '\r';
2703                 *outp++ = '\n';
2704         }
2705         *outp = '\0';
2706
2707         return out;
2708 }
2709
2710 gint canonicalize_file(const gchar *src, const gchar *dest)
2711 {
2712         FILE *src_fp, *dest_fp;
2713         gchar buf[BUFFSIZE];
2714         gint len;
2715         gboolean err = FALSE;
2716         gboolean last_linebreak = FALSE;
2717
2718         if (src == NULL || dest == NULL)
2719                 return -1;
2720
2721         if ((src_fp = g_fopen(src, "rb")) == NULL) {
2722                 FILE_OP_ERROR(src, "g_fopen");
2723                 return -1;
2724         }
2725
2726         if ((dest_fp = g_fopen(dest, "wb")) == NULL) {
2727                 FILE_OP_ERROR(dest, "g_fopen");
2728                 fclose(src_fp);
2729                 return -1;
2730         }
2731
2732         if (change_file_mode_rw(dest_fp, dest) < 0) {
2733                 FILE_OP_ERROR(dest, "chmod");
2734                 g_warning("can't change file mode: %s", dest);
2735         }
2736
2737         while (fgets(buf, sizeof(buf), src_fp) != NULL) {
2738                 gint r = 0;
2739
2740                 len = strlen(buf);
2741                 if (len == 0) break;
2742                 last_linebreak = FALSE;
2743
2744                 if (buf[len - 1] != '\n') {
2745                         last_linebreak = TRUE;
2746                         r = fputs(buf, dest_fp);
2747                 } else if (len > 1 && buf[len - 1] == '\n' && buf[len - 2] == '\r') {
2748                         r = fputs(buf, dest_fp);
2749                 } else {
2750                         if (len > 1) {
2751                                 r = fwrite(buf, 1, len - 1, dest_fp);
2752                                 if (r != (len -1))
2753                                         r = EOF;
2754                         }
2755                         if (r != EOF)
2756                                 r = fputs("\r\n", dest_fp);
2757                 }
2758
2759                 if (r == EOF) {
2760                         g_warning("writing to %s failed.", dest);
2761                         fclose(dest_fp);
2762                         fclose(src_fp);
2763                         claws_unlink(dest);
2764                         return -1;
2765                 }
2766         }
2767
2768         if (last_linebreak == TRUE) {
2769                 if (fputs("\r\n", dest_fp) == EOF)
2770                         err = TRUE;
2771         }
2772
2773         if (ferror(src_fp)) {
2774                 FILE_OP_ERROR(src, "fgets");
2775                 err = TRUE;
2776         }
2777         fclose(src_fp);
2778         if (fclose(dest_fp) == EOF) {
2779                 FILE_OP_ERROR(dest, "fclose");
2780                 err = TRUE;
2781         }
2782
2783         if (err) {
2784                 claws_unlink(dest);
2785                 return -1;
2786         }
2787
2788         return 0;
2789 }
2790
2791 gint canonicalize_file_replace(const gchar *file)
2792 {
2793         gchar *tmp_file;
2794
2795         tmp_file = get_tmp_file();
2796
2797         if (canonicalize_file(file, tmp_file) < 0) {
2798                 g_free(tmp_file);
2799                 return -1;
2800         }
2801
2802         if (move_file(tmp_file, file, TRUE) < 0) {
2803                 g_warning("can't replace file: %s", file);
2804                 claws_unlink(tmp_file);
2805                 g_free(tmp_file);
2806                 return -1;
2807         }
2808
2809         g_free(tmp_file);
2810         return 0;
2811 }
2812
2813 gchar *normalize_newlines(const gchar *str)
2814 {
2815         const gchar *p;
2816         gchar *out, *outp;
2817
2818         out = outp = g_malloc(strlen(str) + 1);
2819         for (p = str; *p != '\0'; ++p) {
2820                 if (*p == '\r') {
2821                         if (*(p + 1) != '\n')
2822                                 *outp++ = '\n';
2823                 } else
2824                         *outp++ = *p;
2825         }
2826
2827         *outp = '\0';
2828
2829         return out;
2830 }
2831
2832 gchar *get_outgoing_rfc2822_str(FILE *fp)
2833 {
2834         gchar buf[BUFFSIZE];
2835         GString *str;
2836         gchar *ret;
2837
2838         str = g_string_new(NULL);
2839
2840         /* output header part */
2841         while (fgets(buf, sizeof(buf), fp) != NULL) {
2842                 strretchomp(buf);
2843                 if (!g_ascii_strncasecmp(buf, "Bcc:", 4)) {
2844                         gint next;
2845
2846                         for (;;) {
2847                                 next = fgetc(fp);
2848                                 if (next == EOF)
2849                                         break;
2850                                 else if (next != ' ' && next != '\t') {
2851                                         ungetc(next, fp);
2852                                         break;
2853                                 }
2854                                 if (fgets(buf, sizeof(buf), fp) == NULL)
2855                                         break;
2856                         }
2857                 } else {
2858                         g_string_append(str, buf);
2859                         g_string_append(str, "\r\n");
2860                         if (buf[0] == '\0')
2861                                 break;
2862                 }
2863         }
2864
2865         /* output body part */
2866         while (fgets(buf, sizeof(buf), fp) != NULL) {
2867                 strretchomp(buf);
2868                 if (buf[0] == '.')
2869                         g_string_append_c(str, '.');
2870                 g_string_append(str, buf);
2871                 g_string_append(str, "\r\n");
2872         }
2873
2874         ret = str->str;
2875         g_string_free(str, FALSE);
2876
2877         return ret;
2878 }
2879
2880 /*
2881  * Create a new boundary in a way that it is very unlikely that this
2882  * will occur in the following text.  It would be easy to ensure
2883  * uniqueness if everything is either quoted-printable or base64
2884  * encoded (note that conversion is allowed), but because MIME bodies
2885  * may be nested, it may happen that the same boundary has already
2886  * been used.
2887  *
2888  *   boundary := 0*69<bchars> bcharsnospace
2889  *   bchars := bcharsnospace / " "
2890  *   bcharsnospace := DIGIT / ALPHA / "'" / "(" / ")" /
2891  *                  "+" / "_" / "," / "-" / "." /
2892  *                  "/" / ":" / "=" / "?"
2893  *
2894  * some special characters removed because of buggy MTAs
2895  */
2896
2897 gchar *generate_mime_boundary(const gchar *prefix)
2898 {
2899         static gchar tbl[] = "ABCDEFGHIJKLMNOPQRSTUVWXYZ"
2900                              "abcdefghijklmnopqrstuvwxyz"
2901                              "1234567890+_./=";
2902         gchar buf_uniq[24];
2903         gint i;
2904
2905         for (i = 0; i < sizeof(buf_uniq) - 1; i++)
2906                 buf_uniq[i] = tbl[g_random_int_range(0, sizeof(tbl) - 1)];
2907         buf_uniq[i] = '\0';
2908
2909         return g_strdup_printf("%s_/%s", prefix ? prefix : "MP",
2910                                buf_uniq);
2911 }
2912
2913 gint change_file_mode_rw(FILE *fp, const gchar *file)
2914 {
2915 #if HAVE_FCHMOD
2916         return fchmod(fileno(fp), S_IRUSR|S_IWUSR);
2917 #else
2918         return g_chmod(file, S_IRUSR|S_IWUSR);
2919 #endif
2920 }
2921
2922 FILE *my_tmpfile(void)
2923 {
2924         const gchar suffix[] = ".XXXXXX";
2925         const gchar *tmpdir;
2926         guint tmplen;
2927         const gchar *progname;
2928         guint proglen;
2929         gchar *fname;
2930         gint fd;
2931         FILE *fp;
2932 #ifndef G_OS_WIN32
2933         gchar buf[2]="\0";
2934 #endif
2935
2936         tmpdir = get_tmp_dir();
2937         tmplen = strlen(tmpdir);
2938         progname = g_get_prgname();
2939         if (progname == NULL)
2940                 progname = "claws-mail";
2941         proglen = strlen(progname);
2942         Xalloca(fname, tmplen + 1 + proglen + sizeof(suffix),
2943                 return tmpfile());
2944
2945         memcpy(fname, tmpdir, tmplen);
2946         fname[tmplen] = G_DIR_SEPARATOR;
2947         memcpy(fname + tmplen + 1, progname, proglen);
2948         memcpy(fname + tmplen + 1 + proglen, suffix, sizeof(suffix));
2949
2950         fd = g_mkstemp(fname);
2951         if (fd < 0)
2952                 return tmpfile();
2953
2954 #ifndef G_OS_WIN32
2955         claws_unlink(fname);
2956         
2957         /* verify that we can write in the file after unlinking */
2958         if (write(fd, buf, 1) < 0) {
2959                 close(fd);
2960                 return tmpfile();
2961         }
2962         
2963 #endif
2964
2965         fp = fdopen(fd, "w+b");
2966         if (!fp)
2967                 close(fd);
2968         else {
2969                 rewind(fp);
2970                 return fp;
2971         }
2972
2973         return tmpfile();
2974 }
2975
2976 FILE *get_tmpfile_in_dir(const gchar *dir, gchar **filename)
2977 {
2978         int fd;
2979         *filename = g_strdup_printf("%s%cclaws.XXXXXX", dir, G_DIR_SEPARATOR);
2980         fd = g_mkstemp(*filename);
2981         if (fd < 0)
2982                 return NULL;
2983         return fdopen(fd, "w+");
2984 }
2985
2986 FILE *str_open_as_stream(const gchar *str)
2987 {
2988         FILE *fp;
2989         size_t len;
2990
2991         cm_return_val_if_fail(str != NULL, NULL);
2992
2993         fp = my_tmpfile();
2994         if (!fp) {
2995                 FILE_OP_ERROR("str_open_as_stream", "my_tmpfile");
2996                 return NULL;
2997         }
2998
2999         len = strlen(str);
3000         if (len == 0) return fp;
3001
3002         if (fwrite(str, 1, len, fp) != len) {
3003                 FILE_OP_ERROR("str_open_as_stream", "fwrite");
3004                 fclose(fp);
3005                 return NULL;
3006         }
3007
3008         rewind(fp);
3009         return fp;
3010 }
3011
3012 gint str_write_to_file(const gchar *str, const gchar *file)
3013 {
3014         FILE *fp;
3015         size_t len;
3016
3017         cm_return_val_if_fail(str != NULL, -1);
3018         cm_return_val_if_fail(file != NULL, -1);
3019
3020         if ((fp = g_fopen(file, "wb")) == NULL) {
3021                 FILE_OP_ERROR(file, "g_fopen");
3022                 return -1;
3023         }
3024
3025         len = strlen(str);
3026         if (len == 0) {
3027                 fclose(fp);
3028                 return 0;
3029         }
3030
3031         if (fwrite(str, 1, len, fp) != len) {
3032                 FILE_OP_ERROR(file, "fwrite");
3033                 fclose(fp);
3034                 claws_unlink(file);
3035                 return -1;
3036         }
3037
3038         if (fclose(fp) == EOF) {
3039                 FILE_OP_ERROR(file, "fclose");
3040                 claws_unlink(file);
3041                 return -1;
3042         }
3043
3044         return 0;
3045 }
3046
3047 static gchar *file_read_stream_to_str_full(FILE *fp, gboolean recode)
3048 {
3049         GByteArray *array;
3050         guchar buf[BUFSIZ];
3051         gint n_read;
3052         gchar *str;
3053
3054         cm_return_val_if_fail(fp != NULL, NULL);
3055
3056         array = g_byte_array_new();
3057
3058         while ((n_read = fread(buf, sizeof(gchar), sizeof(buf), fp)) > 0) {
3059                 if (n_read < sizeof(buf) && ferror(fp))
3060                         break;
3061                 g_byte_array_append(array, buf, n_read);
3062         }
3063
3064         if (ferror(fp)) {
3065                 FILE_OP_ERROR("file stream", "fread");
3066                 g_byte_array_free(array, TRUE);
3067                 return NULL;
3068         }
3069
3070         buf[0] = '\0';
3071         g_byte_array_append(array, buf, 1);
3072         str = (gchar *)array->data;
3073         g_byte_array_free(array, FALSE);
3074
3075         if (recode && !g_utf8_validate(str, -1, NULL)) {
3076                 const gchar *src_codeset, *dest_codeset;
3077                 gchar *tmp = NULL;
3078                 src_codeset = conv_get_locale_charset_str();
3079                 dest_codeset = CS_UTF_8;
3080                 tmp = conv_codeset_strdup(str, src_codeset, dest_codeset);
3081                 g_free(str);
3082                 str = tmp;
3083         }
3084
3085         return str;
3086 }
3087
3088 static gchar *file_read_to_str_full(const gchar *file, gboolean recode)
3089 {
3090         FILE *fp;
3091         gchar *str;
3092         GStatBuf s;
3093 #ifndef G_OS_WIN32
3094         gint fd, err;
3095         struct timeval timeout = {1, 0};
3096         fd_set fds;
3097         int fflags = 0;
3098 #endif
3099
3100         cm_return_val_if_fail(file != NULL, NULL);
3101
3102         if (g_stat(file, &s) != 0) {
3103                 FILE_OP_ERROR(file, "stat");
3104                 return NULL;
3105         }
3106         if (S_ISDIR(s.st_mode)) {
3107                 g_warning("%s: is a directory", file);
3108                 return NULL;
3109         }
3110
3111 #ifdef G_OS_WIN32
3112         fp = g_fopen (file, "rb");
3113         if (fp == NULL) {
3114                 FILE_OP_ERROR(file, "open");
3115                 return NULL;
3116         }
3117 #else     
3118         /* test whether the file is readable without blocking */
3119         fd = g_open(file, O_RDONLY | O_NONBLOCK, 0);
3120         if (fd == -1) {
3121                 FILE_OP_ERROR(file, "open");
3122                 return NULL;
3123         }
3124
3125         FD_ZERO(&fds);
3126         FD_SET(fd, &fds);
3127
3128         /* allow for one second */
3129         err = select(fd+1, &fds, NULL, NULL, &timeout);
3130         if (err <= 0 || !FD_ISSET(fd, &fds)) {
3131                 if (err < 0) {
3132                         FILE_OP_ERROR(file, "select");
3133                 } else {
3134                         g_warning("%s: doesn't seem readable", file);
3135                 }
3136                 close(fd);
3137                 return NULL;
3138         }
3139         
3140         /* Now clear O_NONBLOCK */
3141         if ((fflags = fcntl(fd, F_GETFL)) < 0) {
3142                 FILE_OP_ERROR(file, "fcntl (F_GETFL)");
3143                 close(fd);
3144                 return NULL;
3145         }
3146         if (fcntl(fd, F_SETFL, (fflags & ~O_NONBLOCK)) < 0) {
3147                 FILE_OP_ERROR(file, "fcntl (F_SETFL)");
3148                 close(fd);
3149                 return NULL;
3150         }
3151         
3152         /* get the FILE pointer */
3153         fp = fdopen(fd, "rb");
3154
3155         if (fp == NULL) {
3156                 FILE_OP_ERROR(file, "fdopen");
3157                 close(fd); /* if fp isn't NULL, we'll use fclose instead! */
3158                 return NULL;
3159         }
3160 #endif
3161
3162         str = file_read_stream_to_str_full(fp, recode);
3163
3164         fclose(fp);
3165
3166         return str;
3167 }
3168
3169 gchar *file_read_to_str(const gchar *file)
3170 {
3171         return file_read_to_str_full(file, TRUE);
3172 }
3173 gchar *file_read_stream_to_str(FILE *fp)
3174 {
3175         return file_read_stream_to_str_full(fp, TRUE);
3176 }
3177
3178 gchar *file_read_to_str_no_recode(const gchar *file)
3179 {
3180         return file_read_to_str_full(file, FALSE);
3181 }
3182 gchar *file_read_stream_to_str_no_recode(FILE *fp)
3183 {
3184         return file_read_stream_to_str_full(fp, FALSE);
3185 }
3186
3187 char *fgets_crlf(char *buf, int size, FILE *stream)
3188 {
3189         gboolean is_cr = FALSE;
3190         gboolean last_was_cr = FALSE;
3191         int c = 0;
3192         char *cs;
3193
3194         cs = buf;
3195         while (--size > 0 && (c = getc(stream)) != EOF)
3196         {
3197                 *cs++ = c;
3198                 is_cr = (c == '\r');
3199                 if (c == '\n') {
3200                         break;
3201                 }
3202                 if (last_was_cr) {
3203                         *(--cs) = '\n';
3204                         cs++;
3205                         ungetc(c, stream);
3206                         break;
3207                 }
3208                 last_was_cr = is_cr;
3209         }
3210         if (c == EOF && cs == buf)
3211                 return NULL;
3212
3213         *cs = '\0';
3214
3215         return buf;     
3216 }
3217
3218 static gint execute_async(gchar *const argv[], const gchar *working_directory)
3219 {
3220         cm_return_val_if_fail(argv != NULL && argv[0] != NULL, -1);
3221
3222         if (g_spawn_async(working_directory, (gchar **)argv, NULL, G_SPAWN_SEARCH_PATH,
3223                           NULL, NULL, NULL, FALSE) == FALSE) {
3224                 g_warning("couldn't execute command: %s", argv[0]);
3225                 return -1;
3226         }
3227
3228         return 0;
3229 }
3230
3231 static gint execute_sync(gchar *const argv[], const gchar *working_directory)
3232 {
3233         gint status;
3234
3235         cm_return_val_if_fail(argv != NULL && argv[0] != NULL, -1);
3236
3237 #ifdef G_OS_UNIX
3238         if (g_spawn_sync(working_directory, (gchar **)argv, NULL, G_SPAWN_SEARCH_PATH,
3239                          NULL, NULL, NULL, NULL, &status, NULL) == FALSE) {
3240                 g_warning("couldn't execute command: %s", argv[0]);
3241                 return -1;
3242         }
3243
3244         if (WIFEXITED(status))
3245                 return WEXITSTATUS(status);
3246         else
3247                 return -1;
3248 #else
3249         if (g_spawn_sync(working_directory, (gchar **)argv, NULL,
3250                                 G_SPAWN_SEARCH_PATH|
3251                                 G_SPAWN_CHILD_INHERITS_STDIN|
3252                                 G_SPAWN_LEAVE_DESCRIPTORS_OPEN,
3253                          NULL, NULL, NULL, NULL, &status, NULL) == FALSE) {
3254                 g_warning("couldn't execute command: %s", argv[0]);
3255                 return -1;
3256         }
3257
3258         return status;
3259 #endif
3260 }
3261
3262 gint execute_command_line(const gchar *cmdline, gboolean async,
3263                 const gchar *working_directory)
3264 {
3265         gchar **argv;
3266         gint ret;
3267
3268         debug_print("execute_command_line(): executing: %s\n", cmdline?cmdline:"(null)");
3269
3270         argv = strsplit_with_quote(cmdline, " ", 0);
3271
3272         if (async)
3273                 ret = execute_async(argv, working_directory);
3274         else
3275                 ret = execute_sync(argv, working_directory);
3276
3277         g_strfreev(argv);
3278
3279         return ret;
3280 }
3281
3282 gchar *get_command_output(const gchar *cmdline)
3283 {
3284         gchar *child_stdout;
3285         gint status;
3286
3287         cm_return_val_if_fail(cmdline != NULL, NULL);
3288
3289         debug_print("get_command_output(): executing: %s\n", cmdline);
3290
3291         if (g_spawn_command_line_sync(cmdline, &child_stdout, NULL, &status,
3292                                       NULL) == FALSE) {
3293                 g_warning("couldn't execute command: %s", cmdline);
3294                 return NULL;
3295         }
3296
3297         return child_stdout;
3298 }
3299
3300 static gint is_unchanged_uri_char(char c)
3301 {
3302         switch (c) {
3303                 case '(':
3304                 case ')':
3305                         return 0;
3306                 default:
3307                         return 1;
3308         }
3309 }
3310
3311 static void encode_uri(gchar *encoded_uri, gint bufsize, const gchar *uri)
3312 {
3313         int i;
3314         int k;
3315
3316         k = 0;
3317         for(i = 0; i < strlen(uri) ; i++) {
3318                 if (is_unchanged_uri_char(uri[i])) {
3319                         if (k + 2 >= bufsize)
3320                                 break;
3321                         encoded_uri[k++] = uri[i];
3322                 }
3323                 else {
3324                         char * hexa = "0123456789ABCDEF";
3325
3326                         if (k + 4 >= bufsize)
3327                                 break;
3328                         encoded_uri[k++] = '%';
3329                         encoded_uri[k++] = hexa[uri[i] / 16];
3330                         encoded_uri[k++] = hexa[uri[i] % 16];
3331                 }
3332         }
3333         encoded_uri[k] = 0;
3334 }
3335
3336 gint open_uri(const gchar *uri, const gchar *cmdline)
3337 {
3338
3339 #ifndef G_OS_WIN32
3340         gchar buf[BUFFSIZE];
3341         gchar *p;
3342         gchar encoded_uri[BUFFSIZE];
3343         cm_return_val_if_fail(uri != NULL, -1);
3344
3345         /* an option to choose whether to use encode_uri or not ? */
3346         encode_uri(encoded_uri, BUFFSIZE, uri);
3347
3348         if (cmdline &&
3349             (p = strchr(cmdline, '%')) && *(p + 1) == 's' &&
3350             !strchr(p + 2, '%'))
3351                 g_snprintf(buf, sizeof(buf), cmdline, encoded_uri);
3352         else {
3353                 if (cmdline)
3354                         g_warning("Open URI command-line is invalid "
3355                                   "(there must be only one '%%s'): %s",
3356                                   cmdline);
3357                 g_snprintf(buf, sizeof(buf), DEFAULT_BROWSER_CMD, encoded_uri);
3358         }
3359
3360         execute_command_line(buf, TRUE, NULL);
3361 #else
3362         ShellExecute(NULL, "open", uri, NULL, NULL, SW_SHOW);
3363 #endif
3364         return 0;
3365 }
3366
3367 gint open_txt_editor(const gchar *filepath, const gchar *cmdline)
3368 {
3369         gchar buf[BUFFSIZE];
3370         gchar *p;
3371
3372         cm_return_val_if_fail(filepath != NULL, -1);
3373
3374         if (cmdline &&
3375             (p = strchr(cmdline, '%')) && *(p + 1) == 's' &&
3376             !strchr(p + 2, '%'))
3377                 g_snprintf(buf, sizeof(buf), cmdline, filepath);
3378         else {
3379                 if (cmdline)
3380                         g_warning("Open Text Editor command-line is invalid "
3381                                   "(there must be only one '%%s'): %s",
3382                                   cmdline);
3383                 g_snprintf(buf, sizeof(buf), DEFAULT_EDITOR_CMD, filepath);
3384         }
3385
3386         execute_command_line(buf, TRUE, NULL);
3387
3388         return 0;
3389 }
3390
3391 time_t remote_tzoffset_sec(const gchar *zone)
3392 {
3393         static gchar ustzstr[] = "PSTPDTMSTMDTCSTCDTESTEDT";
3394         gchar zone3[4];
3395         gchar *p;
3396         gchar c;
3397         gint iustz;
3398         gint offset;
3399         time_t remoteoffset;
3400
3401         strncpy(zone3, zone, 3);
3402         zone3[3] = '\0';
3403         remoteoffset = 0;
3404
3405         if (sscanf(zone, "%c%d", &c, &offset) == 2 &&
3406             (c == '+' || c == '-')) {
3407                 remoteoffset = ((offset / 100) * 60 + (offset % 100)) * 60;
3408                 if (c == '-')
3409                         remoteoffset = -remoteoffset;
3410         } else if (!strncmp(zone, "UT" , 2) ||
3411                    !strncmp(zone, "GMT", 3)) {
3412                 remoteoffset = 0;
3413         } else if (strlen(zone3) == 3) {
3414                 for (p = ustzstr; *p != '\0'; p += 3) {
3415                         if (!g_ascii_strncasecmp(p, zone3, 3)) {
3416                                 iustz = ((gint)(p - ustzstr) / 3 + 1) / 2 - 8;
3417                                 remoteoffset = iustz * 3600;
3418                                 break;
3419                         }
3420                 }
3421                 if (*p == '\0')
3422                         return -1;
3423         } else if (strlen(zone3) == 1) {
3424                 switch (zone[0]) {
3425                 case 'Z': remoteoffset =   0; break;
3426                 case 'A': remoteoffset =  -1; break;
3427                 case 'B': remoteoffset =  -2; break;
3428                 case 'C': remoteoffset =  -3; break;
3429                 case 'D': remoteoffset =  -4; break;
3430                 case 'E': remoteoffset =  -5; break;
3431                 case 'F': remoteoffset =  -6; break;
3432                 case 'G': remoteoffset =  -7; break;
3433                 case 'H': remoteoffset =  -8; break;
3434                 case 'I': remoteoffset =  -9; break;
3435                 case 'K': remoteoffset = -10; break; /* J is not used */
3436                 case 'L': remoteoffset = -11; break;
3437                 case 'M': remoteoffset = -12; break;
3438                 case 'N': remoteoffset =   1; break;
3439                 case 'O': remoteoffset =   2; break;
3440                 case 'P': remoteoffset =   3; break;
3441                 case 'Q': remoteoffset =   4; break;
3442                 case 'R': remoteoffset =   5; break;
3443                 case 'S': remoteoffset =   6; break;
3444                 case 'T': remoteoffset =   7; break;
3445                 case 'U': remoteoffset =   8; break;
3446                 case 'V': remoteoffset =   9; break;
3447                 case 'W': remoteoffset =  10; break;
3448                 case 'X': remoteoffset =  11; break;
3449                 case 'Y': remoteoffset =  12; break;
3450                 default:  remoteoffset =   0; break;
3451                 }
3452                 remoteoffset = remoteoffset * 3600;
3453         } else
3454                 return -1;
3455
3456         return remoteoffset;
3457 }
3458
3459 time_t tzoffset_sec(time_t *now)
3460 {
3461         struct tm gmt, *lt;
3462         gint off;
3463         struct tm buf1, buf2;
3464 #ifdef G_OS_WIN32
3465         if (now && *now < 0)
3466                 return 0;
3467 #endif  
3468         gmt = *gmtime_r(now, &buf1);
3469         lt = localtime_r(now, &buf2);
3470
3471         off = (lt->tm_hour - gmt.tm_hour) * 60 + lt->tm_min - gmt.tm_min;
3472
3473         if (lt->tm_year < gmt.tm_year)
3474                 off -= 24 * 60;
3475         else if (lt->tm_year > gmt.tm_year)
3476                 off += 24 * 60;
3477         else if (lt->tm_yday < gmt.tm_yday)
3478                 off -= 24 * 60;
3479         else if (lt->tm_yday > gmt.tm_yday)
3480                 off += 24 * 60;
3481
3482         if (off >= 24 * 60)             /* should be impossible */
3483                 off = 23 * 60 + 59;     /* if not, insert silly value */
3484         if (off <= -24 * 60)
3485                 off = -(23 * 60 + 59);
3486
3487         return off * 60;
3488 }
3489
3490 /* calculate timezone offset */
3491 gchar *tzoffset(time_t *now)
3492 {
3493         static gchar offset_string[6];
3494         struct tm gmt, *lt;
3495         gint off;
3496         gchar sign = '+';
3497         struct tm buf1, buf2;
3498 #ifdef G_OS_WIN32
3499         if (now && *now < 0)
3500                 return 0;
3501 #endif
3502         gmt = *gmtime_r(now, &buf1);
3503         lt = localtime_r(now, &buf2);
3504
3505         off = (lt->tm_hour - gmt.tm_hour) * 60 + lt->tm_min - gmt.tm_min;
3506
3507         if (lt->tm_year < gmt.tm_year)
3508                 off -= 24 * 60;
3509         else if (lt->tm_year > gmt.tm_year)
3510                 off += 24 * 60;
3511         else if (lt->tm_yday < gmt.tm_yday)
3512                 off -= 24 * 60;
3513         else if (lt->tm_yday > gmt.tm_yday)
3514                 off += 24 * 60;
3515
3516         if (off < 0) {
3517                 sign = '-';
3518                 off = -off;
3519         }
3520
3521         if (off >= 24 * 60)             /* should be impossible */
3522                 off = 23 * 60 + 59;     /* if not, insert silly value */
3523
3524         sprintf(offset_string, "%c%02d%02d", sign, off / 60, off % 60);
3525
3526         return offset_string;
3527 }
3528
3529 static void _get_rfc822_date(gchar *buf, gint len, gboolean hidetz)
3530 {
3531         struct tm *lt;
3532         time_t t;
3533         gchar day[4], mon[4];
3534         gint dd, hh, mm, ss, yyyy;
3535         struct tm buf1;
3536         gchar buf2[RFC822_DATE_BUFFSIZE];
3537
3538         t = time(NULL);
3539         lt = localtime_r(&t, &buf1);
3540
3541         sscanf(asctime_r(lt, buf2), "%3s %3s %d %d:%d:%d %d\n",
3542                day, mon, &dd, &hh, &mm, &ss, &yyyy);
3543
3544         g_snprintf(buf, len, "%s, %d %s %d %02d:%02d:%02d %s",
3545                    day, dd, mon, yyyy, hh, mm, ss, (hidetz? "-0000": tzoffset(&t)));
3546 }
3547
3548 void get_rfc822_date(gchar *buf, gint len)
3549 {
3550         _get_rfc822_date(buf, len, FALSE);
3551 }
3552
3553 void get_rfc822_date_hide_tz(gchar *buf, gint len)
3554 {
3555         _get_rfc822_date(buf, len, TRUE);
3556 }
3557
3558 void debug_set_mode(gboolean mode)
3559 {
3560         debug_mode = mode;
3561 }
3562
3563 gboolean debug_get_mode(void)
3564 {
3565         return debug_mode;
3566 }
3567
3568 void debug_print_real(const gchar *format, ...)
3569 {
3570         va_list args;
3571         gchar buf[BUFFSIZE];
3572
3573         if (!debug_mode) return;
3574
3575         va_start(args, format);
3576         g_vsnprintf(buf, sizeof(buf), format, args);
3577         va_end(args);
3578
3579         g_print("%s", buf);
3580 }
3581
3582
3583 const char * debug_srcname(const char *file)
3584 {
3585         const char *s = strrchr (file, '/');
3586         return s? s+1:file;
3587 }
3588
3589
3590 void * subject_table_lookup(GHashTable *subject_table, gchar * subject)
3591 {
3592         if (subject == NULL)
3593                 subject = "";
3594         else
3595                 subject += subject_get_prefix_length(subject);
3596
3597         return g_hash_table_lookup(subject_table, subject);
3598 }
3599
3600 void subject_table_insert(GHashTable *subject_table, gchar * subject,
3601                           void * data)
3602 {
3603         if (subject&n