Fix:Undone accidentially commited code
[navit-package] / navit / file.c
1 /**
2  * Navit, a modular navigation system.
3  * Copyright (C) 2005-2008 Navit Team
4  *
5  * This program is free software; you can redistribute it and/or
6  * modify it under the terms of the GNU General Public License
7  * version 2 as published by the Free Software Foundation.
8  *
9  * This program is distributed in the hope that it will be useful,
10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12  * GNU General Public License for more details.
13  *
14  * You should have received a copy of the GNU General Public License
15  * along with this program; if not, write to the
16  * Free Software Foundation, Inc., 51 Franklin Street, Fifth Floor,
17  * Boston, MA  02110-1301, USA.
18  */
19
20 #define _FILE_OFFSET_BITS 64
21 #define _LARGEFILE_SOURCE
22 #define _LARGEFILE64_SOURCE
23 #include <unistd.h>
24 #include <string.h>
25 #include <fcntl.h>
26 #include <sys/stat.h>
27 #include <sys/mman.h>
28 #include <dirent.h>
29 #include <stdio.h>
30 #include <wordexp.h>
31 #include <glib.h>
32 #include <zlib.h>
33 #include "debug.h"
34 #include "cache.h"
35 #include "file.h"
36 #include "config.h"
37
38 #ifndef O_LARGEFILE
39 #define O_LARGEFILE 0
40 #endif
41
42 #ifndef O_BINARY
43 #define O_BINARY 0
44 #endif
45
46 #ifdef CACHE_SIZE
47 static GHashTable *file_name_hash;
48 #endif
49
50 static struct cache *file_cache;
51
52 struct file_cache_id {
53         long long offset;
54         int size;
55         int file_name_id;
56         int method;
57 } __attribute__ ((packed));
58
59 struct file *
60 file_create(char *name)
61 {
62         struct stat stat;
63         struct file *file= g_new0(struct file,1);
64
65         file->fd=open(name, O_RDONLY|O_LARGEFILE | O_BINARY);
66         if (file->fd == -1) {
67                 g_free(file);
68                 return NULL;
69         }
70         dbg(1,"fd=%d\n", file->fd);
71         fstat(file->fd, &stat);
72         file->size=stat.st_size;
73         dbg(1,"size=%Ld\n", file->size);
74         file->name = g_strdup(name);
75         dbg_assert(file != NULL);
76         return file;
77 }
78
79 #if 0
80 struct file *
81 file_create_url(char *url)
82 {
83         struct file *file= g_new0(struct file,1);
84         char *cmd=g_strdup_printf("curl %s",url);
85         file->name = g_strdup(url);
86         file->stdfile=popen(cmd,"r");
87         file->fd=fileno(file->stdfile);
88         file->special=1;
89         g_free(cmd);
90         return file;
91 }
92 #endif
93
94 int file_is_dir(char *name)
95 {
96         struct stat buf;
97         if (! stat(name, &buf)) {
98                 return S_ISDIR(buf.st_mode);
99         }
100         return 0;
101
102 }
103
104 long long
105 file_size(struct file *file)
106 {
107         return file->size;
108 }
109
110 int file_mkdir(char *name, int pflag)
111 {
112         char buffer[strlen(name)+1];
113         int ret;
114         char *next;
115         dbg(1,"enter %s %d\n",name,pflag);
116         if (!pflag) {
117                 if (file_is_dir(name))
118                         return 0;
119 #ifdef HAVE_API_WIN32_BASE
120                 return mkdir(name);
121 #else
122                 return mkdir(name, 0777);
123 #endif
124         }
125         strcpy(buffer, name);
126         next=buffer;
127         while ((next=strchr(next, '/'))) {
128                 *next='\0';
129                 if (*buffer) {
130                         ret=file_mkdir(buffer, 0);
131                         if (ret)
132                                 return ret;
133                 }
134                 *next++='/';
135         }
136         if (pflag == 2)
137                 return 0;
138         return file_mkdir(buffer, 0);
139 }
140
141 int
142 file_mmap(struct file *file)
143 {
144 #if defined(_WIN32) || defined(__CEGCC__)
145     file->begin = (char*)mmap_readonly_win32( file->name, &file->map_handle, &file->map_file );
146 #else
147         file->begin=mmap(NULL, file->size, PROT_READ|PROT_WRITE, MAP_PRIVATE, file->fd, 0);
148         dbg_assert(file->begin != NULL);
149         if (file->begin == (void *)0xffffffff) {
150                 perror("mmap");
151                 return 0;
152         }
153 #endif
154         dbg_assert(file->begin != (void *)0xffffffff);
155         file->end=file->begin+file->size;
156
157         return 1;
158 }
159
160 unsigned char *
161 file_data_read(struct file *file, long long offset, int size)
162 {
163         void *ret;
164         if (file->begin)
165                 return file->begin+offset;
166         if (file_cache) {
167                 struct file_cache_id id={offset,size,file->name_id,0};
168                 ret=cache_lookup(file_cache,&id); 
169                 if (ret)
170                         return ret;
171                 ret=cache_insert_new(file_cache,&id,size);
172         } else
173                 ret=g_malloc(size);
174         lseek(file->fd, offset, SEEK_SET);
175         if (read(file->fd, ret, size) != size) {
176                 file_data_free(file, ret);
177                 ret=NULL;
178         }
179         return ret;
180
181 }
182
183 unsigned char *
184 file_data_read_all(struct file *file)
185 {
186         return file_data_read(file, 0, file->size);
187 }
188
189 int
190 file_data_write(struct file *file, long long offset, int size, unsigned char *data)
191 {
192         if (file_cache) {
193                 struct file_cache_id id={offset,size,file->name_id,0};
194                 cache_flush(file_cache,&id);
195         }
196         lseek(file->fd, offset, SEEK_SET);
197         if (write(file->fd, data, size) != size)
198                 return 0;
199         return 1;
200 }
201
202 int
203 file_get_contents(char *name, unsigned char **buffer, int *size)
204 {
205         struct file *file;
206         file=file_create(name);
207         if (!file)
208                 return 0;
209         *size=file_size(file);
210         *buffer=file_data_read_all(file);
211         file_destroy(file);
212         return 1;       
213 }
214
215
216 static int
217 uncompress_int(Bytef *dest, uLongf *destLen, const Bytef *source, uLong sourceLen)
218 {
219         z_stream stream;
220         int err;
221
222         stream.next_in = (Bytef*)source;
223         stream.avail_in = (uInt)sourceLen;
224         stream.next_out = dest;
225         stream.avail_out = (uInt)*destLen;
226
227         stream.zalloc = (alloc_func)0;
228         stream.zfree = (free_func)0;
229
230         err = inflateInit2(&stream, -MAX_WBITS);
231         if (err != Z_OK) return err;
232
233         err = inflate(&stream, Z_FINISH);
234         if (err != Z_STREAM_END) {
235         inflateEnd(&stream);
236         if (err == Z_NEED_DICT || (err == Z_BUF_ERROR && stream.avail_in == 0))
237                 return Z_DATA_ERROR;
238                 return err;
239         }
240         *destLen = stream.total_out;
241
242         err = inflateEnd(&stream);
243         return err;
244 }
245
246 unsigned char *
247 file_data_read_compressed(struct file *file, long long offset, int size, int size_uncomp)
248 {
249         void *ret;
250         char *buffer = 0;
251         uLongf destLen=size_uncomp;
252
253         if (file_cache) {
254                 struct file_cache_id id={offset,size,file->name_id,1};
255                 ret=cache_lookup(file_cache,&id); 
256                 if (ret)
257                         return ret;
258                 ret=cache_insert_new(file_cache,&id,size_uncomp);
259         } else 
260                 ret=g_malloc(size_uncomp);
261         lseek(file->fd, offset, SEEK_SET);
262
263         buffer = (char *)g_malloc(size);
264         if (read(file->fd, buffer, size) != size) {
265                 g_free(ret);
266                 ret=NULL;
267         } else {
268                 if (uncompress_int(ret, &destLen, (Bytef *)buffer, size) != Z_OK) {
269                         dbg(0,"uncompress failed\n");
270                         g_free(ret);
271                         ret=NULL;
272                 }
273         }
274         g_free(buffer);
275
276         return ret;
277 }
278
279 void
280 file_data_free(struct file *file, unsigned char *data)
281 {
282         if (file->begin && data >= file->begin && data < file->end)
283                 return;
284         if (file_cache) {
285                 cache_entry_destroy(file_cache, data);
286         } else
287                 g_free(data);
288 }
289
290 int
291 file_exists(char *name)
292 {
293         struct stat buf;
294         if (! stat(name, &buf))
295                 return 1;
296         return 0;
297 }
298
299 void
300 file_remap_readonly(struct file *f)
301 {
302 #if defined(_WIN32) || defined(__CEGCC__)
303 #else
304         void *begin;
305         munmap(f->begin, f->size);
306         begin=mmap(f->begin, f->size, PROT_READ, MAP_PRIVATE, f->fd, 0);
307         if (f->begin != begin)
308                 printf("remap failed\n");
309 #endif
310 }
311
312 void
313 file_unmap(struct file *f)
314 {
315 #if defined(_WIN32) || defined(__CEGCC__)
316     mmap_unmap_win32( f->begin, f->map_handle , f->map_file );
317 #else
318         munmap(f->begin, f->size);
319 #endif
320 }
321
322 void *
323 file_opendir(char *dir)
324 {
325         return opendir(dir);
326 }
327
328 char *
329 file_readdir(void *hnd)
330 {
331         struct dirent *ent;
332
333         ent=readdir(hnd);
334         if (! ent)
335                 return NULL;
336         return ent->d_name;
337 }
338
339 void
340 file_closedir(void *hnd)
341 {
342         closedir(hnd);
343 }
344
345 struct file *
346 file_create_caseinsensitive(char *name)
347 {
348         char dirname[strlen(name)+1];
349         char *filename;
350         char *p;
351         void *d;
352         struct file *ret;
353
354         ret=file_create(name);
355         if (ret)
356                 return ret;
357
358         strcpy(dirname, name);
359         p=dirname+strlen(name);
360         while (p > dirname) {
361                 if (*p == '/')
362                         break;
363                 p--;
364         }
365         *p=0;
366         d=file_opendir(dirname);
367         if (d) {
368                 *p++='/';
369                 while ((filename=file_readdir(d))) {
370                         if (!strcasecmp(filename, p)) {
371                                 strcpy(p, filename);
372                                 ret=file_create(dirname);
373                                 if (ret)
374                                         break;
375                         }
376                 }
377                 file_closedir(d);
378         }
379         return ret;
380 }
381
382 void
383 file_destroy(struct file *f)
384 {
385         close(f->fd);
386
387     if ( f->begin != NULL )
388     {
389         file_unmap( f );
390     }
391
392         g_free(f->name);
393         g_free(f);
394 }
395
396 struct file_wordexp {
397         int err;
398         wordexp_t we;
399 };
400
401 struct file_wordexp *
402 file_wordexp_new(const char *pattern)
403 {
404         struct file_wordexp *ret=g_new0(struct file_wordexp, 1);
405
406         ret->err=wordexp(pattern, &ret->we, 0);
407         if (ret->err)
408                 dbg(0,"wordexp('%s') returned %d\n", pattern, ret->err);
409         return ret;
410 }
411
412 int
413 file_wordexp_get_count(struct file_wordexp *wexp)
414 {
415         return wexp->we.we_wordc;
416 }
417
418 char **
419 file_wordexp_get_array(struct file_wordexp *wexp)
420 {
421         return wexp->we.we_wordv;
422 }
423
424 void
425 file_wordexp_destroy(struct file_wordexp *wexp)
426 {
427         if (! wexp->err)
428                 wordfree(&wexp->we);
429         g_free(wexp);
430 }
431
432
433 int
434 file_get_param(struct file *file, struct param_list *param, int count)
435 {
436         int i=count;
437         param_add_string("Filename", file->name, &param, &count);
438         param_add_hex("Size", file->size, &param, &count);
439         return i-count;
440 }
441
442 int
443 file_version(struct file *file, int byname)
444 {
445 #ifndef __CEGCC__
446         struct stat st;
447         int error;
448         if (byname)
449                 error=stat(file->name, &st);
450         else
451                 error=fstat(file->fd, &st);
452         if (error || !file->version || file->mtime != st.st_mtime || file->ctime != st.st_ctime) {
453                 file->mtime=st.st_mtime;
454                 file->ctime=st.st_ctime;
455                 file->version++;
456                 dbg(0,"%s now version %d\n", file->name, file->version);
457         }
458         return file->version;
459 #else
460         return 0;
461 #endif
462 }
463
464 void *
465 file_get_os_handle(struct file *file)
466 {
467         return (void *)(file->fd);
468 }
469
470 void
471 file_init(void)
472 {
473 #ifdef CACHE_SIZE
474         file_name_hash=g_hash_table_new(g_str_hash, g_str_equal);
475         file_cache=cache_new(sizeof(struct file_cache_id), CACHE_SIZE);
476 #endif
477 }
478