6da59fd4e8166af866b6ea4a05dae406e71d53d3
[blender.git] / source / blender / blenlib / intern / storage.c
1 /**
2  * $Id$
3  *
4  * ***** BEGIN GPL LICENSE BLOCK *****
5  *
6  * This program is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU General Public License
8  * as published by the Free Software Foundation; either version 2
9  * of the License, or (at your option) any later version.
10  *
11  * This program is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14  * GNU General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License
17  * along with this program; if not, write to the Free Software Foundation,
18  * Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301, USA.
19  *
20  * The Original Code is Copyright (C) 2001-2002 by NaN Holding BV.
21  * All rights reserved.
22  *
23  * The Original Code is: all of this file.
24  *
25  * Contributor(s): none yet.
26  *
27  * ***** END GPL LICENSE BLOCK *****
28  * Reorganised mar-01 nzc
29  * Some really low-level file thingies.
30  */
31
32 #include <sys/types.h>
33 #include <stdio.h>
34 #include <stdlib.h>     
35
36 #ifndef WIN32
37 #include <dirent.h>
38 #endif
39
40 #include <time.h>
41 #include <sys/stat.h>
42
43 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
44 #include <sys/statvfs.h> /* Other modern unix os's should probably use this also */
45 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
46 #include <sys/statfs.h>
47 #endif
48
49 #if defined (__FreeBSD__) || defined (__OpenBSD__)
50 #include <sys/param.h>
51 #include <sys/mount.h>
52 #endif
53
54 #if defined(linux) || defined(__CYGWIN32__) || defined(__hpux)
55 #include <sys/vfs.h>
56 #endif
57
58 #ifdef __APPLE__
59 /* For statfs */
60 #include <sys/param.h>
61 #include <sys/mount.h>
62 #endif /* __APPLE__ */
63
64
65 #include <fcntl.h>
66 #include <string.h>                     /* strcpy etc.. */
67
68 #ifndef WIN32
69 #include <sys/ioctl.h>
70 #include <unistd.h>                     /*  */
71 #include <pwd.h>
72 #endif
73
74 #if !defined(__FreeBSD__) && !defined(__APPLE__)
75 #include <malloc.h>
76 #endif
77
78 #ifdef WIN32
79 #include <io.h>
80 #include <direct.h>
81 #include "BLI_winstuff.h"
82 #endif
83
84
85 /* lib includes */
86 #include "MEM_guardedalloc.h"
87
88 #include "DNA_listBase.h"
89
90 #include "BLI_listbase.h"
91 #include "BLI_linklist.h"
92 #include "BLI_storage_types.h"
93 #include "BLI_string.h"
94
95 #include "BKE_utildefines.h"
96
97 /* vars: */
98 static int totnum,actnum;
99 static struct direntry *files;
100
101 static struct ListBase dirbase_={
102         0,0};
103 static struct ListBase *dirbase = &dirbase_;
104
105
106 char *BLI_getwdN(char *dir)
107 {
108         char *pwd;
109
110         if (dir) {
111                 pwd = getenv("PWD");
112                 if (pwd){
113                         strcpy(dir, pwd);
114                         return(dir);
115                 }
116                 /* 160 is FILE_MAXDIR in filesel.c */
117                 return( getcwd(dir, 160) );
118         }
119         return(0);
120 }
121
122
123 int BLI_compare(struct direntry *entry1, struct direntry *entry2)
124 {
125         /* type is equal to stat.st_mode */
126
127         if (S_ISDIR(entry1->type)){
128                 if (S_ISDIR(entry2->type)==0) return (-1);
129         } else{
130                 if (S_ISDIR(entry2->type)) return (1);
131         }
132         if (S_ISREG(entry1->type)){
133                 if (S_ISREG(entry2->type)==0) return (-1);
134         } else{
135                 if (S_ISREG(entry2->type)) return (1);
136         }
137         if ((entry1->type & S_IFMT) < (entry2->type & S_IFMT)) return (-1);
138         if ((entry1->type & S_IFMT) > (entry2->type & S_IFMT)) return (1);
139         
140         /* make sure "." and ".." are always first */
141         if( strcmp(entry1->relname, ".")==0 ) return (-1);
142         if( strcmp(entry2->relname, ".")==0 ) return (1);
143         if( strcmp(entry1->relname, "..")==0 ) return (-1);
144         if( strcmp(entry2->relname, "..")==0 ) return (1);
145
146         return (BLI_natstrcmp(entry1->relname,entry2->relname));
147 }
148
149
150 double BLI_diskfree(const char *dir)
151 {
152 #ifdef WIN32
153         DWORD sectorspc, bytesps, freec, clusters;
154         char tmp[4];
155         
156         tmp[0]='\\'; tmp[1]=0; /* Just a failsafe */
157         if (dir[0]=='/' || dir[0]=='\\') {
158                 tmp[0]='\\';
159                 tmp[1]=0;
160         } else if (dir[1]==':') {
161                 tmp[0]=dir[0];
162                 tmp[1]=':';
163                 tmp[2]='\\';
164                 tmp[3]=0;
165         }
166
167         GetDiskFreeSpace(tmp,&sectorspc, &bytesps, &freec, &clusters);
168
169         return (double) (freec*bytesps*sectorspc);
170 #else
171
172 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
173         struct statvfs disk;
174 #else
175         struct statfs disk;
176 #endif
177         char name[FILE_MAXDIR],*slash;
178         int len = strlen(dir);
179         
180         if (len >= FILE_MAXDIR) /* path too long */
181                 return -1;
182         
183         strcpy(name,dir);
184
185         if(len){
186                 slash = strrchr(name,'/');
187                 if (slash) slash[1] = 0;
188         } else strcpy(name,"/");
189
190 #if defined (__FreeBSD__) || defined (linux) || defined (__OpenBSD__) || defined (__APPLE__) 
191         if (statfs(name, &disk)) return(-1);
192 #endif
193
194 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
195         if (statvfs(name, &disk)) return(-1);   
196 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
197         /* WARNING - This may not be supported by geeneric unix os's - Campbell */
198         if (statfs(name, &disk, sizeof(struct statfs), 0)) return(-1);
199 #endif
200
201         return ( ((double) disk.f_bsize) * ((double) disk.f_bfree));
202 #endif
203 }
204
205 void BLI_builddir(const char *dirname, const char *relname)
206 {
207         struct dirent *fname;
208         struct dirlink *dlink;
209         int rellen, newnum = 0, len;
210         char buf[256];
211         DIR *dir;
212
213         strcpy(buf,relname);
214         rellen=strlen(relname);
215
216         if (rellen){
217                 buf[rellen]='/';
218                 rellen++;
219         }
220
221         if (chdir(dirname) == -1){
222                 perror(dirname);
223                 return;
224         }
225
226         if ( (dir = (DIR *)opendir(".")) ){
227                 while ((fname = (struct dirent*) readdir(dir)) != NULL) {
228                         len= strlen(fname->d_name);
229                         
230                         dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
231                         if (dlink){
232                                 strcpy(buf+rellen,fname->d_name);
233                                 dlink->name = BLI_strdup(buf);
234                                 BLI_addhead(dirbase,dlink);
235                                 newnum++;
236                         }
237                 }
238                 
239                 if (newnum){
240
241                         if(files) {
242                                 void *tmp= realloc(files, (totnum+newnum) * sizeof(struct direntry));
243                                 if(tmp) {
244                                         files= (struct direntry *)tmp;
245                                 }
246                                 else { /* realloc fail */
247                                         free(files);
248                                         files= NULL;
249                                 }
250                         }
251                         
252                         if(files==NULL)
253                                 files=(struct direntry *)malloc(newnum * sizeof(struct direntry));
254
255                         if (files){
256                                 dlink = (struct dirlink *) dirbase->first;
257                                 while(dlink){
258                                         memset(&files[actnum], 0 , sizeof(struct direntry));
259                                         files[actnum].relname = dlink->name;
260                                         files[actnum].path = BLI_strdupcat(dirname, dlink->name);
261 // use 64 bit file size, only needed for WIN32 and WIN64. 
262 // Excluding other than current MSVC compiler until able to test.
263 #if (defined(WIN32) || defined(WIN64)) && (_MSC_VER>=1500)
264                                         _stat64(dlink->name,&files[actnum].s);
265 #elif defined(__MINGW32__)
266                                         _stati64(dlink->name,&files[actnum].s);
267 #else
268                                         stat(dlink->name,&files[actnum].s);
269 #endif
270                                         files[actnum].type=files[actnum].s.st_mode;
271                                         files[actnum].flags = 0;
272                                         totnum++;
273                                         actnum++;
274                                         dlink = dlink->next;
275                                 }
276                         } else{
277                                 printf("Couldn't get memory for dir\n");
278                                 exit(1);
279                         }
280
281                         BLI_freelist(dirbase);
282                         if (files) qsort(files, actnum, sizeof(struct direntry), (int (*)(const void *,const void*))BLI_compare);
283                 } else {
284                         printf("%s empty directory\n",dirname);
285                 }
286
287                 closedir(dir);
288         } else {
289                 printf("%s non-existant directory\n",dirname);
290         }
291 }
292
293 void BLI_adddirstrings(void)
294 {
295         char datum[100];
296         char buf[512];
297         char size[250];
298         static const char * types[8] = {"---", "--x", "-w-", "-wx", "r--", "r-x", "rw-", "rwx"};
299         int num, mode;
300 #ifdef WIN32
301         __int64 st_size;
302 #else
303         off_t st_size;
304 #endif
305         
306         struct direntry * file;
307         struct tm *tm;
308         time_t zero= 0;
309         
310         for(num=0, file= files; num<actnum; num++, file++){
311 #ifdef WIN32
312                 mode = 0;
313                 strcpy(file->mode1, types[0]);
314                 strcpy(file->mode2, types[0]);
315                 strcpy(file->mode3, types[0]);
316 #else
317                 mode = file->s.st_mode;
318
319                 strcpy(file->mode1, types[(mode & 0700) >> 6]);
320                 strcpy(file->mode2, types[(mode & 0070) >> 3]);
321                 strcpy(file->mode3, types[(mode & 0007)]);
322                 
323                 if (((mode & S_ISGID) == S_ISGID) && (file->mode2[2]=='-'))file->mode2[2]='l';
324
325                 if (mode & (S_ISUID | S_ISGID)){
326                         if (file->mode1[2]=='x') file->mode1[2]='s';
327                         else file->mode1[2]='S';
328
329                         if (file->mode2[2]=='x')file->mode2[2]='s';
330                 }
331
332                 if (mode & S_ISVTX){
333                         if (file->mode3[2] == 'x') file->mode3[2] = 't';
334                         else file->mode3[2] = 'T';
335                 }
336 #endif
337
338 #ifdef WIN32
339                 strcpy(file->owner,"user");
340 #else
341                 {
342                         struct passwd *pwuser;
343                         pwuser = getpwuid(file->s.st_uid);
344                         if ( pwuser ) {
345                                 BLI_strncpy(file->owner, pwuser->pw_name, sizeof(file->owner));
346                         } else {
347                                 snprintf(file->owner, sizeof(file->owner), "%d", file->s.st_uid);
348                         }
349                 }
350 #endif
351
352                 tm= localtime(&file->s.st_mtime);
353                 // prevent impossible dates in windows
354                 if(tm==NULL) tm= localtime(&zero);
355                 strftime(file->time, 8, "%H:%M", tm);
356                 strftime(file->date, 16, "%d-%b-%y", tm);
357
358                 /*
359                  * Seems st_size is signed 32-bit value in *nix and Windows.  This
360                  * will buy us some time until files get bigger than 4GB or until
361                  * everyone starts using __USE_FILE_OFFSET64 or equivalent.
362                  */
363                 st_size= file->s.st_size;
364
365                 if (st_size > 1024*1024*1024) {
366                         sprintf(file->size, "%.2f GB", ((double)st_size)/(1024*1024*1024));     
367                 }
368                 else if (st_size > 1024*1024) {
369                         sprintf(file->size, "%.1f MB", ((double)st_size)/(1024*1024));
370                 }
371                 else if (st_size > 1024) {
372                         sprintf(file->size, "%d KB", (int)(st_size/1024));
373                 }
374                 else {
375                         sprintf(file->size, "%d B", (int)st_size);
376                 }
377
378                 strftime(datum, 32, "%d-%b-%y %H:%M", tm);
379
380                 if (st_size < 1000) {
381                         sprintf(size, "%10d", (int) st_size);
382                 } else if (st_size < 1000 * 1000) {
383                         sprintf(size, "%6d %03d", (int) (st_size / 1000), (int) (st_size % 1000));
384                 } else if (st_size < 100 * 1000 * 1000) {
385                         sprintf(size, "%2d %03d %03d", (int) (st_size / (1000 * 1000)), (int) ((st_size / 1000) % 1000), (int) ( st_size % 1000));
386                 } else {
387                         sprintf(size, "> %4.1f M", (double) (st_size / (1024.0 * 1024.0)));
388                         sprintf(size, "%10d", (int) st_size);
389                 }
390
391                 sprintf(buf,"%s %s %s %7s %s %s %10s %s", file->mode1, file->mode2, file->mode3, file->owner, file->date, file->time, size,
392                         file->relname);
393
394                 file->string=MEM_mallocN(strlen(buf)+1, "filestring");
395                 if (file->string){
396                         strcpy(file->string,buf);
397                 }
398         }
399 }
400
401 unsigned int BLI_getdir(const char *dirname,  struct direntry **filelist)
402 {
403         // reset global variables
404         // memory stored in files is free()'d in
405         // filesel.c:freefilelist()
406
407         actnum = totnum = 0;
408         files = 0;
409
410         BLI_builddir(dirname,"");
411         BLI_adddirstrings();
412
413         if (files) {
414                 *(filelist) = files;
415         } else {
416                 // keep blender happy. Blender stores this in a variable
417                 // where 0 has special meaning.....
418                 *(filelist) = files = malloc(sizeof(struct direntry));
419         }
420
421         return(actnum);
422 }
423
424
425 size_t BLI_filesize(int file)
426 {
427         struct stat buf;
428
429         if (file <= 0) return (-1);
430         fstat(file, &buf);
431         return (buf.st_size);
432 }
433
434 size_t BLI_filepathsize(const char *path)
435 {
436         int size, file = open(path, O_BINARY|O_RDONLY);
437         
438         if (file == -1)
439                 return -1;
440         
441         size = BLI_filesize(file);
442         close(file);
443         return size;
444 }
445
446
447 int BLI_exist(const char *name)
448 {
449 #if defined(WIN32) && !defined(__MINGW32__)
450         struct _stat64i32 st;
451         /*  in Windows stat doesn't recognize dir ending on a slash 
452                 To not break code where the ending slash is expected we
453                 don't mess with the argument name directly here - elubie */
454         char tmp[FILE_MAXDIR+FILE_MAXFILE];
455         int len, res;
456         BLI_strncpy(tmp, name, FILE_MAXDIR+FILE_MAXFILE);
457         len = strlen(tmp);
458         if (len > 3 && ( tmp[len-1]=='\\' || tmp[len-1]=='/') ) tmp[len-1] = '\0';
459         res = _stat(tmp, &st);
460         if (res == -1) return(0);
461 #elif defined(__MINGW32__)
462         struct _stati64 st;
463         char tmp[FILE_MAXDIR+FILE_MAXFILE];
464         int len, res;
465         BLI_strncpy(tmp, name, FILE_MAXDIR+FILE_MAXFILE);
466         len = strlen(tmp);
467         if (len > 3 && ( tmp[len-1]=='\\' || tmp[len-1]=='/') ) tmp[len-1] = '\0';
468         res = _stati64(tmp, &st);
469         if (res) return(0);
470 #else
471         struct stat st;
472         if (stat(name,&st)) return(0);  
473 #endif
474         return(st.st_mode);
475 }
476
477 /* would be better in fileops.c except that it needs stat.h so add here */
478 int BLI_is_dir(const char *file) {
479         return S_ISDIR(BLI_exist(file));
480 }
481
482 LinkNode *BLI_read_file_as_lines(char *name)
483 {
484         FILE *fp= fopen(name, "r");
485         LinkNode *lines= NULL;
486         char *buf;
487         int size;
488
489         if (!fp) return NULL;
490                 
491         fseek(fp, 0, SEEK_END);
492         size= ftell(fp);
493         fseek(fp, 0, SEEK_SET);
494
495         buf= MEM_mallocN(size, "file_as_lines");
496         if (buf) {
497                 int i, last= 0;
498                 
499                         /* 
500                          * size = because on win32 reading
501                          * all the bytes in the file will return
502                          * less bytes because of crnl changes.
503                          */
504                 size= fread(buf, 1, size, fp);
505                 for (i=0; i<=size; i++) {
506                         if (i==size || buf[i]=='\n') {
507                                 char *line= BLI_strdupn(&buf[last], i-last);
508
509                                 BLI_linklist_prepend(&lines, line);
510                                 last= i+1;
511                         }
512                 }
513                 
514                 MEM_freeN(buf);
515         }
516         
517         fclose(fp);
518         
519         BLI_linklist_reverse(&lines);
520         return lines;
521 }
522
523 void BLI_free_file_lines(LinkNode *lines)
524 {
525         BLI_linklist_free(lines, (void(*)(void*)) MEM_freeN);
526 }
527
528 int BLI_file_older(const char *file1, const char *file2)
529 {
530         struct stat st1, st2;
531
532         if(stat(file1, &st1)) return 0;
533         if(stat(file2, &st2)) return 0;
534
535         return (st1.st_mtime < st2.st_mtime);
536 }
537