Merge from trunk -r 22040:23000.
[blender-staging.git] / source / blender / blenlib / intern / storage.c
1 /**
2  * $Id$
3  *
4  * ***** BEGIN GPL LICENSE BLOCK *****
5  *
6  * This program is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU General Public License
8  * as published by the Free Software Foundation; either version 2
9  * of the License, or (at your option) any later version.
10  *
11  * This program is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14  * GNU General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License
17  * along with this program; if not, write to the Free Software Foundation,
18  * Inc., 59 Temple Place - Suite 330, Boston, MA  02111-1307, USA.
19  *
20  * The Original Code is Copyright (C) 2001-2002 by NaN Holding BV.
21  * All rights reserved.
22  *
23  * The Original Code is: all of this file.
24  *
25  * Contributor(s): none yet.
26  *
27  * ***** END GPL LICENSE BLOCK *****
28  * Reorganised mar-01 nzc
29  * Some really low-level file thingies.
30  */
31
32 #include <sys/types.h>
33 #include <stdio.h>
34 #include <stdlib.h>     
35
36 #ifdef WIN32
37 #include "BLI_winstuff.h"
38 #include <sys/types.h>
39 #include <io.h>
40 #include <direct.h>
41 #endif
42
43 #ifndef WIN32
44 #include <dirent.h>
45 #endif
46
47 #include <time.h>
48 #include <sys/stat.h>
49
50 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
51 #include <sys/statvfs.h> /* Other modern unix os's should probably use this also */
52 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
53 #include <sys/statfs.h>
54 #endif
55
56 #if defined (__FreeBSD__) || defined (__OpenBSD__)
57 #include <sys/param.h>
58 #include <sys/mount.h>
59 #endif
60
61 #if defined(linux) || defined(__CYGWIN32__) || defined(__hpux)
62 #include <sys/vfs.h>
63 #endif
64
65 #ifdef __APPLE__
66 /* For statfs */
67 #include <sys/param.h>
68 #include <sys/mount.h>
69 #endif /* __APPLE__ */
70
71
72 #include <fcntl.h>
73 #include <string.h>                     /* strcpy etc.. */
74
75 #ifndef WIN32
76 #include <sys/ioctl.h>
77 #include <unistd.h>                     /*  */
78 #include <pwd.h>
79 #endif
80
81 #if !defined(__FreeBSD__) && !defined(__APPLE__)
82 #include <malloc.h>
83 #endif
84
85 /* lib includes */
86 #include "MEM_guardedalloc.h"
87
88 #include "DNA_listBase.h"
89 #include "BLI_blenlib.h"
90 #include "BLI_storage.h"
91 #include "BLI_storage_types.h"
92
93 #include "BLI_util.h"
94 #include "BLI_linklist.h"
95
96 #include "BKE_utildefines.h"
97
98 /* vars: */
99 static int totnum,actnum;
100 static struct direntry *files;
101
102 static struct ListBase dirbase_={
103         0,0};
104 static struct ListBase *dirbase = &dirbase_;
105
106
107 char *BLI_getwdN(char *dir)
108 {
109         char *pwd;
110
111         if (dir) {
112                 pwd = getenv("PWD");
113                 if (pwd){
114                         strcpy(dir, pwd);
115                         return(dir);
116                 }
117                 /* 160 is FILE_MAXDIR in filesel.c */
118                 return( getcwd(dir, 160) );
119         }
120         return(0);
121 }
122
123
124 int BLI_compare(struct direntry *entry1, struct direntry *entry2)
125 {
126         /* type is equal to stat.st_mode */
127
128         if (S_ISDIR(entry1->type)){
129                 if (S_ISDIR(entry2->type)==0) return (-1);
130         } else{
131                 if (S_ISDIR(entry2->type)) return (1);
132         }
133         if (S_ISREG(entry1->type)){
134                 if (S_ISREG(entry2->type)==0) return (-1);
135         } else{
136                 if (S_ISREG(entry2->type)) return (1);
137         }
138         if ((entry1->type & S_IFMT) < (entry2->type & S_IFMT)) return (-1);
139         if ((entry1->type & S_IFMT) > (entry2->type & S_IFMT)) return (1);
140         
141         /* make sure "." and ".." are always first */
142         if( strcmp(entry1->relname, ".")==0 ) return (-1);
143         if( strcmp(entry2->relname, ".")==0 ) return (1);
144         if( strcmp(entry1->relname, "..")==0 ) return (-1);
145         if( strcmp(entry2->relname, "..")==0 ) return (1);
146
147         return (BLI_natstrcmp(entry1->relname,entry2->relname));
148 }
149
150
151 double BLI_diskfree(char *dir)
152 {
153 #ifdef WIN32
154         DWORD sectorspc, bytesps, freec, clusters;
155         char tmp[4];
156         
157         tmp[0]='\\'; tmp[1]=0; /* Just a failsafe */
158         if (dir[0]=='/' || dir[0]=='\\') {
159                 tmp[0]='\\';
160                 tmp[1]=0;
161         } else if (dir[1]==':') {
162                 tmp[0]=dir[0];
163                 tmp[1]=':';
164                 tmp[2]='\\';
165                 tmp[3]=0;
166         }
167
168         GetDiskFreeSpace(tmp,&sectorspc, &bytesps, &freec, &clusters);
169
170         return (double) (freec*bytesps*sectorspc);
171 #else
172
173 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
174         struct statvfs disk;
175 #else
176         struct statfs disk;
177 #endif
178         char name[FILE_MAXDIR],*slash;
179         int len = strlen(dir);
180         
181         if (len >= FILE_MAXDIR) /* path too long */
182                 return -1;
183         
184         strcpy(name,dir);
185
186         if(len){
187                 slash = strrchr(name,'/');
188                 if (slash) slash[1] = 0;
189         } else strcpy(name,"/");
190
191 #if defined (__FreeBSD__) || defined (linux) || defined (__OpenBSD__) || defined (__APPLE__) 
192         if (statfs(name, &disk)) return(-1);
193 #endif
194
195 #if defined (__sun__) || defined (__sun) || defined (__sgi) || defined (__NetBSD__)
196         if (statvfs(name, &disk)) return(-1);   
197 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
198         /* WARNING - This may not be supported by geeneric unix os's - Campbell */
199         if (statfs(name, &disk, sizeof(struct statfs), 0)) return(-1);
200 #endif
201
202         return ( ((double) disk.f_bsize) * ((double) disk.f_bfree));
203 #endif
204 }
205
206 static int hide_dot= 0;
207
208 void BLI_hide_dot_files(int set)
209 {
210         if(set) hide_dot= 1;
211         else hide_dot= 0;
212 }
213
214 void BLI_builddir(char *dirname, char *relname)
215 {
216         struct dirent *fname;
217         struct dirlink *dlink;
218         int rellen, newnum = 0, len;
219         char buf[256];
220         DIR *dir;
221
222         strcpy(buf,relname);
223         rellen=strlen(relname);
224
225         if (rellen){
226                 buf[rellen]='/';
227                 rellen++;
228         }
229
230         if (chdir(dirname) == -1){
231                 perror(dirname);
232                 return;
233         }
234
235         if ( (dir = (DIR *)opendir(".")) ){
236                 while ((fname = (struct dirent*) readdir(dir)) != NULL) {
237                         len= strlen(fname->d_name);
238                         
239                         if(hide_dot && fname->d_name[0]=='.' && fname->d_name[1]!='.' && fname->d_name[1]!=0); /* ignore .file */
240                         else if(hide_dot && len && fname->d_name[len-1]=='~'); /* ignore file~ */
241                         else if (((fname->d_name[0] == '.') && (fname->d_name[1] == 0) )); /* ignore . */
242                         else {
243                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
244                                 if (dlink){
245                                         strcpy(buf+rellen,fname->d_name);
246                                         dlink->name = BLI_strdup(buf);
247                                         BLI_addhead(dirbase,dlink);
248                                         newnum++;
249                                 }
250                         }
251                 }
252                 
253                 if (newnum){
254
255                         if (files) files=(struct direntry *)realloc(files,(totnum+newnum) * sizeof(struct direntry));
256                         else files=(struct direntry *)malloc(newnum * sizeof(struct direntry));
257
258                         if (files){
259                                 dlink = (struct dirlink *) dirbase->first;
260                                 while(dlink){
261                                         memset(&files[actnum], 0 , sizeof(struct direntry));
262                                         files[actnum].relname = dlink->name;
263 // use 64 bit file size, only needed for WIN32 and WIN64. 
264 // Excluding other than current MSVC compiler until able to test.
265 #if (defined(WIN32) || defined(WIN64)) && (_MSC_VER>=1500)
266                                         _stat64(dlink->name,&files[actnum].s);
267 #else
268                                         stat(dlink->name,&files[actnum].s);
269 #endif
270                                         files[actnum].type=files[actnum].s.st_mode;
271                                         files[actnum].flags = 0;
272                                         totnum++;
273                                         actnum++;
274                                         dlink = dlink->next;
275                                 }
276                         } else{
277                                 printf("Couldn't get memory for dir\n");
278                                 exit(1);
279                         }
280
281                         BLI_freelist(dirbase);
282                         if (files) qsort(files, actnum, sizeof(struct direntry), (int (*)(const void *,const void*))BLI_compare);
283                 } else {
284                         printf("%s empty directory\n",dirname);
285                 }
286
287                 closedir(dir);
288         } else {
289                 printf("%s non-existant directory\n",dirname);
290         }
291 }
292
293 void BLI_adddirstrings()
294 {
295         char datum[100];
296         char buf[512];
297         char size[250];
298         static char * types[8] = {"---", "--x", "-w-", "-wx", "r--", "r-x", "rw-", "rwx"};
299         int num, mode;
300 #ifdef WIN32
301         __int64 st_size;
302 #else
303         off_t st_size;
304 #endif
305         
306         struct direntry * file;
307         struct tm *tm;
308         time_t zero= 0;
309
310         file = &files[0];
311         
312         for(num=0;num<actnum;num++){
313 #ifdef WIN32
314                 mode = 0;
315                 strcpy(file->mode1, types[0]);
316                 strcpy(file->mode2, types[0]);
317                 strcpy(file->mode3, types[0]);
318 #else
319                 mode = file->s.st_mode;
320
321                 strcpy(file->mode1, types[(mode & 0700) >> 6]);
322                 strcpy(file->mode2, types[(mode & 0070) >> 3]);
323                 strcpy(file->mode3, types[(mode & 0007)]);
324                 
325                 if (((mode & S_ISGID) == S_ISGID) && (file->mode2[2]=='-'))file->mode2[2]='l';
326
327                 if (mode & (S_ISUID | S_ISGID)){
328                         if (file->mode1[2]=='x') file->mode1[2]='s';
329                         else file->mode1[2]='S';
330
331                         if (file->mode2[2]=='x')file->mode2[2]='s';
332                 }
333
334                 if (mode & S_ISVTX){
335                         if (file->mode3[2] == 'x') file->mode3[2] = 't';
336                         else file->mode3[2] = 'T';
337                 }
338 #endif
339
340 #ifdef WIN32
341                 strcpy(files[num].owner,"user");
342 #else
343                 {
344                         struct passwd *pwuser;
345                         pwuser = getpwuid(files[num].s.st_uid);
346                         if ( pwuser ) {
347                         strcpy(files[num].owner, pwuser->pw_name);
348                         } else {
349                                 sprintf(files[num].owner, "%d", files[num].s.st_uid);
350             }
351                 }
352 #endif
353
354                 tm= localtime(&files[num].s.st_mtime);
355                 // prevent impossible dates in windows
356                 if(tm==NULL) tm= localtime(&zero);
357                 strftime(files[num].time, 8, "%H:%M", tm);
358                 strftime(files[num].date, 16, "%d-%b-%y", tm);
359
360                 /*
361                  * Seems st_size is signed 32-bit value in *nix and Windows.  This
362                  * will buy us some time until files get bigger than 4GB or until
363                  * everyone starts using __USE_FILE_OFFSET64 or equivalent.
364                  */
365                 st_size= files[num].s.st_size;
366
367                 if (st_size > 1024*1024*1024) {
368                         sprintf(files[num].size, "%.2f GB", ((double)st_size)/(1024*1024*1024));        
369                 }
370                 else if (st_size > 1024*1024) {
371                         sprintf(files[num].size, "%.1f MB", ((double)st_size)/(1024*1024));
372                 }
373                 else if (st_size > 1024) {
374                         sprintf(files[num].size, "%d KB", (int)(st_size/1024));
375                 }
376                 else {
377                         sprintf(files[num].size, "%d B", (int)st_size);
378                 }
379
380                 strftime(datum, 32, "%d-%b-%y %H:%M", tm);
381
382                 if (st_size < 1000) {
383                         sprintf(size, "%10d", (int) st_size);
384                 } else if (st_size < 1000 * 1000) {
385                         sprintf(size, "%6d %03d", (int) (st_size / 1000), (int) (st_size % 1000));
386                 } else if (st_size < 100 * 1000 * 1000) {
387                         sprintf(size, "%2d %03d %03d", (int) (st_size / (1000 * 1000)), (int) ((st_size / 1000) % 1000), (int) ( st_size % 1000));
388                 } else {
389                         sprintf(size, "> %4.1f M", (double) (st_size / (1024.0 * 1024.0)));
390                         sprintf(size, "%10d", (int) st_size);
391                 }
392
393                 sprintf(buf,"%s %s %s %7s %s %s %10s %s", file->mode1, file->mode2, file->mode3, files[num].owner, files[num].date, files[num].time, size,
394                         files[num].relname);
395
396                 files[num].string=MEM_mallocN(strlen(buf)+1, "filestring");
397                 if (files[num].string){
398                         strcpy(files[num].string,buf);
399                 }
400
401                 file++;
402         }
403 }
404
405 unsigned int BLI_getdir(char *dirname,  struct direntry **filelist)
406 {
407         // reset global variables
408         // memory stored in files is free()'d in
409         // filesel.c:freefilelist()
410
411         actnum = totnum = 0;
412         files = 0;
413
414         BLI_builddir(dirname,"");
415         BLI_adddirstrings();
416
417         if (files) {
418                 *(filelist) = files;
419         } else {
420                 // keep blender happy. Blender stores this in a variable
421                 // where 0 has special meaning.....
422                 *(filelist) = files = malloc(sizeof(struct direntry));
423         }
424
425         return(actnum);
426 }
427
428
429 int BLI_filesize(int file)
430 {
431         struct stat buf;
432
433         if (file <= 0) return (-1);
434         fstat(file, &buf);
435         return (buf.st_size);
436 }
437
438 int BLI_filepathsize(const char *path)
439 {
440         int size, file = open(path, O_BINARY|O_RDONLY);
441         
442         if (file <= 0)
443                 return -1;
444         
445         size = BLI_filesize(file);
446         close(file);
447         return size;
448 }
449
450
451 int BLI_exist(char *name)
452 {
453         struct stat st;
454 #ifdef WIN32
455         /*  in Windows stat doesn't recognize dir ending on a slash 
456                 To not break code where the ending slash is expected we
457                 don't mess with the argument name directly here - elubie */
458         char tmp[FILE_MAXDIR+FILE_MAXFILE];
459         int len;
460         BLI_strncpy(tmp, name, FILE_MAXDIR+FILE_MAXFILE);
461         len = strlen(tmp);
462         if (len > 3 && ( tmp[len-1]=='\\' || tmp[len-1]=='/') ) tmp[len-1] = '\0';
463         if (stat(tmp,&st)) return(0);
464 #else
465         if (stat(name,&st)) return(0);  
466 #endif
467         return(st.st_mode);
468 }
469
470 LinkNode *BLI_read_file_as_lines(char *name)
471 {
472         FILE *fp= fopen(name, "r");
473         LinkNode *lines= NULL;
474         char *buf;
475         int size;
476
477         if (!fp) return NULL;
478                 
479         fseek(fp, 0, SEEK_END);
480         size= ftell(fp);
481         fseek(fp, 0, SEEK_SET);
482
483         buf= malloc(size);
484         if (buf) {
485                 int i, last= 0;
486                 
487                         /* 
488                          * size = because on win32 reading
489                          * all the bytes in the file will return
490                          * less bytes because of crnl changes.
491                          */
492                 size= fread(buf, 1, size, fp);
493                 for (i=0; i<=size; i++) {
494                         if (i==size || buf[i]=='\n') {
495                                 char *line= BLI_strdupn(&buf[last], i-last);
496
497                                 BLI_linklist_prepend(&lines, line);
498                                 last= i+1;
499                         }
500                 }
501                 
502                 free(buf);
503         }
504         
505         fclose(fp);
506         
507         BLI_linklist_reverse(&lines);
508         return lines;
509 }
510
511 void BLI_free_file_lines(LinkNode *lines)
512 {
513         BLI_linklist_free(lines, (void(*)(void*)) MEM_freeN);
514 }