Patch from Giuseppe Ghibò, modified not to use scons defines.
[blender-staging.git] / source / blender / blenlib / intern / storage.c
1 /**
2  * $Id$
3  *
4  * ***** BEGIN GPL/BL DUAL LICENSE BLOCK *****
5  *
6  * This program is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU General Public License
8  * as published by the Free Software Foundation; either version 2
9  * of the License, or (at your option) any later version. The Blender
10  * Foundation also sells licenses for use in proprietary software under
11  * the Blender License.  See http://www.blender.org/BL/ for information
12  * about this.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software Foundation,
21  * Inc., 59 Temple Place - Suite 330, Boston, MA  02111-1307, USA.
22  *
23  * The Original Code is Copyright (C) 2001-2002 by NaN Holding BV.
24  * All rights reserved.
25  *
26  * The Original Code is: all of this file.
27  *
28  * Contributor(s): none yet.
29  *
30  * ***** END GPL/BL DUAL LICENSE BLOCK *****
31  * Reorganised mar-01 nzc
32  * Some really low-level file thingies.
33  */
34
35 #ifndef WIN32
36 #define _LARGEFILE_SOURCE 1
37 #define _FILE_OFFSET_BITS 64
38 #endif
39
40 #include <sys/types.h>
41 #include <stdio.h>
42 #include <stdlib.h>     
43
44 #ifdef WIN32
45 #include "BLI_winstuff.h"
46 #include <sys/types.h>
47 #include <io.h>
48 #include <direct.h>
49 #endif
50
51 #ifndef WIN32
52 #include <dirent.h>
53 #endif
54
55 #include <time.h>
56 #include <sys/stat.h>
57
58 #if defined (__sun__) || defined (__sun)
59 #include <sys/statvfs.h> /* Other modern unix os's should probably use this also */
60 #elif !defined(linux) && (defined(__sgi) || defined(__sparc) || defined(__sparc__))
61 #include <sys/statfs.h>
62 #endif
63
64 #if defined (__FreeBSD__) || defined (__OpenBSD__) || defined (__NetBSD__)
65 #include <sys/param.h>
66 #include <sys/mount.h>
67 #endif
68
69 #if defined(linux) || defined(__CYGWIN32__) || defined(__hpux)
70 #include <sys/vfs.h>
71 #endif
72
73 #ifdef __BeOS
74 struct statfs {
75         int f_bsize;
76         int f_bfree;
77 };
78 #endif
79
80 #ifdef __APPLE__
81 /* For statfs */
82 #include <sys/param.h>
83 #include <sys/mount.h>
84 #endif /* __APPLE__ */
85
86
87 #include <fcntl.h>
88 #if !defined(__BeOS) && !defined(WIN32)
89 #include <sys/mtio.h>                   /* tape comando's */
90 #endif
91 #include <string.h>                     /* strcpy etc.. */
92
93 #ifndef WIN32
94 #include <sys/ioctl.h>
95 #include <unistd.h>                     /*  */
96 #include <pwd.h>
97 #endif
98
99 #if !defined(__FreeBSD__) && !defined(__APPLE__)
100 #include <malloc.h>
101 #endif
102
103 /* lib includes */
104 #include "MEM_guardedalloc.h"
105
106 #include "DNA_listBase.h"
107 #include "BLI_blenlib.h"
108 #include "BLI_storage.h"
109 #include "BLI_storage_types.h"
110
111 #include "BLI_util.h"
112 #include "BLI_linklist.h"
113
114 #include "BKE_utildefines.h"
115
116 /* vars: */
117 static int totnum,actnum;
118 static struct direntry *files;
119
120 static struct ListBase dirbase_={
121         0,0};
122 static struct ListBase *dirbase = &dirbase_;
123
124
125 char *BLI_getwdN(char *dir)
126 {
127         char *pwd;
128
129         if (dir) {
130                 pwd = getenv("PWD");
131                 if (pwd){
132                         strcpy(dir, pwd);
133                         return(dir);
134                 }
135                 /* 160 is FILE_MAXDIR in filesel.c */
136                 return( getcwd(dir, 160) );
137         }
138         return(0);
139 }
140
141
142 int BLI_compare(struct direntry *entry1, struct direntry *entry2)
143 {
144         /* type is equal to stat.st_mode */
145
146         if (S_ISDIR(entry1->type)){
147                 if (S_ISDIR(entry2->type)==0) return (-1);
148         } else{
149                 if (S_ISDIR(entry2->type)) return (1);
150         }
151         if (S_ISREG(entry1->type)){
152                 if (S_ISREG(entry2->type)==0) return (-1);
153         } else{
154                 if (S_ISREG(entry2->type)) return (1);
155         }
156         if ((entry1->type & S_IFMT) < (entry2->type & S_IFMT)) return (-1);
157         if ((entry1->type & S_IFMT) > (entry2->type & S_IFMT)) return (1);
158         
159         /* make sure "." and ".." are always first */
160         if( strcmp(entry1->relname, ".")==0 ) return (-1);
161         if( strcmp(entry2->relname, ".")==0 ) return (1);
162         if( strcmp(entry1->relname, "..")==0 ) return (-1);
163         
164         return (BLI_strcasecmp(entry1->relname,entry2->relname));
165 }
166
167
168 double BLI_diskfree(char *dir)
169 {
170 #ifdef WIN32
171         DWORD sectorspc, bytesps, freec, clusters;
172         char tmp[4];
173         
174         tmp[0]='\\'; tmp[1]=0; /* Just a failsafe */
175         if (dir[0]=='/' || dir[0]=='\\') {
176                 tmp[0]='\\';
177                 tmp[1]=0;
178         } else if (dir[1]==':') {
179                 tmp[0]=dir[0];
180                 tmp[1]=':';
181                 tmp[2]='\\';
182                 tmp[3]=0;
183         }
184
185         GetDiskFreeSpace(tmp,&sectorspc, &bytesps, &freec, &clusters);
186
187         return (double) (freec*bytesps*sectorspc);
188 #else
189
190 #if defined (__sun__) || defined (__sun)
191         struct statvfs disk;
192 #else
193         struct statfs disk;
194 #endif
195         char name[FILE_MAXDIR],*slash;
196         int len = strlen(dir);
197         
198         if (len >= FILE_MAXDIR) /* path too long */
199                 return -1;
200         
201         strcpy(name,dir);
202
203         if(len){
204                 slash = strrchr(name,'/');
205                 if (slash) slash[1] = 0;
206         } else strcpy(name,"/");
207
208 #if defined (__FreeBSD__) || defined (linux) || defined (__OpenBSD__) || defined (__APPLE__) 
209         if (statfs(name, &disk)) return(-1);
210 #endif
211 #ifdef __BeOS
212         return -1;
213 #endif
214
215 #if defined (__sun__) || defined (__sun)
216         if (statvfs(name, &disk)) return(-1);   
217 #elif !defined(linux) && (defined (__sgi) || defined(__sparc) || defined(__sparc__))
218         /* WARNING - This may not be supported by geeneric unix os's - Campbell */
219         if (statfs(name, &disk, sizeof(struct statfs), 0)) return(-1);
220 #endif
221
222         return ( ((double) disk.f_bsize) * ((double) disk.f_bfree));
223 #endif
224 }
225
226 static int hide_dot= 0;
227
228 void BLI_hide_dot_files(int set)
229 {
230         if(set) hide_dot= 1;
231         else hide_dot= 0;
232 }
233
234 void BLI_builddir(char *dirname, char *relname)
235 {
236         struct dirent *fname;
237         struct dirlink *dlink;
238         int rellen, newnum = 0, seen_ = 0, seen__ = 0;
239         char buf[256];
240         DIR *dir;
241
242         strcpy(buf,relname);
243         rellen=strlen(relname);
244
245         if (rellen){
246                 buf[rellen]='/';
247                 rellen++;
248         }
249
250         if (chdir(dirname) == -1){
251                 perror(dirname);
252                 return;
253         }
254
255         if ( (dir = (DIR *)opendir(".")) ){
256                 while ((fname = (struct dirent*) readdir(dir)) != NULL) {
257                         
258                         if(hide_dot && fname->d_name[0]=='.' && fname->d_name[1]!='.' && fname->d_name[1]!=0);
259                         else {
260                                 
261                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
262                                 if (dlink){
263                                         strcpy(buf+rellen,fname->d_name);
264         
265                                         dlink->name = BLI_strdup(buf);
266         
267                                         if (dlink->name[0] == '.') {
268                                                 if (dlink->name[1] == 0) seen_ = 1;
269                                                 else if (dlink->name[1] == '.') {
270                                                         if (dlink->name[2] == 0) seen__ = 1;
271                                                 }
272                                         }
273                                         BLI_addhead(dirbase,dlink);
274                                         newnum++;
275                                 }
276                         }
277                 }
278                 
279                 if (newnum){
280 #ifndef WIN32           
281                         if (seen_ == 0) {       /* Cachefs PATCH */
282                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
283                                 strcpy(buf+rellen,"./.");
284                                 dlink->name = BLI_strdup(buf);
285                                 BLI_addhead(dirbase,dlink);
286                                 newnum++;
287                         }
288                         if (seen__ == 0) {      /* MAC PATCH */
289                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
290                                 strcpy(buf+rellen,"./..");
291                                 dlink->name = BLI_strdup(buf);
292                                 BLI_addhead(dirbase,dlink);
293                                 newnum++;
294                         }
295 #else // WIN32
296                         if (seen_ == 0) {       /* should only happen for root paths like "C:\" */
297                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
298                                 strcpy(buf+rellen,".");
299                                 dlink->name = BLI_strdup(buf);
300                                 BLI_addhead(dirbase,dlink);
301                                 newnum++;
302                         }
303 #endif                  
304
305                         if (files) files=(struct direntry *)realloc(files,(totnum+newnum) * sizeof(struct direntry));
306                         else files=(struct direntry *)malloc(newnum * sizeof(struct direntry));
307
308                         if (files){
309                                 dlink = (struct dirlink *) dirbase->first;
310                                 while(dlink){
311                                         memset(&files[actnum], 0 , sizeof(struct direntry));
312                                         files[actnum].relname = dlink->name;
313                                         stat(dlink->name,&files[actnum].s);
314                                         files[actnum].type=files[actnum].s.st_mode;
315                                         files[actnum].flags = 0;
316                                         totnum++;
317                                         actnum++;
318                                         dlink = dlink->next;
319                                 }
320                         } else{
321                                 printf("Couldn't get memory for dir\n");
322                                 exit(1);
323                         }
324
325                         BLI_freelist(dirbase);
326                         if (files) qsort(files, actnum, sizeof(struct direntry), (int (*)(const void *,const void*))BLI_compare);
327                 } else {
328                         printf("%s empty directory\n",dirname);
329                 }
330
331                 closedir(dir);
332         } else {
333                 printf("%s non-existant directory\n",dirname);
334         }
335 }
336
337 void BLI_adddirstrings()
338 {
339         char datum[100];
340         char buf[250];
341         char size[250];
342         static char * types[8] = {"---", "--x", "-w-", "-wx", "r--", "r-x", "rw-", "rwx"};
343         int num, mode;
344         off_t num1, num2, num3, num4, num5;
345 #ifdef WIN32
346         __int64 st_size;
347 #else
348         off_t st_size;
349 #endif
350         
351         struct direntry * file;
352         struct tm *tm;
353         time_t zero= 0;
354
355         file = &files[0];
356         
357         for(num=0;num<actnum;num++){
358 #ifdef WIN32
359                 mode = 0;
360                 strcpy(file->mode1, types[0]);
361                 strcpy(file->mode2, types[0]);
362                 strcpy(file->mode3, types[0]);
363 #else
364                 mode = file->s.st_mode;
365
366                 strcpy(file->mode1, types[(mode & 0700) >> 6]);
367                 strcpy(file->mode2, types[(mode & 0070) >> 3]);
368                 strcpy(file->mode3, types[(mode & 0007)]);
369                 
370                 if (((mode & S_ISGID) == S_ISGID) && (file->mode2[2]=='-'))file->mode2[2]='l';
371
372                 if (mode & (S_ISUID | S_ISGID)){
373                         if (file->mode1[2]=='x') file->mode1[2]='s';
374                         else file->mode1[2]='S';
375
376                         if (file->mode2[2]=='x')file->mode2[2]='s';
377                 }
378
379                 if (mode & S_ISVTX){
380                         if (file->mode3[2] == 'x') file->mode3[2] = 't';
381                         else file->mode3[2] = 'T';
382                 }
383 #endif
384
385 #ifdef WIN32
386                 strcpy(files[num].owner,"user");
387 #else
388                 {
389                         struct passwd *pwuser;
390                         pwuser = getpwuid(files[num].s.st_uid);
391                         if ( pwuser ) {
392                         strcpy(files[num].owner, pwuser->pw_name);
393                         } else {
394                                 sprintf(files[num].owner, "%d", files[num].s.st_uid);
395             }
396                 }
397 #endif
398
399                 tm= localtime(&files[num].s.st_mtime);
400                 // prevent impossible dates in windows
401                 if(tm==NULL) tm= localtime(&zero);
402                 strftime(files[num].time, 8, "%H:%M", tm);
403                 strftime(files[num].date, 16, "%d-%b-%y", tm);
404
405                 /*
406                  * Seems st_size is signed 32-bit value in *nix and Windows.  This
407                  * will buy us some time until files get bigger than 4GB or until
408                  * everyone starts using __USE_FILE_OFFSET64 or equivalent.
409                  */
410                 st_size= (off_t)files[num].s.st_size;
411                 
412                 num1= st_size % 1000;
413                 num2= st_size/1000;
414                 num2= num2 % 1000;
415                 num3= st_size/(1000*1000);
416                 num3= num3 % 1000;
417                 num4= st_size/(1000*1000*1000);
418                 num4= num4 % 1000;
419                 num5= st_size/(1000000000000LL);
420                 num5= num5 % 1000;
421
422                 if(num5)
423                         sprintf(files[num].size, "%1d %03d %03d %03d K", (int)num5, (int)num4, (int)num3, (int)num2);
424                 else if(num4) sprintf(files[num].size, "%3d %03d %03d %03d", (int)num4, (int)num3, (int)num2, (int)num1);
425                 else if(num3) sprintf(files[num].size, "%7d %03d %03d", (int)num3, (int)num2, (int)num1);
426                 else if(num2) sprintf(files[num].size, "%11d %03d", (int)num2, (int)num1);
427                 else if(num1) sprintf(files[num].size, "%15d", (int)num1);
428                 else sprintf(files[num].size, "0");
429
430                 strftime(datum, 32, "%d-%b-%y %H:%M", tm);
431
432                 if (st_size < 1000) {
433                         sprintf(size, "%10d", (int) st_size);
434                 } else if (st_size < 1000 * 1000) {
435                         sprintf(size, "%6d %03d", (int) (st_size / 1000), (int) (st_size % 1000));
436                 } else if (st_size < 100 * 1000 * 1000) {
437                         sprintf(size, "%2d %03d %03d", (int) (st_size / (1000 * 1000)), (int) ((st_size / 1000) % 1000), (int) ( st_size % 1000));
438                 } else {
439                         sprintf(size, "> %4.1f M", (double) (st_size / (1024.0 * 1024.0)));
440                         sprintf(size, "%10d", (int) st_size);
441                 }
442
443                 sprintf(buf,"%s %s %10s %s", files[num].date, files[num].time, size,
444                         files[num].relname);
445
446                 sprintf(buf,"%s %s %s %7s %s %s %10s %s", file->mode1, file->mode2, file->mode3, files[num].owner, files[num].date, files[num].time, size,
447                         files[num].relname);
448
449                 files[num].string=MEM_mallocN(strlen(buf)+1, "filestring");
450                 if (files[num].string){
451                         strcpy(files[num].string,buf);
452                 }
453
454                 file++;
455         }
456 }
457
458 unsigned int BLI_getdir(char *dirname,  struct direntry **filelist)
459 {
460         // reset global variables
461         // memory stored in files is free()'d in
462         // filesel.c:freefilelist()
463
464         actnum = totnum = 0;
465         files = 0;
466
467         BLI_builddir(dirname,"");
468         BLI_adddirstrings();
469
470         if (files) {
471                 *(filelist) = files;
472         } else {
473                 // keep blender happy. Blender stores this in a variable
474                 // where 0 has special meaning.....
475                 *(filelist) = files = malloc(sizeof(struct direntry));
476         }
477
478         return(actnum);
479 }
480
481
482 int BLI_filesize(int file)
483 {
484         struct stat buf;
485
486         if (file <= 0) return (-1);
487         fstat(file, &buf);
488         return (buf.st_size);
489 }
490
491 int BLI_filepathsize(const char *path)
492 {
493         int size, file = open(path, O_BINARY|O_RDONLY);
494         
495         if (file <= 0)
496                 return -1;
497         
498         size = BLI_filesize(file);
499         close(file);
500         return size;
501 }
502
503
504 int BLI_exist(char *name)
505 {
506         struct stat st;
507 #ifdef WIN32
508         /*  in Windows stat doesn't recognize dir ending on a slash 
509                 To not break code where the ending slash is expected we
510                 don't mess with the argument name directly here - elubie */
511         char tmp[FILE_MAXDIR+FILE_MAXFILE];
512         int len;
513         BLI_strncpy(tmp, name, FILE_MAXDIR+FILE_MAXFILE);
514         len = strlen(tmp);
515         if (len > 3 && ( tmp[len-1]=='\\' || tmp[len-1]=='/') ) tmp[len-1] = '\0';
516         if (stat(tmp,&st)) return(0);
517 #else
518         if (stat(name,&st)) return(0);  
519 #endif
520         return(st.st_mode);
521 }
522
523 LinkNode *BLI_read_file_as_lines(char *name)
524 {
525         FILE *fp= fopen(name, "r");
526         LinkNode *lines= NULL;
527         char *buf;
528         int size;
529
530         if (!fp) return NULL;
531                 
532         fseek(fp, 0, SEEK_END);
533         size= ftell(fp);
534         fseek(fp, 0, SEEK_SET);
535
536         buf= malloc(size);
537         if (buf) {
538                 int i, last= 0;
539                 
540                         /* 
541                          * size = because on win32 reading
542                          * all the bytes in the file will return
543                          * less bytes because of crnl changes.
544                          */
545                 size= fread(buf, 1, size, fp);
546                 for (i=0; i<=size; i++) {
547                         if (i==size || buf[i]=='\n') {
548                                 char *line= BLI_strdupn(&buf[last], i-last);
549
550                                 BLI_linklist_prepend(&lines, line);
551                                 last= i+1;
552                         }
553                 }
554                 
555                 free(buf);
556         }
557         
558         fclose(fp);
559         
560         BLI_linklist_reverse(&lines);
561         return lines;
562 }
563
564 void BLI_free_file_lines(LinkNode *lines)
565 {
566         BLI_linklist_free(lines, (void(*)(void*)) MEM_freeN);
567 }