2.50: svn merge https://svn.blender.org/svnroot/bf-blender/trunk/blender -r19323...
[blender-staging.git] / source / blender / blenlib / intern / storage.c
1 /**
2  * $Id$
3  *
4  * ***** BEGIN GPL LICENSE BLOCK *****
5  *
6  * This program is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU General Public License
8  * as published by the Free Software Foundation; either version 2
9  * of the License, or (at your option) any later version.
10  *
11  * This program is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14  * GNU General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License
17  * along with this program; if not, write to the Free Software Foundation,
18  * Inc., 59 Temple Place - Suite 330, Boston, MA  02111-1307, USA.
19  *
20  * The Original Code is Copyright (C) 2001-2002 by NaN Holding BV.
21  * All rights reserved.
22  *
23  * The Original Code is: all of this file.
24  *
25  * Contributor(s): none yet.
26  *
27  * ***** END GPL LICENSE BLOCK *****
28  * Reorganised mar-01 nzc
29  * Some really low-level file thingies.
30  */
31
32 #include <sys/types.h>
33 #include <stdio.h>
34 #include <stdlib.h>     
35
36 #ifdef WIN32
37 #include "BLI_winstuff.h"
38 #include <sys/types.h>
39 #include <io.h>
40 #include <direct.h>
41 #endif
42
43 #ifndef WIN32
44 #include <dirent.h>
45 #endif
46
47 #include <time.h>
48 #include <sys/stat.h>
49
50 #if defined (__sun__) || defined (__sun) || defined (__sgi)
51 #include <sys/statvfs.h> /* Other modern unix os's should probably use this also */
52 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
53 #include <sys/statfs.h>
54 #endif
55
56 #if defined (__FreeBSD__) || defined (__OpenBSD__) || defined (__NetBSD__)
57 #include <sys/param.h>
58 #include <sys/mount.h>
59 #endif
60
61 #if defined(linux) || defined(__CYGWIN32__) || defined(__hpux)
62 #include <sys/vfs.h>
63 #endif
64
65 #ifdef __BeOS
66 struct statfs {
67         int f_bsize;
68         int f_bfree;
69 };
70 #endif
71
72 #ifdef __APPLE__
73 /* For statfs */
74 #include <sys/param.h>
75 #include <sys/mount.h>
76 #endif /* __APPLE__ */
77
78
79 #include <fcntl.h>
80 #if !defined(__BeOS) && !defined(WIN32)
81 #include <sys/mtio.h>                   /* tape comando's */
82 #endif
83 #include <string.h>                     /* strcpy etc.. */
84
85 #ifndef WIN32
86 #include <sys/ioctl.h>
87 #include <unistd.h>                     /*  */
88 #include <pwd.h>
89 #endif
90
91 #if !defined(__FreeBSD__) && !defined(__APPLE__)
92 #include <malloc.h>
93 #endif
94
95 /* lib includes */
96 #include "MEM_guardedalloc.h"
97
98 #include "DNA_listBase.h"
99 #include "BLI_blenlib.h"
100 #include "BLI_storage.h"
101 #include "BLI_storage_types.h"
102
103 #include "BLI_util.h"
104 #include "BLI_linklist.h"
105
106 #include "BKE_utildefines.h"
107
108 /* vars: */
109 static int totnum,actnum;
110 static struct direntry *files;
111
112 static struct ListBase dirbase_={
113         0,0};
114 static struct ListBase *dirbase = &dirbase_;
115
116
117 char *BLI_getwdN(char *dir)
118 {
119         char *pwd;
120
121         if (dir) {
122                 pwd = getenv("PWD");
123                 if (pwd){
124                         strcpy(dir, pwd);
125                         return(dir);
126                 }
127                 /* 160 is FILE_MAXDIR in filesel.c */
128                 return( getcwd(dir, 160) );
129         }
130         return(0);
131 }
132
133
134 int BLI_compare(struct direntry *entry1, struct direntry *entry2)
135 {
136         /* type is equal to stat.st_mode */
137
138         if (S_ISDIR(entry1->type)){
139                 if (S_ISDIR(entry2->type)==0) return (-1);
140         } else{
141                 if (S_ISDIR(entry2->type)) return (1);
142         }
143         if (S_ISREG(entry1->type)){
144                 if (S_ISREG(entry2->type)==0) return (-1);
145         } else{
146                 if (S_ISREG(entry2->type)) return (1);
147         }
148         if ((entry1->type & S_IFMT) < (entry2->type & S_IFMT)) return (-1);
149         if ((entry1->type & S_IFMT) > (entry2->type & S_IFMT)) return (1);
150         
151         /* make sure "." and ".." are always first */
152         if( strcmp(entry1->relname, ".")==0 ) return (-1);
153         if( strcmp(entry2->relname, ".")==0 ) return (1);
154         if( strcmp(entry1->relname, "..")==0 ) return (-1);
155         if( strcmp(entry2->relname, "..")==0 ) return (1);
156
157         return (BLI_strcasecmp(entry1->relname,entry2->relname));
158 }
159
160
161 double BLI_diskfree(char *dir)
162 {
163 #ifdef WIN32
164         DWORD sectorspc, bytesps, freec, clusters;
165         char tmp[4];
166         
167         tmp[0]='\\'; tmp[1]=0; /* Just a failsafe */
168         if (dir[0]=='/' || dir[0]=='\\') {
169                 tmp[0]='\\';
170                 tmp[1]=0;
171         } else if (dir[1]==':') {
172                 tmp[0]=dir[0];
173                 tmp[1]=':';
174                 tmp[2]='\\';
175                 tmp[3]=0;
176         }
177
178         GetDiskFreeSpace(tmp,&sectorspc, &bytesps, &freec, &clusters);
179
180         return (double) (freec*bytesps*sectorspc);
181 #else
182
183 #if defined (__sun__) || defined (__sun) || defined (__sgi)
184         struct statvfs disk;
185 #else
186         struct statfs disk;
187 #endif
188         char name[FILE_MAXDIR],*slash;
189         int len = strlen(dir);
190         
191         if (len >= FILE_MAXDIR) /* path too long */
192                 return -1;
193         
194         strcpy(name,dir);
195
196         if(len){
197                 slash = strrchr(name,'/');
198                 if (slash) slash[1] = 0;
199         } else strcpy(name,"/");
200
201 #if defined (__FreeBSD__) || defined (linux) || defined (__OpenBSD__) || defined (__APPLE__) 
202         if (statfs(name, &disk)) return(-1);
203 #endif
204 #ifdef __BeOS
205         return -1;
206 #endif
207
208 #if defined (__sun__) || defined (__sun) || defined (__sgi)
209         if (statvfs(name, &disk)) return(-1);   
210 #elif !defined(__FreeBSD__) && !defined(linux) && (defined(__sparc) || defined(__sparc__))
211         /* WARNING - This may not be supported by geeneric unix os's - Campbell */
212         if (statfs(name, &disk, sizeof(struct statfs), 0)) return(-1);
213 #endif
214
215         return ( ((double) disk.f_bsize) * ((double) disk.f_bfree));
216 #endif
217 }
218
219 static int hide_dot= 0;
220
221 void BLI_hide_dot_files(int set)
222 {
223         if(set) hide_dot= 1;
224         else hide_dot= 0;
225 }
226
227 void BLI_builddir(char *dirname, char *relname)
228 {
229         struct dirent *fname;
230         struct dirlink *dlink;
231         int rellen, newnum = 0, seen_ = 0, seen__ = 0;
232         char buf[256];
233         DIR *dir;
234
235         strcpy(buf,relname);
236         rellen=strlen(relname);
237
238         if (rellen){
239                 buf[rellen]='/';
240                 rellen++;
241         }
242
243         if (chdir(dirname) == -1){
244                 perror(dirname);
245                 return;
246         }
247
248         if ( (dir = (DIR *)opendir(".")) ){
249                 while ((fname = (struct dirent*) readdir(dir)) != NULL) {
250                         
251                         if(hide_dot && fname->d_name[0]=='.' && fname->d_name[1]!='.' && fname->d_name[1]!=0);
252                         else {
253                                 
254                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
255                                 if (dlink){
256                                         strcpy(buf+rellen,fname->d_name);
257         
258                                         dlink->name = BLI_strdup(buf);
259         
260                                         if (dlink->name[0] == '.') {
261                                                 if (dlink->name[1] == 0) seen_ = 1;
262                                                 else if (dlink->name[1] == '.') {
263                                                         if (dlink->name[2] == 0) seen__ = 1;
264                                                 }
265                                         }
266                                         BLI_addhead(dirbase,dlink);
267                                         newnum++;
268                                 }
269                         }
270                 }
271                 
272                 if (newnum){
273 #ifndef WIN32           
274                         if (seen_ == 0) {       /* Cachefs PATCH */
275                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
276                                 strcpy(buf+rellen,"./.");
277                                 dlink->name = BLI_strdup(buf);
278                                 BLI_addhead(dirbase,dlink);
279                                 newnum++;
280                         }
281                         if (seen__ == 0) {      /* MAC PATCH */
282                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
283                                 strcpy(buf+rellen,"./..");
284                                 dlink->name = BLI_strdup(buf);
285                                 BLI_addhead(dirbase,dlink);
286                                 newnum++;
287                         }
288 #else // WIN32
289                         if (seen_ == 0) {       /* should only happen for root paths like "C:\" */
290                                 dlink = (struct dirlink *)malloc(sizeof(struct dirlink));
291                                 strcpy(buf+rellen,".");
292                                 dlink->name = BLI_strdup(buf);
293                                 BLI_addhead(dirbase,dlink);
294                                 newnum++;
295                         }
296 #endif                  
297
298                         if (files) files=(struct direntry *)realloc(files,(totnum+newnum) * sizeof(struct direntry));
299                         else files=(struct direntry *)malloc(newnum * sizeof(struct direntry));
300
301                         if (files){
302                                 dlink = (struct dirlink *) dirbase->first;
303                                 while(dlink){
304                                         memset(&files[actnum], 0 , sizeof(struct direntry));
305                                         files[actnum].relname = dlink->name;
306                                         stat(dlink->name,&files[actnum].s);
307                                         files[actnum].type=files[actnum].s.st_mode;
308                                         files[actnum].flags = 0;
309                                         totnum++;
310                                         actnum++;
311                                         dlink = dlink->next;
312                                 }
313                         } else{
314                                 printf("Couldn't get memory for dir\n");
315                                 exit(1);
316                         }
317
318                         BLI_freelist(dirbase);
319                         if (files) qsort(files, actnum, sizeof(struct direntry), (int (*)(const void *,const void*))BLI_compare);
320                 } else {
321                         printf("%s empty directory\n",dirname);
322                 }
323
324                 closedir(dir);
325         } else {
326                 printf("%s non-existant directory\n",dirname);
327         }
328 }
329
330 void BLI_adddirstrings()
331 {
332         char datum[100];
333         char buf[250];
334         char size[250];
335         static char * types[8] = {"---", "--x", "-w-", "-wx", "r--", "r-x", "rw-", "rwx"};
336         int num, mode;
337 #ifdef WIN32
338         __int64 st_size;
339 #else
340         off_t st_size;
341 #endif
342         
343         struct direntry * file;
344         struct tm *tm;
345         time_t zero= 0;
346
347         file = &files[0];
348         
349         for(num=0;num<actnum;num++){
350 #ifdef WIN32
351                 mode = 0;
352                 strcpy(file->mode1, types[0]);
353                 strcpy(file->mode2, types[0]);
354                 strcpy(file->mode3, types[0]);
355 #else
356                 mode = file->s.st_mode;
357
358                 strcpy(file->mode1, types[(mode & 0700) >> 6]);
359                 strcpy(file->mode2, types[(mode & 0070) >> 3]);
360                 strcpy(file->mode3, types[(mode & 0007)]);
361                 
362                 if (((mode & S_ISGID) == S_ISGID) && (file->mode2[2]=='-'))file->mode2[2]='l';
363
364                 if (mode & (S_ISUID | S_ISGID)){
365                         if (file->mode1[2]=='x') file->mode1[2]='s';
366                         else file->mode1[2]='S';
367
368                         if (file->mode2[2]=='x')file->mode2[2]='s';
369                 }
370
371                 if (mode & S_ISVTX){
372                         if (file->mode3[2] == 'x') file->mode3[2] = 't';
373                         else file->mode3[2] = 'T';
374                 }
375 #endif
376
377 #ifdef WIN32
378                 strcpy(files[num].owner,"user");
379 #else
380                 {
381                         struct passwd *pwuser;
382                         pwuser = getpwuid(files[num].s.st_uid);
383                         if ( pwuser ) {
384                         strcpy(files[num].owner, pwuser->pw_name);
385                         } else {
386                                 sprintf(files[num].owner, "%d", files[num].s.st_uid);
387             }
388                 }
389 #endif
390
391                 tm= localtime(&files[num].s.st_mtime);
392                 // prevent impossible dates in windows
393                 if(tm==NULL) tm= localtime(&zero);
394                 strftime(files[num].time, 8, "%H:%M", tm);
395                 strftime(files[num].date, 16, "%d-%b-%y", tm);
396
397                 /*
398                  * Seems st_size is signed 32-bit value in *nix and Windows.  This
399                  * will buy us some time until files get bigger than 4GB or until
400                  * everyone starts using __USE_FILE_OFFSET64 or equivalent.
401                  */
402                 st_size= (off_t)files[num].s.st_size;
403
404                 if (st_size > 1024*1024*1024) {
405                         sprintf(files[num].size, "%.2f GB", ((double)st_size)/(1024*1024*1024));        
406                 }
407                 else if (st_size > 1024*1024) {
408                         sprintf(files[num].size, "%.1f MB", ((double)st_size)/(1024*1024));
409                 }
410                 else if (st_size > 1024) {
411                         sprintf(files[num].size, "%d KB", (int)(st_size/1024));
412                 }
413                 else {
414                         sprintf(files[num].size, "%d B", (int)st_size);
415                 }
416
417                 strftime(datum, 32, "%d-%b-%y %H:%M", tm);
418
419                 if (st_size < 1000) {
420                         sprintf(size, "%10d", (int) st_size);
421                 } else if (st_size < 1000 * 1000) {
422                         sprintf(size, "%6d %03d", (int) (st_size / 1000), (int) (st_size % 1000));
423                 } else if (st_size < 100 * 1000 * 1000) {
424                         sprintf(size, "%2d %03d %03d", (int) (st_size / (1000 * 1000)), (int) ((st_size / 1000) % 1000), (int) ( st_size % 1000));
425                 } else {
426                         sprintf(size, "> %4.1f M", (double) (st_size / (1024.0 * 1024.0)));
427                         sprintf(size, "%10d", (int) st_size);
428                 }
429
430                 sprintf(buf,"%s %s %10s %s", files[num].date, files[num].time, size,
431                         files[num].relname);
432
433                 sprintf(buf,"%s %s %s %7s %s %s %10s %s", file->mode1, file->mode2, file->mode3, files[num].owner, files[num].date, files[num].time, size,
434                         files[num].relname);
435
436                 files[num].string=MEM_mallocN(strlen(buf)+1, "filestring");
437                 if (files[num].string){
438                         strcpy(files[num].string,buf);
439                 }
440
441                 file++;
442         }
443 }
444
445 unsigned int BLI_getdir(char *dirname,  struct direntry **filelist)
446 {
447         // reset global variables
448         // memory stored in files is free()'d in
449         // filesel.c:freefilelist()
450
451         actnum = totnum = 0;
452         files = 0;
453
454         BLI_builddir(dirname,"");
455         BLI_adddirstrings();
456
457         if (files) {
458                 *(filelist) = files;
459         } else {
460                 // keep blender happy. Blender stores this in a variable
461                 // where 0 has special meaning.....
462                 *(filelist) = files = malloc(sizeof(struct direntry));
463         }
464
465         return(actnum);
466 }
467
468
469 int BLI_filesize(int file)
470 {
471         struct stat buf;
472
473         if (file <= 0) return (-1);
474         fstat(file, &buf);
475         return (buf.st_size);
476 }
477
478 int BLI_filepathsize(const char *path)
479 {
480         int size, file = open(path, O_BINARY|O_RDONLY);
481         
482         if (file <= 0)
483                 return -1;
484         
485         size = BLI_filesize(file);
486         close(file);
487         return size;
488 }
489
490
491 int BLI_exist(char *name)
492 {
493         struct stat st;
494 #ifdef WIN32
495         /*  in Windows stat doesn't recognize dir ending on a slash 
496                 To not break code where the ending slash is expected we
497                 don't mess with the argument name directly here - elubie */
498         char tmp[FILE_MAXDIR+FILE_MAXFILE];
499         int len;
500         BLI_strncpy(tmp, name, FILE_MAXDIR+FILE_MAXFILE);
501         len = strlen(tmp);
502         if (len > 3 && ( tmp[len-1]=='\\' || tmp[len-1]=='/') ) tmp[len-1] = '\0';
503         if (stat(tmp,&st)) return(0);
504 #else
505         if (stat(name,&st)) return(0);  
506 #endif
507         return(st.st_mode);
508 }
509
510 LinkNode *BLI_read_file_as_lines(char *name)
511 {
512         FILE *fp= fopen(name, "r");
513         LinkNode *lines= NULL;
514         char *buf;
515         int size;
516
517         if (!fp) return NULL;
518                 
519         fseek(fp, 0, SEEK_END);
520         size= ftell(fp);
521         fseek(fp, 0, SEEK_SET);
522
523         buf= malloc(size);
524         if (buf) {
525                 int i, last= 0;
526                 
527                         /* 
528                          * size = because on win32 reading
529                          * all the bytes in the file will return
530                          * less bytes because of crnl changes.
531                          */
532                 size= fread(buf, 1, size, fp);
533                 for (i=0; i<=size; i++) {
534                         if (i==size || buf[i]=='\n') {
535                                 char *line= BLI_strdupn(&buf[last], i-last);
536
537                                 BLI_linklist_prepend(&lines, line);
538                                 last= i+1;
539                         }
540                 }
541                 
542                 free(buf);
543         }
544         
545         fclose(fp);
546         
547         BLI_linklist_reverse(&lines);
548         return lines;
549 }
550
551 void BLI_free_file_lines(LinkNode *lines)
552 {
553         BLI_linklist_free(lines, (void(*)(void*)) MEM_freeN);
554 }