Buildbot: Never write 'master' branch in packed file names.
[blender.git] / build_files / buildbot / slave_pack.py
1 # ##### BEGIN GPL LICENSE BLOCK #####
2 #
3 #  This program is free software; you can redistribute it and/or
4 #  modify it under the terms of the GNU General Public License
5 #  as published by the Free Software Foundation; either version 2
6 #  of the License, or (at your option) any later version.
7 #
8 #  This program is distributed in the hope that it will be useful,
9 #  but WITHOUT ANY WARRANTY; without even the implied warranty of
10 #  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11 #  GNU General Public License for more details.
12 #
13 #  You should have received a copy of the GNU General Public License
14 #  along with this program; if not, write to the Free Software Foundation,
15 #  Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301, USA.
16 #
17 # ##### END GPL LICENSE BLOCK #####
18
19 # <pep8 compliant>
20
21 # Runs on buildbot slave, creating a release package using the build
22 # system and zipping it into buildbot_upload.zip. This is then uploaded
23 # to the master in the next buildbot step.
24
25 import os
26 import subprocess
27 import sys
28 import zipfile
29
30 # get builder name
31 if len(sys.argv) < 2:
32     sys.stderr.write("Not enough arguments, expecting builder name\n")
33     sys.exit(1)
34
35 builder = sys.argv[1]
36 # Never write branch if it is master.
37 branch = sys.argv[2] if (len(sys.argv) >= 3 and sys.argv[2] != 'master') else ''
38
39 # scons does own packaging
40 if builder.find('scons') != -1:
41     os.chdir('../blender.git')
42     scons_options = ['BF_QUICK=slnt', 'BUILDBOT_BRANCH=' + branch, 'buildslave', 'BF_FANCY=False']
43
44     buildbot_dir = os.path.dirname(os.path.realpath(__file__))
45     config_dir = os.path.join(buildbot_dir, 'config')
46     build_dir = os.path.join('..', 'build', builder)
47     install_dir = os.path.join('..', 'install', builder)
48
49     if builder.find('linux') != -1:
50         scons_options += ['WITH_BF_NOBLENDER=True', 'WITH_BF_PLAYER=False',
51                           'BF_BUILDDIR=' + build_dir,
52                           'BF_INSTALLDIR=' + install_dir,
53                           'WITHOUT_BF_INSTALL=True']
54
55         config = None
56         bits = None
57
58         if builder.endswith('linux_glibc211_x86_64_scons'):
59             config = 'user-config-glibc211-x86_64.py'
60             chroot_name = 'buildbot_squeeze_x86_64'
61             bits = 64
62         elif builder.endswith('linux_glibc211_i386_scons'):
63             config = 'user-config-glibc211-i686.py'
64             chroot_name = 'buildbot_squeeze_i686'
65             bits = 32
66
67         if config is not None:
68             config_fpath = os.path.join(config_dir, config)
69             scons_options.append('BF_CONFIG=' + config_fpath)
70
71         blender = os.path.join(install_dir, 'blender')
72         blenderplayer = os.path.join(install_dir, 'blenderplayer')
73         subprocess.call(['schroot', '-c', chroot_name, '--', 'strip', '--strip-all', blender, blenderplayer])
74
75         extra = '/' + os.path.join('home', 'sources', 'release-builder', 'extra')
76         mesalibs = os.path.join(extra, 'mesalibs' + str(bits) + '.tar.bz2')
77         software_gl = os.path.join(extra, 'blender-softwaregl')
78
79         os.system('tar -xpf %s -C %s' % (mesalibs, install_dir))
80         os.system('cp %s %s' % (software_gl, install_dir))
81         os.system('chmod 755 %s' % (os.path.join(install_dir, 'blender-softwaregl')))
82
83         retcode = subprocess.call(['schroot', '-c', chroot_name, '--', 'python', 'scons/scons.py'] + scons_options)
84
85         sys.exit(retcode)
86     else:
87         if builder.find('win') != -1:
88             bitness = '32'
89
90             if builder.find('win64') != -1:
91                 bitness = '64'
92
93             scons_options.append('BF_INSTALLDIR=' + install_dir)
94             scons_options.append('BF_BUILDDIR=' + build_dir)
95             scons_options.append('BF_BITNESS=' + bitness)
96             scons_options.append('WITH_BF_CYCLES_CUDA_BINARIES=True')
97             scons_options.append('BF_CYCLES_CUDA_NVCC=nvcc.exe')
98             if builder.find('mingw') != -1:
99                 scons_options.append('BF_TOOLSET=mingw')
100             if builder.endswith('vc2013'):
101                 scons_options.append('MSVS_VERSION=12.0')
102                 scons_options.append('MSVC_VERSION=12.0')
103
104         elif builder.find('mac') != -1:
105             if builder.find('x86_64') != -1:
106                 config = 'user-config-mac-x86_64.py'
107             else:
108                 config = 'user-config-mac-i386.py'
109
110             scons_options.append('BF_CONFIG=' + os.path.join(config_dir, config))
111
112         retcode = subprocess.call(['python', 'scons/scons.py'] + scons_options)
113         sys.exit(retcode)
114
115 # clean release directory if it already exists
116 release_dir = 'release'
117
118 if os.path.exists(release_dir):
119     for f in os.listdir(release_dir):
120         if os.path.isfile(os.path.join(release_dir, f)):
121             os.remove(os.path.join(release_dir, f))
122
123 # create release package
124 try:
125     subprocess.call(['make', 'package_archive'])
126 except Exception, ex:
127     sys.stderr.write('Make package release failed' + str(ex) + '\n')
128     sys.exit(1)
129
130 # find release directory, must exist this time
131 if not os.path.exists(release_dir):
132     sys.stderr.write("Failed to find release directory %r.\n" % release_dir)
133     sys.exit(1)
134
135 # find release package
136 file = None
137 filepath = None
138
139 for f in os.listdir(release_dir):
140     rf = os.path.join(release_dir, f)
141     if os.path.isfile(rf) and f.startswith('blender'):
142         file = f
143         filepath = rf
144
145 if not file:
146     sys.stderr.write("Failed to find release package.\n")
147     sys.exit(1)
148
149 # create zip file
150 try:
151     upload_zip = "buildbot_upload.zip"
152     if os.path.exists(upload_zip):
153         os.remove(upload_zip)
154     z = zipfile.ZipFile(upload_zip, "w", compression=zipfile.ZIP_STORED)
155     z.write(filepath, arcname=file)
156     z.close()
157 except Exception, ex:
158     sys.stderr.write('Create buildbot_upload.zip failed' + str(ex) + '\n')
159     sys.exit(1)