CTests: Add render tests for Cycles
[blender.git] / tests / python / CMakeLists.txt
1 # ***** BEGIN GPL LICENSE BLOCK *****
2 #
3 # This program is free software; you can redistribute it and/or
4 # modify it under the terms of the GNU General Public License
5 # as published by the Free Software Foundation; either version 2
6 # of the License, or (at your option) any later version.
7 #
8 # This program is distributed in the hope that it will be useful,
9 # but WITHOUT ANY WARRANTY; without even the implied warranty of
10 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11 # GNU General Public License for more details.
12 #
13 # You should have received a copy of the GNU General Public License
14 # along with this program; if not, write to the Free Software Foundation,
15 # Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301, USA.
16 #
17 # Contributor(s): Jacques Beaurain.
18 #
19 # ***** END GPL LICENSE BLOCK *****
20
21 # --env-system-scripts allows to run without the install target. 
22
23 # Use '--write-blend=/tmp/test.blend' to view output
24
25 # Some tests are interesting but take too long to run
26 # and don't give deterministic results
27 set(USE_EXPERIMENTAL_TESTS FALSE)
28
29 set(TEST_SRC_DIR ${CMAKE_SOURCE_DIR}/../lib/tests)
30 set(TEST_OUT_DIR ${CMAKE_BINARY_DIR}/tests)
31
32 # ugh, any better way to do this on testing only?
33 execute_process(COMMAND ${CMAKE_COMMAND} -E make_directory ${TEST_OUT_DIR})
34
35 #~      if(NOT IS_DIRECTORY ${TEST_SRC_DIR})
36 #~              message(FATAL_ERROR "CMake test directory not found!")
37 #~      endif()
38
39 # all calls to blender use this
40 if(APPLE)
41         if(${CMAKE_GENERATOR} MATCHES "Xcode")
42                 set(TEST_BLENDER_EXE ${EXECUTABLE_OUTPUT_PATH}/Debug/blender.app/Contents/MacOS/blender)
43         else()
44                 set(TEST_BLENDER_EXE ${EXECUTABLE_OUTPUT_PATH}/blender.app/Contents/MacOS/blender)
45         endif()
46 else()
47         set(TEST_BLENDER_EXE ${EXECUTABLE_OUTPUT_PATH}/blender)
48 endif()
49
50 # for testing with valgrind prefix: valgrind --track-origins=yes --error-limit=no 
51 set(TEST_BLENDER_EXE_BARE ${TEST_BLENDER_EXE})
52 set(TEST_BLENDER_EXE ${TEST_BLENDER_EXE} --background -noaudio --factory-startup --env-system-scripts ${CMAKE_SOURCE_DIR}/release/scripts)
53
54
55 # ------------------------------------------------------------------------------
56 # GENERAL PYTHON CORRECTNESS TESTS
57 add_test(script_load_keymap ${TEST_BLENDER_EXE}
58         --python ${CMAKE_CURRENT_LIST_DIR}/bl_keymap_completeness.py
59 )
60
61 add_test(script_load_addons ${TEST_BLENDER_EXE}
62         --python ${CMAKE_CURRENT_LIST_DIR}/bl_load_addons.py
63 )
64
65 add_test(script_load_modules ${TEST_BLENDER_EXE}
66         --python ${CMAKE_CURRENT_LIST_DIR}/bl_load_py_modules.py
67 )
68
69 # test running operators doesn't segfault under various conditions
70 if(USE_EXPERIMENTAL_TESTS)
71         add_test(script_run_operators ${TEST_BLENDER_EXE}
72                 --python ${CMAKE_CURRENT_LIST_DIR}/bl_run_operators.py
73         )
74 endif()
75
76 # test running mathutils testing script
77 add_test(script_pyapi_mathutils ${TEST_BLENDER_EXE}
78         --python ${CMAKE_CURRENT_LIST_DIR}/bl_pyapi_mathutils.py
79 )
80
81 # ------------------------------------------------------------------------------
82 # MODELING TESTS
83 add_test(bevel ${TEST_BLENDER_EXE}
84         ${TEST_SRC_DIR}/modeling/bevel_regression.blend
85         --python-text run_tests
86 )
87
88 # ------------------------------------------------------------------------------
89 # IO TESTS
90
91 # OBJ Import tests
92 add_test(import_obj_cube ${TEST_BLENDER_EXE}
93         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
94         --run={'FINISHED'}&bpy.ops.import_scene.obj\(filepath='${TEST_SRC_DIR}/io_tests/obj/cube.obj'\)
95         --md5=39cce4bacac2d1b18fc470380279bc15 --md5_method=SCENE
96         --write-blend=${TEST_OUT_DIR}/import_obj_cube.blend
97 )
98
99 add_test(import_obj_nurbs_cyclic ${TEST_BLENDER_EXE}
100         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
101         --run={'FINISHED'}&bpy.ops.import_scene.obj\(filepath='${TEST_SRC_DIR}/io_tests/obj/nurbs_cyclic.obj'\)
102         --md5=ad3c307e5883224a0492378cd32691ab --md5_method=SCENE
103         --write-blend=${TEST_OUT_DIR}/import_obj_nurbs_cyclic.blend
104 )
105
106 add_test(import_obj_makehuman ${TEST_BLENDER_EXE}
107         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
108         --run={'FINISHED'}&bpy.ops.import_scene.obj\(filepath='${TEST_SRC_DIR}/io_tests/obj/makehuman.obj'\)
109         --md5=c9f78b185e58358daa4ecaecfa75464e --md5_method=SCENE
110         --write-blend=${TEST_OUT_DIR}/import_obj_makehuman.blend
111 )
112
113 # OBJ Export tests
114 add_test(export_obj_cube ${TEST_BLENDER_EXE}
115         ${TEST_SRC_DIR}/io_tests/blend_geometry/all_quads.blend
116         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
117         --run={'FINISHED'}&bpy.ops.export_scene.obj\(filepath='${TEST_OUT_DIR}/export_obj_cube.obj',use_selection=False\)
118         --md5_source=${TEST_OUT_DIR}/export_obj_cube.obj
119         --md5_source=${TEST_OUT_DIR}/export_obj_cube.mtl
120         --md5=70bdc394c2726203ad26c085176e3484 --md5_method=FILE
121 )
122
123 add_test(export_obj_nurbs ${TEST_BLENDER_EXE}
124         ${TEST_SRC_DIR}/io_tests/blend_geometry/nurbs.blend
125         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
126         --run={'FINISHED'}&bpy.ops.export_scene.obj\(filepath='${TEST_OUT_DIR}/export_obj_nurbs.obj',use_selection=False,use_nurbs=True\)
127         --md5_source=${TEST_OUT_DIR}/export_obj_nurbs.obj
128         --md5_source=${TEST_OUT_DIR}/export_obj_nurbs.mtl
129         --md5=a733ae4fa4a591ea9b0912da3af042de --md5_method=FILE
130 )
131
132 add_test(export_obj_all_objects ${TEST_BLENDER_EXE}
133         ${TEST_SRC_DIR}/io_tests/blend_scene/all_objects.blend
134         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
135         --run={'FINISHED'}&bpy.ops.export_scene.obj\(filepath='${TEST_OUT_DIR}/export_obj_all_objects.obj',use_selection=False,use_nurbs=True\)
136         --md5_source=${TEST_OUT_DIR}/export_obj_all_objects.obj
137         --md5_source=${TEST_OUT_DIR}/export_obj_all_objects.mtl
138         --md5=04b3ed97cede07a19548fc518ce9f8ca --md5_method=FILE
139 )
140
141
142
143 # PLY Import tests
144 add_test(import_ply_cube ${TEST_BLENDER_EXE}
145         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
146         --run={'FINISHED'}&bpy.ops.import_mesh.ply\(filepath='${TEST_SRC_DIR}/io_tests/ply/cube_ascii.ply'\)
147         --md5=527134343c27fc0ea73115b85fbfd3ac --md5_method=SCENE
148         --write-blend=${TEST_OUT_DIR}/import_ply_cube.blend
149 )
150
151 add_test(import_ply_bunny ${TEST_BLENDER_EXE}
152         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
153         --run={'FINISHED'}&bpy.ops.import_mesh.ply\(filepath='${TEST_SRC_DIR}/io_tests/ply/bunny2.ply'\)
154         --md5=6ea5b8533400a17accf928b8fd024eaa --md5_method=SCENE
155         --write-blend=${TEST_OUT_DIR}/import_ply_bunny.blend
156 )
157
158 add_test(import_ply_small_holes ${TEST_BLENDER_EXE}
159         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
160         --run={'FINISHED'}&bpy.ops.import_mesh.ply\(filepath='${TEST_SRC_DIR}/io_tests/ply/many_small_holes.ply'\)
161         --md5=c3093e26ecae5b6d59fbbcf2a0d0b39f --md5_method=SCENE
162         --write-blend=${TEST_OUT_DIR}/import_ply_small_holes.blend
163 )
164
165 # PLY Export
166 add_test(export_ply_cube_all_data ${TEST_BLENDER_EXE}
167         ${TEST_SRC_DIR}/io_tests/blend_geometry/cube_all_data.blend
168         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
169         --run={'FINISHED'}&bpy.ops.export_mesh.ply\(filepath='${TEST_OUT_DIR}/export_ply_cube_all_data.ply'\)
170         --md5_source=${TEST_OUT_DIR}/export_ply_cube_all_data.ply
171         --md5=6adc3748ceae8298496f99d0e7e76c15 --md5_method=FILE
172 )
173
174 add_test(export_ply_suzanne_all_data ${TEST_BLENDER_EXE}
175         ${TEST_SRC_DIR}/io_tests/blend_geometry/suzanne_all_data.blend
176         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
177         --run={'FINISHED'}&bpy.ops.export_mesh.ply\(filepath='${TEST_OUT_DIR}/export_ply_suzanne_all_data.ply'\)
178         --md5_source=${TEST_OUT_DIR}/export_ply_suzanne_all_data.ply
179         --md5=68ba23f02efd6511bfd093f45f703221 --md5_method=FILE
180 )
181
182 add_test(export_ply_vertices ${TEST_BLENDER_EXE}  # lame, add a better one
183         ${TEST_SRC_DIR}/io_tests/blend_geometry/vertices.blend
184         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
185         --run={'FINISHED'}&bpy.ops.export_mesh.ply\(filepath='${TEST_OUT_DIR}/export_ply_vertices.ply'\)
186         --md5_source=${TEST_OUT_DIR}/export_ply_vertices.ply
187         --md5=37faba0aa2014451b27f951afa92f870 --md5_method=FILE
188 )
189
190
191 # STL Import tests
192 add_test(import_stl_cube ${TEST_BLENDER_EXE}
193         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
194         --run={'FINISHED'}&bpy.ops.import_mesh.stl\(filepath='${TEST_SRC_DIR}/io_tests/stl/cube.stl'\)
195         --md5=8ceb5bb7e1cb5f4342fa1669988c66b4 --md5_method=SCENE
196         --write-blend=${TEST_OUT_DIR}/import_stl_cube.blend
197 )
198
199 add_test(import_stl_conrod ${TEST_BLENDER_EXE}
200         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
201         --run={'FINISHED'}&bpy.ops.import_mesh.stl\(filepath='${TEST_SRC_DIR}/io_tests/stl/conrod.stl'\)
202         --md5=690a4b8eb9002dcd8631c5a575ea7348 --md5_method=SCENE
203         --write-blend=${TEST_OUT_DIR}/import_stl_conrod.blend
204 )
205
206 add_test(import_stl_knot_max_simplified ${TEST_BLENDER_EXE}
207         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
208         --run={'FINISHED'}&bpy.ops.import_mesh.stl\(filepath='${TEST_SRC_DIR}/io_tests/stl/knot_max_simplified.stl'\)
209         --md5=baf82803f45a84ec4ddbad9cef57dd3e --md5_method=SCENE
210         --write-blend=${TEST_OUT_DIR}/import_stl_knot_max_simplified.blend
211 )
212
213 # STL Export
214 add_test(export_stl_cube_all_data ${TEST_BLENDER_EXE}
215         ${TEST_SRC_DIR}/io_tests/blend_geometry/cube_all_data.blend
216         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
217         --run={'FINISHED'}&bpy.ops.export_mesh.stl\(filepath='${TEST_OUT_DIR}/export_stl_cube_all_data.stl'\)
218         --md5_source=${TEST_OUT_DIR}/export_stl_cube_all_data.stl
219         --md5=64cb97c0cabb015e1c3f76369835075a --md5_method=FILE
220 )
221
222 add_test(export_stl_suzanne_all_data ${TEST_BLENDER_EXE}
223         ${TEST_SRC_DIR}/io_tests/blend_geometry/suzanne_all_data.blend
224         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
225         --run={'FINISHED'}&bpy.ops.export_mesh.stl\(filepath='${TEST_OUT_DIR}/export_stl_suzanne_all_data.stl'\)
226         --md5_source=${TEST_OUT_DIR}/export_stl_suzanne_all_data.stl
227         --md5=e9b23c97c139ad64961c635105bb9192 --md5_method=FILE
228 )
229
230 add_test(export_stl_vertices ${TEST_BLENDER_EXE}  # lame, add a better one
231         ${TEST_SRC_DIR}/io_tests/blend_geometry/vertices.blend
232         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
233         --run={'FINISHED'}&bpy.ops.export_mesh.stl\(filepath='${TEST_OUT_DIR}/export_stl_vertices.stl'\)
234         --md5_source=${TEST_OUT_DIR}/export_stl_vertices.stl
235         --md5=3fd3c877e573beeebc782532cc005820 --md5_method=FILE
236 )
237
238
239 # X3D Import
240 add_test(import_x3d_cube ${TEST_BLENDER_EXE}
241         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
242         --run={'FINISHED'}&bpy.ops.import_scene.x3d\(filepath='${TEST_SRC_DIR}/io_tests/x3d/color_cube.x3d'\)
243         --md5=3fae9be004199c145941cd3f9f80ad7b --md5_method=SCENE
244         --write-blend=${TEST_OUT_DIR}/import_x3d_cube.blend
245 )
246
247 add_test(import_x3d_teapot ${TEST_BLENDER_EXE}
248         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
249         --run={'FINISHED'}&bpy.ops.import_scene.x3d\(filepath='${TEST_SRC_DIR}/io_tests/x3d/teapot.x3d'\)
250         --md5=8ee196c71947dce4199d55698501691e --md5_method=SCENE
251         --write-blend=${TEST_OUT_DIR}/import_x3d_teapot.blend
252 )
253
254 add_test(import_x3d_suzanne_material ${TEST_BLENDER_EXE}
255         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
256         --run={'FINISHED'}&bpy.ops.import_scene.x3d\(filepath='${TEST_SRC_DIR}/io_tests/x3d/suzanne_material.x3d'\)
257         --md5=3edea1353257d8b5a5f071942f417be6 --md5_method=SCENE
258         --write-blend=${TEST_OUT_DIR}/import_x3d_suzanne_material.blend
259 )
260
261 # X3D Export
262 add_test(export_x3d_cube ${TEST_BLENDER_EXE}
263         ${TEST_SRC_DIR}/io_tests/blend_geometry/all_quads.blend
264         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
265         --run={'FINISHED'}&bpy.ops.export_scene.x3d\(filepath='${TEST_OUT_DIR}/export_x3d_cube.x3d',use_selection=False\)
266         --md5_source=${TEST_OUT_DIR}/export_x3d_cube.x3d
267         --md5=05312d278fe41da33560fdfb9bdb268f --md5_method=FILE
268 )
269
270 add_test(export_x3d_nurbs ${TEST_BLENDER_EXE}
271         ${TEST_SRC_DIR}/io_tests/blend_geometry/nurbs.blend
272         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
273         --run={'FINISHED'}&bpy.ops.export_scene.x3d\(filepath='${TEST_OUT_DIR}/export_x3d_nurbs.x3d',use_selection=False\)
274         --md5_source=${TEST_OUT_DIR}/export_x3d_nurbs.x3d
275         --md5=4286d4a2aa507ef78b22ddcbdcc88481 --md5_method=FILE
276 )
277
278 add_test(export_x3d_all_objects ${TEST_BLENDER_EXE}
279         ${TEST_SRC_DIR}/io_tests/blend_scene/all_objects.blend
280         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
281         --run={'FINISHED'}&bpy.ops.export_scene.x3d\(filepath='${TEST_OUT_DIR}/export_x3d_all_objects.x3d',use_selection=False\)
282         --md5_source=${TEST_OUT_DIR}/export_x3d_all_objects.x3d
283         --md5=f5f9fa4c5619a0eeab66685aafd2f7f0 --md5_method=FILE
284 )
285
286
287
288 # 3DS Import
289 add_test(import_3ds_cube ${TEST_BLENDER_EXE}
290         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
291         --run={'FINISHED'}&bpy.ops.import_scene.autodesk_3ds\(filepath='${TEST_SRC_DIR}/io_tests/3ds/cube.3ds'\)
292         --md5=cb5a45c35a343c3f5beca2a918472951 --md5_method=SCENE
293         --write-blend=${TEST_OUT_DIR}/import_3ds_cube.blend
294 )
295
296 add_test(import_3ds_hierarchy_lara ${TEST_BLENDER_EXE}
297         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
298         --run={'FINISHED'}&bpy.ops.import_scene.autodesk_3ds\(filepath='${TEST_SRC_DIR}/io_tests/3ds/hierarchy_lara.3ds'\)
299         --md5=766c873d9fdb5f190e43796cfbae63b6 --md5_method=SCENE
300         --write-blend=${TEST_OUT_DIR}/import_3ds_hierarchy_lara.blend
301 )
302
303 add_test(import_3ds_hierarchy_greek_trireme ${TEST_BLENDER_EXE}
304         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
305         --run={'FINISHED'}&bpy.ops.import_scene.autodesk_3ds\(filepath='${TEST_SRC_DIR}/io_tests/3ds/hierarchy_greek_trireme.3ds'\)
306         --md5=b62ee30101e8999cb91ef4f8a8760056 --md5_method=SCENE
307         --write-blend=${TEST_OUT_DIR}/import_3ds_hierarchy_greek_trireme.blend
308 )
309
310 # 3DS Export
311 add_test(export_3ds_cube ${TEST_BLENDER_EXE}
312         ${TEST_SRC_DIR}/io_tests/blend_geometry/all_quads.blend
313         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
314         --run={'FINISHED'}&bpy.ops.export_scene.autodesk_3ds\(filepath='${TEST_OUT_DIR}/export_3ds_cube.3ds',use_selection=False\)
315         --md5_source=${TEST_OUT_DIR}/export_3ds_cube.3ds
316         --md5=a31f5071b6c6dc7445b9099cdc7f63b3 --md5_method=FILE
317 )
318
319 add_test(export_3ds_nurbs ${TEST_BLENDER_EXE}
320         ${TEST_SRC_DIR}/io_tests/blend_geometry/nurbs.blend
321         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
322         --run={'FINISHED'}&bpy.ops.export_scene.autodesk_3ds\(filepath='${TEST_OUT_DIR}/export_3ds_nurbs.3ds',use_selection=False\)
323         --md5_source=${TEST_OUT_DIR}/export_3ds_nurbs.3ds
324         --md5=5bdd21be3c80d814fbc83cb25edb08c2 --md5_method=FILE
325 )
326
327 add_test(export_3ds_all_objects ${TEST_BLENDER_EXE}
328         ${TEST_SRC_DIR}/io_tests/blend_scene/all_objects.blend
329         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
330         --run={'FINISHED'}&bpy.ops.export_scene.autodesk_3ds\(filepath='${TEST_OUT_DIR}/export_3ds_all_objects.3ds',use_selection=False\)
331         --md5_source=${TEST_OUT_DIR}/export_3ds_all_objects.3ds
332         --md5=68447761ab0ca38e1e22e7c177ed48a8 --md5_method=FILE
333 )
334
335
336
337 # FBX Export
338 # 'use_metadata=False' for reliable md5's
339 add_test(export_fbx_cube ${TEST_BLENDER_EXE}
340         ${TEST_SRC_DIR}/io_tests/blend_geometry/all_quads.blend
341         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
342         --run={'FINISHED'}&bpy.ops.export_scene.fbx\(filepath='${TEST_OUT_DIR}/export_fbx_cube.fbx',use_selection=False,use_metadata=False\)
343         --md5_source=${TEST_OUT_DIR}/export_fbx_cube.fbx
344         --md5=59a35577462f95f9a0b4e6035226ce9b --md5_method=FILE
345 )
346
347 add_test(export_fbx_nurbs ${TEST_BLENDER_EXE}
348         ${TEST_SRC_DIR}/io_tests/blend_geometry/nurbs.blend
349         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
350         --run={'FINISHED'}&bpy.ops.export_scene.fbx\(filepath='${TEST_OUT_DIR}/export_fbx_nurbs.fbx',use_selection=False,use_metadata=False\)
351         --md5_source=${TEST_OUT_DIR}/export_fbx_nurbs.fbx
352         --md5=d31875f18f613fa0c3b16e978f87f6f8 --md5_method=FILE
353 )
354
355 add_test(export_fbx_all_objects ${TEST_BLENDER_EXE}
356         ${TEST_SRC_DIR}/io_tests/blend_scene/all_objects.blend
357         --python ${CMAKE_CURRENT_LIST_DIR}/bl_test.py --
358         --run={'FINISHED'}&bpy.ops.export_scene.fbx\(filepath='${TEST_OUT_DIR}/export_fbx_all_objects.fbx',use_selection=False,use_metadata=False\)
359         --md5_source=${TEST_OUT_DIR}/export_fbx_all_objects.fbx
360         --md5=b35eb2a9d0e73762ecae2278c25a38ac --md5_method=FILE
361 )
362
363 if(WITH_CYCLES)
364         if(OPENIMAGEIO_IDIFF)
365                 add_test(cycles_shaders_test
366                         ${CMAKE_CURRENT_LIST_DIR}/cycles_render_tests.py
367                         -blender "${TEST_BLENDER_EXE_BARE}"
368                         -testdir "${TEST_SRC_DIR}/cycles/ctests/shader"
369                         -idiff "${OPENIMAGEIO_IDIFF}"
370                 )
371         endif()
372 endif()