change for sorting rna cleaner (was broken), diff's on rna_properties.txt will stop...
[blender.git] / source / blender / makesrna / rna_cleanup / rna_cleaner.py
1 #! /usr/bin/env python3.1
2
3 """
4 This script is used to help cleaning RNA api.
5
6 Typical line in the input file (elements in [] are optional).
7
8 [comment *] ToolSettings.snap_align_rotation -> use_snap_align_rotation:    boolean    [Align rotation with the snapping target]
9
10 Geterate output format from blender run this:
11  ./blender.bin --background --python ./release/scripts/modules/rna_info.py > source/blender/makesrna/rna_cleanup/out.txt
12 """
13
14
15 def font_bold(mystring):
16     """
17     Formats the string as bold, to be used in printouts.
18     """
19     font_bold = "\033[1m"
20     font_reset = "\033[0;0m"
21     return font_bold + mystring + font_reset
22     
23
24 def usage():
25     """
26     Prints script usage.
27     """
28     import sys
29     scriptname = sys.argv[0]
30     sort_choices_string = '|'.join(sort_choices)
31     message = "\nUSAGE:"
32     message += "\n%s input-file (.txt|.py) order-priority (%s).\n" % (font_bold(scriptname), sort_choices_string)
33     message += "%s -h for help\n" % font_bold(scriptname)
34     print(message)
35     exit()
36
37
38 def help():
39     """
40     Prints script' help.
41     """
42     message = '\nHELP:'
43     message += '\nRun this script to re-format the edits you make in the input file.\n'
44     message += 'Do quick modification to important fields like \'to\' and don\'t care about fields like \'changed\' or \'description\' and save.\n'
45     message += 'The script outputs 3 files:\n'
46     message += '   1) *_clean.txt: is formatted same as the .txt input, can be edited by user.\n'
47     message += '   2) *_clean.py: is formatted same as the .py input, can be edited by user.\n'
48     message += '   3) rna_api.py is not formatted for readability and go under complete check. Can be used for rna cleanup.\n'
49     print(message)
50     usage()
51
52
53 def check_commandline():
54     """
55     Takes parameters from the commandline.
56     """
57     import sys
58     # Usage
59     if len(sys.argv)==1 or len(sys.argv)>3:
60         usage()
61     if sys.argv[1] == '-h':
62         help()
63     elif not (sys.argv[1].endswith(".txt") or sys.argv[1].endswith(".py")):
64         print ('\nBad input file extension... exiting.')
65         usage()
66     else:
67         inputfile = sys.argv[1]
68     if len(sys.argv) == 2:
69         sort_priority = default_sort_choice
70         print ('\nSecond parameter missing: choosing to order by %s.' % font_bold(sort_priority))
71     elif len(sys.argv)==3:
72         sort_priority = sys.argv[2]
73         if sort_priority not in sort_choices:
74             print('\nWrong sort_priority... exiting.')
75             usage()
76     return (inputfile, sort_priority)
77
78
79 def check_prefix(prop, btype):
80     # reminder: props=[comment, changed, bclass, bfrom, bto, kwcheck, btype, description]
81     if btype == "boolean":
82         if '_' in prop:
83             prefix = prop.split('_')[0]
84             if prefix not in kw_prefixes:
85                 return 'BAD-PREFIX: ' + prefix
86             else:
87                 return prefix + '_'
88         elif prop in kw:
89             return 'SPECIAL-KEYWORD: ' + prop
90         else:
91             return 'BAD-KEYWORD: ' + prop
92     else:
93         return ""
94
95
96 def check_if_changed(a,b):
97     if a != b: return 'changed'
98     else: return 'same'
99
100
101 def get_props_from_txt(input_filename):
102     """
103     If the file is *.txt, the script assumes it is formatted as outlined in this script docstring
104     """
105     
106     file=open(input_filename,'r')
107     file_lines=file.readlines()
108     file.close()
109
110     props_list=[]
111     props_length_max=[0,0,0,0,0,0,0,0]
112     
113     done_text = "+"
114     done = 0
115     tot = 0
116     
117     for line in file_lines:
118         
119         # debug
120         #print(line)
121         
122         # empty line or comment
123         if not line.strip() or line.startswith('#'):
124             continue
125
126         # class
127         [bclass, tail] = [x.strip() for x in line.split('.', 1)]
128
129         # comment
130         if '*' in bclass:
131             [comment, bclass] = [x.strip() for x in bclass.split('*', 1)]
132         else:
133             comment= ''
134
135         # skipping the header if we have one.
136         # the header is assumed to be "NOTE * CLASS.FROM -> TO:   TYPE  DESCRIPTION"
137         if comment == 'NOTE' and bclass == 'CLASS':
138             continue
139
140         # from
141         [bfrom, tail] = [x.strip() for x in tail.split('->', 1)]
142
143         # to
144         [bto, tail] = [x.strip() for x in tail.split(':', 1)]
145
146         # type, description
147         try:
148             [btype, description] = tail.split(None, 1)
149             # make life easy and strip quotes
150             description = description.replace("'", "").replace('"', "").replace("\\", "").strip()
151         except ValueError:
152             [btype, description] = [tail,'NO DESCRIPTION']
153
154         # keyword-check
155         kwcheck = check_prefix(bto, btype)
156
157         # changed
158         changed = check_if_changed(bfrom, bto)
159         
160         # lists formatting
161         props=[comment, changed, bclass, bfrom, bto, kwcheck, btype, description]
162         props_list.append(props)
163         props_length_max=list(map(max,zip(props_length_max,list(map(len,props)))))
164         
165         if done_text in comment:
166             done += 1
167         tot += 1
168     
169     print("Total done %.2f" % (done / tot * 100.0) )
170     
171     return (props_list,props_length_max)
172
173
174 def get_props_from_py(input_filename):
175     """
176     If the file is *.py, the script assumes it contains a python list (as "rna_api=[...]")
177     This means that this script executes the text in the py file with an exec(text).
178     """    
179     # adds the list "rna_api" to this function's scope
180     rna_api = __import__(input_filename[:-3]).rna_api
181
182     props_length_max = [0 for i in rna_api[0]] # this way if the vector will take more elements we are safe
183     for index,props in enumerate(rna_api):
184         comment, changed, bclass, bfrom, bto, kwcheck, btype, description = props
185         kwcheck = check_prefix(bto, btype)   # keyword-check
186         changed = check_if_changed(bfrom, bto)  # changed?
187         description = repr(description)
188         rna_api[index] = [comment, changed, bclass, bfrom, bto, kwcheck, btype, description]
189         props_length = list(map(len,props)) # lengths
190         props_length_max = list(map(max,zip(props_length_max,props_length)))    # max lengths
191     return (rna_api,props_length_max)
192
193
194 def get_props(input_filename):
195     if input_filename.endswith(".txt"):
196         props_list,props_length_max = get_props_from_txt(input_filename)
197     elif input_filename.endswith(".py"):
198         props_list,props_length_max = get_props_from_py(input_filename)
199     return (props_list,props_length_max)
200
201         
202 def sort(props_list, sort_priority):
203     """
204     reminder
205     props=[comment, changed, bclass, bfrom, bto, kwcheck, btype, description]
206     """
207
208     # order based on the i-th element in lists
209     if sort_priority == "class.to":
210         props_list = sorted(props_list, key=lambda p: (p[2], p[4]))
211     else:
212         i = sort_choices.index(sort_priority)
213         if i == 0:
214             props_list = sorted(props_list, key=lambda p: p[i], reverse=True)
215         else:
216             props_list = sorted(props_list, key=lambda p: p[i])
217         
218     print ('\nSorted by %s.' % font_bold(sort_priority))
219     return props_list
220
221
222 def file_basename(input_filename):
223     # if needed will use os.path
224     if input_filename.endswith(".txt"):
225         if input_filename.endswith("_work.txt"):
226             base_filename = input_filename.replace("_work.txt", "")
227         else:
228             base_filename = input_filename.replace(".txt", "")
229     elif input_filename.endswith(".py"):
230         if input_filename.endswith("_work.py"):
231             base_filename = input_filename.replace("_work.py", "")
232         else:
233             base_filename = input_filename.replace(".py", "")
234
235     return base_filename
236
237
238 def write_files(basename, props_list, props_length_max):
239     """
240     Writes in 3 files:
241       * output_filename_work.txt: formatted as txt input file (can be edited)
242       * output_filename_work.py:  formatted for readability (can be edited)
243       * rna_api.py: unformatted, just as final output
244     """
245
246     f_rna = open("rna_api.py",'w')
247     f_txt = open(basename + '_work.txt','w')
248     f_py = open(basename + '_work.py','w')
249
250     # reminder: props=[comment, changed, bclass, bfrom, bto, kwcheck, btype, description]
251     # [comment *] ToolSettings.snap_align_rotation -> use_snap_align_rotation:    boolean    [Align rotation with the snapping target]
252     rna = py = txt = ''
253     props_list = [['NOTE', 'CHANGED', 'CLASS', 'FROM', 'TO', 'KEYWORD-CHECK', 'TYPE', 'DESCRIPTION']] + props_list
254     for props in props_list:
255         #txt
256         if props[0] != '': txt +=  '%s * ' % props[0]   # comment
257         txt +=  '%s.%s -> %s:   %s  "%s"\n' % tuple(props[2:5] + props[6:])   # skipping keyword-check
258         # rna_api
259         if props[0] == 'NOTE': indent = '#   '
260         else: indent = '    '
261         rna += indent + '("%s", "%s", "%s", "%s", "%s"),\n' % tuple(props[2:5] + props[6:]) # description is already string formatted
262         # py
263         blanks = [' '* (x[0]-x[1]) for x in zip(props_length_max,list(map(len,props)))]
264         props = [('"%s"%s' if props[-1] != x[0] else "%s%s") % (x[0],x[1]) for x in zip(props,blanks)]
265         py += indent + '(%s, %s, %s, %s, %s, %s, %s, "%s"),\n' % tuple(props)
266
267     f_txt.write(txt)
268     f_py.write("rna_api = [\n%s]\n" % py)
269     f_rna.write("rna_api = [\n%s]\n" % rna)
270     
271     # write useful py script, wont hurt
272     f_py.write("\n'''\n")
273     f_py.write("for p_note, p_changed, p_class, p_from, p_to, p_check, p_type, p_desc in rna_api:\n")
274     f_py.write("    print(p_to)\n")
275     f_py.write("\n'''\n")
276
277     f_txt.close()
278     f_py.close()
279     f_rna.close()
280
281     print ('\nSaved %s, %s and %s.\n' % (font_bold(f_txt.name), font_bold(f_py.name), font_bold(f_rna.name) ) )
282
283
284 def main():
285
286     global sort_choices, default_sort_choice
287     global kw_prefixes, kw
288
289     sort_choices = ['note','changed','class','from','to','kw', 'class.to']
290     default_sort_choice = sort_choices[-1]
291     kw_prefixes = [ 'active','apply','bl','exclude','has','invert','is','lock', \
292                     'pressed','show','show_only','use','use_only','layers','states', 'select']
293     kw = ['active','hide','invert','select','layers','mute','states','use','lock']
294
295     input_filename, sort_priority = check_commandline()
296     props_list,props_length_max = get_props(input_filename)
297     props_list = sort(props_list,sort_priority)
298
299     output_basename = file_basename(input_filename)
300     write_files(output_basename, props_list,props_length_max)
301
302
303 if __name__=='__main__':
304     import sys
305     if not sys.version.startswith("3"):
306         print("Incorrect python version, use python 3!")
307     else:
308         main()
309