scripts/jcopy.py

   1 #!/usr/bin/python
   2 ##############################################################################
   3 # Copyright (c) 2018 AT&T Intellectual Property. All rights reserved.        #
   4 #                                                                            #
   5 # Licensed under the Apache License, Version 2.0 (the "License"); you may    #
   6 # not use this file except in compliance with the License.                   #
   7 #                                                                            #
   8 # You may obtain a copy of the License at                                    #
   9 #       http://www.apache.org/licenses/LICENSE-2.0                           #
  10 #                                                                            #
  11 # Unless required by applicable law or agreed to in writing, software        #
  12 # distributed under the License is distributed on an "AS IS" BASIS, WITHOUT  #
  13 # WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.           #
  14 # See the License for the specific language governing permissions and        #
  15 # limitations under the License.                                             #
  16 ##############################################################################
  17
  18 #  jcopy.py - Copy a file or files to a target directory, making
  19 #    substitutions as needed from the values contained in a YAML file.
  20 #    compatibile with python and python3
  21 #
  22 #  usage: jcopy.py <yaml_input> <template_dir_or_file> <out_dir>
  23
  24 import os.path
  25 import jinja2
  26 import sys
  27 import yaml
  28 import netaddr
  29
  30 def cidr_netmask(value):
  31   if '/' in str(value):
  32     v = netaddr.IPNetwork(value)
  33     result = v.netmask
  34   else:
  35     result = "ERROR"
  36   return result
  37
  38 def cidr_subnet(value):
  39   if '/' in str(value):
  40     v = netaddr.IPNetwork(value)
  41     result = v.network
  42   else:
  43     result = "ERROR"
  44   return result
  45
  46 def usage(msg=None):
  47   if not msg is None:
  48     print(msg)
  49   print( 'usage: jcopy.py <yaml> <template_dir_or_file> <out_dir>' )
  50   sys.exit(1)
  51
  52 def expand_template( t, output_fname, fill=60 ):
  53   print( '### {0: <{fill}} ==> {1}'.format(t.filename, output_fname, fill=fill) )
  54   if not os.path.exists(os.path.dirname(output_fname)):
  55     os.makedirs(os.path.dirname(output_fname))
  56   t.stream(yaml=siteyaml).dump(output_fname)
  57
  58 if len(sys.argv) != 4:
  59   usage('incorrect number of arguments')
  60
  61 yaml_input=sys.argv[1]
  62 j2in_name=sys.argv[2]
  63 yaml_out=sys.argv[3]
  64
  65 if not os.path.isfile(yaml_input):
  66   usage('input yaml file {} does not exist'.format(yaml_input))
  67
  68 with open(yaml_input) as f:
  69   siteyaml = yaml.safe_load(f)
  70
  71 if os.path.isfile(j2in_name):
  72   j2_env = jinja2.Environment(loader=jinja2.FileSystemLoader(os.path.dirname(j2in_name)), trim_blocks=True, lstrip_blocks=True, keep_trailing_newline=True, undefined=jinja2.make_logging_undefined())
  73   j2_env.filters['cidr_netmask'] = cidr_netmask
  74   j2_env.filters['cidr_subnet'] = cidr_subnet
  75   expand_template(j2_env.get_template(name=os.path.basename(j2in_name)),yaml_out,len(j2in_name))
  76 else:
  77   j2_env = jinja2.Environment(loader=jinja2.FileSystemLoader(j2in_name), trim_blocks=True, lstrip_blocks=True, keep_trailing_newline=True, undefined=jinja2.make_logging_undefined())
  78   j2_env.filters['cidr_netmask'] = cidr_netmask
  79   j2_env.filters['cidr_subnet'] = cidr_subnet
  80   templates=j2_env.list_templates(extensions=('j2'))
  81   fill=len(max(templates,key=len))+len(j2in_name)
  82   for f in templates:
  83     expand_template(j2_env.get_template(name=f), yaml_out+'/'+f.replace('.j2','.yaml'), fill)
  84   print('%d files processed.' % len(templates))
  85
  86 sys.exit(0)
  87
  88 # sudo apt-get install python-jinja2 python-yaml
  89 # sudo apt-get install python3-jinja2 python3-yaml