tools/jailhouse-config-create

   1 #!/usr/bin/env python
   2 #
   3 # Jailhouse, a Linux-based partitioning hypervisor
   4 #
   5 # Copyright (c) Siemens AG, 2014
   6 #
   7 # This work is licensed under the terms of the GNU GPL, version 2.  See
   8 # the COPYING file in the top-level directory.
   9 #
  10 # This script should help to create a basic jailhouse configuration file.
  11 # It needs to be executed on the target machine, where it will gather
  12 # information about the system. For more advanced scenarios you will have
  13 # to change the generated C-code.
  14
  15 from __future__ import print_function
  16 import sys
  17 import os
  18 import re
  19 import argparse
  20 import struct
  21 from mako.template import Template
  22
  23 # pretend to be part of the jailhouse tool
  24 sys.argv[0] = sys.argv[0].replace('-', ' ')
  25
  26 parser = argparse.ArgumentParser()
  27 parser.add_argument('-g', '--generate-collector',
  28                     help='generate a script to collect input files on '
  29                          'a remote machine',
  30                     action='store_true')
  31 parser.add_argument('-r', '--root',
  32                     help='gather information in ROOT/, the default is "/" '
  33                          'which means creating a config for localhost',
  34                     default='/',
  35                     action='store',
  36                     type=str)
  37
  38 memargs = [['--mem-inmates', '2M', 'inmate'],
  39            ['--mem-hv', '64M', 'hypervisor']]
  40
  41 for entry in memargs:
  42     parser.add_argument(entry[0],
  43                         help='the amount of ' + entry[2] +
  44                              ' memory, default is "' + entry[1] +
  45                              '", format "xxx[K|M|G]"',
  46                         default=entry[1],
  47                         action='store',
  48                         type=str)
  49
  50 parser.add_argument('file', metavar='FILE',
  51                     help='name of file to write out',
  52                     type=str)
  53
  54 options = parser.parse_args()
  55
  56 inputs = {'files': set(), 'dirs': set()}
  57
  58
  59 class PCIDevice:
  60     def __init__(self, type, domain, bus, dev, fn):
  61         self.type = type
  62         self.domain = domain
  63         self.bus = bus
  64         self.dev = dev
  65         self.fn = fn
  66
  67     def __str__(self):
  68         return 'PCIDevice: %02x:%02x.%x' % (self.bus, self.dev, self.fn)
  69
  70     def devfn(self):
  71         return self.dev << 3 | self.fn
  72
  73     @staticmethod
  74     def parse_pcidevice_sysfsdir(basedir, dir):
  75         dclass = input_readline(basedir + '/' + dir + '/class', False, False)
  76         if re.match(r'0x0604..', dclass):
  77             type = 'JAILHOUSE_PCI_TYPE_BRIDGE'
  78         else:
  79             type = 'JAILHOUSE_PCI_TYPE_DEVICE'
  80         a = dir.split(':')
  81         domain = int(a[0], 16)
  82         bus = int(a[1], 16)
  83         df = a[2].split('.')
  84         return PCIDevice(type, domain, bus, int(df[0], 16), int(df[1], 16))
  85
  86
  87 class MemRegion:
  88     def __init__(self, start, stop, typestr, comments=[]):
  89         self.start = start
  90         self.stop = stop
  91         self.typestr = typestr
  92         self.comments = comments
  93
  94     def __str__(self):
  95         return 'MemRegion: %08x-%08x : %s' % \
  96             (self.start, self.stop, self.typestr)
  97
  98     def size(self):
  99         # round up to full PAGE_SIZE
 100         return int((self.stop - self.start + 0xfff) / 0x1000) * 0x1000
 101
 102     def flagstr(self, p=''):
 103         if (
 104             self.typestr == 'ACPI Tables' or
 105             self.typestr == 'ACPI Non-volatile Storage'
 106         ):
 107             return 'JAILHOUSE_MEM_READ'
 108         if (
 109             self.typestr == 'System RAM' or
 110             self.typestr == 'RAM buffer' or
 111             self.typestr == 'ACPI DMAR RMRR'
 112         ):
 113             s = 'JAILHOUSE_MEM_READ | JAILHOUSE_MEM_WRITE |\n'
 114             s += p + '\t\tJAILHOUSE_MEM_EXECUTE | JAILHOUSE_MEM_DMA'
 115             return s
 116         return 'JAILHOUSE_MEM_READ | JAILHOUSE_MEM_WRITE'
 117
 118     @staticmethod
 119     # return the first region with the given typestr
 120     def find_region(regions, typestr):
 121         for r in regions:
 122             if (r.typestr == typestr):
 123                 return r
 124         return None
 125
 126     @staticmethod
 127     def parse_iomem_line(line):
 128         a = line.split(':', 1)
 129         # HPET may be part of in reserved region
 130         if a[0].startswith(' ') and a[1].find("HPET") < 0:
 131             return None
 132         region = a[0].split('-', 1)
 133         a[1] = a[1].strip()
 134         return MemRegion(int(region[0], 16), int(region[1], 16), a[1])
 135
 136
 137 def parse_iomem():
 138     regions = []
 139     f, e = input_open('/proc/iomem', True, False, 'r')
 140     for line in f:
 141         r = MemRegion.parse_iomem_line(line)
 142         ## XXX what else to ignore??
 143         if (
 144             r is not None and
 145             r.typestr != 'Local APIC' and
 146             r.typestr != 'reserved'
 147         ):
 148             regions.append(r)
 149     f.close()
 150
 151     # newer Linux kernels will report the first page as reserved
 152     # it is needed for CPU init so include it anyways
 153     if (
 154         regions[0].typestr == 'System RAM' and
 155         regions[0].start == 0x1000
 156     ):
 157         regions[0].start = 0
 158
 159     return regions
 160
 161
 162 def parse_pcidevices():
 163     devices = []
 164     basedir = '/sys/bus/pci/devices'
 165     list = input_listdir(basedir, ['*/class'])
 166     for dir in list:
 167         d = PCIDevice.parse_pcidevice_sysfsdir(basedir, dir)
 168         if d is not None:
 169             devices.append(d)
 170     return devices
 171
 172
 173 def kmg_multiply(value, kmg):
 174     if (kmg == 'K' or kmg == 'k'):
 175         return 1024 * value
 176     if (kmg == 'M' or kmg == 'm'):
 177         return 1024**2 * value
 178     if (kmg == 'G' or kmg == 'g'):
 179         return 1024**3 * value
 180     return value
 181
 182
 183 def kmg_multiply_str(str):
 184     m = re.match(r'([0-9a-fA-FxX]+)([KMG]?)', str)
 185     if m is not None:
 186         return kmg_multiply(int(m.group(1)), m.group(2))
 187     raise RuntimeError('kmg_multiply_str can not parse input "' + str + '"')
 188     return 0
 189
 190
 191 def input_open(name, record, optional, *args):
 192     if record:
 193         inputs['files'].add(name)
 194     try:
 195         f = open(options.root + name, *args)
 196     except Exception as e:
 197         if optional:
 198             return None, e
 199         raise e
 200     return f, None
 201
 202
 203 def input_readline(name, record=True, optional=False):
 204     f, e = input_open(name, record, optional, 'r')
 205     if f is None and optional:
 206         return ''
 207
 208     line = f.readline()
 209     f.close()
 210     return line
 211
 212
 213 def input_listdir(dir, wildcards):
 214     for w in wildcards:
 215         inputs['dirs'].add(dir + '/' + w)
 216     if options.generate_collector:
 217         return []
 218     return os.listdir(options.root + dir)
 219
 220
 221 def parse_cmdline():
 222     line = input_readline('/proc/cmdline')
 223     m = re.match(r'.*memmap=([0-9a-fA-FxX]+)([KMG]?)\$'
 224                  '([0-9a-fA-FxX]+)([KMG]?).*',
 225                  line)
 226     if m is not None:
 227         size = kmg_multiply(int(m.group(1), 0), m.group(2))
 228         start = kmg_multiply(int(m.group(3), 0), m.group(4))
 229         return [start, size]
 230     return None
 231
 232
 233 def alloc_mem(regions, size):
 234     mem = [0, size]
 235     for r in reversed(regions):
 236         if (r.typestr == 'System RAM' and r.size() >= mem[1]):
 237             mem[0] = r.start
 238             r.start += mem[1]
 239             return mem
 240     raise RuntimeError('failed to allocate memory')
 241
 242
 243 def count_cpus():
 244     list = input_listdir('/sys/devices/system/cpu', ['cpu*/uevent'])
 245     count = 0
 246     for f in list:
 247         if re.match(r'cpu[0-9]+', f):
 248             count += 1
 249     return count
 250
 251
 252 def parse_dmar_devscope(f):
 253     offset = 0
 254     (scope_type, scope_len, bus, dev, fn) = \
 255         struct.unpack('<BBxxxBBB', f.read(8))
 256     offset += 8
 257     return (offset, scope_type, scope_len, bus, dev, fn)
 258
 259
 260 # parsing of DMAR ACPI Table
 261 # see Intel VT-d Spec chapter 8
 262 def parse_dmar():
 263     f, e = input_open('/sys/firmware/acpi/tables/DMAR', True, True, 'rb')
 264     if not f:
 265         if options.generate_collector:
 266             return 0, []
 267         if e:
 268             raise e
 269         raise RuntimeError('could not find DMAR ACPI table')
 270
 271     signature = f.read(4)
 272     if signature != b'DMAR':
 273         raise RuntimeError('incorrect input file format %s' % signature)
 274     (length,) = struct.unpack('<I', f.read(4))
 275     f.seek(48)
 276     length -= 48
 277     regions = []
 278     ioapic_id = 0
 279
 280     while length > 0:
 281         offset = 0
 282         (struct_type, struct_len) = struct.unpack('<HH', f.read(4))
 283         offset += 4
 284         length -= struct_len
 285
 286         # DMA Remapping Hardware Unit Definition
 287         if struct_type == 0:
 288             f.seek(16 - offset, os.SEEK_CUR)
 289             offset += 16 - offset
 290             while offset < struct_len:
 291                 (off, scope_type, scope_len, bus, dev, fn) =\
 292                     parse_dmar_devscope(f)
 293                 offset += off
 294                 if scope_type == 3:
 295                     if ioapic_id != 0:
 296                         raise RuntimeError('We do not support more '
 297                                            'than 1 IOAPIC')
 298                     ioapic_id = (bus << 8) | (dev << 3) | fn
 299                 f.seek(scope_len - 8, os.SEEK_CUR)
 300                 offset += scope_len - 8
 301
 302         # Reserved Memory Region Reporting Structure
 303         if struct_type == 1:
 304             f.seek(8 - offset, os.SEEK_CUR)
 305             offset += 8 - offset
 306             (base, limit) = struct.unpack('<QQ', f.read(16))
 307             offset += 16
 308
 309             comments = []
 310             while offset < struct_len:
 311                 (off, scope_type, scope_len, bus, dev, fn) =\
 312                     parse_dmar_devscope(f)
 313                 offset += off
 314                 npath = (scope_len - 6)/2
 315                 if scope_type == 1 and npath == 1:
 316                     comments.append('PCI device: %02x:%02x.%x' %
 317                                     (bus, dev, fn))
 318                 else:
 319                     comments.append('DMAR parser could not decode device path')
 320                 f.seek(scope_len - off, os.SEEK_CUR)
 321                 offset += scope_len - off
 322
 323             reg = MemRegion(base, limit, 'ACPI DMAR RMRR', comments)
 324             regions.append(reg)
 325
 326         f.seek(struct_len - offset, os.SEEK_CUR)
 327
 328     return ioapic_id, regions
 329
 330
 331 def parse_ioports():
 332     pm_timer_base = None
 333     f, e = input_open('/proc/ioports', True, False, 'r')
 334     for line in f:
 335         if line.endswith('ACPI PM_TMR\n'):
 336             pm_timer_base = int(line.split('-')[0], 16)
 337             break
 338     f.close()
 339     return pm_timer_base
 340
 341
 342 pcidevices = parse_pcidevices()
 343
 344 product = [input_readline('/sys/class/dmi/id/sys_vendor',
 345                           True, True).rstrip(),
 346            input_readline('/sys/class/dmi/id/product_name',
 347                           True, True).rstrip()
 348            ]
 349
 350 inmatemem = kmg_multiply_str(options.mem_inmates)
 351 hvmem = [0, kmg_multiply_str(options.mem_hv)]
 352
 353 regions = parse_iomem()
 354 ourmem = parse_cmdline()
 355 total = hvmem[1] + inmatemem
 356
 357 ioapic_id, rmrr_regs = parse_dmar()
 358 regions += rmrr_regs
 359
 360 # kernel does not have memmap region, pick one
 361 if ourmem is None:
 362     ourmem = alloc_mem(regions, total)
 363 elif (total > ourmem[1]):
 364     raise RuntimeError('Your memmap reservation is too small you need >="' +
 365                        hex(total) + '"')
 366
 367 hvmem[0] = ourmem[0]
 368
 369 creg = MemRegion.find_region(regions, 'ACPI Tables')
 370 if creg is None:
 371     raise RuntimeError('could not find "ACPI Tables" memory')
 372 confmem = [creg.start, creg.size()]
 373 inmatereg = MemRegion(ourmem[0] + hvmem[1],
 374                       ourmem[0] + hvmem[1] + inmatemem - 1,
 375                       'JAILHOUSE Inmate Memory')
 376 regions.append(inmatereg)
 377
 378 cpucount = count_cpus()
 379
 380 pm_timer_base = parse_ioports()
 381
 382 jh_enabled = input_readline('/sys/devices/jailhouse/enabled',
 383                             True, True).rstrip()
 384 if options.generate_collector is False and jh_enabled == '1':
 385     print('ERROR: Jailhouse was enabled when collecting input files! '
 386           'Disable jailhouse and try again.',
 387           file=sys.stderr)
 388     sys.exit(1)
 389
 390 f = open(options.file, 'w')
 391
 392 if options.generate_collector:
 393     filelist = ' '.join(inputs['files'].union(inputs['dirs']))
 394
 395     tmpl = Template(filename='jailhouse-config-collect.tmpl')
 396     f.write(tmpl.render(filelist=filelist))
 397 else:
 398     tmpl = Template(filename='root-cell-config.c.tmpl')
 399     f.write(tmpl.render(regions=regions,
 400                         ourmem=ourmem,
 401                         argstr=' '.join(sys.argv),
 402                         hvmem=hvmem,
 403                         confmem=confmem,
 404                         product=product,
 405                         pcidevices=pcidevices,
 406                         cpucount=cpucount,
 407                         ioapic_id=ioapic_id,
 408                         pm_timer_base=pm_timer_base))
 409
 410 f.close()