use wildcard for config.web.errormail_exclude
[invirt/packages/invirt-web.git] / code / controls.py
1 """
2 Functions to perform remctls.
3 """
4
5 import validation
6 from webcommon import CodeError, InvalidInput
7 import random
8 import subprocess
9 import sys
10 import time
11 import re
12 import cache_acls
13 import yaml
14
15 from invirt.config import structs as config
16 from invirt.database import Machine, Disk, Type, NIC, CDROM, session, meta
17
18 # ... and stolen from xend/uuid.py
19 def randomUUID():
20     """Generate a random UUID."""
21
22     return [ random.randint(0, 255) for _ in range(0, 16) ]
23
24 def uuidToString(u):
25     """Turn a numeric UUID to a hyphen-seperated one."""
26     return "-".join(["%02x" * 4, "%02x" * 2, "%02x" * 2, "%02x" * 2,
27                      "%02x" * 6]) % tuple(u)
28 # end stolen code
29
30 def kinit():
31     """Kinit with a given username and keytab"""
32     p = subprocess.Popen(['kinit', "-k", "-t", '/etc/invirt/keytab',
33                           'daemon/'+config.web.hostname],
34                          stderr=subprocess.PIPE)
35     e = p.wait()
36     if e:
37         raise CodeError("Error %s in kinit: %s" % (e, p.stderr.read()))
38
39 def checkKinit():
40     """If we lack tickets, kinit."""
41     p = subprocess.Popen(['klist', '-s'])
42     if p.wait():
43         kinit()
44
45 def remctl(*args, **kws):
46     """Perform a remctl and return the output.
47
48     kinits if necessary, and outputs errors to stderr.
49     """
50     checkKinit()
51     p = subprocess.Popen(['remctl', config.remote.hostname]
52                          + list(args),
53                          stdout=subprocess.PIPE,
54                          stderr=subprocess.PIPE)
55     v = p.wait()
56     if kws.get('err'):
57         return p.stdout.read(), p.stderr.read()
58     if v:
59         print >> sys.stderr, 'Error', v, 'on remctl', args, ':'
60         print >> sys.stderr, p.stderr.read()
61         raise CodeError('ERROR on remctl')
62     return p.stdout.read()
63
64 def lvcreate(machine, disk):
65     """Create a single disk for a machine"""
66     remctl('web', 'lvcreate', machine.name,
67            disk.guest_device_name, str(disk.size))
68     
69 def makeDisks(machine):
70     """Update the lvm partitions to add a disk."""
71     for disk in machine.disks:
72         lvcreate(machine, disk)
73
74 def getswap(disksize, memsize):
75     """Returns the recommended swap partition size."""
76     return int(min(disksize / 4, memsize * 1.5))
77
78 def lvinstall(machine, autoinstall):
79     disksize = machine.disks[0].size
80     memsize = machine.memory
81     swapsize = getswap(disksize, memsize)
82     imagesize = disksize - swapsize
83     ip = machine.nics[0].ip
84     remctl('control', machine.name, 'install', 
85            'dist=%s' % autoinstall.distribution,
86            'mirror=%s' % autoinstall.mirror,
87            'imagesize=%s' % imagesize)
88
89 def lvcopy(machine_orig_name, machine, rootpw):
90     """Copy a golden image onto a machine's disk"""
91     remctl('web', 'lvcopy', machine_orig_name, machine.name, rootpw)
92
93 def bootMachine(machine, cdtype):
94     """Boot a machine with a given boot CD.
95
96     If cdtype is None, give no boot cd.  Otherwise, it is the string
97     id of the CD (e.g. 'gutsy_i386')
98     """
99     if cdtype is not None:
100         out, err = remctl('control', machine.name, 'create', 
101                           cdtype, err=True)
102     else:
103         out, err = remctl('control', machine.name, 'create',
104                           err=True)
105     if 'already running' in err:
106         raise InvalidInput('action', 'create',
107                            'VM %s is already on' % machine.name)
108     elif err:
109         raise CodeError('"%s" on "control %s create %s' 
110                         % (err, machine.name, cdtype))
111
112 def createVm(username, state, owner, contact, name, description, memory, disksize, machine_type, cdrom, autoinstall):
113     """Create a VM and put it in the database"""
114     # put stuff in the table
115     session.begin()
116     try:
117         validation.Validate(username, state, name=name, description=description, owner=owner, memory=memory, disksize=disksize/1024.)
118         machine = Machine()
119         machine.name = name
120         machine.description = description
121         machine.memory = memory
122         machine.owner = owner
123         machine.administrator = owner
124         machine.contact = contact
125         machine.uuid = uuidToString(randomUUID())
126         machine.boot_off_cd = True
127         machine.type = machine_type
128         session.save_or_update(machine)
129         disk = Disk(machine=machine,
130                     guest_device_name='hda', size=disksize)
131         nic = NIC.query().filter_by(machine_id=None).first()
132         if not nic: #No IPs left!
133             raise CodeError("No IP addresses left!  "
134                             "Contact %s." % config.web.errormail)
135         nic.machine = machine
136         nic.hostname = name
137         session.save_or_update(nic)
138         session.save_or_update(disk)
139         cache_acls.refreshMachine(machine)
140         session.commit()
141     except:
142         session.rollback()
143         raise
144     makeDisks(machine)
145     if autoinstall:
146         lvinstall(machine, autoinstall)
147     # tell it to boot with cdrom
148     bootMachine(machine, cdrom)
149     return machine
150
151 def getList():
152     """Return a dictionary mapping machine names to dicts."""
153     value_string = remctl('web', 'listvms')
154     value_dict = yaml.load(value_string, yaml.CSafeLoader)
155     return value_dict
156
157 def parseStatus(s):
158     """Parse a status string into nested tuples of strings.
159
160     s = output of xm list --long <machine_name>
161     """
162     values = re.split('([()])', s)
163     stack = [[]]
164     for v in values[2:-2]: #remove initial and final '()'
165         if not v:
166             continue
167         v = v.strip()
168         if v == '(':
169             stack.append([])
170         elif v == ')':
171             if len(stack[-1]) == 1:
172                 stack[-1].append('')
173             stack[-2].append(stack[-1])
174             stack.pop()
175         else:
176             if not v:
177                 continue
178             stack[-1].extend(v.split())
179     return stack[-1]
180
181 def statusInfo(machine):
182     """Return the status list for a given machine.
183
184     Gets and parses xm list --long
185     """
186     value_string, err_string = remctl('control', machine.name, 'list-long', 
187                                       err=True)
188     if 'Unknown command' in err_string:
189         raise CodeError("ERROR in remctl list-long %s is not registered" % 
190                         (machine.name,))
191     elif 'is not on' in err_string:
192         return None
193     elif err_string:
194         raise CodeError("ERROR in remctl list-long %s:  %s" % 
195                         (machine.name, err_string))
196     status = parseStatus(value_string)
197     return status
198
199 def listHost(machine):
200     """Return the host a machine is running on"""
201     out, err = remctl('control', machine.name, 'listhost', err=True)
202     if err:
203         return None
204     return out.strip()
205
206 def deleteVM(machine):
207     """Delete a VM."""
208     remctl('control', machine.name, 'destroy', err=True)
209     session.begin()
210     delete_disk_pairs = [(machine.name, d.guest_device_name) 
211                          for d in machine.disks]
212     try:
213         for mname, dname in delete_disk_pairs:
214             remctl('web', 'lvremove', mname, dname)
215         for nic in machine.nics:
216             nic.machine_id = None
217             nic.hostname = None
218             session.save_or_update(nic)
219         for disk in machine.disks:
220             session.delete(disk)
221         session.delete(machine)
222         session.commit()
223     except:
224         session.rollback()
225         raise
226
227 def commandResult(username, state, fields):
228     start_time = 0
229     machine = validation.Validate(username, state, machine_id=fields.getfirst('machine_id')).machine
230     action = fields.getfirst('action')
231     cdrom = fields.getfirst('cdrom')
232     if cdrom is not None and not CDROM.query().filter_by(cdrom_id=cdrom).one():
233         raise CodeError("Invalid cdrom type '%s'" % cdrom)    
234     if action not in ('Reboot', 'Power on', 'Power off', 'Shutdown', 
235                       'Delete VM'):
236         raise CodeError("Invalid action '%s'" % action)
237     if action == 'Reboot':
238         if cdrom is not None:
239             out, err = remctl('control', machine.name, 'reboot', cdrom,
240                               err=True)
241         else:
242             out, err = remctl('control', machine.name, 'reboot',
243                               err=True)
244         if err:
245             if re.match("machine '.*' is not on", err):
246                 raise InvalidInput("action", "reboot", 
247                                    "Machine is not on")
248             else:
249                 print >> sys.stderr, 'Error on reboot:'
250                 print >> sys.stderr, err
251                 raise CodeError('ERROR on remctl')
252                 
253     elif action == 'Power on':
254         if validation.maxMemory(username, state, machine) < machine.memory:
255             raise InvalidInput('action', 'Power on',
256                                "You don't have enough free RAM quota "
257                                "to turn on this machine.")
258         bootMachine(machine, cdrom)
259     elif action == 'Power off':
260         out, err = remctl('control', machine.name, 'destroy', err=True)
261         if err:
262             if re.match("machine '.*' is not on", err):
263                 raise InvalidInput("action", "Power off", 
264                                    "Machine is not on.")
265             else:
266                 print >> sys.stderr, 'Error on power off:'
267                 print >> sys.stderr, err
268                 raise CodeError('ERROR on remctl')
269     elif action == 'Shutdown':
270         out, err = remctl('control', machine.name, 'shutdown', err=True)
271         if err:
272             if re.match("machine '.*' is not on", err):
273                 raise InvalidInput("action", "Shutdown", 
274                                    "Machine is not on.")
275             else:
276                 print >> sys.stderr, 'Error on Shutdown:'
277                 print >> sys.stderr, err
278                 raise CodeError('ERROR on remctl')
279     elif action == 'Delete VM':
280         deleteVM(machine)
281
282     d = dict(user=username,
283              command=action,
284              machine=machine)
285     return d
286
287 def resizeDisk(machine_name, disk_name, new_size):
288     remctl("web", "lvresize", machine_name, disk_name, new_size)
289
290 def renameMachine(machine, old_name, new_name):
291     for disk in machine.disks:
292         remctl("web", "lvrename", old_name, 
293                disk.guest_device_name, new_name)
294