]> rtime.felk.cvut.cz Git - novaboot.git/blob - novaboot
Detect errors when starting tftpd
[novaboot.git] / novaboot
1 #!/usr/bin/perl -w
2
3 # This program is free software: you can redistribute it and/or modify
4 # it under the terms of the GNU General Public License as published by
5 # the Free Software Foundation, either version 2 of the License, or
6 # (at your option) any later version.
7
8 # This program is distributed in the hope that it will be useful,
9 # but WITHOUT ANY WARRANTY; without even the implied warranty of
10 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11 # GNU General Public License for more details.
12
13 # You should have received a copy of the GNU General Public License
14 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
15
16 use strict;
17 use warnings;
18 use warnings (exists $ENV{NOVABOOT_TEST} ? (FATAL => 'all') : ());
19 use Getopt::Long qw(GetOptionsFromString);
20 use Pod::Usage;
21 use File::Basename;
22 use File::Spec;
23 use IO::Handle;
24 use Time::HiRes("usleep");
25 use Socket;
26 use FileHandle;
27 use IPC::Open2;
28 use POSIX qw(:errno_h);
29 use Cwd qw(getcwd abs_path);
30 use Expect;
31
32 # always flush
33 $| = 1;
34
35 my $invocation_dir = $ENV{PWD} || getcwd();
36
37 ## Configuration file handling
38
39 # Default configuration
40 $CFG::hypervisor = "";
41 $CFG::hypervisor_params = "serial";
42 $CFG::genisoimage = "genisoimage";
43 $CFG::qemu = 'qemu-system-i386 -cpu coreduo -smp 2';
44 $CFG::default_target = 'qemu';
45 %CFG::targets = (
46     'qemu' => '--qemu',
47     "tud" => '--server=erwin.inf.tu-dresden.de:~sojka/boot/novaboot --rsync-flags="--chmod=Dg+s,ug+w,o-w,+rX --rsync-path=\"umask 002 && rsync\"" --grub --grub-prefix=(nd)/tftpboot/sojka/novaboot --grub-preamble="timeout 0" --concat --iprelay=141.76.48.80:2324 --scriptmod=s/\\\\bhostserial\\\\b/hostserialpci/g',
48     "novabox" => '--server=rtime.felk.cvut.cz:/srv/tftp/novaboot --rsync-flags="--chmod=Dg+s,ug+w,o-w,+rX --rsync-path=\"umask 002 && rsync\"" --pulsar --iprelay=147.32.86.92:2324',
49     "localhost" => '--scriptmod=s/console=tty[A-Z0-9,]+// --server=/boot/novaboot/$NAME --grub2 --grub-prefix=/boot/novaboot/$NAME --grub2-prolog="  set root=\'(hd0,msdos1)\'"',
50     "ryuglab" => '--server=pc-sojkam.felk.cvut.cz:/srv/tftp --uboot --uboot-init="mw f0000b00 \${psc_cfg}; sleep 1" --remote-cmd="ssh -tt pc-sojkam.felk.cvut.cz \"sterm -d -s 115200 /dev/ttyUSB0\""',
51     "ryulocal" => '--dhcp-tftp --serial --uboot --uboot-init="dhcp; mw f0000b00 \${psc_cfg}; sleep 1" --reset-cmd="if which dtrrts; then dtrrts $NB_SERIAL 0 1; sleep 0.1; dtrrts $NB_SERIAL 1 1; fi"',
52
53     );
54 chomp(my $nproc = `nproc`);
55 $CFG::scons = "scons -j$nproc";
56 $CFG::make = "make -j$nproc";
57
58 my $builddir;
59
60 sub read_config($) {
61     my ($cfg) = @_;
62     {
63         package CFG; # Put config data into a separate namespace
64         my $rc = do($cfg);
65
66         # Check for errors
67         if ($@) {
68             die("ERROR: Failure compiling '$cfg' - $@");
69         } elsif (! defined($rc)) {
70             die("ERROR: Failure reading '$cfg' - $!");
71         } elsif (! $rc) {
72             die("ERROR: Failure processing '$cfg'");
73         }
74     }
75     $builddir = File::Spec->rel2abs($CFG::builddir, dirname($cfg)) if defined $CFG::builddir;
76     print STDERR "novaboot: Read $cfg\n";
77 }
78
79 my @cfgs;
80 {
81     # We don't use $0 here, because it points to the novaboot itself and
82     # not to the novaboot script. The problem with this approach is that
83     # when a script is run as "novaboot <options> <script>" then $ARGV[0]
84     # contains the first option. Hence the -f check.
85     my $dir = File::Spec->rel2abs($ARGV[0] && -f $ARGV[0] ? dirname($ARGV[0]) : '', $invocation_dir);
86     while ((-d $dir || -l $dir ) && $dir ne "/") {
87         push @cfgs, "$dir/.novaboot" if -r "$dir/.novaboot";
88         my @dirs = File::Spec->splitdir($dir);
89         $dir = File::Spec->catdir(@dirs[0..$#dirs-1]);
90     }
91 }
92 my $cfg = $ENV{'NOVABOOT_CONFIG'};
93 Getopt::Long::Configure(qw/no_ignore_case pass_through/);
94 GetOptions ("config|c=s" => \$cfg);
95 read_config($_) foreach $cfg or reverse @cfgs;
96
97 ## Command line handling
98
99 my $explicit_target;
100 GetOptions ("target|t=s" => \$explicit_target);
101
102 my ($amt, @append, $bender, @chainloaders, $concat, $config_name_opt, $dhcp_tftp, $dump_opt, $dump_config, @exiton, @expect_raw, $gen_only, $grub_config, $grub_prefix, $grub_preamble, $grub2_prolog, $grub2_config, $help, $iprelay, $iso_image, $interactive, $kernel_opt, $make, $man, $no_file_gen, $off_opt, $on_opt, $pulsar, $pulsar_root, $qemu, $qemu_append, $qemu_flags_cmd, $remote_cmd, $remote_expect, $reset_cmd, $rom_prefix, $rsync_flags, @scriptmod, $scons, $serial, $server, $stty, $tftp, $uboot, @uboot_init);
103
104 $rsync_flags = '';
105 $rom_prefix = 'rom://';
106 $stty = 'raw -crtscts -onlcr 115200';
107
108 my @expect_seen = ();
109 sub handle_expect
110 {
111     my ($n, $v) = @_;
112     push(@expect_seen, '-re') if $n eq "expect-re";
113     push(@expect_seen, $v);
114 }
115
116 sub handle_send
117 {
118     my ($n, $v) = @_;
119     unless (@expect_seen) { die("No --expect before --send"); }
120     my $ret = ($n eq "sendcont") ? exp_continue : 0;
121     unshift(@expect_raw, sub { shift->send(eval("\"$v\"")); $ret; });
122     unshift(@expect_raw, @expect_seen);
123     @expect_seen = ();
124 }
125
126 Getopt::Long::Configure(qw/no_ignore_case no_pass_through/);
127 my %opt_spec;
128 %opt_spec = (
129     "amt=s"          => \$amt,
130     "append|a=s"     => \@append,
131     "bender|b"       => \$bender,
132     "build-dir=s"    => sub { my ($n, $v) = @_; $builddir = File::Spec->rel2abs($v); },
133     "concat"         => \$concat,
134     "chainloader=s"  => \@chainloaders,
135     "dhcp-tftp|d"    => \$dhcp_tftp,
136     "dump"           => \$dump_opt,
137     "dump-config"    => \$dump_config,
138     "exiton=s"       => \@exiton,
139     "expect=s"       => \&handle_expect,
140     "expect-re=s"    => \&handle_expect,
141     "expect-raw=s"   => sub { my ($n, $v) = @_; unshift(@expect_raw, eval($v)); },
142     "gen-only"       => \$gen_only,
143     "grub|g:s"       => \$grub_config,
144     "grub-preamble=s"=> \$grub_preamble,
145     "grub-prefix=s"  => \$grub_prefix,
146     "grub2:s"        => \$grub2_config,
147     "grub2-prolog=s" => \$grub2_prolog,
148     "iprelay=s"      => \$iprelay,
149     "iso:s"          => \$iso_image,
150     "kernel|k=s"     => \$kernel_opt,
151     "interactive|i"  => \$interactive,
152     "name=s"         => \$config_name_opt,
153     "make|m:s"       => \$make,
154     "no-file-gen"    => \$no_file_gen,
155     "off"            => \$off_opt,
156     "on"             => \$on_opt,
157     "pulsar|p:s"     => \$pulsar,
158     "pulsar-root=s"  => \$pulsar_root,
159     "qemu|Q:s"       => \$qemu,
160     "qemu-append=s"  => \$qemu_append,
161     "qemu-flags|q=s" => \$qemu_flags_cmd,
162     "remote-cmd=s"   => \$remote_cmd,
163     "remote-expect=s"=> \$remote_expect,
164     "reset-cmd=s"    => \$reset_cmd,
165     "rsync-flags=s"  => \$rsync_flags,
166     "scons:s"        => \$scons,
167     "scriptmod=s"    => \@scriptmod,
168     "send=s"         => \&handle_send,
169     "sendcont=s"     => \&handle_send,
170     "serial|s:s"     => \$serial,
171     "server:s"       => \$server,
172     "strip-rom"      => sub { $rom_prefix = ''; },
173     "stty=s"         => \$stty,
174     "tftp"           => \$tftp,
175     "uboot:s"        => \$uboot,
176     "uboot-init=s"   => \@uboot_init,
177     "h"              => \$help,
178     "help"           => \$man,
179     );
180
181 # First process target options
182 {
183     my $t = defined($explicit_target) ? $explicit_target : $CFG::default_target;
184     if ($t) {
185         exists $CFG::targets{$t} or die("Unknown target '$t' (valid targets are: ".join(", ", sort keys(%CFG::targets)).")");
186         GetOptionsFromString($CFG::targets{$t}, %opt_spec);
187     }
188 }
189
190 # Then process other command line options - some of them may override
191 # what was specified by the target
192 GetOptions %opt_spec or die("Error in command line arguments");
193 pod2usage(1) if $help;
194 pod2usage(-exitstatus => 0, -verbose => 2) if $man;
195
196 ### Dump sanitized configuration (if requested)
197
198 if ($dump_config) {
199     use Data::Dumper;
200     $Data::Dumper::Indent=1;
201     print "# This file is in perl syntax.\n";
202     foreach my $key(sort(keys(%CFG::))) { # See "Symbol Tables" in perlmod(1)
203         if (defined ${$CFG::{$key}}) { print Data::Dumper->Dump([${$CFG::{$key}}], ["*$key"]); }
204         if (        @{$CFG::{$key}}) { print Data::Dumper->Dump([\@{$CFG::{$key}}], ["*$key"]); }
205         if (        %{$CFG::{$key}}) { print Data::Dumper->Dump([\%{$CFG::{$key}}], ["*$key"]); }
206     }
207     print "1;\n";
208     exit;
209 }
210
211 ### Sanitize configuration
212
213 if ($interactive && !-t STDIN) {
214     die("novaboot: Interactive mode not supported when not on terminal");
215 }
216
217 if (defined $config_name_opt && scalar(@ARGV) > 1) { die "You cannot use --name with multiple scripts"; }
218
219 # Default options
220 if (defined $serial) {
221     $serial ||= "/dev/ttyUSB0";
222     $ENV{NB_SERIAL} = $serial;
223 }
224 if (defined $grub_config) { $grub_config ||= "menu.lst"; }
225 if (defined $grub2_config) { $grub2_config ||= "grub.cfg"; }
226
227 ## Parse the novaboot script(s)
228 my @scripts;
229 my $file;
230 my $EOF;
231 my $last_fn = '';
232 my ($modules, $variables, $generated, $continuation);
233 my $skip_reading = defined($on_opt) || defined($off_opt);
234 while (!$skip_reading && ($_ = <>)) {
235     if ($ARGV ne $last_fn) { # New script
236         die "Missing EOF in $last_fn" if $file;
237         die "Unfinished line in $last_fn" if $continuation;
238         $last_fn = $ARGV;
239         push @scripts, { 'filename' => $ARGV,
240                          'modules' => $modules = [],
241                          'variables' => $variables = {},
242                          'generated' => $generated = []};
243
244     }
245     chomp();
246     next if /^#/ || /^\s*$/;    # Skip comments and empty lines
247
248     $_ =~ s/^[[:space:]]*// if ($continuation);
249
250     if (/\\$/) {                # Line continuation
251         $continuation .= substr($_, 0, length($_)-1);
252         next;
253     }
254
255     if ($continuation) {        # Last continuation line
256         $_ = $continuation . $_;
257         $continuation = '';
258     }
259
260     foreach my $mod(@scriptmod) { eval $mod; }
261
262     if ($file && $_ eq $EOF) {  # Heredoc end
263         undef $file;
264         next;
265     }
266     if ($file) {                # Heredoc content
267         push @{$file}, "$_\n";
268         next;
269     }
270     if (/^([A-Z_]+)=(.*)$/) {   # Internal variable
271         $$variables{$1} = $2;
272         push(@exiton, $2) if ($1 eq "EXITON");
273         next;
274     }
275     if (s/^load *//) {          # Load line
276         die("novaboot: '$last_fn' line $.: Missing file name\n") unless /^[^ <]+/;
277         if (/^([^ ]*)(.*?)[[:space:]]*<<([^ ]*)$/) { # Heredoc start
278             push @$modules, "$1$2";
279             $file = [];
280             push @$generated, {filename => $1, content => $file};
281             $EOF = $3;
282             next;
283         }
284         if (/^([^ ]*)(.*?)[[:space:]]*< ?(.*)$/) { # Command substitution
285             push @$modules, "$1$2";
286             push @$generated, {filename => $1, command => $3};
287             next;
288         }
289         push @$modules, $_;
290         next;
291     }
292     if (/^run (.*)/) {          # run line
293         push @$generated, {command => $1};
294         next;
295     }
296
297     die("novaboot: Cannot parse script '$last_fn' line $.. Didn't you forget 'load' keyword?\n");
298 }
299 # use Data::Dumper;
300 # print Dumper(\@scripts);
301
302 foreach my $script (@scripts) {
303     $modules = $$script{modules};
304     @$modules[0] =~ s/^[^ ]*/$kernel_opt/ if $kernel_opt;
305     @$modules[0] .= ' ' . join(' ', @append) if @append;
306
307     my $kernel;
308     if (exists $variables->{KERNEL}) {
309         $kernel = $variables->{KERNEL};
310     } else {
311         if ($CFG::hypervisor) {
312             $kernel = $CFG::hypervisor . " ";
313             if (exists $variables->{HYPERVISOR_PARAMS}) {
314                 $kernel .= $variables->{HYPERVISOR_PARAMS};
315             } else {
316                 $kernel .= $CFG::hypervisor_params;
317             }
318         }
319     }
320     @$modules = ($kernel, @$modules) if $kernel;
321     @$modules = (@chainloaders, @$modules);
322     @$modules = ("bin/boot/bender", @$modules) if ($bender || defined $ENV{'NOVABOOT_BENDER'});
323 }
324
325 if ($dump_opt) {
326     foreach my $script (@scripts) {
327         print join("\n", @{$$script{modules}})."\n";
328     }
329     exit(0);
330 }
331
332 ## Helper functions
333
334 sub generate_configs($$$) {
335     my ($base, $generated, $filename) = @_;
336     if ($base) { $base = "$base/"; };
337     foreach my $g(@$generated) {
338       if (exists $$g{content}) {
339         my $config = $$g{content};
340         my $fn = $$g{filename};
341         open(my $f, '>', $fn) || die("$fn: $!");
342         map { s|\brom://([^ ]*)|$rom_prefix$base$1|g; print $f "$_"; } @{$config};
343         close($f);
344         print "novaboot: Created $fn\n";
345       } elsif (exists $$g{command} && ! $no_file_gen) {
346         $ENV{SRCDIR} = dirname(File::Spec->rel2abs( $filename, $invocation_dir ));
347         if (exists $$g{filename}) {
348             system_verbose("( $$g{command} ) > $$g{filename}");
349         } else {
350             system_verbose($$g{command});
351         }
352       }
353     }
354 }
355
356 sub generate_grub_config($$$$;$)
357 {
358     my ($filename, $title, $base, $modules_ref, $preamble) = @_;
359     if ($base) { $base = "$base/"; };
360     open(my $fg, '>', $filename) or die "$filename: $!";
361     print $fg "$preamble\n" if $preamble;
362     print $fg "title $title\n" if $title;
363     #print $fg "root $base\n"; # root doesn't really work for (nd)
364     my $first = 1;
365     foreach (@$modules_ref) {
366         if ($first) {
367             $first = 0;
368             my ($kbin, $kcmd) = split(' ', $_, 2);
369             $kcmd = '' if !defined $kcmd;
370             print $fg "kernel ${base}$kbin $kcmd\n";
371         } else {
372             s|\brom://([^ ]*)|$rom_prefix$base$1|g; # Translate rom:// files - needed for vdisk parameter of sigma0
373             print $fg "module $base$_\n";
374         }
375     }
376     close($fg);
377     print("novaboot: Created $builddir/$filename\n");
378     return $filename;
379 }
380
381 sub generate_syslinux_config($$$$)
382 {
383     my ($filename, $title, $base, $modules_ref) = @_;
384     if ($base && $base !~ /\/$/) { $base = "$base/"; };
385     open(my $fg, '>', $filename) or die "$filename: $!";
386     print $fg "LABEL $title\n";
387     #TODO print $fg "MENU LABEL $human_readable_title\n";
388
389     my ($kbin, $kcmd) = split(' ', @$modules_ref[0], 2);
390
391     if (system("file $kbin|grep 'Linux kernel'") == 0) {
392         my $initrd = @$modules_ref[1];
393         die('To many "load" lines for Linux kernel') if (scalar @$modules_ref > 2);
394         print $fg "LINUX $base$kbin\n";
395         print $fg "APPEND $kcmd\n";
396         print $fg "INITRD $base$initrd\n";
397     } else {
398         print $fg "KERNEL mboot.c32\n";
399         my @append;
400         foreach (@$modules_ref) {
401             s|\brom://([^ ]*)|$rom_prefix$base$1|g; # Translate rom:// files - needed for vdisk parameter of sigma0
402             push @append, "$base$_";
403             print $fg "APPEND ".join(' --- ', @append)."\n";
404         }
405     }
406     #TODO print $fg "TEXT HELP\n";
407     #TODO print $fg "some help here\n";
408     #TODO print $fg "ENDTEXT\n";
409     close($fg);
410     print("novaboot: Created $builddir/$filename\n");
411     return $filename;
412 }
413
414 sub generate_grub2_config($$$$;$$)
415 {
416     my ($filename, $title, $base, $modules_ref, $preamble, $prolog) = @_;
417     if ($base && substr($base,-1,1) ne '/') { $base = "$base/"; };
418     open(my $fg, '>', $filename) or die "$filename: $!";
419     print $fg "$preamble\n" if $preamble;
420     $title ||= 'novaboot';
421     print $fg "menuentry $title {\n";
422     print $fg "$prolog\n" if $prolog;
423     my $first = 1;
424     foreach (@$modules_ref) {
425         if ($first) {
426             $first = 0;
427             my ($kbin, $kcmd) = split(' ', $_, 2);
428             $kcmd = '' if !defined $kcmd;
429             print $fg "  multiboot ${base}$kbin $kcmd\n";
430         } else {
431             my @args = split;
432             # GRUB2 doesn't pass filename in multiboot info so we have to duplicate it here
433             $_ = join(' ', ($args[0], @args));
434             s|\brom://|$rom_prefix|g; # We do not need to translate path for GRUB2
435             print $fg "  module $base$_\n";
436         }
437     }
438     print $fg "}\n";
439     close($fg);
440     print("novaboot: Created $builddir/$filename\n");
441     return $filename;
442 }
443
444 sub generate_pulsar_config($$)
445 {
446     my ($filename, $modules_ref) = @_;
447     open(my $fg, '>', $filename) or die "$filename: $!";
448     print $fg "root $pulsar_root\n" if defined $pulsar_root;
449     my $first = 1;
450     my ($kbin, $kcmd);
451     foreach (@$modules_ref) {
452         if ($first) {
453             $first = 0;
454             ($kbin, $kcmd) = split(' ', $_, 2);
455             $kcmd = '' if !defined $kcmd;
456         } else {
457             my @args = split;
458             s|\brom://|$rom_prefix|g;
459             print $fg "load $_\n";
460         }
461     }
462     # Put kernel as last - this is needed for booting Linux and has no influence on non-Linux OSes
463     print $fg "exec $kbin $kcmd\n";
464     close($fg);
465     print("novaboot: Created $builddir/$filename\n");
466     return $filename;
467 }
468
469 sub shell_cmd_string(@)
470 {
471     return join(' ', map((/^[-_=a-zA-Z0-9\/\.\+]+$/ ? "$_" : "'$_'"), @_));
472 }
473
474 sub exec_verbose(@)
475 {
476     print "novaboot: Running: ".shell_cmd_string(@_)."\n";
477     exec(@_);
478     exit(1); # should not be reached
479 }
480
481 sub system_verbose($)
482 {
483     my $cmd = shift;
484     print "novaboot: Running: $cmd\n";
485     my $ret = system($cmd);
486     if ($ret & 0x007f) { die("Command terminated by a signal"); }
487     if ($ret & 0xff00) {die("Command exit with non-zero exit code"); }
488     if ($ret) { die("Command failure $ret"); }
489 }
490
491 ## WvTest handline
492
493 if (exists $variables->{WVDESC}) {
494     print "Testing \"$variables->{WVDESC}\" in $last_fn:\n";
495 } elsif ($last_fn =~ /\.wv$/) {
496     print "Testing \"all\" in $last_fn:\n";
497 }
498
499 ## Connect to the target and check whether it is not occupied
500
501 # We have to do this before file generation phase, because file
502 # generation is intermixed with file deployment phase and we want to
503 # check whether the target is not used by somebody else before
504 # deploying files. Otherwise, we may rewrite other user's files on a
505 # boot server.
506
507 my $exp; # Expect object to communicate with the target over serial line
508
509 my ($target_reset, $target_power_on, $target_power_off);
510
511 if (defined $iprelay) {
512     my $IPRELAY;
513     $iprelay =~ /([.0-9]+)(:([0-9]+))?/;
514     my $addr = $1;
515     my $port = $3 || 23;
516     my $paddr   = sockaddr_in($port, inet_aton($addr));
517     my $proto   = getprotobyname('tcp');
518     socket($IPRELAY, PF_INET, SOCK_STREAM, $proto)  || die "socket: $!";
519     print "novaboot: Connecting to IP relay... ";
520     connect($IPRELAY, $paddr)    || die "connect: $!";
521     print "done\n";
522     $exp = Expect->init(\*$IPRELAY);
523     $exp->log_stdout(1);
524
525     while (1) {
526         print $exp "\xFF\xF6";  # AYT
527         my $connected = $exp->expect(20, # Timeout in seconds
528                                      '<iprelayd: connected>',
529                                      '-re', '<WEB51 HW[^>]*>');
530         last if $connected;
531     }
532
533     sub relaycmd($$) {
534         my ($relay, $onoff) = @_;
535         die unless ($relay == 1 || $relay == 2);
536
537         my $cmd = ($relay == 1 ? 0x5 : 0x6) | ($onoff ? 0x20 : 0x10);
538         return "\xFF\xFA\x2C\x32".chr($cmd)."\xFF\xF0";
539     }
540
541     sub relayconf($$) {
542         my ($relay, $onoff) = @_;
543         die unless ($relay == 1 || $relay == 2);
544         my $cmd = ($relay == 1 ? 0xdf : 0xbf) | ($onoff ? 0x00 : 0xff);
545         return "\xFF\xFA\x2C\x97".chr($cmd)."\xFF\xF0";
546     }
547
548     sub relay($$;$) {
549         my ($relay, $onoff, $can_giveup) = @_;
550         my $confirmation = '';
551         $exp->log_stdout(0);
552         print $exp relaycmd($relay, $onoff);
553         my $confirmed = $exp->expect(20, # Timeout in seconds
554                                      relayconf($relay, $onoff));
555         if (!$confirmed) {
556             if ($can_giveup) {
557                 print("Relay confirmation timeout - ignoring\n");
558             } else {
559                 die "Relay confirmation timeout";
560             }
561         }
562         $exp->log_stdout(1);
563     }
564
565     $target_reset = sub {
566         relay(2, 1, 1); # Reset the machine
567         usleep(100000);
568         relay(2, 0);
569     };
570
571     $target_power_off = sub {
572         relay(1, 1);            # Press power button
573         usleep(6000000);        # Long press to switch off
574         relay(1, 0);
575     };
576
577     $target_power_on = sub {
578         relay(1, 1);            # Press power button
579         usleep(100000);         # Short press
580         relay(1, 0);
581     };
582 }
583 elsif ($serial) {
584     my $CONN;
585     system_verbose("stty -F $serial $stty");
586     open($CONN, "+<", $serial) || die "open $serial: $!";
587     $exp = Expect->init(\*$CONN);
588 }
589 elsif ($remote_cmd) {
590     print "novaboot: Running: $remote_cmd\n";
591     $exp = Expect->spawn($remote_cmd);
592 }
593 elsif (defined $amt) {
594     require LWP::UserAgent;
595     require LWP::Authen::Digest;
596
597     sub genXML {
598         my ($host, $username, $password, $schema, $className, $pstate) = @_;
599         #AMT numbers for PowerStateChange (MNI => bluescreen on windows;-)
600         my %pstates = ("on"        => 2,
601                        "standby"   => 4,
602                        "hibernate" => 7,
603                        "off"       => 8,
604                        "reset"     => 10,
605                        "MNI"       => 11);
606         return <<END;
607                 <s:Envelope xmlns:s="http://www.w3.org/2003/05/soap-envelope" xmlns:a="http://schemas.xmlsoap.org/ws/2004/08/addressing" xmlns:w="http://schemas.dmtf.org/wbem/wsman/1/wsman.xsd">
608                 <s:Header><a:To>http://$host:16992/wsman</a:To>
609                 <w:ResourceURI s:mustUnderstand="true">$schema</w:ResourceURI>
610                 <a:ReplyTo><a:Address s:mustUnderstand="true">http://schemas.xmlsoap.org/ws/2004/08/addressing/role/anonymous</a:Address></a:ReplyTo>
611                 <a:Action s:mustUnderstand="true">$schema$className</a:Action>
612                 <w:MaxEnvelopeSize s:mustUnderstand="true">153600</w:MaxEnvelopeSize>
613                 <a:MessageID>uuid:709072C9-609C-4B43-B301-075004043C7C</a:MessageID>
614                 <w:Locale xml:lang="en-US" s:mustUnderstand="false" />
615                 <w:OperationTimeout>PT60.000S</w:OperationTimeout>
616                 <w:SelectorSet><w:Selector Name="Name">Intel(r) AMT Power Management Service</w:Selector></w:SelectorSet>
617                 </s:Header><s:Body>
618                 <p:RequestPowerStateChange_INPUT xmlns:p="http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_PowerManagementService">
619                 <p:PowerState>$pstates{$pstate}</p:PowerState>
620                 <p:ManagedElement><a:Address>http://$host:16992/wsman</a:Address>
621                 <a:ReferenceParameters><w:ResourceURI>http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_ComputerSystem</w:ResourceURI>
622                 <w:SelectorSet><w:Selector Name="Name">ManagedSystem</w:Selector></w:SelectorSet>
623                 </a:ReferenceParameters></p:ManagedElement>
624                 </p:RequestPowerStateChange_INPUT>
625                 </s:Body></s:Envelope>
626 END
627     }
628
629     sub sendPOST {
630         my ($host, $username, $password, $content) = @_;
631
632         my $ua = LWP::UserAgent->new();
633         $ua->agent("novaboot");
634
635         my $req = HTTP::Request->new(POST => "http://$host:16992/wsman");
636         my $res = $ua->request($req);
637         die ("Unexpected AMT response: " . $res->status_line) unless $res->code == 401;
638
639         my ($realm) = $res->header("WWW-Authenticate") =~ /Digest realm="(.*?)"/;
640         $ua->credentials("$host:16992", $realm, $username => $password);
641
642         # Create a request
643         $req = HTTP::Request->new(POST => "http://$host:16992/wsman");
644         $req->content_type('application/x-www-form-urlencoded');
645         $req->content($content);
646         $res = $ua->request($req);
647         die ("AMT power change request failed: " . $res->status_line) unless $res->is_success;
648         $res->content() =~ /<g:ReturnValue>(\d+)<\/g:ReturnValue>/;
649         return $1;
650     }
651
652     sub powerChange  {
653         my ($host, $username, $password, $pstate)=@_;
654         my $schema="http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_PowerManagementService";
655         my $className="/RequestPowerStateChange";
656         my $content = genXML($host, $username, $password ,$schema, $className, $pstate);
657         return sendPOST($host, $username, $password, $content);
658     }
659
660     my ($user,$amt_password,$host,$port) = ($amt =~ /(?:(.*?)(?::(.*))?@)?([^:]*)(?::([0-9]*))?/);;
661     $user ||= "admin";
662     $amt_password ||= $ENV{'AMT_PASSWORD'} || die "AMT password not specified";
663     $host || die "AMT host not specified";
664     $port ||= 16994;
665
666     $target_power_off = sub {
667         $exp->close();
668         my $result = powerChange($host,$user,$amt_password, "off");
669         die "AMT power off failed (ReturnValue $result)" if $result != 0;
670     };
671
672     $target_power_on = sub {
673         my $result = powerChange($host,$user,$amt_password, "on");
674         die "AMT power on failed (ReturnValue $result)" if $result != 0;
675     };
676
677     $target_reset = sub {
678         my $result = powerChange($host,$user,$amt_password, "reset");
679         if ($result != 0) {
680             print STDERR "Warning: Cannot reset $host, trying power on. ";
681             $result = powerChange($host,$user,$amt_password, "on");
682         }
683         die "AMT reset failed (ReturnValue $result)" if $result != 0;
684     };
685
686     my $cmd = "amtterm -u $user -p $amt_password $host $port";
687     print "novaboot: Running: $cmd\n" =~ s/\Q$amt_password\E/???/r;
688     $exp = Expect->spawn($cmd);
689     $exp->expect(10, "RUN_SOL") || die "Expect for 'RUN_SOL' timed out";
690 }
691
692 if ($remote_expect) {
693     $exp->expect(10, $remote_expect) || die "Expect for '$remote_expect' timed out";
694 }
695
696 if (defined $reset_cmd) {
697     $target_reset = sub {
698         system_verbose($reset_cmd);
699     };
700 }
701
702 if (defined $on_opt && defined $target_power_on) {
703     &$target_power_on();
704     exit;
705 }
706 if (defined $off_opt && defined $target_power_off) {
707     print "novaboot: Switching the target off...\n";
708     &$target_power_off();
709     exit;
710 }
711
712 $builddir ||= dirname(File::Spec->rel2abs( ${$scripts[0]}{filename})) if scalar @scripts;
713 if (defined $builddir) {
714     chdir($builddir) or die "Can't change directory to $builddir: $!";
715     print "novaboot: Entering directory `$builddir'\n";
716 }
717
718 ## File generation phase
719 my (%files_iso, $menu_iso, $filename);
720 my $config_name = '';
721
722 foreach my $script (@scripts) {
723     $filename = $$script{filename};
724     $modules = $$script{modules};
725     $generated = $$script{generated};
726     $variables = $$script{variables};
727
728     ($config_name = $filename) =~ s#.*/##;
729     $config_name = $config_name_opt if (defined $config_name_opt);
730
731     if (exists $variables->{BUILDDIR}) {
732         $builddir = File::Spec->rel2abs($variables->{BUILDDIR});
733         chdir($builddir) or die "Can't change directory to $builddir: $!";
734         print "novaboot: Entering directory `$builddir'\n";
735     }
736
737     my $prefix;
738     ($prefix = $grub_prefix) =~ s/\$NAME/$config_name/ if defined $grub_prefix;
739     $prefix ||= $builddir;
740     # TODO: use $grub_prefix as first parameter if some switch is given
741     generate_configs('', $generated, $filename);
742
743 ### Generate bootloader configuration files
744     my @bootloader_configs;
745     push @bootloader_configs, generate_grub_config($grub_config, $config_name, $prefix, $modules, $grub_preamble) if (defined $grub_config);
746     push @bootloader_configs, generate_grub2_config($grub2_config, $config_name, $prefix, $modules, $grub_preamble, $grub2_prolog) if (defined $grub2_config);
747     push @bootloader_configs, generate_pulsar_config('config-'.($pulsar||'novaboot'), $modules) if (defined $pulsar);
748
749 ### Run scons or make
750     {
751         my @files = map({ ($file) = m/([^ ]*)/; $file; } @$modules);
752         # Filter-out generated files
753         my @to_build = grep({ my $file = $_; !scalar(grep($file eq ($$_{filename} || ''), @$generated)) } @files);
754
755         system_verbose($scons || $CFG::scons." ".join(" ", @to_build)) if (defined $scons);
756         system_verbose($make  || $CFG::make ." ".join(" ", @to_build)) if (defined $make);
757     }
758
759 ### Copy files (using rsync)
760     if (defined $server && !defined($gen_only)) {
761         (my $real_server = $server) =~ s/\$NAME/$config_name/;
762
763         my ($hostname, $path) = split(":", $real_server, 2);
764         if (! defined $path) {
765             $path = $hostname;
766             $hostname = "";
767         }
768         my $files = join(" ", map({ ($file) = m/([^ ]*)/; $file; } ( @$modules, @bootloader_configs)));
769         map({ my $file = (split)[0]; die "$file: $!" if ! -f $file; } @$modules);
770         my $istty = -t STDOUT && ($ENV{'TERM'} || 'dumb') ne 'dumb';
771         my $progress = $istty ? "--progress" : "";
772         system_verbose("rsync $progress -RLp $rsync_flags $files $real_server");
773         if ($server =~ m|/\$NAME$| && $concat) {
774             my $cmd = join("; ", map { "( cd $path/.. && cat */$_ > $_ )" } @bootloader_configs);
775             system_verbose($hostname ? "ssh $hostname '$cmd'" : $cmd);
776         }
777     }
778
779 ### Prepare ISO image generation
780     if (defined $iso_image) {
781         generate_configs("(cd)", $generated, $filename);
782         my $menu;
783         generate_syslinux_config(\$menu, $config_name, "/", $modules);
784         $menu_iso .= "$menu\n";
785         map { ($file,undef) = split; $files_iso{$file} = 1; } @$modules;
786     }
787 }
788
789 ## Generate ISO image
790 if (defined $iso_image) {
791     system_verbose("mkdir -p isolinux");
792     system_verbose('cp /usr/lib/syslinux/isolinux.bin /usr/lib/syslinux/mboot.c32 /usr/lib/syslinux/menu.c32 isolinux');
793     open(my $fh, ">isolinux/isolinux.cfg");
794     if ($#scripts) {
795         print $fh "TIMEOUT 50\n";
796         print $fh "DEFAULT menu\n";
797     } else {
798         print $fh "DEFAULT $config_name\n";
799     }
800     print $fh "$menu_iso";
801     close($fh);
802
803     my $files = join(" ", map("$_=$_", (keys(%files_iso), 'isolinux/isolinux.bin', 'isolinux/isolinux.cfg', 'isolinux/mboot.c32', 'isolinux/menu.c32')));
804     $iso_image ||= "$config_name.iso";
805
806     # Note: We use -U flag below to "Allow 'untranslated' filenames,
807     # completely violating the ISO9660 standards". Without this
808     # option, isolinux is not able to read files names for example
809     # bzImage-3.0.
810     system_verbose("$CFG::genisoimage -R -b isolinux/isolinux.bin -c isolinux/boot.cat -no-emul-boot -boot-load-size 4 -boot-info-table -hide-rr-moved -U -o $iso_image -graft-points $files");
811     print("ISO image created: $builddir/$iso_image\n");
812 }
813
814 exit(0) if defined $gen_only;
815
816 ## Boot the system using various methods and send serial output to stdout
817
818 if (scalar(@scripts) > 1 && ( defined $dhcp_tftp || defined $serial || defined $iprelay)) {
819     die "You cannot do this with multiple scripts simultaneously";
820 }
821
822 if ($variables->{WVTEST_TIMEOUT}) {
823     print "wvtest: timeout ", $variables->{WVTEST_TIMEOUT}, "\n";
824 }
825
826 sub trim($) {
827     my ($str) = @_;
828     $str =~ s/^\s+|\s+$//g;
829     return $str
830 }
831
832 ### Start in Qemu
833
834 if (defined $qemu) {
835     # Qemu
836     $qemu ||= $variables->{QEMU} || $CFG::qemu;
837     my @qemu_flags = split(" ", $qemu);
838     $qemu = shift(@qemu_flags);
839
840     @qemu_flags = split(/ +/, trim($variables->{QEMU_FLAGS})) if exists $variables->{QEMU_FLAGS};
841     @qemu_flags = split(/ +/, trim($qemu_flags_cmd)) if $qemu_flags_cmd;
842     push(@qemu_flags, split(/ +/, trim($qemu_append || '')));
843
844     if (defined $iso_image) {
845         # Boot NOVA with grub (and test the iso image)
846         push(@qemu_flags, ('-cdrom', $iso_image));
847     } else {
848         # Boot NOVA without GRUB
849
850         # Non-patched qemu doesn't like commas, but NUL can live with pluses instead of commans
851         foreach (@$modules) {s/,/+/g;}
852         generate_configs("", $generated, $filename);
853
854         if (scalar @$modules) {
855             my ($kbin, $kcmd) = split(' ', shift(@$modules), 2);
856             $kcmd = '' if !defined $kcmd;
857             my $dtb;
858             @$modules = map { if (/\.dtb$/) { $dtb=$_; (); } else { $_ } } @$modules;
859             my $initrd = join ",", @$modules;
860
861             push(@qemu_flags, ('-kernel', $kbin, '-append', $kcmd));
862             push(@qemu_flags, ('-initrd', $initrd)) if $initrd;
863             push(@qemu_flags, ('-dtb', $dtb)) if $dtb;
864         }
865     }
866     push(@qemu_flags,  qw(-serial stdio)); # Redirect serial output (for collecting test restuls)
867     unshift(@qemu_flags, ('-name', $config_name));
868     print "novaboot: Running: ".shell_cmd_string($qemu, @qemu_flags)."\n";
869     $exp = Expect->spawn(($qemu, @qemu_flags)) || die("exec() failed: $!");
870 }
871
872 ### Local DHCPD and TFTPD
873
874 my ($dhcpd_pid, $tftpd_pid);
875
876 if (defined $dhcp_tftp)
877 {
878     generate_configs("(nd)", $generated, $filename);
879     system_verbose('mkdir -p tftpboot');
880     generate_grub_config("tftpboot/os-menu.lst", $config_name, "(nd)", \@$modules, "timeout 0");
881     open(my $fh, '>', 'dhcpd.conf');
882     my $mac = `cat /sys/class/net/eth0/address`;
883     chomp $mac;
884     print $fh "subnet 10.23.23.0 netmask 255.255.255.0 {
885                       range 10.23.23.10 10.23.23.100;
886                       filename \"bin/boot/grub/pxegrub.pxe\";
887                       next-server 10.23.23.1;
888 }
889 host server {
890         hardware ethernet $mac;
891         fixed-address 10.23.23.1;
892 }";
893     close($fh);
894     system_verbose("sudo ip a add 10.23.23.1/24 dev eth0;
895             sudo ip l set dev eth0 up;
896             sudo touch dhcpd.leases");
897
898     # We run servers by forking ourselves, because the servers end up
899     # in our process group and get killed by signals sent to the
900     # process group (e.g. Ctrl-C on terminal).
901     $dhcpd_pid = fork();
902     exec_verbose("sudo dhcpd -d -cf dhcpd.conf -lf dhcpd.leases -pf dhcpd.pid") if ($dhcpd_pid == 0);
903 }
904
905 if (defined $dhcp_tftp || defined $tftp) {
906     system_verbose("sudo in.tftpd --listen --secure -v -v -v --pidfile tftpd.pid $builddir");
907
908     # Kill server when we die
909     $SIG{__DIE__} = sub { system_verbose('sudo pkill --pidfile=dhcpd.pid') if (defined $dhcp_tftp);
910                           system_verbose('sudo pkill --pidfile=tftpd.pid'); };
911
912     # We have to kill tftpd explicitely, because it is not in our process group
913     $SIG{INT} = sub { system_verbose('sudo pkill --pidfile=tftpd.pid'); exit(0); };
914 }
915
916 ### Reset target (IP relay, AMT, ...)
917
918 if (defined $target_reset) {
919     print "novaboot: Reseting the test box... ";
920     &$target_reset();
921     print "done\n";
922 }
923
924 ### U-boot conversation
925 if (defined $uboot) {
926     my $uboot_prompt = $uboot || '=> ';
927     print "novaboot: Waiting for uBoot prompt...\n";
928     $exp->log_stdout(1);
929     #$exp->exp_internal(1);
930     $exp->expect(20,
931                  [qr/Hit any key to stop autoboot:/, sub { $exp->send("\n"); exp_continue; }],
932                  $uboot_prompt) || die "No uBoot prompt deteceted";
933     while (@uboot_init) {
934         my $cmd = shift @uboot_init;
935         $exp->send("$cmd\n");
936         $exp->expect(10, $uboot_prompt) || die "uBoot prompt timeout";
937     }
938
939     # Boot the system if there are some load lines in the script
940     if (scalar(@$modules) > 0) {
941         my ($kbin, $kcmd) = split(' ', shift(@$modules), 2);
942         my $dtb;
943         @$modules = map { if (/\.dtb$/) { $dtb=$_; (); } else { $_ } } @$modules;
944         my $initrd = shift @$modules;
945
946         my $kern_addr = '800000';
947         my $initrd_addr = '-';
948         my $dtb_addr = '';
949
950         $exp->send("tftp $kern_addr $kbin\n");
951         $exp->expect(10,
952                      [qr/#/, sub { exp_continue; }],
953                      $uboot_prompt) || die "Kernel load failed";
954         if (defined $dtb) {
955             $dtb_addr = '7f0000';
956             $exp->send("tftp $dtb_addr $dtb\n");
957             $exp->expect(10,
958                          [qr/#/, sub { exp_continue; }],
959                          $uboot_prompt) || die "Device tree load failed";
960         }
961         if (defined $initrd) {
962             $initrd_addr = 'b00000';
963             $exp->send("tftp $initrd_addr $initrd\n");
964             $exp->expect(10,
965                          [qr/#/, sub { exp_continue; }],
966                          $uboot_prompt) || die "Initrd load failed";
967         }
968         $exp->send("set bootargs '$kcmd'\n");
969         $exp->expect(5, $uboot_prompt)  || die "uBoot prompt timeout";
970         $exp->send("bootm $kern_addr $initrd_addr $dtb_addr\n");
971         $exp->expect(5, "\n")  || die "uBoot command timeout";
972     }
973 }
974
975 ### Serial line interaction
976 if (defined $exp) {
977     # Serial line of the target is available
978     my $interrupt = 'Ctrl-C';
979     if ($interactive && !@exiton) {
980         $interrupt = '"~~."';
981     }
982     print "novaboot: Serial line interaction (press $interrupt to interrupt)...\n";
983     $exp->log_stdout(1);
984     if (@exiton) {
985         $exp->expect(undef, @expect_raw, @exiton);
986     } else {
987         my @inputs = ($exp);
988         if (-t STDIN) { # Set up bi-directional communication if we run on terminal
989             my $infile = new IO::File;
990             $infile->IO::File::fdopen(*STDIN,'r');
991             my $in_object = Expect->exp_init($infile);
992             $in_object->set_group($exp);
993
994             if ($interactive) {
995                 $in_object->set_seq('~~\.', sub { print "novaboot: Escape sequence detected\r\n"; undef; });
996                 $in_object->manual_stty(0);       # Use raw terminal mode
997             } else {
998                 $in_object->manual_stty(1);       # Do not modify terminal settings
999             }
1000             push(@inputs, $in_object);
1001         }
1002         #use Data::Dumper;
1003         #print Dumper(\@expect_raw);
1004         $exp->expect(undef, @expect_raw) if @expect_raw;
1005         Expect::interconnect(@inputs) unless defined($exp->exitstatus);
1006     }
1007 }
1008
1009 ## Kill dhcpc or tftpd
1010 if (defined $dhcp_tftp || defined $tftp) {
1011     die("novaboot: This should kill servers on background\n");
1012 }
1013
1014 ## Documentation
1015
1016 =head1 NAME
1017
1018 novaboot - A tool for booting various operating systems on various hardware or in qemu
1019
1020 =head1 SYNOPSIS
1021
1022 B<novaboot> --help
1023
1024 B<novaboot> [option]... [--] script...
1025
1026 B<./script> [option]...
1027
1028 =head1 DESCRIPTION
1029
1030 This program makes booting of an operating system (e.g. NOVA or Linux)
1031 as simple as running a local program. It facilitates booting on local
1032 or remote hosts or in emulators such as qemu. Novaboot operation is
1033 controlled by command line options and by a so called novaboot script,
1034 which can be thought as a generalization of bootloader configuration
1035 files (see L</"NOVABOOT SCRIPT SYNTAX">). Based on this input,
1036 novaboot setups everything for the target host to boot the desired
1037 configuration, i.e. it generates the bootloader configuration file in
1038 the proper format, deploy the binaries and other needed files to
1039 required locations, perhaps on a remote boot server and reset the
1040 target host. Finally, target host's serial output is redirected to
1041 standard output if that is possible.
1042
1043 Typical way of using novaboot is to make the novaboot script
1044 executable and set its first line to I<#!/usr/bin/env novaboot>. Then,
1045 booting a particular OS configuration becomes the same as executing a
1046 local program - the novaboot script.
1047
1048 For example, with C<novaboot> you can:
1049
1050 =over 3
1051
1052 =item 1.
1053
1054 Run an OS in Qemu. This is the default action when no other action is
1055 specified by command line switches. Thus running C<novaboot ./script>
1056 (or C<./script> as described above) will run Qemu and make it boot the
1057 configuration specified in the F<script>.
1058
1059 =item 2.
1060
1061 Create a bootloader configuration file (currently supported
1062 bootloaders are GRUB, GRUB2, Pulsar and U-Boot) and copy it with all
1063 other files needed for booting to a remote boot server.
1064
1065  ./script --server=192.168.1.1:/tftp --iprelay=192.168.1.2
1066
1067 This command copies files to the TFTP server and uses
1068 TCP/IP-controlled relay to reset the target host and receive its
1069 serial output.
1070
1071 =item 3.
1072
1073 Run DHCP and TFTP server on developer's machine to PXE-boot the target
1074 host from it. E.g.
1075
1076  ./script --dhcp-tftp
1077
1078 When a PXE-bootable machine is connected via Ethernet to developer's
1079 machine, it will boot the configuration described in I<script>.
1080
1081 =item 4.
1082
1083 Create bootable ISO images. E.g.
1084
1085  novaboot --iso -- script1 script2
1086
1087 The created ISO image will have GRUB bootloader installed on it and
1088 the boot menu will allow selecting between I<script1> and I<script2>
1089 configurations.
1090
1091 =back
1092
1093 Note that the options needed for a specific target can be stored in a
1094 L</"CONFIGURATION FILE">. Then it is sufficient to use only the B<-t>
1095 option to specify the name of the target.
1096
1097 =head1 PHASES AND OPTIONS
1098
1099 Novaboot performs its work in several phases. Each phase can be
1100 influenced by several options, certain phases can be skipped. The list
1101 of phases (in the execution order) and the corresponding options
1102 follow.
1103
1104 =head2 Configuration reading phase
1105
1106 After starting, novaboot reads configuration files. By default, it
1107 searches for files named F<.novaboot> starting from the directory of
1108 the novaboot script (or working directory, see bellow) and continuing
1109 upwards up to the root directory. The configuration files are read in
1110 order from the root directory downwards with latter files overriding
1111 settings from the former ones.
1112
1113 In certain cases, the location of the novaboot script cannot be
1114 determined in this early phase. This happens either when the script is
1115 read from the standard input or when novaboot is invoked explicitly
1116 and options precede the script name, as in the example L</"4."> above.
1117 In this case the current working directory is used as a starting point
1118 for configuration file search.
1119
1120 =over 8
1121
1122 =item -c, --config=I<filename>
1123
1124 Use the specified configuration file instead of the default one(s).
1125
1126 =back
1127
1128 =head2 Command line processing phase
1129
1130 =over 8
1131
1132 =item --dump-config
1133
1134 Dump the current configuration to stdout end exits. Useful as an
1135 initial template for a configuration file.
1136
1137 =item -h, --help
1138
1139 Print short (B<-h>) or long (B<--help>) help.
1140
1141 =item -t, --target=I<target>
1142
1143 This option serves as a user configurable shortcut for other novaboot
1144 options. The effect of this option is the same as the options stored
1145 in the C<%targets> configuration variable under key I<target>. See
1146 also L</"CONFIGURATION FILE">.
1147
1148 =back
1149
1150 =head2 Script preprocessing phase
1151
1152 This phases allows to modify the parsed novaboot script before it is
1153 used in the later phases.
1154
1155 =over 8
1156
1157 =item -a, --append=I<parameters>
1158
1159 Append a string to the first C<load> line in the novaboot script. This
1160 can be used to append parameters to the kernel's or root task's
1161 command line. Can appear multiple times.
1162
1163 =item -b, --bender
1164
1165 Use F<bender> chainloader. Bender scans the PCI bus for PCI serial
1166 ports and stores the information about them in the BIOS data area for
1167 use by the kernel.
1168
1169 =item --chainloader=I<chainloader>
1170
1171 Chainloader that is loaded before the kernel and other files specified
1172 in the novaboot script. E.g. 'bin/boot/bender promisc'.
1173
1174 =item --dump
1175
1176 Print the modules to boot and their parameters after this phase
1177 finishes. Then exit. This is useful for seeing the effect of other
1178 options in this section.
1179
1180 =item -k, --kernel=F<file>
1181
1182 Replace the first word on the first C<load> line in the novaboot
1183 script with F<file>.
1184
1185 =item --scriptmod=I<perl expression>
1186
1187 When novaboot script is read, I<perl expression> is executed for every
1188 line (in $_ variable). For example, C<novaboot
1189 --scriptmod=s/sigma0/omega6/g> replaces every occurrence of I<sigma0>
1190 in the script with I<omega6>.
1191
1192 When this option is present, it overrides I<$script_modifier> variable
1193 from the configuration file, which has the same effect. If this option
1194 is given multiple times all expressions are evaluated in the command
1195 line order.
1196
1197 =back
1198
1199 =head2 File generation phase
1200
1201 In this phase, files needed for booting are generated in a so called
1202 I<build directory> (see L</--build-dir>). In most cases configuration
1203 for a bootloader is generated automatically by novaboot. It is also
1204 possible to generate other files using I<heredoc> or I<"<"> syntax in
1205 novaboot scripts. Finally, binaries can be generated in this phases by
1206 running C<scons> or C<make>.
1207
1208 =over 8
1209
1210 =item --build-dir=I<directory>
1211
1212 Overrides the default build directory location.
1213
1214 The default build directory location is determined as follows: If the
1215 configuration file defines the C<$builddir> variable, its value is
1216 used. Otherwise, it is the directory that contains the first processed
1217 novaboot script.
1218
1219 See also L</BUILDDIR> variable.
1220
1221 =item -g, --grub[=I<filename>]
1222
1223 Generates grub bootloader menu file. If the I<filename> is not
1224 specified, F<menu.lst> is used. The I<filename> is relative to the
1225 build directory (see B<--build-dir>).
1226
1227 =item --grub-preamble=I<prefix>
1228
1229 Specifies the I<preable> that is at the beginning of the generated
1230 GRUB or GRUB2 config files. This is useful for specifying GRUB's
1231 timeout.
1232
1233 =item --grub-prefix=I<prefix>
1234
1235 Specifies I<prefix> that is put in front of every file name in GRUB's
1236 F<menu.lst>. The default value is the absolute path to the build directory.
1237
1238 If the I<prefix> contains string $NAME, it will be replaced with the
1239 name of the novaboot script (see also B<--name>).
1240
1241 =item --grub2[=I<filename>]
1242
1243 Generate GRUB2 menuentry in I<filename>. If I<filename> is not
1244 specified F<grub.cfg> is used. The content of the menuentry can be
1245 customized with B<--grub-preable>, B<--grub2-prolog> or
1246 B<--grub_prefix> options.
1247
1248 In order to use the the generated menuentry on your development
1249 machine that uses GRUB2, append the following snippet to
1250 F</etc/grub.d/40_custom> file and regenerate your grub configuration,
1251 i.e. run update-grub on Debian/Ubuntu.
1252
1253   if [ -f /path/to/nul/build/grub.cfg ]; then
1254     source /path/to/nul/build/grub.cfg
1255   fi
1256
1257 =item --grub2-prolog=I<prolog>
1258
1259 Specifies text I<preable> that is put at the beginning of the entry
1260 GRUB2 entry.
1261
1262 =item -m, --make[=make command]
1263
1264 Runs C<make> to build files that are not generated by novaboot itself.
1265
1266 =item --name=I<string>
1267
1268 Use the name I<string> instead of the name of the novaboot script.
1269 This name is used for things like a title of grub menu or for the
1270 server directory where the boot files are copied to.
1271
1272 =item --no-file-gen
1273
1274 Do not run external commands to generate files (i.e. "<" syntax and
1275 C<run> keyword). This switch does not influence generation of files
1276 specified with "<<WORD" syntax.
1277
1278 =item -p, --pulsar[=mac]
1279
1280 Generates pulsar bootloader configuration file named F<config-I<mac>>
1281 The I<mac> string is typically a MAC address and defaults to
1282 I<novaboot>.
1283
1284 =item --scons[=scons command]
1285
1286 Runs C<scons> to build files that are not generated by novaboot
1287 itself.
1288
1289 =item --strip-rom
1290
1291 Strip I<rom://> prefix from command lines and generated config files.
1292 The I<rom://> prefix is used by NUL. For NRE, it has to be stripped.
1293
1294 =item --gen-only
1295
1296 Exit novaboot after file generation phase.
1297
1298 =back
1299
1300 =head2 Target connection check
1301
1302 If supported by the target, the connection to it is made and it is
1303 checked whether the target is not occupied by another novaboot
1304 user/instance.
1305
1306 =over 8
1307
1308 =item --amt=I<"[user[:password]@]host[:port]>
1309
1310 Use Intel AMT technology to control the target machine. WS management
1311 is used to powercycle it and Serial-Over-Lan (SOL) for input/output.
1312 The hostname or (IP address) is given by the I<host> parameter. If
1313 I<password> is not specified, environment variable AMT_PASSWORD is
1314 used. The I<port> specifies a TCP port for SOL. If not specified, the
1315 default is 16992. Default I<user> is admin.
1316
1317 =item --iprelay=I<addr[:port]>
1318
1319 Use TCP/IP relay and serial port to access the target's serial port
1320 and powercycle it. The IP address of the relay is given by I<addr>
1321 parameter. If I<port> is not specified, it default to 23.
1322
1323 Note: This option is supposed to work with HWG-ER02a IP relays.
1324
1325 =item -s, --serial[=device]
1326
1327 Target's serial line is connected to host's serial line (device). The
1328 default value for device is F</dev/ttyUSB0>.
1329
1330 The value of this option is exported in NB_NOVABOOT environment
1331 variable to all subprocesses run by C<novaboot>.
1332
1333 =item --stty=I<settings>
1334
1335 Specifies settings passed to C<stty> invoked on the serial line
1336 specified with B<--serial> option. If this option is not given,
1337 C<stty> is called with C<raw -crtscts -onlcr 115200> settings.
1338
1339 =item --remote-cmd=I<cmd>
1340
1341 Command that mediates connection to the target's serial line. For
1342 example C<ssh server 'cu -l /dev/ttyS0'>.
1343
1344 =item --remote-expect=I<string>
1345
1346 Wait for reception of I<string> after establishing the the remote
1347 connection before continuing.
1348
1349
1350 =back
1351
1352 =head2 File deployment phase
1353
1354 In some setups, it is necessary to copy the files needed for booting
1355 to a particular location, e.g. to a TFTP boot server or to the
1356 F</boot> partition.
1357
1358 =over 8
1359
1360 =item -d, --dhcp-tftp
1361
1362 Turns your workstation into a DHCP and TFTP server so that the OS can
1363 be booted via PXE BIOS (or similar mechanism) on the test machine
1364 directly connected by a plain Ethernet cable to your workstation.
1365
1366 The DHCP and TFTP servers require root privileges and C<novaboot>
1367 uses C<sudo> command to obtain those. You can put the following to
1368 I</etc/sudoers> to allow running the necessary commands without
1369 asking for password.
1370
1371  Cmnd_Alias NOVABOOT = /bin/ip a add 10.23.23.1/24 dev eth0, /bin/ip l set dev eth0 up, /usr/sbin/dhcpd -d -cf dhcpd.conf -lf dhcpd.leases -pf dhcpd.pid, /usr/sbin/in.tftpd --listen --secure -v -v -v --pidfile tftpd.pid *, /usr/bin/touch dhcpd.leases, /usr/bin/pkill --pidfile=dhcpd.pid, /usr/bin/pkill --pidfile=tftpd.pid
1372  your_login ALL=NOPASSWD: NOVABOOT
1373
1374 =item --tftp
1375
1376 Starts a TFTP server on your workstation. This is similar to
1377 B<--dhcp-tftp> except that DHCP server is not started.
1378
1379 The TFTP server require root privileges in order to listen on TFTP
1380 port and C<novaboot> uses C<sudo> command to obtain those. You can put
1381 the following to I</etc/sudoers> to allow running the necessary
1382 commands without asking for password.
1383
1384  Cmnd_Alias NOVABOOT =  /usr/sbin/in.tftpd --listen --secure -v -v -v --pidfile tftpd.pid *, /usr/bin/pkill --pidfile=tftpd.pid
1385  your_login ALL=NOPASSWD: NOVABOOT
1386
1387 =item --iso[=filename]
1388
1389 Generates the ISO image that boots NOVA system via GRUB. If no filename
1390 is given, the image is stored under I<NAME>.iso, where I<NAME> is the name
1391 of the novaboot script (see also B<--name>).
1392
1393 =item --server[=[[user@]server:]path]
1394
1395 Copy all files needed for booting to another location (implies B<-g>
1396 unless B<--grub2> is given). The files will be copied (by B<rsync>
1397 tool) to the directory I<path>. If the I<path> contains string $NAME,
1398 it will be replaced with the name of the novaboot script (see also
1399 B<--name>).
1400
1401 =item --concat
1402
1403 If B<--server> is used and its value ends with $NAME, then after
1404 copying the files, a new bootloader configuration file (e.g. menu.lst)
1405 is created at I<path-wo-name>, i.e. the path specified by B<--server>
1406 with $NAME part removed. The content of the file is created by
1407 concatenating all files of the same name from all subdirectories of
1408 I<path-wo-name> found on the "server".
1409
1410 =item --rsync-flags=I<flags>
1411
1412 Specifies which I<flags> are appended to F<rsync> command line when
1413 copying files as a result of I<--server> option.
1414
1415 =back
1416
1417 =head2 Target power-on and reset phase
1418
1419 =over 8
1420
1421 =item --on, --off
1422
1423 Switch on/off the target machine and exit. The script (if any) is
1424 completely ignored. Currently it works only with B<--iprelay> or
1425 B<--amt>.
1426
1427 =item -Q, --qemu[=I<qemu-binary>]
1428
1429 Boot the configuration in qemu. Optionally, the name of qemu binary
1430 can be specified as a parameter.
1431
1432 =item --qemu-append=I<flags>
1433
1434 Append I<flags> to the default qemu flags (QEMU_FLAGS variable or
1435 C<-cpu coreduo -smp 2>).
1436
1437 =item -q, --qemu-flags=I<flags>
1438
1439 Replace the default qemu flags (QEMU_FLAGS variable or C<-cpu coreduo
1440 -smp 2>) with I<flags> specified here.
1441
1442 =item --reset-cmd=I<cmd>
1443
1444 Command that resets the target.
1445
1446 =back
1447
1448 =head2 Interaction with the bootloader on the target
1449
1450 =over 8
1451
1452 =item --uboot[=I<prompt>]
1453
1454 Interact with uBoot bootloader to boot the thing described in the
1455 novaboot script. I<prompt> specifies the U-Boot's prompt (default is
1456 "=> ", other common prompts are "U-Boot> " or "U-Boot# ").
1457 Implementation of this option is currently tied to a particular board
1458 that we use. It may be subject to changes in the future!
1459
1460 =item --uboot-init
1461
1462 Command(s) to send the U-Boot bootloader before loading the images and
1463 booting them. This option can be given multiple times. After sending
1464 commands from each option novaboot waits for U-Boot I<prompt>.
1465
1466 =back
1467
1468 =head2 Target interaction phase
1469
1470 In this phase, target's serial output is redirected to stdout and if
1471 stdin is a TTY, it is redirected to the target's serial input allowing
1472 interactive work with the target.
1473
1474 =over 8
1475
1476 =item --exiton=I<string>
1477
1478 When I<string> is sent by the target, novaboot exits. This option can
1479 be specified multiple times.
1480
1481 If I<string> is C<-re>, then the next B<--exiton>'s I<string> is
1482 treated as regular expression. For example:
1483
1484     --exiton -re --exiton 'error:.*failed'
1485
1486 =item -i, --interactive
1487
1488 Setup things for interactive use of target. Your terminal will be
1489 switched to raw mode. In raw mode, your system does not process input
1490 in any way (no echoing of entered characters, no interpretation
1491 special characters). This, among others, means that Ctrl-C is passed
1492 to the target and does no longer interrupt novaboot. Use "~~."
1493 sequence to exit novaboot.
1494
1495 =item --expect=I<string>
1496
1497 When I<string> is received from the target, send the string specified
1498 with the subsequent B<--send*> option to the target.
1499
1500 =item --expect-re=I<regex>
1501
1502 When target's output matches regular expression I<regex>, send the
1503 string specified with the subsequent B<--send*> option to the target.
1504
1505 =item --expect-raw=I<perl-code>
1506
1507 Provides direct control over Perl's Expect module.
1508
1509 =item --send=I<string>
1510
1511 Send I<string> to the target after the previously specified
1512 B<--expect*> was matched in the target's output. The I<string> may
1513 contain escape sequences such as "\n".
1514
1515 Note that I<string> is actually interpreted by Perl, so it can contain
1516 much more that escape sequences. This behavior may change in the
1517 future.
1518
1519 Example: C<--expect='login: ' --send='root\n'>
1520
1521 =item --sendcont=I<string>
1522
1523 Similar to B<--send> but continue expecting more input.
1524
1525 Example: C<--expect='Continue?' --sendcont='yes\n'>
1526
1527 =back
1528
1529 =head1 NOVABOOT SCRIPT SYNTAX
1530
1531 The syntax tries to mimic POSIX shell syntax. The syntax is defined
1532 with the following rules.
1533
1534 Lines starting with "#" and empty lines are ignored.
1535
1536 Lines that end with "\" are concatenated with the following line after
1537 removal of the final "\" and leading whitespace of the following line.
1538
1539 Lines of the form I<VARIABLE=...> (i.e. matching '^[A-Z_]+=' regular
1540 expression) assign values to internal variables. See L</VARIABLES>
1541 section.
1542
1543 Lines starting with C<load> keyword represent modules to boot. The
1544 word after C<load> is a file name (relative to the build directory
1545 (see B<--build-dir>) of the module to load and the remaining words are
1546 passed to it as the command line parameters.
1547
1548 When the C<load> line ends with "<<WORD" then the subsequent lines
1549 until the line containing solely WORD are copied literally to the file
1550 named on that line. This is similar to shell's heredoc feature.
1551
1552 When the C<load> line ends with "< CMD" then command CMD is executed
1553 with F</bin/sh> and its standard output is stored in the file named on
1554 that line. The SRCDIR variable in CMD's environment is set to the
1555 absolute path of the directory containing the interpreted novaboot
1556 script.
1557
1558 Lines starting with C<run> keyword contain shell commands that are run
1559 during file generation phase. This is the same as the "< CMD" syntax
1560 for C<load> keyboard except that the command's output is not
1561 redirected to a file. The ordering of commands is the same as they
1562 appear in the novaboot script.
1563
1564 Example (Linux):
1565
1566   #!/usr/bin/env novaboot
1567   load bzImage console=ttyS0,115200
1568   run  make -C buildroot
1569   load rootfs.cpio < gen_cpio buildroot/images/rootfs.cpio "myapp->/etc/init.d/S99myapp"
1570
1571 Example (NOVA User Land - NUL):
1572
1573   #!/usr/bin/env novaboot
1574   WVDESC=Example program
1575   load bin/apps/sigma0.nul S0_DEFAULT script_start:1,1 \
1576                            verbose hostkeyb:0,0x60,1,12,2
1577   load bin/apps/hello.nul
1578   load hello.nulconfig <<EOF
1579   sigma0::mem:16 name::/s0/log name::/s0/timer name::/s0/fs/rom ||
1580   rom://bin/apps/hello.nul
1581   EOF
1582
1583 This example will load three modules: F<sigma0.nul>, F<hello.nul> and
1584 F<hello.nulconfig>. sigma0 receives some command line parameters and
1585 F<hello.nulconfig> file is generated on the fly from the lines between
1586 C<<<EOF> and C<EOF>.
1587
1588 =head2 VARIABLES
1589
1590 The following variables are interpreted in the novaboot script:
1591
1592 =over 8
1593
1594 =item BUILDDIR
1595
1596 Novaboot chdir()s to this directory before file generation phase. The
1597 directory name specified here is relative to the build directory
1598 specified by other means (see L</--build-dir>).
1599
1600 =item EXITON
1601
1602 Assigning this variable has the same effect as specifying L</--exiton>
1603 option.
1604
1605 =item HYPERVISOR_PARAMS
1606
1607 Parameters passed to hypervisor. The default value is "serial", unless
1608 overridden in configuration file.
1609
1610 =item KERNEL
1611
1612 The kernel to use instead of the hypervisor specified in the
1613 configuration file with the C<$hypervisor> variable. The value should
1614 contain the name of the kernel image as well as its command line
1615 parameters. If this variable is defined and non-empty, the variable
1616 HYPERVISOR_PARAMS is not used.
1617
1618 =item QEMU
1619
1620 Use a specific qemu binary (can be overridden with B<-Q>) and flags
1621 when booting this script under qemu. If QEMU_FLAGS variable is also
1622 specified flags specified in QEMU variable are replaced by those in
1623 QEMU_FLAGS.
1624
1625 =item QEMU_FLAGS
1626
1627 Use specific qemu flags (can be overridden with B<-q>).
1628
1629 =item WVDESC
1630
1631 Description of the wvtest-compliant program.
1632
1633 =item WVTEST_TIMEOUT
1634
1635 The timeout in seconds for WvTest harness. If no complete line appears
1636 in the test output within the time specified here, the test fails. It
1637 is necessary to specify this for long running tests that produce no
1638 intermediate output.
1639
1640 =back
1641
1642 =head1 CONFIGURATION FILE
1643
1644 Novaboot can read its configuration from one or more files. By
1645 default, novaboot looks for files named F<.novaboot> as described in
1646 L</Configuration reading phase>. Alternatively, its location can be
1647 specified with the B<-c> switch or with the NOVABOOT_CONFIG
1648 environment variable. The configuration file has perl syntax and
1649 should set values of certain Perl variables. The current configuration
1650 can be dumped with the B<--dump-config> switch. Some configuration
1651 variables can be overridden by environment variables (see below) or by
1652 command line switches.
1653
1654 Supported configuration variables include:
1655
1656 =over 8
1657
1658 =item $builddir
1659
1660 Build directory location relative to the location of the configuration
1661 file.
1662
1663 =item $default_target
1664
1665 Default target (see below) to use when no target is explicitly
1666 specified on command line with the B<--target> option.
1667
1668 =item %targets
1669
1670 Hash of shortcuts to be used with the B<--target> option. If the hash
1671 contains, for instance, the following pair of values
1672
1673  'mybox' => '--server=boot:/tftproot --serial=/dev/ttyUSB0 --grub',
1674
1675 then the following two commands are equivalent:
1676
1677  ./script --server=boot:/tftproot --serial=/dev/ttyUSB0 --grub
1678  ./script -t mybox
1679
1680 =back
1681
1682 =head1 ENVIRONMENT VARIABLES
1683
1684 Some options can be specified not only via config file or command line
1685 but also through environment variables. Environment variables override
1686 the values from configuration file and command line parameters
1687 override the environment variables.
1688
1689 =over 8
1690
1691 =item NOVABOOT_CONFIG
1692
1693 Name of the novaboot configuration file to use instead of the default
1694 one(s).
1695
1696 =item NOVABOOT_BENDER
1697
1698 Defining this variable has the same meaning as B<--bender> option.
1699
1700 =back
1701
1702 =head1 AUTHORS
1703
1704 Michal Sojka <sojka@os.inf.tu-dresden.de>