]> rtime.felk.cvut.cz Git - novaboot.git/blob - novaboot
Add --tftp option
[novaboot.git] / novaboot
1 #!/usr/bin/perl -w
2
3 # This program is free software: you can redistribute it and/or modify
4 # it under the terms of the GNU General Public License as published by
5 # the Free Software Foundation, either version 2 of the License, or
6 # (at your option) any later version.
7
8 # This program is distributed in the hope that it will be useful,
9 # but WITHOUT ANY WARRANTY; without even the implied warranty of
10 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
11 # GNU General Public License for more details.
12
13 # You should have received a copy of the GNU General Public License
14 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
15
16 use strict;
17 use warnings;
18 use warnings (exists $ENV{NOVABOOT_TEST} ? (FATAL => 'all') : ());
19 use Getopt::Long qw(GetOptionsFromString);
20 use Pod::Usage;
21 use File::Basename;
22 use File::Spec;
23 use IO::Handle;
24 use Time::HiRes("usleep");
25 use Socket;
26 use FileHandle;
27 use IPC::Open2;
28 use POSIX qw(:errno_h);
29 use Cwd qw(getcwd abs_path);
30 use Expect;
31
32 # always flush
33 $| = 1;
34
35 my $invocation_dir = $ENV{PWD} || getcwd();
36
37 ## Configuration file handling
38
39 # Default configuration
40 $CFG::hypervisor = "";
41 $CFG::hypervisor_params = "serial";
42 $CFG::genisoimage = "genisoimage";
43 $CFG::qemu = 'qemu-system-i386 -cpu coreduo -smp 2';
44 $CFG::default_target = 'qemu';
45 %CFG::targets = (
46     'qemu' => '--qemu',
47     "tud" => '--server=erwin.inf.tu-dresden.de:~sojka/boot/novaboot --rsync-flags="--chmod=Dg+s,ug+w,o-w,+rX --rsync-path=\"umask 002 && rsync\"" --grub --grub-prefix=(nd)/tftpboot/sojka/novaboot --grub-preamble="timeout 0" --concat --iprelay=141.76.48.80:2324 --scriptmod=s/\\\\bhostserial\\\\b/hostserialpci/g',
48     "novabox" => '--server=rtime.felk.cvut.cz:/srv/tftp/novaboot --rsync-flags="--chmod=Dg+s,ug+w,o-w,+rX --rsync-path=\"umask 002 && rsync\"" --pulsar --iprelay=147.32.86.92:2324',
49     "localhost" => '--scriptmod=s/console=tty[A-Z0-9,]+// --server=/boot/novaboot/$NAME --grub2 --grub-prefix=/boot/novaboot/$NAME --grub2-prolog="  set root=\'(hd0,msdos1)\'"',
50     "ryuglab" => '--server=pc-sojkam.felk.cvut.cz:/srv/tftp --uboot --uboot-init="mw f0000b00 \${psc_cfg}; sleep 1" --remote-cmd="ssh -tt pc-sojkam.felk.cvut.cz \"sterm -d -s 115200 /dev/ttyUSB0\""',
51     "ryulocal" => '--dhcp-tftp --serial --uboot --uboot-init="dhcp; mw f0000b00 \${psc_cfg}; sleep 1" --reset-cmd="if which dtrrts; then dtrrts $NB_SERIAL 0 1; sleep 0.1; dtrrts $NB_SERIAL 1 1; fi"',
52
53     );
54 chomp(my $nproc = `nproc`);
55 $CFG::scons = "scons -j$nproc";
56 $CFG::make = "make -j$nproc";
57
58 my $builddir;
59
60 sub read_config($) {
61     my ($cfg) = @_;
62     {
63         package CFG; # Put config data into a separate namespace
64         my $rc = do($cfg);
65
66         # Check for errors
67         if ($@) {
68             die("ERROR: Failure compiling '$cfg' - $@");
69         } elsif (! defined($rc)) {
70             die("ERROR: Failure reading '$cfg' - $!");
71         } elsif (! $rc) {
72             die("ERROR: Failure processing '$cfg'");
73         }
74     }
75     $builddir = File::Spec->rel2abs($CFG::builddir, dirname($cfg)) if defined $CFG::builddir;
76     print STDERR "novaboot: Read $cfg\n";
77 }
78
79 my @cfgs;
80 {
81     # We don't use $0 here, because it points to the novaboot itself and
82     # not to the novaboot script. The problem with this approach is that
83     # when a script is run as "novaboot <options> <script>" then $ARGV[0]
84     # contains the first option. Hence the -f check.
85     my $dir = File::Spec->rel2abs($ARGV[0] && -f $ARGV[0] ? dirname($ARGV[0]) : '', $invocation_dir);
86     while ((-d $dir || -l $dir ) && $dir ne "/") {
87         push @cfgs, "$dir/.novaboot" if -r "$dir/.novaboot";
88         my @dirs = File::Spec->splitdir($dir);
89         $dir = File::Spec->catdir(@dirs[0..$#dirs-1]);
90     }
91 }
92 my $cfg = $ENV{'NOVABOOT_CONFIG'};
93 Getopt::Long::Configure(qw/no_ignore_case pass_through/);
94 GetOptions ("config|c=s" => \$cfg);
95 read_config($_) foreach $cfg or reverse @cfgs;
96
97 ## Command line handling
98
99 my $explicit_target;
100 GetOptions ("target|t=s" => \$explicit_target);
101
102 my ($amt, @append, $bender, @chainloaders, $concat, $config_name_opt, $dhcp_tftp, $dump_opt, $dump_config, @exiton, @expect_raw, $gen_only, $grub_config, $grub_prefix, $grub_preamble, $grub2_prolog, $grub2_config, $help, $iprelay, $iso_image, $interactive, $kernel_opt, $make, $man, $no_file_gen, $off_opt, $on_opt, $pulsar, $pulsar_root, $qemu, $qemu_append, $qemu_flags_cmd, $remote_cmd, $remote_expect, $reset_cmd, $rom_prefix, $rsync_flags, @scriptmod, $scons, $serial, $server, $stty, $tftp, $uboot, $uboot_init);
103
104 $rsync_flags = '';
105 $rom_prefix = 'rom://';
106 $stty = 'raw -crtscts -onlcr 115200';
107
108 my @expect_seen = ();
109 sub handle_expect
110 {
111     my ($n, $v) = @_;
112     push(@expect_seen, '-re') if $n eq "expect-re";
113     push(@expect_seen, $v);
114 }
115
116 sub handle_send
117 {
118     my ($n, $v) = @_;
119     unless (@expect_seen) { die("No --expect before --send"); }
120     my $ret = ($n eq "sendcont") ? exp_continue : 0;
121     unshift(@expect_raw, sub { shift->send(eval("\"$v\"")); $ret; });
122     unshift(@expect_raw, @expect_seen);
123     @expect_seen = ();
124 }
125
126 Getopt::Long::Configure(qw/no_ignore_case no_pass_through/);
127 my %opt_spec;
128 %opt_spec = (
129     "amt=s"          => \$amt,
130     "append|a=s"     => \@append,
131     "bender|b"       => \$bender,
132     "build-dir=s"    => sub { my ($n, $v) = @_; $builddir = File::Spec->rel2abs($v); },
133     "concat"         => \$concat,
134     "chainloader=s"  => \@chainloaders,
135     "dhcp-tftp|d"    => \$dhcp_tftp,
136     "dump"           => \$dump_opt,
137     "dump-config"    => \$dump_config,
138     "exiton=s"       => \@exiton,
139     "expect=s"       => \&handle_expect,
140     "expect-re=s"    => \&handle_expect,
141     "expect-raw=s"   => sub { my ($n, $v) = @_; unshift(@expect_raw, eval($v)); },
142     "gen-only"       => \$gen_only,
143     "grub|g:s"       => \$grub_config,
144     "grub-preamble=s"=> \$grub_preamble,
145     "grub-prefix=s"  => \$grub_prefix,
146     "grub2:s"        => \$grub2_config,
147     "grub2-prolog=s" => \$grub2_prolog,
148     "iprelay=s"      => \$iprelay,
149     "iso:s"          => \$iso_image,
150     "kernel|k=s"     => \$kernel_opt,
151     "interactive|i"  => \$interactive,
152     "name=s"         => \$config_name_opt,
153     "make|m:s"       => \$make,
154     "no-file-gen"    => \$no_file_gen,
155     "off"            => \$off_opt,
156     "on"             => \$on_opt,
157     "pulsar|p:s"     => \$pulsar,
158     "pulsar-root=s"  => \$pulsar_root,
159     "qemu|Q:s"       => \$qemu,
160     "qemu-append=s"  => \$qemu_append,
161     "qemu-flags|q=s" => \$qemu_flags_cmd,
162     "remote-cmd=s"   => \$remote_cmd,
163     "remote-expect=s"=> \$remote_expect,
164     "reset-cmd=s"    => \$reset_cmd,
165     "rsync-flags=s"  => \$rsync_flags,
166     "scons:s"        => \$scons,
167     "scriptmod=s"    => \@scriptmod,
168     "send=s"         => \&handle_send,
169     "sendcont=s"     => \&handle_send,
170     "serial|s:s"     => \$serial,
171     "server:s"       => \$server,
172     "strip-rom"      => sub { $rom_prefix = ''; },
173     "stty=s"         => \$stty,
174     "tftp"           => \$tftp,
175     "uboot"          => \$uboot,
176     "uboot-init=s"   => \$uboot_init,
177     "h"              => \$help,
178     "help"           => \$man,
179     );
180
181 # First process target options
182 {
183     my $t = defined($explicit_target) ? $explicit_target : $CFG::default_target;
184     if ($t) {
185         exists $CFG::targets{$t} or die("Unknown target '$t' (valid targets are: ".join(", ", sort keys(%CFG::targets)).")");
186         GetOptionsFromString($CFG::targets{$t}, %opt_spec);
187     }
188 }
189
190 # Then process other command line options - some of them may override
191 # what was specified by the target
192 GetOptions %opt_spec or die("Error in command line arguments");
193 pod2usage(1) if $help;
194 pod2usage(-exitstatus => 0, -verbose => 2) if $man;
195
196 ### Dump sanitized configuration (if requested)
197
198 if ($dump_config) {
199     use Data::Dumper;
200     $Data::Dumper::Indent=1;
201     print "# This file is in perl syntax.\n";
202     foreach my $key(sort(keys(%CFG::))) { # See "Symbol Tables" in perlmod(1)
203         if (defined ${$CFG::{$key}}) { print Data::Dumper->Dump([${$CFG::{$key}}], ["*$key"]); }
204         if (        @{$CFG::{$key}}) { print Data::Dumper->Dump([\@{$CFG::{$key}}], ["*$key"]); }
205         if (        %{$CFG::{$key}}) { print Data::Dumper->Dump([\%{$CFG::{$key}}], ["*$key"]); }
206     }
207     print "1;\n";
208     exit;
209 }
210
211 ### Sanitize configuration
212
213 if ($interactive && !-t STDIN) {
214     die("novaboot: Interactive mode not supported when not on terminal");
215 }
216
217 if (defined $config_name_opt && scalar(@ARGV) > 1) { die "You cannot use --name with multiple scripts"; }
218
219 # Default options
220 if (defined $serial) {
221     $serial ||= "/dev/ttyUSB0";
222     $ENV{NB_SERIAL} = $serial;
223 }
224 if (defined $grub_config) { $grub_config ||= "menu.lst"; }
225 if (defined $grub2_config) { $grub2_config ||= "grub.cfg"; }
226
227 ## Parse the novaboot script(s)
228 my @scripts;
229 my $file;
230 my $EOF;
231 my $last_fn = '';
232 my ($modules, $variables, $generated, $continuation);
233 my $skip_reading = defined($on_opt) || defined($off_opt);
234 while (!$skip_reading && ($_ = <>)) {
235     if ($ARGV ne $last_fn) { # New script
236         die "Missing EOF in $last_fn" if $file;
237         die "Unfinished line in $last_fn" if $continuation;
238         $last_fn = $ARGV;
239         push @scripts, { 'filename' => $ARGV,
240                          'modules' => $modules = [],
241                          'variables' => $variables = {},
242                          'generated' => $generated = []};
243
244     }
245     chomp();
246     next if /^#/ || /^\s*$/;    # Skip comments and empty lines
247
248     $_ =~ s/^[[:space:]]*// if ($continuation);
249
250     if (/\\$/) {                # Line continuation
251         $continuation .= substr($_, 0, length($_)-1);
252         next;
253     }
254
255     if ($continuation) {        # Last continuation line
256         $_ = $continuation . $_;
257         $continuation = '';
258     }
259
260     foreach my $mod(@scriptmod) { eval $mod; }
261
262     if ($file && $_ eq $EOF) {  # Heredoc end
263         undef $file;
264         next;
265     }
266     if ($file) {                # Heredoc content
267         push @{$file}, "$_\n";
268         next;
269     }
270     if (/^([A-Z_]+)=(.*)$/) {   # Internal variable
271         $$variables{$1} = $2;
272         push(@exiton, $2) if ($1 eq "EXITON");
273         next;
274     }
275     if (s/^load *//) {          # Load line
276         die("novaboot: '$last_fn' line $.: Missing file name\n") unless /^[^ <]+/;
277         if (/^([^ ]*)(.*?)[[:space:]]*<<([^ ]*)$/) { # Heredoc start
278             push @$modules, "$1$2";
279             $file = [];
280             push @$generated, {filename => $1, content => $file};
281             $EOF = $3;
282             next;
283         }
284         if (/^([^ ]*)(.*?)[[:space:]]*< ?(.*)$/) { # Command substitution
285             push @$modules, "$1$2";
286             push @$generated, {filename => $1, command => $3};
287             next;
288         }
289         push @$modules, $_;
290         next;
291     }
292     if (/^run (.*)/) {          # run line
293         push @$generated, {command => $1};
294         next;
295     }
296
297     die("novaboot: Cannot parse script '$last_fn' line $.. Didn't you forget 'load' keyword?\n");
298 }
299 # use Data::Dumper;
300 # print Dumper(\@scripts);
301
302 foreach my $script (@scripts) {
303     $modules = $$script{modules};
304     @$modules[0] =~ s/^[^ ]*/$kernel_opt/ if $kernel_opt;
305     @$modules[0] .= ' ' . join(' ', @append) if @append;
306
307     my $kernel;
308     if (exists $variables->{KERNEL}) {
309         $kernel = $variables->{KERNEL};
310     } else {
311         if ($CFG::hypervisor) {
312             $kernel = $CFG::hypervisor . " ";
313             if (exists $variables->{HYPERVISOR_PARAMS}) {
314                 $kernel .= $variables->{HYPERVISOR_PARAMS};
315             } else {
316                 $kernel .= $CFG::hypervisor_params;
317             }
318         }
319     }
320     @$modules = ($kernel, @$modules) if $kernel;
321     @$modules = (@chainloaders, @$modules);
322     @$modules = ("bin/boot/bender", @$modules) if ($bender || defined $ENV{'NOVABOOT_BENDER'});
323 }
324
325 if ($dump_opt) {
326     foreach my $script (@scripts) {
327         print join("\n", @{$$script{modules}})."\n";
328     }
329     exit(0);
330 }
331
332 ## Helper functions
333
334 sub generate_configs($$$) {
335     my ($base, $generated, $filename) = @_;
336     if ($base) { $base = "$base/"; };
337     foreach my $g(@$generated) {
338       if (exists $$g{content}) {
339         my $config = $$g{content};
340         my $fn = $$g{filename};
341         open(my $f, '>', $fn) || die("$fn: $!");
342         map { s|\brom://([^ ]*)|$rom_prefix$base$1|g; print $f "$_"; } @{$config};
343         close($f);
344         print "novaboot: Created $fn\n";
345       } elsif (exists $$g{command} && ! $no_file_gen) {
346         $ENV{SRCDIR} = dirname(File::Spec->rel2abs( $filename, $invocation_dir ));
347         if (exists $$g{filename}) {
348             system_verbose("( $$g{command} ) > $$g{filename}");
349         } else {
350             system_verbose($$g{command});
351         }
352       }
353     }
354 }
355
356 sub generate_grub_config($$$$;$)
357 {
358     my ($filename, $title, $base, $modules_ref, $preamble) = @_;
359     if ($base) { $base = "$base/"; };
360     open(my $fg, '>', $filename) or die "$filename: $!";
361     print $fg "$preamble\n" if $preamble;
362     print $fg "title $title\n" if $title;
363     #print $fg "root $base\n"; # root doesn't really work for (nd)
364     my $first = 1;
365     foreach (@$modules_ref) {
366         if ($first) {
367             $first = 0;
368             my ($kbin, $kcmd) = split(' ', $_, 2);
369             $kcmd = '' if !defined $kcmd;
370             print $fg "kernel ${base}$kbin $kcmd\n";
371         } else {
372             s|\brom://([^ ]*)|$rom_prefix$base$1|g; # Translate rom:// files - needed for vdisk parameter of sigma0
373             print $fg "module $base$_\n";
374         }
375     }
376     close($fg);
377     print("novaboot: Created $builddir/$filename\n");
378     return $filename;
379 }
380
381 sub generate_syslinux_config($$$$)
382 {
383     my ($filename, $title, $base, $modules_ref) = @_;
384     if ($base && $base !~ /\/$/) { $base = "$base/"; };
385     open(my $fg, '>', $filename) or die "$filename: $!";
386     print $fg "LABEL $title\n";
387     #TODO print $fg "MENU LABEL $human_readable_title\n";
388
389     my ($kbin, $kcmd) = split(' ', @$modules_ref[0], 2);
390
391     if (system("file $kbin|grep 'Linux kernel'") == 0) {
392         my $initrd = @$modules_ref[1];
393         die('To many "load" lines for Linux kernel') if (scalar @$modules_ref > 2);
394         print $fg "LINUX $base$kbin\n";
395         print $fg "APPEND $kcmd\n";
396         print $fg "INITRD $base$initrd\n";
397     } else {
398         print $fg "KERNEL mboot.c32\n";
399         my @append;
400         foreach (@$modules_ref) {
401             s|\brom://([^ ]*)|$rom_prefix$base$1|g; # Translate rom:// files - needed for vdisk parameter of sigma0
402             push @append, "$base$_";
403             print $fg "APPEND ".join(' --- ', @append)."\n";
404         }
405     }
406     #TODO print $fg "TEXT HELP\n";
407     #TODO print $fg "some help here\n";
408     #TODO print $fg "ENDTEXT\n";
409     close($fg);
410     print("novaboot: Created $builddir/$filename\n");
411     return $filename;
412 }
413
414 sub generate_grub2_config($$$$;$$)
415 {
416     my ($filename, $title, $base, $modules_ref, $preamble, $prolog) = @_;
417     if ($base && substr($base,-1,1) ne '/') { $base = "$base/"; };
418     open(my $fg, '>', $filename) or die "$filename: $!";
419     print $fg "$preamble\n" if $preamble;
420     $title ||= 'novaboot';
421     print $fg "menuentry $title {\n";
422     print $fg "$prolog\n" if $prolog;
423     my $first = 1;
424     foreach (@$modules_ref) {
425         if ($first) {
426             $first = 0;
427             my ($kbin, $kcmd) = split(' ', $_, 2);
428             $kcmd = '' if !defined $kcmd;
429             print $fg "  multiboot ${base}$kbin $kcmd\n";
430         } else {
431             my @args = split;
432             # GRUB2 doesn't pass filename in multiboot info so we have to duplicate it here
433             $_ = join(' ', ($args[0], @args));
434             s|\brom://|$rom_prefix|g; # We do not need to translate path for GRUB2
435             print $fg "  module $base$_\n";
436         }
437     }
438     print $fg "}\n";
439     close($fg);
440     print("novaboot: Created $builddir/$filename\n");
441     return $filename;
442 }
443
444 sub generate_pulsar_config($$)
445 {
446     my ($filename, $modules_ref) = @_;
447     open(my $fg, '>', $filename) or die "$filename: $!";
448     print $fg "root $pulsar_root\n" if defined $pulsar_root;
449     my $first = 1;
450     my ($kbin, $kcmd);
451     foreach (@$modules_ref) {
452         if ($first) {
453             $first = 0;
454             ($kbin, $kcmd) = split(' ', $_, 2);
455             $kcmd = '' if !defined $kcmd;
456         } else {
457             my @args = split;
458             s|\brom://|$rom_prefix|g;
459             print $fg "load $_\n";
460         }
461     }
462     # Put kernel as last - this is needed for booting Linux and has no influence on non-Linux OSes
463     print $fg "exec $kbin $kcmd\n";
464     close($fg);
465     print("novaboot: Created $builddir/$filename\n");
466     return $filename;
467 }
468
469 sub shell_cmd_string(@)
470 {
471     return join(' ', map((/^[-_=a-zA-Z0-9\/\.\+]+$/ ? "$_" : "'$_'"), @_));
472 }
473
474 sub exec_verbose(@)
475 {
476     print "novaboot: Running: ".shell_cmd_string(@_)."\n";
477     exec(@_);
478     exit(1); # should not be reached
479 }
480
481 sub system_verbose($)
482 {
483     my $cmd = shift;
484     print "novaboot: Running: $cmd\n";
485     my $ret = system($cmd);
486     if ($ret & 0x007f) { die("Command terminated by a signal"); }
487     if ($ret & 0xff00) {die("Command exit with non-zero exit code"); }
488     if ($ret) { die("Command failure $ret"); }
489 }
490
491 ## WvTest handline
492
493 if (exists $variables->{WVDESC}) {
494     print "Testing \"$variables->{WVDESC}\" in $last_fn:\n";
495 } elsif ($last_fn =~ /\.wv$/) {
496     print "Testing \"all\" in $last_fn:\n";
497 }
498
499 ## Connect to the target and check whether it is not occupied
500
501 # We have to do this before file generation phase, because file
502 # generation is intermixed with file deployment phase and we want to
503 # check whether the target is not used by somebody else before
504 # deploying files. Otherwise, we may rewrite other user's files on a
505 # boot server.
506
507 my $exp; # Expect object to communicate with the target over serial line
508
509 my ($target_reset, $target_power_on, $target_power_off);
510
511 if (defined $iprelay) {
512     my $IPRELAY;
513     $iprelay =~ /([.0-9]+)(:([0-9]+))?/;
514     my $addr = $1;
515     my $port = $3 || 23;
516     my $paddr   = sockaddr_in($port, inet_aton($addr));
517     my $proto   = getprotobyname('tcp');
518     socket($IPRELAY, PF_INET, SOCK_STREAM, $proto)  || die "socket: $!";
519     print "novaboot: Connecting to IP relay... ";
520     connect($IPRELAY, $paddr)    || die "connect: $!";
521     print "done\n";
522     $exp = Expect->init(\*$IPRELAY);
523     $exp->log_stdout(1);
524
525     while (1) {
526         print $exp "\xFF\xF6";  # AYT
527         my $connected = $exp->expect(20, # Timeout in seconds
528                                      '<iprelayd: connected>',
529                                      '-re', '<WEB51 HW[^>]*>');
530         last if $connected;
531     }
532
533     sub relaycmd($$) {
534         my ($relay, $onoff) = @_;
535         die unless ($relay == 1 || $relay == 2);
536
537         my $cmd = ($relay == 1 ? 0x5 : 0x6) | ($onoff ? 0x20 : 0x10);
538         return "\xFF\xFA\x2C\x32".chr($cmd)."\xFF\xF0";
539     }
540
541     sub relayconf($$) {
542         my ($relay, $onoff) = @_;
543         die unless ($relay == 1 || $relay == 2);
544         my $cmd = ($relay == 1 ? 0xdf : 0xbf) | ($onoff ? 0x00 : 0xff);
545         return "\xFF\xFA\x2C\x97".chr($cmd)."\xFF\xF0";
546     }
547
548     sub relay($$;$) {
549         my ($relay, $onoff, $can_giveup) = @_;
550         my $confirmation = '';
551         $exp->log_stdout(0);
552         print $exp relaycmd($relay, $onoff);
553         my $confirmed = $exp->expect(20, # Timeout in seconds
554                                      relayconf($relay, $onoff));
555         if (!$confirmed) {
556             if ($can_giveup) {
557                 print("Relay confirmation timeout - ignoring\n");
558             } else {
559                 die "Relay confirmation timeout";
560             }
561         }
562         $exp->log_stdout(1);
563     }
564
565     $target_reset = sub {
566         relay(2, 1, 1); # Reset the machine
567         usleep(100000);
568         relay(2, 0);
569     };
570
571     $target_power_off = sub {
572         relay(1, 1);            # Press power button
573         usleep(6000000);        # Long press to switch off
574         relay(1, 0);
575     };
576
577     $target_power_on = sub {
578         relay(1, 1);            # Press power button
579         usleep(100000);         # Short press
580         relay(1, 0);
581     };
582 }
583 elsif ($serial) {
584     my $CONN;
585     system_verbose("stty -F $serial $stty");
586     open($CONN, "+<", $serial) || die "open $serial: $!";
587     $exp = Expect->init(\*$CONN);
588 }
589 elsif ($remote_cmd) {
590     print "novaboot: Running: $remote_cmd\n";
591     $exp = Expect->spawn($remote_cmd);
592 }
593 elsif (defined $amt) {
594     require LWP::UserAgent;
595     require LWP::Authen::Digest;
596
597     sub genXML {
598         my ($host, $username, $password, $schema, $className, $pstate) = @_;
599         #AMT numbers for PowerStateChange (MNI => bluescreen on windows;-)
600         my %pstates = ("on"        => 2,
601                        "standby"   => 4,
602                        "hibernate" => 7,
603                        "off"       => 8,
604                        "reset"     => 10,
605                        "MNI"       => 11);
606         return <<END;
607                 <s:Envelope xmlns:s="http://www.w3.org/2003/05/soap-envelope" xmlns:a="http://schemas.xmlsoap.org/ws/2004/08/addressing" xmlns:w="http://schemas.dmtf.org/wbem/wsman/1/wsman.xsd">
608                 <s:Header><a:To>http://$host:16992/wsman</a:To>
609                 <w:ResourceURI s:mustUnderstand="true">$schema</w:ResourceURI>
610                 <a:ReplyTo><a:Address s:mustUnderstand="true">http://schemas.xmlsoap.org/ws/2004/08/addressing/role/anonymous</a:Address></a:ReplyTo>
611                 <a:Action s:mustUnderstand="true">$schema$className</a:Action>
612                 <w:MaxEnvelopeSize s:mustUnderstand="true">153600</w:MaxEnvelopeSize>
613                 <a:MessageID>uuid:709072C9-609C-4B43-B301-075004043C7C</a:MessageID>
614                 <w:Locale xml:lang="en-US" s:mustUnderstand="false" />
615                 <w:OperationTimeout>PT60.000S</w:OperationTimeout>
616                 <w:SelectorSet><w:Selector Name="Name">Intel(r) AMT Power Management Service</w:Selector></w:SelectorSet>
617                 </s:Header><s:Body>
618                 <p:RequestPowerStateChange_INPUT xmlns:p="http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_PowerManagementService">
619                 <p:PowerState>$pstates{$pstate}</p:PowerState>
620                 <p:ManagedElement><a:Address>http://$host:16992/wsman</a:Address>
621                 <a:ReferenceParameters><w:ResourceURI>http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_ComputerSystem</w:ResourceURI>
622                 <w:SelectorSet><w:Selector Name="Name">ManagedSystem</w:Selector></w:SelectorSet>
623                 </a:ReferenceParameters></p:ManagedElement>
624                 </p:RequestPowerStateChange_INPUT>
625                 </s:Body></s:Envelope>
626 END
627     }
628
629     sub sendPOST {
630         my ($host, $username, $password, $content) = @_;
631
632         my $ua = LWP::UserAgent->new();
633         $ua->agent("novaboot");
634
635         my $req = HTTP::Request->new(POST => "http://$host:16992/wsman");
636         my $res = $ua->request($req);
637         die ("Unexpected AMT response: " . $res->status_line) unless $res->code == 401;
638
639         my ($realm) = $res->header("WWW-Authenticate") =~ /Digest realm="(.*?)"/;
640         $ua->credentials("$host:16992", $realm, $username => $password);
641
642         # Create a request
643         $req = HTTP::Request->new(POST => "http://$host:16992/wsman");
644         $req->content_type('application/x-www-form-urlencoded');
645         $req->content($content);
646         $res = $ua->request($req);
647         die ("AMT power change request failed: " . $res->status_line) unless $res->is_success;
648         $res->content() =~ /<g:ReturnValue>(\d+)<\/g:ReturnValue>/;
649         return $1;
650     }
651
652     sub powerChange  {
653         my ($host, $username, $password, $pstate)=@_;
654         my $schema="http://schemas.dmtf.org/wbem/wscim/1/cim-schema/2/CIM_PowerManagementService";
655         my $className="/RequestPowerStateChange";
656         my $content = genXML($host, $username, $password ,$schema, $className, $pstate);
657         return sendPOST($host, $username, $password, $content);
658     }
659
660     my ($user,$amt_password,$host,$port) = ($amt =~ /(?:(.*?)(?::(.*))?@)?([^:]*)(?::([0-9]*))?/);;
661     $user ||= "admin";
662     $amt_password ||= $ENV{'AMT_PASSWORD'} || die "AMT password not specified";
663     $host || die "AMT host not specified";
664     $port ||= 16994;
665
666     $target_power_off = sub {
667         $exp->close();
668         my $result = powerChange($host,$user,$amt_password, "off");
669         die "AMT power off failed (ReturnValue $result)" if $result != 0;
670     };
671
672     $target_power_on = sub {
673         my $result = powerChange($host,$user,$amt_password, "on");
674         die "AMT power on failed (ReturnValue $result)" if $result != 0;
675     };
676
677     $target_reset = sub {
678         my $result = powerChange($host,$user,$amt_password, "reset");
679         if ($result != 0) {
680             print STDERR "Warning: Cannot reset $host, trying power on. ";
681             $result = powerChange($host,$user,$amt_password, "on");
682         }
683         die "AMT reset failed (ReturnValue $result)" if $result != 0;
684     };
685
686     my $cmd = "amtterm -u $user -p $amt_password $host $port";
687     print "novaboot: Running: $cmd\n" =~ s/\Q$amt_password\E/???/r;
688     $exp = Expect->spawn($cmd);
689     $exp->expect(10, "RUN_SOL") || die "Expect for 'RUN_SOL' timed out";
690 }
691
692 if ($remote_expect) {
693     $exp->expect(10, $remote_expect) || die "Expect for '$remote_expect' timed out";
694 }
695
696 if (defined $reset_cmd) {
697     $target_reset = sub {
698         system_verbose($reset_cmd);
699     };
700 }
701
702 if (defined $on_opt && defined $target_power_on) {
703     &$target_power_on();
704     exit;
705 }
706 if (defined $off_opt && defined $target_power_off) {
707     print "novaboot: Switching the target off...\n";
708     &$target_power_off();
709     exit;
710 }
711
712 $builddir ||= dirname(File::Spec->rel2abs( ${$scripts[0]}{filename})) if scalar @scripts;
713 if (defined $builddir) {
714     chdir($builddir) or die "Can't change directory to $builddir: $!";
715     print "novaboot: Entering directory `$builddir'\n";
716 }
717
718 ## File generation phase
719 my (%files_iso, $menu_iso, $filename);
720 my $config_name = '';
721
722 foreach my $script (@scripts) {
723     $filename = $$script{filename};
724     $modules = $$script{modules};
725     $generated = $$script{generated};
726     $variables = $$script{variables};
727
728     ($config_name = $filename) =~ s#.*/##;
729     $config_name = $config_name_opt if (defined $config_name_opt);
730
731     if (exists $variables->{BUILDDIR}) {
732         $builddir = File::Spec->rel2abs($variables->{BUILDDIR});
733         chdir($builddir) or die "Can't change directory to $builddir: $!";
734         print "novaboot: Entering directory `$builddir'\n";
735     }
736
737     my $prefix;
738     ($prefix = $grub_prefix) =~ s/\$NAME/$config_name/ if defined $grub_prefix;
739     $prefix ||= $builddir;
740     # TODO: use $grub_prefix as first parameter if some switch is given
741     generate_configs('', $generated, $filename);
742
743 ### Generate bootloader configuration files
744     my @bootloader_configs;
745     push @bootloader_configs, generate_grub_config($grub_config, $config_name, $prefix, $modules, $grub_preamble) if (defined $grub_config);
746     push @bootloader_configs, generate_grub2_config($grub2_config, $config_name, $prefix, $modules, $grub_preamble, $grub2_prolog) if (defined $grub2_config);
747     push @bootloader_configs, generate_pulsar_config('config-'.($pulsar||'novaboot'), $modules) if (defined $pulsar);
748
749 ### Run scons or make
750     {
751         my @files = map({ ($file) = m/([^ ]*)/; $file; } @$modules);
752         # Filter-out generated files
753         my @to_build = grep({ my $file = $_; !scalar(grep($file eq ($$_{filename} || ''), @$generated)) } @files);
754
755         system_verbose($scons || $CFG::scons." ".join(" ", @to_build)) if (defined $scons);
756         system_verbose($make  || $CFG::make ." ".join(" ", @to_build)) if (defined $make);
757     }
758
759 ### Copy files (using rsync)
760     if (defined $server && !defined($gen_only)) {
761         (my $real_server = $server) =~ s/\$NAME/$config_name/;
762
763         my ($hostname, $path) = split(":", $real_server, 2);
764         if (! defined $path) {
765             $path = $hostname;
766             $hostname = "";
767         }
768         my $files = join(" ", map({ ($file) = m/([^ ]*)/; $file; } ( @$modules, @bootloader_configs)));
769         map({ my $file = (split)[0]; die "$file: $!" if ! -f $file; } @$modules);
770         my $istty = -t STDOUT && ($ENV{'TERM'} || 'dumb') ne 'dumb';
771         my $progress = $istty ? "--progress" : "";
772         system_verbose("rsync $progress -RLp $rsync_flags $files $real_server");
773         if ($server =~ m|/\$NAME$| && $concat) {
774             my $cmd = join("; ", map { "( cd $path/.. && cat */$_ > $_ )" } @bootloader_configs);
775             system_verbose($hostname ? "ssh $hostname '$cmd'" : $cmd);
776         }
777     }
778
779 ### Prepare ISO image generation
780     if (defined $iso_image) {
781         generate_configs("(cd)", $generated, $filename);
782         my $menu;
783         generate_syslinux_config(\$menu, $config_name, "/", $modules);
784         $menu_iso .= "$menu\n";
785         map { ($file,undef) = split; $files_iso{$file} = 1; } @$modules;
786     }
787 }
788
789 ## Generate ISO image
790 if (defined $iso_image) {
791     system_verbose("mkdir -p isolinux");
792     system_verbose('cp /usr/lib/syslinux/isolinux.bin /usr/lib/syslinux/mboot.c32 /usr/lib/syslinux/menu.c32 isolinux');
793     open(my $fh, ">isolinux/isolinux.cfg");
794     if ($#scripts) {
795         print $fh "TIMEOUT 50\n";
796         print $fh "DEFAULT menu\n";
797     } else {
798         print $fh "DEFAULT $config_name\n";
799     }
800     print $fh "$menu_iso";
801     close($fh);
802
803     my $files = join(" ", map("$_=$_", (keys(%files_iso), 'isolinux/isolinux.bin', 'isolinux/isolinux.cfg', 'isolinux/mboot.c32', 'isolinux/menu.c32')));
804     $iso_image ||= "$config_name.iso";
805
806     # Note: We use -U flag below to "Allow 'untranslated' filenames,
807     # completely violating the ISO9660 standards". Without this
808     # option, isolinux is not able to read files names for example
809     # bzImage-3.0.
810     system_verbose("$CFG::genisoimage -R -b isolinux/isolinux.bin -c isolinux/boot.cat -no-emul-boot -boot-load-size 4 -boot-info-table -hide-rr-moved -U -o $iso_image -graft-points $files");
811     print("ISO image created: $builddir/$iso_image\n");
812 }
813
814 exit(0) if defined $gen_only;
815
816 ## Boot the system using various methods and send serial output to stdout
817
818 if (scalar(@scripts) > 1 && ( defined $dhcp_tftp || defined $serial || defined $iprelay)) {
819     die "You cannot do this with multiple scripts simultaneously";
820 }
821
822 if ($variables->{WVTEST_TIMEOUT}) {
823     print "wvtest: timeout ", $variables->{WVTEST_TIMEOUT}, "\n";
824 }
825
826 sub trim($) {
827     my ($str) = @_;
828     $str =~ s/^\s+|\s+$//g;
829     return $str
830 }
831
832 ### Start in Qemu
833
834 if (defined $qemu) {
835     # Qemu
836     $qemu ||= $variables->{QEMU} || $CFG::qemu;
837     my @qemu_flags = split(" ", $qemu);
838     $qemu = shift(@qemu_flags);
839
840     @qemu_flags = split(/ +/, trim($variables->{QEMU_FLAGS})) if exists $variables->{QEMU_FLAGS};
841     @qemu_flags = split(/ +/, trim($qemu_flags_cmd)) if $qemu_flags_cmd;
842     push(@qemu_flags, split(/ +/, trim($qemu_append || '')));
843
844     if (defined $iso_image) {
845         # Boot NOVA with grub (and test the iso image)
846         push(@qemu_flags, ('-cdrom', $iso_image));
847     } else {
848         # Boot NOVA without GRUB
849
850         # Non-patched qemu doesn't like commas, but NUL can live with pluses instead of commans
851         foreach (@$modules) {s/,/+/g;}
852         generate_configs("", $generated, $filename);
853
854         if (scalar @$modules) {
855             my ($kbin, $kcmd) = split(' ', shift(@$modules), 2);
856             $kcmd = '' if !defined $kcmd;
857             my $dtb;
858             @$modules = map { if (/\.dtb$/) { $dtb=$_; (); } else { $_ } } @$modules;
859             my $initrd = join ",", @$modules;
860
861             push(@qemu_flags, ('-kernel', $kbin, '-append', $kcmd));
862             push(@qemu_flags, ('-initrd', $initrd)) if $initrd;
863             push(@qemu_flags, ('-dtb', $dtb)) if $dtb;
864         }
865     }
866     push(@qemu_flags,  qw(-serial stdio)); # Redirect serial output (for collecting test restuls)
867     unshift(@qemu_flags, ('-name', $config_name));
868     print "novaboot: Running: ".shell_cmd_string($qemu, @qemu_flags)."\n";
869     $exp = Expect->spawn(($qemu, @qemu_flags)) || die("exec() failed: $!");
870 }
871
872 ### Local DHCPD and TFTPD
873
874 my ($dhcpd_pid, $tftpd_pid);
875
876 if (defined $dhcp_tftp)
877 {
878     generate_configs("(nd)", $generated, $filename);
879     system_verbose('mkdir -p tftpboot');
880     generate_grub_config("tftpboot/os-menu.lst", $config_name, "(nd)", \@$modules, "timeout 0");
881     open(my $fh, '>', 'dhcpd.conf');
882     my $mac = `cat /sys/class/net/eth0/address`;
883     chomp $mac;
884     print $fh "subnet 10.23.23.0 netmask 255.255.255.0 {
885                       range 10.23.23.10 10.23.23.100;
886                       filename \"bin/boot/grub/pxegrub.pxe\";
887                       next-server 10.23.23.1;
888 }
889 host server {
890         hardware ethernet $mac;
891         fixed-address 10.23.23.1;
892 }";
893     close($fh);
894     system_verbose("sudo ip a add 10.23.23.1/24 dev eth0;
895             sudo ip l set dev eth0 up;
896             sudo touch dhcpd.leases");
897
898     # We run servers by forking ourselves, because the servers end up
899     # in our process group and get killed by signals sent to the
900     # process group (e.g. Ctrl-C on terminal).
901     $dhcpd_pid = fork();
902     exec_verbose("sudo dhcpd -d -cf dhcpd.conf -lf dhcpd.leases -pf dhcpd.pid") if ($dhcpd_pid == 0);
903 }
904
905 if (defined $dhcp_tftp || defined $tftp) {
906     $tftpd_pid = fork();
907     exec_verbose("sudo in.tftpd --foreground --secure -v -v -v --pidfile tftpd.pid $builddir") if ($tftpd_pid == 0);
908
909     # Kill server when we die
910     $SIG{__DIE__} = sub { system_verbose('sudo pkill --pidfile=dhcpd.pid') if (defined $dhcp_tftp);
911                           system_verbose('sudo pkill --pidfile=tftpd.pid'); };
912 }
913
914 ### Reset target (IP relay, AMT, ...)
915
916 if (defined $target_reset) {
917     print "novaboot: Reseting the test box... ";
918     &$target_reset();
919     print "done\n";
920 }
921
922 ### U-boot conversation
923 if (defined $uboot) {
924     print "novaboot: Waiting for uBoot prompt...\n";
925     $exp->log_stdout(1);
926     #$exp->exp_internal(1);
927     $exp->expect(20,
928                  [qr/Hit any key to stop autoboot:/, sub { $exp->send("\n"); exp_continue; }],
929                  '=> ') || die "No uBoot prompt deteceted";
930     $exp->send("$uboot_init\n") if $uboot_init;
931     $exp->expect(10, '=> ') || die "uBoot prompt timeout";
932
933     my ($kbin, $kcmd) = split(' ', shift(@$modules), 2);
934     my $dtb;
935     @$modules = map { if (/\.dtb$/) { $dtb=$_; (); } else { $_ } } @$modules;
936     my $initrd = shift @$modules;
937
938     my $kern_addr = '800000';
939     my $initrd_addr = '-';
940     my $dtb_addr = '';
941
942     $exp->send("tftp $kern_addr $kbin\n");
943     $exp->expect(10,
944                  [qr/#/, sub { exp_continue; }],
945                  '=> ') || die "Kernel load failed";
946     if (defined $dtb) {
947         $dtb_addr = '7f0000';
948         $exp->send("tftp $dtb_addr $dtb\n");
949         $exp->expect(10,
950                      [qr/#/, sub { exp_continue; }],
951                      '=> ') || die "Device tree load failed";
952     }
953     if (defined $initrd) {
954         $initrd_addr = 'b00000';
955         $exp->send("tftp $initrd_addr $initrd\n");
956         $exp->expect(10,
957                      [qr/#/, sub { exp_continue; }],
958                      '=> ') || die "Initrd load failed";
959     }
960     $exp->send("set bootargs '$kcmd'\n");
961     $exp->expect(5, '=> ')  || die "uBoot prompt timeout";
962     $exp->send("bootm $kern_addr $initrd_addr $dtb_addr\n");
963     $exp->expect(5, "\n")  || die "uBoot command timeout";
964 }
965
966 ### Serial line interaction
967 if (defined $exp) {
968     # Serial line of the target is available
969     my $interrupt = 'Ctrl-C';
970     if ($interactive && !@exiton) {
971         $interrupt = '"~~."';
972     }
973     print "novaboot: Serial line interaction (press $interrupt to interrupt)...\n";
974     $exp->log_stdout(1);
975     if (@exiton) {
976         $exp->expect(undef, @expect_raw, @exiton);
977     } else {
978         my @inputs = ($exp);
979         if (-t STDIN) { # Set up bi-directional communication if we run on terminal
980             my $infile = new IO::File;
981             $infile->IO::File::fdopen(*STDIN,'r');
982             my $in_object = Expect->exp_init($infile);
983             $in_object->set_group($exp);
984
985             if ($interactive) {
986                 $in_object->set_seq('~~\.', sub { print "novaboot: Escape sequence detected\r\n"; undef; });
987                 $in_object->manual_stty(0);       # Use raw terminal mode
988             } else {
989                 $in_object->manual_stty(1);       # Do not modify terminal settings
990             }
991             push(@inputs, $in_object);
992         }
993         #use Data::Dumper;
994         #print Dumper(\@expect_raw);
995         $exp->expect(undef, @expect_raw) if @expect_raw;
996         Expect::interconnect(@inputs) unless defined($exp->exitstatus);
997     }
998 }
999
1000 ## Kill dhcpc or tftpd
1001 if (defined $dhcp_tftp || defined $tftp) {
1002     die("novaboot: This should kill servers on background\n");
1003 }
1004
1005 ## Documentation
1006
1007 =head1 NAME
1008
1009 novaboot - A tool for booting various operating systems on various hardware or in qemu
1010
1011 =head1 SYNOPSIS
1012
1013 B<novaboot> --help
1014
1015 B<novaboot> [option]... [--] script...
1016
1017 B<./script> [option]...
1018
1019 =head1 DESCRIPTION
1020
1021 This program makes booting of an operating system (e.g. NOVA or Linux)
1022 as simple as running a local program. It facilitates booting on local
1023 or remote hosts or in emulators such as qemu. Novaboot operation is
1024 controlled by command line options and by a so called novaboot script,
1025 which can be thought as a generalization of bootloader configuration
1026 files (see L</"NOVABOOT SCRIPT SYNTAX">). Based on this input,
1027 novaboot setups everything for the target host to boot the desired
1028 configuration, i.e. it generates the bootloader configuration file in
1029 the proper format, deploy the binaries and other needed files to
1030 required locations, perhaps on a remote boot server and reset the
1031 target host. Finally, target host's serial output is redirected to
1032 standard output if that is possible.
1033
1034 Typical way of using novaboot is to make the novaboot script
1035 executable and set its first line to I<#!/usr/bin/env novaboot>. Then,
1036 booting a particular OS configuration becomes the same as executing a
1037 local program - the novaboot script.
1038
1039 For example, with C<novaboot> you can:
1040
1041 =over 3
1042
1043 =item 1.
1044
1045 Run an OS in Qemu. This is the default action when no other action is
1046 specified by command line switches. Thus running C<novaboot ./script>
1047 (or C<./script> as described above) will run Qemu and make it boot the
1048 configuration specified in the F<script>.
1049
1050 =item 2.
1051
1052 Create a bootloader configuration file (currently supported
1053 bootloaders are GRUB, GRUB2, Pulsar and U-Boot) and copy it with all
1054 other files needed for booting to a remote boot server.
1055
1056  ./script --server=192.168.1.1:/tftp --iprelay=192.168.1.2
1057
1058 This command copies files to the TFTP server and uses
1059 TCP/IP-controlled relay to reset the target host and receive its
1060 serial output.
1061
1062 =item 3.
1063
1064 Run DHCP and TFTP server on developer's machine to PXE-boot the target
1065 host from it. E.g.
1066
1067  ./script --dhcp-tftp
1068
1069 When a PXE-bootable machine is connected via Ethernet to developer's
1070 machine, it will boot the configuration described in I<script>.
1071
1072 =item 4.
1073
1074 Create bootable ISO images. E.g.
1075
1076  novaboot --iso -- script1 script2
1077
1078 The created ISO image will have GRUB bootloader installed on it and
1079 the boot menu will allow selecting between I<script1> and I<script2>
1080 configurations.
1081
1082 =back
1083
1084 Note that the options needed for a specific target can be stored in a
1085 L</"CONFIGURATION FILE">. Then it is sufficient to use only the B<-t>
1086 option to specify the name of the target.
1087
1088 =head1 PHASES AND OPTIONS
1089
1090 Novaboot performs its work in several phases. Each phase can be
1091 influenced by several options, certain phases can be skipped. The list
1092 of phases (in the execution order) and the corresponding options
1093 follow.
1094
1095 =head2 Configuration reading phase
1096
1097 After starting, novaboot reads configuration files. By default, it
1098 searches for files named F<.novaboot> starting from the directory of
1099 the novaboot script (or working directory, see bellow) and continuing
1100 upwards up to the root directory. The configuration files are read in
1101 order from the root directory downwards with latter files overriding
1102 settings from the former ones.
1103
1104 In certain cases, the location of the novaboot script cannot be
1105 determined in this early phase. This happens either when the script is
1106 read from the standard input or when novaboot is invoked explicitly
1107 and options precede the script name, as in the example L</"4."> above.
1108 In this case the current working directory is used as a starting point
1109 for configuration file search.
1110
1111 =over 8
1112
1113 =item -c, --config=I<filename>
1114
1115 Use the specified configuration file instead of the default one(s).
1116
1117 =back
1118
1119 =head2 Command line processing phase
1120
1121 =over 8
1122
1123 =item --dump-config
1124
1125 Dump the current configuration to stdout end exits. Useful as an
1126 initial template for a configuration file.
1127
1128 =item -h, --help
1129
1130 Print short (B<-h>) or long (B<--help>) help.
1131
1132 =item -t, --target=I<target>
1133
1134 This option serves as a user configurable shortcut for other novaboot
1135 options. The effect of this option is the same as the options stored
1136 in the C<%targets> configuration variable under key I<target>. See
1137 also L</"CONFIGURATION FILE">.
1138
1139 =back
1140
1141 =head2 Script preprocessing phase
1142
1143 This phases allows to modify the parsed novaboot script before it is
1144 used in the later phases.
1145
1146 =over 8
1147
1148 =item -a, --append=I<parameters>
1149
1150 Append a string to the first C<load> line in the novaboot script. This
1151 can be used to append parameters to the kernel's or root task's
1152 command line. Can appear multiple times.
1153
1154 =item -b, --bender
1155
1156 Use F<bender> chainloader. Bender scans the PCI bus for PCI serial
1157 ports and stores the information about them in the BIOS data area for
1158 use by the kernel.
1159
1160 =item --chainloader=I<chainloader>
1161
1162 Chainloader that is loaded before the kernel and other files specified
1163 in the novaboot script. E.g. 'bin/boot/bender promisc'.
1164
1165 =item --dump
1166
1167 Print the modules to boot and their parameters after this phase
1168 finishes. Then exit. This is useful for seeing the effect of other
1169 options in this section.
1170
1171 =item -k, --kernel=F<file>
1172
1173 Replace the first word on the first C<load> line in the novaboot
1174 script with F<file>.
1175
1176 =item --scriptmod=I<perl expression>
1177
1178 When novaboot script is read, I<perl expression> is executed for every
1179 line (in $_ variable). For example, C<novaboot
1180 --scriptmod=s/sigma0/omega6/g> replaces every occurrence of I<sigma0>
1181 in the script with I<omega6>.
1182
1183 When this option is present, it overrides I<$script_modifier> variable
1184 from the configuration file, which has the same effect. If this option
1185 is given multiple times all expressions are evaluated in the command
1186 line order.
1187
1188 =back
1189
1190 =head2 File generation phase
1191
1192 In this phase, files needed for booting are generated in a so called
1193 I<build directory> (see L</--build-dir>). In most cases configuration
1194 for a bootloader is generated automatically by novaboot. It is also
1195 possible to generate other files using I<heredoc> or I<"<"> syntax in
1196 novaboot scripts. Finally, binaries can be generated in this phases by
1197 running C<scons> or C<make>.
1198
1199 =over 8
1200
1201 =item --build-dir=I<directory>
1202
1203 Overrides the default build directory location.
1204
1205 The default build directory location is determined as follows: If the
1206 configuration file defines the C<$builddir> variable, its value is
1207 used. Otherwise, it is the directory that contains the first processed
1208 novaboot script.
1209
1210 See also L</BUILDDIR> variable.
1211
1212 =item -g, --grub[=I<filename>]
1213
1214 Generates grub bootloader menu file. If the I<filename> is not
1215 specified, F<menu.lst> is used. The I<filename> is relative to the
1216 build directory (see B<--build-dir>).
1217
1218 =item --grub-preamble=I<prefix>
1219
1220 Specifies the I<preable> that is at the beginning of the generated
1221 GRUB or GRUB2 config files. This is useful for specifying GRUB's
1222 timeout.
1223
1224 =item --grub-prefix=I<prefix>
1225
1226 Specifies I<prefix> that is put in front of every file name in GRUB's
1227 F<menu.lst>. The default value is the absolute path to the build directory.
1228
1229 If the I<prefix> contains string $NAME, it will be replaced with the
1230 name of the novaboot script (see also B<--name>).
1231
1232 =item --grub2[=I<filename>]
1233
1234 Generate GRUB2 menuentry in I<filename>. If I<filename> is not
1235 specified F<grub.cfg> is used. The content of the menuentry can be
1236 customized with B<--grub-preable>, B<--grub2-prolog> or
1237 B<--grub_prefix> options.
1238
1239 In order to use the the generated menuentry on your development
1240 machine that uses GRUB2, append the following snippet to
1241 F</etc/grub.d/40_custom> file and regenerate your grub configuration,
1242 i.e. run update-grub on Debian/Ubuntu.
1243
1244   if [ -f /path/to/nul/build/grub.cfg ]; then
1245     source /path/to/nul/build/grub.cfg
1246   fi
1247
1248 =item --grub2-prolog=I<prolog>
1249
1250 Specifies text I<preable> that is put at the beginning of the entry
1251 GRUB2 entry.
1252
1253 =item -m, --make[=make command]
1254
1255 Runs C<make> to build files that are not generated by novaboot itself.
1256
1257 =item --name=I<string>
1258
1259 Use the name I<string> instead of the name of the novaboot script.
1260 This name is used for things like a title of grub menu or for the
1261 server directory where the boot files are copied to.
1262
1263 =item --no-file-gen
1264
1265 Do not run external commands to generate files (i.e. "<" syntax and
1266 C<run> keyword). This switch does not influence generation of files
1267 specified with "<<WORD" syntax.
1268
1269 =item -p, --pulsar[=mac]
1270
1271 Generates pulsar bootloader configuration file named F<config-I<mac>>
1272 The I<mac> string is typically a MAC address and defaults to
1273 I<novaboot>.
1274
1275 =item --scons[=scons command]
1276
1277 Runs C<scons> to build files that are not generated by novaboot
1278 itself.
1279
1280 =item --strip-rom
1281
1282 Strip I<rom://> prefix from command lines and generated config files.
1283 The I<rom://> prefix is used by NUL. For NRE, it has to be stripped.
1284
1285 =item --gen-only
1286
1287 Exit novaboot after file generation phase.
1288
1289 =back
1290
1291 =head2 Target connection check
1292
1293 If supported by the target, the connection to it is made and it is
1294 checked whether the target is not occupied by another novaboot
1295 user/instance.
1296
1297 =over 8
1298
1299 =item --amt=I<"[user[:password]@]host[:port]>
1300
1301 Use Intel AMT technology to control the target machine. WS management
1302 is used to powercycle it and Serial-Over-Lan (SOL) for input/output.
1303 The hostname or (IP address) is given by the I<host> parameter. If
1304 I<password> is not specified, environment variable AMT_PASSWORD is
1305 used. The I<port> specifies a TCP port for SOL. If not specified, the
1306 default is 16992. Default I<user> is admin.
1307
1308 =item --iprelay=I<addr[:port]>
1309
1310 Use TCP/IP relay and serial port to access the target's serial port
1311 and powercycle it. The IP address of the relay is given by I<addr>
1312 parameter. If I<port> is not specified, it default to 23.
1313
1314 Note: This option is supposed to work with HWG-ER02a IP relays.
1315
1316 =item -s, --serial[=device]
1317
1318 Target's serial line is connected to host's serial line (device). The
1319 default value for device is F</dev/ttyUSB0>.
1320
1321 The value of this option is exported in NB_NOVABOOT environment
1322 variable to all subprocesses run by C<novaboot>.
1323
1324 =item --stty=I<settings>
1325
1326 Specifies settings passed to C<stty> invoked on the serial line
1327 specified with B<--serial> option. If this option is not given,
1328 C<stty> is called with C<raw -crtscts -onlcr 115200> settings.
1329
1330 =item --remote-cmd=I<cmd>
1331
1332 Command that mediates connection to the target's serial line. For
1333 example C<ssh server 'cu -l /dev/ttyS0'>.
1334
1335 =item --remote-expect=I<string>
1336
1337 Wait for reception of I<string> after establishing the the remote
1338 connection before continuing.
1339
1340
1341 =back
1342
1343 =head2 File deployment phase
1344
1345 In some setups, it is necessary to copy the files needed for booting
1346 to a particular location, e.g. to a TFTP boot server or to the
1347 F</boot> partition.
1348
1349 =over 8
1350
1351 =item -d, --dhcp-tftp
1352
1353 Turns your workstation into a DHCP and TFTP server so that the OS can
1354 be booted via PXE BIOS (or similar mechanism) on the test machine
1355 directly connected by a plain Ethernet cable to your workstation.
1356
1357 The DHCP and TFTP servers require root privileges and C<novaboot>
1358 uses C<sudo> command to obtain those. You can put the following to
1359 I</etc/sudoers> to allow running the necessary commands without
1360 asking for password.
1361
1362  Cmnd_Alias NOVABOOT = /bin/ip a add 10.23.23.1/24 dev eth0, /bin/ip l set dev eth0 up, /usr/sbin/dhcpd -d -cf dhcpd.conf -lf dhcpd.leases -pf dhcpd.pid, /usr/sbin/in.tftpd --foreground --secure -v -v -v --pidfile tftpd.pid *, /usr/bin/touch dhcpd.leases, /usr/bin/pkill --pidfile=dhcpd.pid, /usr/bin/pkill --pidfile=tftpd.pid
1363  your_login ALL=NOPASSWD: NOVABOOT
1364
1365 =item --tftp
1366
1367 Starts a TFTP server on your workstation. This is similar to
1368 B<--dhcp-tftp> except that DHCP server is not started.
1369
1370 The TFTP server require root privileges in order to listen on TFTP
1371 port and C<novaboot> uses C<sudo> command to obtain those. You can put
1372 the following to I</etc/sudoers> to allow running the necessary
1373 commands without asking for password.
1374
1375  Cmnd_Alias NOVABOOT =  /usr/sbin/in.tftpd --foreground --secure -v -v -v --pidfile tftpd.pid *, /usr/bin/pkill --pidfile=tftpd.pid
1376  your_login ALL=NOPASSWD: NOVABOOT
1377
1378 =item --iso[=filename]
1379
1380 Generates the ISO image that boots NOVA system via GRUB. If no filename
1381 is given, the image is stored under I<NAME>.iso, where I<NAME> is the name
1382 of the novaboot script (see also B<--name>).
1383
1384 =item --server[=[[user@]server:]path]
1385
1386 Copy all files needed for booting to another location (implies B<-g>
1387 unless B<--grub2> is given). The files will be copied (by B<rsync>
1388 tool) to the directory I<path>. If the I<path> contains string $NAME,
1389 it will be replaced with the name of the novaboot script (see also
1390 B<--name>).
1391
1392 =item --concat
1393
1394 If B<--server> is used and its value ends with $NAME, then after
1395 copying the files, a new bootloader configuration file (e.g. menu.lst)
1396 is created at I<path-wo-name>, i.e. the path specified by B<--server>
1397 with $NAME part removed. The content of the file is created by
1398 concatenating all files of the same name from all subdirectories of
1399 I<path-wo-name> found on the "server".
1400
1401 =item --rsync-flags=I<flags>
1402
1403 Specifies which I<flags> are appended to F<rsync> command line when
1404 copying files as a result of I<--server> option.
1405
1406 =back
1407
1408 =head2 Target power-on and reset phase
1409
1410 =over 8
1411
1412 =item --on, --off
1413
1414 Switch on/off the target machine and exit. The script (if any) is
1415 completely ignored. Currently it works only with B<--iprelay> or
1416 B<--amt>.
1417
1418 =item -Q, --qemu[=I<qemu-binary>]
1419
1420 Boot the configuration in qemu. Optionally, the name of qemu binary
1421 can be specified as a parameter.
1422
1423 =item --qemu-append=I<flags>
1424
1425 Append I<flags> to the default qemu flags (QEMU_FLAGS variable or
1426 C<-cpu coreduo -smp 2>).
1427
1428 =item -q, --qemu-flags=I<flags>
1429
1430 Replace the default qemu flags (QEMU_FLAGS variable or C<-cpu coreduo
1431 -smp 2>) with I<flags> specified here.
1432
1433 =item --reset-cmd=I<cmd>
1434
1435 Command that resets the target.
1436
1437 =back
1438
1439 =head2 Interaction with the bootloader on the target
1440
1441 =over 8
1442
1443 =item --uboot
1444
1445 Interact with uBoot bootloader to boot the thing described in the
1446 novaboot script. Implementation of this option is currently tied to a
1447 particular board that we use. It may be subject to changes in the
1448 future!
1449
1450 =item --uboot-init
1451
1452 Command(s) to send the U-Boot bootloader before loading the images and
1453 booting them.
1454
1455 =back
1456
1457 =head2 Target interaction phase
1458
1459 In this phase, target's serial output is redirected to stdout and if
1460 stdin is a TTY, it is redirected to the target's serial input allowing
1461 interactive work with the target.
1462
1463 =over 8
1464
1465 =item --exiton=I<string>
1466
1467 When I<string> is sent by the target, novaboot exits. This option can
1468 be specified multiple times.
1469
1470 If I<string> is C<-re>, then the next B<--exiton>'s I<string> is
1471 treated as regular expression. For example:
1472
1473     --exiton -re --exiton 'error:.*failed'
1474
1475 =item -i, --interactive
1476
1477 Setup things for interactive use of target. Your terminal will be
1478 switched to raw mode. In raw mode, your system does not process input
1479 in any way (no echoing of entered characters, no interpretation
1480 special characters). This, among others, means that Ctrl-C is passed
1481 to the target and does no longer interrupt novaboot. Use "~~."
1482 sequence to exit novaboot.
1483
1484 =item --expect=I<string>
1485
1486 When I<string> is received from the target, send the string specified
1487 with the subsequent B<--send*> option to the target.
1488
1489 =item --expect-re=I<regex>
1490
1491 When target's output matches regular expression I<regex>, send the
1492 string specified with the subsequent B<--send*> option to the target.
1493
1494 =item --expect-raw=I<perl-code>
1495
1496 Provides direct control over Perl's Expect module.
1497
1498 =item --send=I<string>
1499
1500 Send I<string> to the target after the previously specified
1501 B<--expect*> was matched in the target's output. The I<string> may
1502 contain escape sequences such as "\n".
1503
1504 Note that I<string> is actually interpreted by Perl, so it can contain
1505 much more that escape sequences. This behavior may change in the
1506 future.
1507
1508 Example: C<--expect='login: ' --send='root\n'>
1509
1510 =item --sendcont=I<string>
1511
1512 Similar to B<--send> but continue expecting more input.
1513
1514 Example: C<--expect='Continue?' --sendcont='yes\n'>
1515
1516 =back
1517
1518 =head1 NOVABOOT SCRIPT SYNTAX
1519
1520 The syntax tries to mimic POSIX shell syntax. The syntax is defined
1521 with the following rules.
1522
1523 Lines starting with "#" and empty lines are ignored.
1524
1525 Lines that end with "\" are concatenated with the following line after
1526 removal of the final "\" and leading whitespace of the following line.
1527
1528 Lines of the form I<VARIABLE=...> (i.e. matching '^[A-Z_]+=' regular
1529 expression) assign values to internal variables. See L</VARIABLES>
1530 section.
1531
1532 Lines starting with C<load> keyword represent modules to boot. The
1533 word after C<load> is a file name (relative to the build directory
1534 (see B<--build-dir>) of the module to load and the remaining words are
1535 passed to it as the command line parameters.
1536
1537 When the C<load> line ends with "<<WORD" then the subsequent lines
1538 until the line containing solely WORD are copied literally to the file
1539 named on that line. This is similar to shell's heredoc feature.
1540
1541 When the C<load> line ends with "< CMD" then command CMD is executed
1542 with F</bin/sh> and its standard output is stored in the file named on
1543 that line. The SRCDIR variable in CMD's environment is set to the
1544 absolute path of the directory containing the interpreted novaboot
1545 script.
1546
1547 Lines starting with C<run> keyword contain shell commands that are run
1548 during file generation phase. This is the same as the "< CMD" syntax
1549 for C<load> keyboard except that the command's output is not
1550 redirected to a file. The ordering of commands is the same as they
1551 appear in the novaboot script.
1552
1553 Example (Linux):
1554
1555   #!/usr/bin/env novaboot
1556   load bzImage console=ttyS0,115200
1557   run  make -C buildroot
1558   load rootfs.cpio < gen_cpio buildroot/images/rootfs.cpio "myapp->/etc/init.d/S99myapp"
1559
1560 Example (NOVA User Land - NUL):
1561
1562   #!/usr/bin/env novaboot
1563   WVDESC=Example program
1564   load bin/apps/sigma0.nul S0_DEFAULT script_start:1,1 \
1565                            verbose hostkeyb:0,0x60,1,12,2
1566   load bin/apps/hello.nul
1567   load hello.nulconfig <<EOF
1568   sigma0::mem:16 name::/s0/log name::/s0/timer name::/s0/fs/rom ||
1569   rom://bin/apps/hello.nul
1570   EOF
1571
1572 This example will load three modules: F<sigma0.nul>, F<hello.nul> and
1573 F<hello.nulconfig>. sigma0 receives some command line parameters and
1574 F<hello.nulconfig> file is generated on the fly from the lines between
1575 C<<<EOF> and C<EOF>.
1576
1577 =head2 VARIABLES
1578
1579 The following variables are interpreted in the novaboot script:
1580
1581 =over 8
1582
1583 =item BUILDDIR
1584
1585 Novaboot chdir()s to this directory before file generation phase. The
1586 directory name specified here is relative to the build directory
1587 specified by other means (see L</--build-dir>).
1588
1589 =item EXITON
1590
1591 Assigning this variable has the same effect as specifying L</--exiton>
1592 option.
1593
1594 =item HYPERVISOR_PARAMS
1595
1596 Parameters passed to hypervisor. The default value is "serial", unless
1597 overridden in configuration file.
1598
1599 =item KERNEL
1600
1601 The kernel to use instead of the hypervisor specified in the
1602 configuration file with the C<$hypervisor> variable. The value should
1603 contain the name of the kernel image as well as its command line
1604 parameters. If this variable is defined and non-empty, the variable
1605 HYPERVISOR_PARAMS is not used.
1606
1607 =item QEMU
1608
1609 Use a specific qemu binary (can be overridden with B<-Q>) and flags
1610 when booting this script under qemu. If QEMU_FLAGS variable is also
1611 specified flags specified in QEMU variable are replaced by those in
1612 QEMU_FLAGS.
1613
1614 =item QEMU_FLAGS
1615
1616 Use specific qemu flags (can be overridden with B<-q>).
1617
1618 =item WVDESC
1619
1620 Description of the wvtest-compliant program.
1621
1622 =item WVTEST_TIMEOUT
1623
1624 The timeout in seconds for WvTest harness. If no complete line appears
1625 in the test output within the time specified here, the test fails. It
1626 is necessary to specify this for long running tests that produce no
1627 intermediate output.
1628
1629 =back
1630
1631 =head1 CONFIGURATION FILE
1632
1633 Novaboot can read its configuration from one or more files. By
1634 default, novaboot looks for files named F<.novaboot> as described in
1635 L</Configuration reading phase>. Alternatively, its location can be
1636 specified with the B<-c> switch or with the NOVABOOT_CONFIG
1637 environment variable. The configuration file has perl syntax and
1638 should set values of certain Perl variables. The current configuration
1639 can be dumped with the B<--dump-config> switch. Some configuration
1640 variables can be overridden by environment variables (see below) or by
1641 command line switches.
1642
1643 Supported configuration variables include:
1644
1645 =over 8
1646
1647 =item $builddir
1648
1649 Build directory location relative to the location of the configuration
1650 file.
1651
1652 =item $default_target
1653
1654 Default target (see below) to use when no target is explicitly
1655 specified on command line with the B<--target> option.
1656
1657 =item %targets
1658
1659 Hash of shortcuts to be used with the B<--target> option. If the hash
1660 contains, for instance, the following pair of values
1661
1662  'mybox' => '--server=boot:/tftproot --serial=/dev/ttyUSB0 --grub',
1663
1664 then the following two commands are equivalent:
1665
1666  ./script --server=boot:/tftproot --serial=/dev/ttyUSB0 --grub
1667  ./script -t mybox
1668
1669 =back
1670
1671 =head1 ENVIRONMENT VARIABLES
1672
1673 Some options can be specified not only via config file or command line
1674 but also through environment variables. Environment variables override
1675 the values from configuration file and command line parameters
1676 override the environment variables.
1677
1678 =over 8
1679
1680 =item NOVABOOT_CONFIG
1681
1682 Name of the novaboot configuration file to use instead of the default
1683 one(s).
1684
1685 =item NOVABOOT_BENDER
1686
1687 Defining this variable has the same meaning as B<--bender> option.
1688
1689 =back
1690
1691 =head1 AUTHORS
1692
1693 Michal Sojka <sojka@os.inf.tu-dresden.de>