AMT: Disconnect SOL before power off

Otherwise power off fails.

Do not run amtterm only after reset and get rid of sleep()

This way, amtterm fails is somebody is already connected. Only if amtterm
succeeds, we proceed to reset/poweron.

With recent amttool (at least commit [1]), this works even without sleep
before running amtterm.

[1]: https://www.kraxel.org/cgit/amtterm/log/?h=0ece5135fef56dbd0d94957c334655a57adb7212

Update comments

Make example buildroot use /dev/console for getty

This way, getty appears wherever the user sets console kernel
command line.

Merge branch 'amt'

Conflicts:
README.md
novaboot

Update --amt documentation

Do not read the script if --on or -off is specified

This allows running novaboot without any script in which case
novaboot does not block in reading from stdin.

AMT: cleanups, simplifications

Whitespace and indentation fixes

Move "use LWP" to amt block

Novaboot should not fail when LWP is not installed and AMT is not used.

Do not power off during AMT reset

Added support of Intel AMT

gen_cpio: Add support for gzip compression

Use sterm instead of cu on ryuglab target

Compared to cu, sterm does not wait 2 seconds after hangup before it exits
(and leaves the port for another user/connection) and can reset the board
via command line switches (no need for --reset-cmd).

Sterm lives at
https://rtime.felk.cvut.cz/gitweb/can-benchmark.git/blob/HEAD:/utils/sterm.c

Additionally, use ssh -tt instead of -t. This causes the sterm to receive
SIGHUP even if ssh does not run on terminal.

gen_cpio fixes

doc: Change code to file

Add Linux example to the documentation

Add link to novaboot script syntax and fix md formating

Die if no file name is specified after load

Fix heredoc parsing

Documentation update (mainly introduction)

Move implementation of --chainloader and --bender to where it is documented

i.e. Script preprocessing phase.

Also move --strip-rom documentation to section "File generation phase",
because it is implemented there.

Add --kernel option

Add --help to synopsis

... so that people running novaboot -h know there is more to read.

Introduce 'load' keyword to novaboot scripts

THIS IS A BACKWARD INCOMPATIBLE CHANGE!!!

Any file intended to be loaded on the target MUST be prefixed with the
load keyword in the novaboot script. This is done to allow future
extension of novaboot syntax.

Idea by Pavel Píša.

Other changes in this patch:
- sanitized and simplified novaboot script parsing
- --append can be specified multiple times
- documentation fixes

Add command line interface to Expect.pm functionality

Allow specifying empty target

This overrides the default target and is useful mainly for testing.

gen_cpio: Add support for including whole directory trees

(mostly copied from gen_initramfs_list.sh)

Document how to use gen_cpio to produce uBoot images

Add how to use gen_cpio

Add first version of gen_cpio script

Increase uboot timeout

Sometimes 1 second was to small, perhaps due to lagging TCP connection.

Enclose uboot bootargs in apostrophes

Needed if bootags contain special characters.

Remove debugging messages

Die when asking for interactive mode without being on terminal

Tell the user correctly how to interrupt novaboot

Fix interactive mode escape sequence

There were two problems:

1. Escape sequence is a regular expression, therefore '.' must be prefixed
   with '\'.
2. Delete key produces an escape sequence that ends with '~'. Therefor
   pressing Delete followed by '.' exits novaboot.

It would be nice if we can use traditional esscape sequence '~.' at the
beginning of the line (as in ssh or cu), but it seems that Expect.pm cannot
handle the "beginning of the line" in the escape sequence correctly.
Therefore we use "~~." sequence to solve problem 2.

Add interactive mode

Remove -i alias of --iso option

Die when error in command line arguments is detected

Die when an unknown target is specified

Add --exiton option and EXITON variable

Sort documentation of variables alphabetically

Fix reading of configuration files in symlinked directories

We want novaboot to follow logical directory structure based on symlinks
and not to follow directories simply using ".." directory entry.

Imporove documentation

Add one second sleep to powerpc configurations to wait for establishing Ethernet link

Without sleep, we have to wait for a TFTP timeout, which is about 5 seconds.

Add --remote-cmd-expect option

This is necessary for ryuglab target to exit novaboot when serial line is
already used, perhaps by another novaboot instance or user.

Do not initialize $exp object if it is not used

Add $default_target configuration variable

Run qemu only when --qemu option is present

The default behavior does not change - see next commit.

Do not print short help when an unknown option is found

It was hard to find the error message printed before the help message.

Add --make option

Chomp nproc results before use

Use nproc tool to determine the number of parallel jobs for scons

Export serial line TTY as env. variable

This is needed for reset command in ryulocal configuration.

Also check whether dtrrts command exists before trying to execute it.

Fix inviseble text (<...>) in Github markdown

Update documentation

Improve uBoot support; add two targets that use uBoot

Add options for remote reset target connection and reset

Remove debug message

Fix example sudoers file

Rework interaction with the target

Only set up bi-directional communication if run on terminal. Also
specify manual_stty on STDIN to not mess up messages from background
server.

I will need to play more with terminal settings, because currently it is
not ideal. See the comment in the patch.

Clarify and simplify starting and killing of DHCP and TFTP servers

Because servers run under root, we do not have permissions to kill them.
Normally, this is not a problem, because Ctrl-C kills the servers, because
they are in the same process group and kernel (terminal) don't care
about permissions. If novaboot dies after starting server, we need a way
to kill the servers explicitly. We use pkill command and .pid files
produced by the server. This is quite reliable.

Add initial support for uBoot

Add --stty option to specify serial line configuration

Fix warnings when invoked with no script

Initialize all possible target connections at one place

i.e. one large if/elif/else block.

Also modularize target reset/poweron/off.

Use Expect package to communicate with the target over serial line

This simplifies the code and unifies the target communication. Now, this
is used for communication with the IP relay, host serial line and qemu
subprocess. More is expected to come.

When printing an executed command, don't print quote every parameter

Only parameters containing spaces semicolons etc. are quoted.

Comment on target connection

Clarify documentation

Fix invocation with absolute path

Add tests of different invocation styles

Simplify file generation in tests

Add BUILDDIR variable

Modify powerpc example to use this variable.

Add test for $hypervisor variable

Make all warnings fatal under when testing

Simplify determination of build directory

Due to the possibility of having the configuration file in arbitrary
directory, it is not necessary to special case NUL build directory in the
core.

Run every test in its own directory

Test suite improvements

Cleanup

Fix warning

Add rudimentary test suite

Replace $chainloader configuration variable with --chainloaders switch

Add --gen-only option

Move --scons documentation to the correct section

Simplify pulsar config name

Replace $pulsar_root configuration variable with a command line option

Add target connection check phase to the documentation

Remove end mark from grub configs

This was needed for interaction with grub over serial line which was
removed a few commits back.

Don't dump log messages to the config file; better indentation of the config file

Simplify qemu handling

Simplify scons handling

Remove $pulsar_mac configuration variable

Remove $iprelay configuration variable

Also improve --on/--off handling.

Remove grub_keys configuration option

I have no use case for this option and it never worked reliably.

Remove $server configuration variable

Can be replaced by putting --server option to %targets configuration.

Search configuration files in all directories upwards from the script directory

The idea is to allow having a project specific configuration in the
project's repository as well as user specific one in the home directory.

Simplify generation of bootloader configuration files

Now, every aspect of generation is triggered by command line option
(previously, there were a lot of implicit rules and dependencies).

Removed some configuration options (the rest will follow soon).

Not all combinations of command line switches were tested, so there might
be some errors!

Replace custom_options with --target

The result is that the "-I" switch is replaced with "-t tud" and "-J"
with "-t novabox".