git clone http://v3vee.org/palacios/palacios.web/palacios.git

  cd palacios
  git checkout --track -b devel origin/devel

Merge branch 'devel' of ssh://newskysaw.cs.northwestern.edu/home/palacios/palacios into devel

Updated quix86 patch from Alexander. With latest version of library,
boots 64-bit guests on real hardware.

Updated quix86 patch from Alexander. With latest version of library,
boots 64-bit guests on real hardware.

Correct banner titles in configuration screens

Optional starting address for v3_mem

The idea here is that on hosts that already have a lot of stuff
running, it may be very costly to offline memory blocks low in the
physical address space - the kernel may take a looong time to copy
their contents and set things up accordingly.  With this patch, you can say
things like:

v3_mem 1024 1024

which means that you are looking to allocate 1024 MB of space
starting at or above the address 1024*(1024*1024)

Additional error checking / output for failing memory region operations

Context-based output infrastructure (V3_Print, etc) and modifications to use it

This commit is huge, but the vast majority of it is basically trivial changes in
how V3_Print, PrintDebug, PrintError, V3_ASSERT, and Vnet_Print are invoked
throughout our codebase. All compiles, with all debug and features enabled.
Functionality testing doesn't show problems.

These functions now include a context: the VM and the vcore.  There are
Several cases:

V3_Print(vm, vcore, ...)           => VM-specific, and vcore-specific
V3_Print(vm, VCORE_NONE,...)       => VM-specific, but not core specific
V3_Print(VM_NONE, VCORE_NONE),...) => non-specific

PrintDebug now prefaces data with DEBUG:
PrintError now prefaces data with ERROR:
Telementry prefaces with telem.# (as before)

The print OS hook has been modified so that it is called with:

print(void *host_priv_data_from_create, // NULL = non-specific
      int vcore_number,                 // -1 = non-specific
      ...)

The linux implementation now uses this functionality to decorate its
output in an enhanced way:

palacios (pcore num): ...
palacios (pcore num vm name): ...
palacios (pcore num vm name vcore num):...

The new userspace tool v3_info filters and formats dmesg or /proc/kmsg
output in numerous ways so that you can, for example, focus on the
debugging output of a specfic core on a specific VM. Run without
arguments for help.

Other minor compilation fixes for ancient code.

Use of information interface to enhance output of /proc/v3vee-/v3-guests in Linux

information request api for the host - gives a more detailed view of VM and vcore state to the host

Explictly tags in saves for PIT, APIC, IOAPIC, SVM, and CORE

Allow spaces in key names for textfile: saves

Library and tools for manipulating text and binary file ("KEYED STREAM file: / textfile:") checkpoints at user level.

Checkpointing of serial devices

Devices updated for revised checkpoint interface

Device manager updated with extended save/load model to facilitate devices that need to manage their own contexts

Update svm and vmx checkpoint functionality to new interface

Implementation of revised checkpoint/migrate interface model

Implemntation of newer keyed stream interface on linux, includes new "textfile" (ini file) output capability

New keyed stream interface

Minor changes to eliminate warnings, and second-try allocation for pages

Friendlier user-space build/run for graphical components (gui, vnc)

Palacios GUI Added

V3_Yield_Timed(usec) was renamed V3_Sleep(usec)

Cleanup of curses dependency in v3_cons/cons_sc build

Rebuild v3_create by default

check for out-of-bounds index when freeing a VM

small updates to GEARS utilities (for use with v3_ctrl lib)

add correct caching behavior to VMX EPT environments

update CPUID to disable unsupported features (MTRRS, ARET, APIC2) and globalize the hypervisor flag

correctly handle NMI exits on VMX architectures

Added updated sleep/wakeup functionality

Added functionality for MONITOR and MWAIT instructions on SVM and VMX:

  - CPUID now reports that MONITOR/MWAIT is not available
  - MONITOR and MWAIT are hooked on both VMX and SVM (previously only SVM)
  - If monitor or mwait are executed, they cause a #UD

Add v3_cons_sc sanity check for Terminal size

Cleanup in thread name handling

Cleaner handling of tx kick threads in vnet core

Avoid corruption when freeing a guest fails

better UI for v3_free

Disallow startup with shadow paging + memory region outside 4GB boundary

filedisk XML configuration language tweak

Virtio NIC's guest-driven, vmm-driven, or adaptive modes can now
be set from a configuration block:

<device ... >
   <model mode="guest-driven|vmm-driven|adaptive"
          upper="pkts_per_sec"
          lower="pkts_per_sec"
          period="usec"  />

...

Configurable yielding strategies in VNET bridge thread and tx kick threads

Halt handling uses global performance parameters to decide yield strategy

Configuration of global performance parameters
Integration of yielding parameters into this framework

Enhancements to VNET and to halting:

- VNET sends UDP packets without checksumming
- VNET threads (bridge and transmit kick thread)
  adaptively choose yielding strategy
- halt handler adaptive chooses yielding strategy

Support for new Palacios image file format (Version 1)

The VMM configuration side and the utilities side have been updated to now support
two file formats:

Version 0 : The previous version "legacy"
Version 1 : The new version "file integrity checking"

build_vm now has an option [-v] to select versions, version 1 is the default
v3_create now creates version 1 images when dynamic construction of an image file is done

Version 1 has these changes:

add integrity checking for files included in guest configs

This patch adds a hash field to the file headers built from guest
configurations. Both methods of guest creation (in-memory with XML and
file building with build_vm) have been modified to support this. The hash
is passed along with the file when it's added to Palacios, so integrity checks
can theoretically happen at any point, but currently
this is only being done at configuration time.

repurpose v3_ctrl.c as a utility library for palacios userspace progs

I've taken some common idioms used in a lot of the userspace utilities
and put them in a (for now, static) library that all programs can utilize.
One example: when running an ioctl, it's no longer necessary to open the vm device,
close it, etc. This is taken care of by v3_vm_ioctl.
This should give us some more code sharing and make the userspace utilities quicker to write and a bit smaller.
For now, I've modified v3_free, v3_launch, v3_stop, and v3_create to use this library,
so you can look to those for examples.

Typo fix

update palacios mempool status when onlining memory in userspace

/proc/v3vee/v3-mem will now report correctly after memory has been onlined

APIC and CR8 changes for vector priorization vs TPR

This patch does the following:

- It moves the TPR into the guest core structure, replacing CR8
- It intercepts CR8 reads/writes to update the TPR accordingly
- It moves prioritization into the APIC, away from the architecture-specific
  SVM or VMX handling
- It computes APIC PPR and APR dynamically in the APIC
- It does vector to PPR priority comparison (this was not done before at all)
- It does vector to APR comparison for IPI delivery
- It updates checkpointing, etc, to reflect these changes

typo fix

Merge branch 'devel' of palacios@newskysaw.cs.northwestern.edu:/home/palacios/palacios into devel

Further cleanup of vnet /proc interface

Cleaned up /proc parsing for vnet

added 64bit bar support to passthrough PCI

added vmware paravirtual extension

added error check to 8259

memory leak fixes

make bitmap operations atomic, fixes potential barrier race condition

reworked v3_create to allow loading XML files directly and runtime configuration options

added host_pci passthrough PCI support

added state checks for VM control commands

incorporate changes to intelligent barriers

enabled VMX exit hooks

revert to earlier rdtsc intercepts

exit handler tweaks

event tweaks

added event hooking framework

added runstate checks in barrier to allow locking operations to proceed when VM is not running

initial implementation of hookable exits

fix for 1GB pages

Corrected vnet locking with irqsave/restore

APIC checks enabled register on irr scan

Missing file

add cleanup for Palacios extensions, add per-core data to extensions

extensions can now have their own per-core extension state without
adding cruft to the guest_info structure

small fixes to swint code, add proper cleanup

stop and free all VMs on Linux module exit

add cleanup to graphics console code

Linux userspace tools for live migration

Linux-side availability of live migration functionality

Live Migration Functionality

Additional features for vmm_bitmap

Shadow-paging event callbacks

These changes allow VMM code to get a callback before and after various shadow paging events
including page fault, invlpg, page table activation, page table flush, etc.

Parallelize build of linux module

VNET Hypercall interface, implemented as a new stub device

mpi accelerator hcall fix

Added ability to hook memory by access (no instruction emulation)

patch for v3_dump_mem print output

proper cleanup in iface-file and iface-host-dev

compilation fix in vmm_debug.c

Revised check for already-launched VM

Expose kmalloc flags within linux_module + add further debugging features for heap alloc

Change to internal v3_yield/yield_cond semantics:

v3_yield(guest, time (usec) )

time <   0 => direct call to host yield os hook
time >=0 0 => direct call to host yield_timed os hook
              (this usually implies interruptible, even if time=0)

time is in usec

Small fixes in v3_free.c

Use strtol instead of atoi for more flexible index numbers. Also, fail
on error returned from ioctl.

Fail gracefully on VM create or free errors

Actually do cleanup in guest deinit in stream iface

Check to make sure extension name is provided

Fixes a null pointer dereference that occurs if an extension is
provided without a name

Lots of pedantic error checking in Palacios proper, especially for memory

make v3_launch fail on ioctl error

don't allow launch of an already running VM

add file and line number to linux module error prints