git clone http://v3vee.org/palacios/palacios.web/palacios.git

  cd palacios
  git checkout --track -b devel origin/devel

Graphics console user space interface library

Checkpointing and migration now support options, the first of which are: skipping memory, skipping devices, skipping cores, and skipping the archtecture-dependent state

General cleanup and help on v3_debug

User space library and example tool for accessing guest physical memory from host user space

Support for optional full /dev/mem access even if host kernel has strict devmem

This adds a new option:

  insmod v3vee.ko allow_devmem=1

This will enable host user space programs to mmap any host physical memory using
/dev/mem even if the host kernel has strict /dev/mem limitations.

AMD PMU - load/store counts now use data cache access counter, tlb miss count
counts on all levels

Removal of debugging crud

Corrected UCPI and UMPL estimation in PMU telemetry

null check in host_sched_yield

Corrected PCI printdebug errors

Correct scheduler startup when no option given

Minor PMU bugfix

PMU-based telemetry extension to monitor guest and host behavior

PMU Host Interface and initial implementation for Linux and AMD/Intel

Range-based invalidation for nested and direct paging + use in memory region managment

Use passed in options to set scheduler

Fix for option processing

Added missed Makefile update for option handling

Split global option processing code into a separate file

Merge branch 'devel' of ssh://newskysaw.cs.northwestern.edu/home/palacios/palacios into devel

Fixed major palacios barrier implementation error with potentially serious implications on all multicore guests

Merge branch 'devel' of ssh://newskysaw.cs.northwestern.edu/home/palacios/palacios into devel

Added null check to option processing call.

Correction of scheduler registration check

Added first cut at options processing for the palacios module

remove extraneous dos linefeeds from scheduling files

Update of scheduling infrastructure and newest version of EDF scheduler

Copyright header corrections to scheduler interface

Merge branch 'devel' of ssh://newskysaw.cs.northwestern.edu/home/palacios/palacios into devel

Commented in scheduler call previously commented out.

bugfix: memory region is now removed from hook table on v3_unhook_mem

Initial commit of new scheduling infrastructure. The EDF scheduler does not
yet work, Linux/Kitten hooks still need to be added for sleep/wakeup, and
we still need a mechanism to specify options to Palacios when it starts up.
it is booted.

Added missed extension include update

Added global initialization hook for extensions to support upcoming scheduling extensions

Added proper updated quix86 libraries that had been omitted from
previous patch.

Merge branch 'devel' of ssh://newskysaw.cs.northwestern.edu/home/palacios/palacios into devel

Updated quix86 patch from Alexander. With latest version of library,
boots 64-bit guests on real hardware.

Updated quix86 patch from Alexander. With latest version of library,
boots 64-bit guests on real hardware.

Correct banner titles in configuration screens

Optional starting address for v3_mem

The idea here is that on hosts that already have a lot of stuff
running, it may be very costly to offline memory blocks low in the
physical address space - the kernel may take a looong time to copy
their contents and set things up accordingly.  With this patch, you can say
things like:

v3_mem 1024 1024

which means that you are looking to allocate 1024 MB of space
starting at or above the address 1024*(1024*1024)

Additional error checking / output for failing memory region operations

Context-based output infrastructure (V3_Print, etc) and modifications to use it

This commit is huge, but the vast majority of it is basically trivial changes in
how V3_Print, PrintDebug, PrintError, V3_ASSERT, and Vnet_Print are invoked
throughout our codebase. All compiles, with all debug and features enabled.
Functionality testing doesn't show problems.

These functions now include a context: the VM and the vcore.  There are
Several cases:

V3_Print(vm, vcore, ...)           => VM-specific, and vcore-specific
V3_Print(vm, VCORE_NONE,...)       => VM-specific, but not core specific
V3_Print(VM_NONE, VCORE_NONE),...) => non-specific

PrintDebug now prefaces data with DEBUG:
PrintError now prefaces data with ERROR:
Telementry prefaces with telem.# (as before)

The print OS hook has been modified so that it is called with:

print(void *host_priv_data_from_create, // NULL = non-specific
      int vcore_number,                 // -1 = non-specific
      ...)

The linux implementation now uses this functionality to decorate its
output in an enhanced way:

palacios (pcore num): ...
palacios (pcore num vm name): ...
palacios (pcore num vm name vcore num):...

The new userspace tool v3_info filters and formats dmesg or /proc/kmsg
output in numerous ways so that you can, for example, focus on the
debugging output of a specfic core on a specific VM. Run without
arguments for help.

Other minor compilation fixes for ancient code.

Use of information interface to enhance output of /proc/v3vee-/v3-guests in Linux

information request api for the host - gives a more detailed view of VM and vcore state to the host

Explictly tags in saves for PIT, APIC, IOAPIC, SVM, and CORE

Allow spaces in key names for textfile: saves

Library and tools for manipulating text and binary file ("KEYED STREAM file: / textfile:") checkpoints at user level.

Checkpointing of serial devices

Devices updated for revised checkpoint interface

Device manager updated with extended save/load model to facilitate devices that need to manage their own contexts

Update svm and vmx checkpoint functionality to new interface

Implementation of revised checkpoint/migrate interface model

Implemntation of newer keyed stream interface on linux, includes new "textfile" (ini file) output capability

New keyed stream interface

Minor changes to eliminate warnings, and second-try allocation for pages

Friendlier user-space build/run for graphical components (gui, vnc)

Palacios GUI Added

V3_Yield_Timed(usec) was renamed V3_Sleep(usec)

Cleanup of curses dependency in v3_cons/cons_sc build

Rebuild v3_create by default

check for out-of-bounds index when freeing a VM

small updates to GEARS utilities (for use with v3_ctrl lib)

add correct caching behavior to VMX EPT environments

update CPUID to disable unsupported features (MTRRS, ARET, APIC2) and globalize the hypervisor flag

correctly handle NMI exits on VMX architectures

Added updated sleep/wakeup functionality

Added functionality for MONITOR and MWAIT instructions on SVM and VMX:

  - CPUID now reports that MONITOR/MWAIT is not available
  - MONITOR and MWAIT are hooked on both VMX and SVM (previously only SVM)
  - If monitor or mwait are executed, they cause a #UD

Add v3_cons_sc sanity check for Terminal size

Cleanup in thread name handling

Cleaner handling of tx kick threads in vnet core

Avoid corruption when freeing a guest fails

better UI for v3_free

Disallow startup with shadow paging + memory region outside 4GB boundary

filedisk XML configuration language tweak

Virtio NIC's guest-driven, vmm-driven, or adaptive modes can now
be set from a configuration block:

<device ... >
   <model mode="guest-driven|vmm-driven|adaptive"
          upper="pkts_per_sec"
          lower="pkts_per_sec"
          period="usec"  />

...

Configurable yielding strategies in VNET bridge thread and tx kick threads

Halt handling uses global performance parameters to decide yield strategy

Configuration of global performance parameters
Integration of yielding parameters into this framework

Enhancements to VNET and to halting:

- VNET sends UDP packets without checksumming
- VNET threads (bridge and transmit kick thread)
  adaptively choose yielding strategy
- halt handler adaptive chooses yielding strategy

Support for new Palacios image file format (Version 1)

The VMM configuration side and the utilities side have been updated to now support
two file formats:

Version 0 : The previous version "legacy"
Version 1 : The new version "file integrity checking"

build_vm now has an option [-v] to select versions, version 1 is the default
v3_create now creates version 1 images when dynamic construction of an image file is done

Version 1 has these changes:

add integrity checking for files included in guest configs

This patch adds a hash field to the file headers built from guest
configurations. Both methods of guest creation (in-memory with XML and
file building with build_vm) have been modified to support this. The hash
is passed along with the file when it's added to Palacios, so integrity checks
can theoretically happen at any point, but currently
this is only being done at configuration time.

repurpose v3_ctrl.c as a utility library for palacios userspace progs

I've taken some common idioms used in a lot of the userspace utilities
and put them in a (for now, static) library that all programs can utilize.
One example: when running an ioctl, it's no longer necessary to open the vm device,
close it, etc. This is taken care of by v3_vm_ioctl.
This should give us some more code sharing and make the userspace utilities quicker to write and a bit smaller.
For now, I've modified v3_free, v3_launch, v3_stop, and v3_create to use this library,
so you can look to those for examples.

Typo fix

update palacios mempool status when onlining memory in userspace

/proc/v3vee/v3-mem will now report correctly after memory has been onlined

APIC and CR8 changes for vector priorization vs TPR

This patch does the following:

- It moves the TPR into the guest core structure, replacing CR8
- It intercepts CR8 reads/writes to update the TPR accordingly
- It moves prioritization into the APIC, away from the architecture-specific
  SVM or VMX handling
- It computes APIC PPR and APR dynamically in the APIC
- It does vector to PPR priority comparison (this was not done before at all)
- It does vector to APR comparison for IPI delivery
- It updates checkpointing, etc, to reflect these changes

typo fix

Merge branch 'devel' of palacios@newskysaw.cs.northwestern.edu:/home/palacios/palacios into devel

Further cleanup of vnet /proc interface

Cleaned up /proc parsing for vnet

added 64bit bar support to passthrough PCI

added vmware paravirtual extension

added error check to 8259

memory leak fixes

make bitmap operations atomic, fixes potential barrier race condition

reworked v3_create to allow loading XML files directly and runtime configuration options

added host_pci passthrough PCI support

added state checks for VM control commands

incorporate changes to intelligent barriers

enabled VMX exit hooks

revert to earlier rdtsc intercepts

exit handler tweaks