QEMU domain event thread safety

Add locking for (nearly complete) thread safety to QEMU driver

Merge all return paths from QEMU driver APIs

Stub out node device APIs in test driver

Add locking for thread safety to test driver

Merge all return paths from test driver APIs

Remove macros for accessing test driver internal state

Add thread locking stubs

release of 0.5.1
* src/libvirt_sym.version.in configure.in NEWS docs/*: release
  of 0.5.1
* po/*: updated and regenerated
daniel

fix crash and regression when defining a storage volume without a format
* src/storage_conf.c: fix crash and regression when defining
  a storage volume without a format (Cole Robinson)
Daniel

Fix documentation cut and paste errors, and a virsh typo.

Increase timeout for initial monitor poll, to prevent a guest from failing to start if it has to wait for a physical cdrom to spin up.

patch setting MTU on tap interface
* src/bridge.c: patch setting MTU on tap interface to be the same
  as the value for the bridge (Eduardo Habkost)
daniel

ChangeLog: remove stray commas

Differentiate between active and inactive configs by honoring the
VIR_DOMAIN_XML_INACTIVE flag.

also look for /usb/bin/kvm

fix inadequate initialization in storage and test drivers

* src/storage_driver.c (storageListPools): Set all "names" entries to 0.
(storageListDefinedPools, storagePoolListVolumes): Likewise.
* src/test.c (testStoragePoolListVolumes): Likewise.

Older distributions (i.e. RHEL-5) don't have udevadm at all, but they do
have udevsettle.  So change our tests to prefer udevadm if it exists, but
to fall back to udevsettle if it does not.

Signed-off-by: Chris Lalancette <clalance@redhat.com>

Fix driver ordering to make domain autostart work (Gerd von Egidy)

Fix recording of UML driver watch to make inotify work

tests: daemon-conf: accommodate numeric-valued config params

This test would hang when failing to perturb the soon-to-be-
added numeric (and non-boolean) valued parameters, max_clients,
max_workers, min_workers.
* tests/daemon-conf: Require that all commented-out settings
in libvirtd.conf have the same form.  Before, two parameters
were not being tested, since a space had snuck between the
leading "#" and the "param = value" parts.
Apply each RHS-value-perturbing transformation
separately, not in series.
Let VERBOSE=yes turn on debugging.
Be more verbose by default, since this is a relatively
long-running test.
* qemud/libvirtd.conf: Normalize the spacing around each setting
that is to be perturbed by tests/daemon-conf.

uml: don't free an uninitialized variable

* src/uml_driver.c (umlDomainShutdown): Initialize "info".
Patch and bug report from Ron Yorston <rmy@tigress.co.uk>.

Close directory handle when done

Prefer xenstore driver for listDomains, since xen HV reports ghost ids of
already shutdown domains in some xen versions

Allow remote://hostname/ style URIs for automatic driver probe. Fix virGetVersion impl

Fix XM driver handling of disk source paths

Fix libnuma use to build with v1 compatability code

Instead of relying solely on polling for /dev devices to appear in libvirt, we
really should be synchronizing against udev.  This is generally done by a call
to udevsettle, which is exactly what this patch implements for the storage
backends that are likely to create new /dev nodes.  I believe I've read that
even after udevsettle, you are not guaranteed that devices are all the way
created, so we still need the polling in the rest of the sources, but this
should give us a much better chance of things existing as we expect.

Signed-off-by: Chris Lalancette <clalance@redhat.com>

Currently libvirt can race with udev
creation of /dev/disk/by-{id,path}, so if we fail to open the directory, retry
up to 5 seconds.  This is only likely to happen on hosts that are:

1) diskless (so /dev/disk/by-{id,path} doesn't exist already), and
2) slow, and/or heavily loaded (meaning that udev can take some time to create
the /dev nodes).

Signed-off-by: Chris Lalancette <clalance@redhat.com>

* src/xen_unified.c: use preferably xend method to update
  the maximum memory of a xen guest (Jim Fehlig)
Daniel

* libvirt.spec.in: cleanups and missing dep for hal
Daniel

Release of 0.5.0
* configure.in docs/* NEWS: release of 0.5.0
* po/*: updated from the translators and merged
* docs/apibuild.py src/libvirt.c: avoid some warnings at doc
  generation time
daniel

configure.in: avoid the following diagnostic when running ../configure ...

cp: cannot stat `COPYING.LIB': No such file or directory

don't silently skip a test

* tests/Makefile.am (EXTRA_DIST): Distribute domainschemadata/.
* tests/domainschematest: Fail the test if find invocation fails.

Disable UML driver on mingw RPM build

Add missing translations

Implement autostart for XM driver

Support domain lifecycle events for Xen (Ben Guthro & Daniel Berrange)

Avoid symbol clash with win32 headers and node device APIs

* src/virterror.c (virReportErrorHelper): Sync doc to code.

libvirt.c: document the virState* functions

* src/libvirt.c (virStateActive, virStateCleanup, virStateReload):
(virStateActive): Add per-function comments.

Set default vCPUs to match pCPUs for OpenVZ containers (Evgeniy Sokolov )

Fix python bindings events code (David Lively)

Fix test suite build when Xen driver is disabled

Disable UML build on mingw32

* src/Makefile.am: look for libvirt_sym.version in builddir

tests: new test: virsh-synopsis

* tests/virsh-synopsis: new file
* tests/Makefile.am (test_scripts): Add virsh-synopsis.
* src/virsh.c: Correct help SYNOPSIS for each of seven commands.

When I first ran this script, "make check" failed like this:
  ...
  invalid help SYNOPSIS for net-create:
      create a network from an XML <file>
  invalid help SYNOPSIS for net-define:
      define a network from an XML <file>
  invalid help SYNOPSIS for net-start:
      start <network>
  invalid help SYNOPSIS for pool-create:
      create a pool from an XML <file>
  invalid help SYNOPSIS for pool-define:
      define a pool from an XML <file>
  invalid help SYNOPSIS for pool-start:
      start <pool>
  invalid help SYNOPSIS for vol-create:
      create <file>
  FAIL: virsh-synopsis

tests: virsh-all: new script

* tests/virsh-all: New script.
* tests/Makefile.am (test_scripts): Add virsh-all.

Move the expected output data from virshdata/*.txt into virshtest.c.

* tests/virshtest.c: Embed literal, expected output here, rather than
using virshdata/*.txt file names.
Factor out some common constructs.
(testCompareOutputLit): New function.
(testCompareOutput): #ifdef-out, not that it's unused.
* tests/Makefile.am (SUBDIRS): Remove virshdata/ and all files in it.
* docs/testnode.xml: Fix typo in a comment.
* configure.in (AC_OUTPUT): Remove tests/virshdata/Makefile.

* gnulib/tests/test-EOVERFLOW: Remove.

* gnulib/tests/.cvsignore: Add test-EOVERFLOW, then...
Run "make sync-vcs-ignore-files" to Update .gitignore files.

Re-generate website docs

Regenerate API docs

Misc tweaks to node device impl

Python binding for node device APIs (David Lively)

Node device support in virsh (David Lively)

Remote protocol support for node devices (David Lively)

Node device driver for HAL and DeviceKit (David Lively)

Internal APIs for handling node device XML configuration (David Lively)

Public API for node device enumeration (David Lively)

Optional dlopen support for drivers

Add export of virDomainEventCallbackListRemoveConn method

Fix two memory leaks in domain conf and LXC code

Misc fixes to event registration failure cases

Fix crash due to failure to unregister event callbacks in QEMU driver (David Lively)

Add Xen compiler flags for stats_linux.c build

Allow UML build to be disabled in RPM

* po/POTFILES.in src/uml_conf.h src/uml_driver.c: fixes syntax
  check errors, reported by Ben Guthro
daniel

Fix crash on NULL uri scheme

Add an initial User Mode Linux Driver

Add a virFreeCallback to event loop APIs

Change public API for virEventAddHandle to allow multiple registrations per FD

Add a virFreeCallback to virDomainEventRegister (from David Lively)

Fix windows build & build without QEMU driver

Add QEMU driver events for defined/undefined config files

Add domain events detail information

Link QEMU, LXC, network and storage drivers directly into libvirtd

Push URI probing logic down into individual drivers

Refactor storage backends to avoid dependancy from config parser to implementation

Use a versioned linker script

Build drivers as libtool convenience libs

Fix domain events python thread safety & incorrect enum generation

Fix updating of openvz config file params

Use different separator for lvs command to unbreak parsing for encrypted devs.

avoid format string warnings

* src/openvz_driver.c (ADD_ARG_LIT): Add "%s" arg before _(...).
* src/qemu_driver.c (PCI_ATTACH_OK_MSG): Likewise.
* src/util.c (virExec, virRun): Likewise.

KVM/QEmu migration support
* qemud/remote.c qemud/remote_dispatch_localvars.h
  qemud/remote_dispatch_proc_switch.h qemud/remote_dispatch_prototypes.h
  qemud/remote_protocol.c qemud/remote_protocol.h
  qemud/remote_protocol.x src/driver.h src/libvirt.c
  src/libvirt_internal.h src/libvirt_sym.version src/lxc_driver.c
  src/openvz_driver.c src/qemu_conf.h src/qemu_driver.c
  src/remote_internal.c src/test.c src/virsh.c: large patch to
  add migration support for KVM/QEmu, based on the work of Rich Jones
  and Chris Lalancette. This introduce a new version of the prepare
  and finish steps of the migration, so changes the driver API and
  a lot of code.
Daniel

Add bridged network to openvz driver & add some openvz docs

Revert previous storage patch which broke test driver

Re-arrange storage backend registration

Support OpenVZ filesystem template config in XML dump

tweak lstat.c to avoid mingw link failure

* gnulib/lib/lstat.c: Include <sys/stat.h> *before* the use of stat in
orig_stat.  Otherwise, on mingw (which lacks lstat), any program using
the lstat module would not get the redefinition-to-stat provided by
gnulib's sys/stat.h.  Reported by Daniel P. Berrange.

mark a few diagnostics for translation

* src/lxc_conf.c (lxcLoadDriverConfig): Mark a diagnostic.
* src/lxc_driver.c (lxcDomainStart): Likewise.
* po/POTFILES.in: Add src/lxc_conf.c.
* Makefile.maint (msg_gen_function): Add virReportErrorHelper
and lxcError.

always compile iptables.c

Avoid a build error when configuring --without-xen --without-qemu.
* src/iptables.c [WITH_QEMU]: Don't #ifdef-out.
* src/iptables.h [WITH_QEMU]: Don't #ifdef-out.
* src/util.c (virRun) [__MINGW32__]: Define a stub that always fails.

add new logging module, and move existing definitions there
* src/logging.c src/logging.h proxy/Makefile.am proxy/libvirt_proxy.c
  src/Makefile.am src/cgroup.c src/datatypes.c src/domain_event.c
  src/internal.h src/libvirt.c src/lxc_container.c src/lxc_controller.c
  src/lxc_driver.c src/proxy_internal.c src/qemu_driver.c
  src/remote_internal.c src/storage_backend_disk.c src/util.c
  src/veth.c src/xen_internal.c src/xen_unified.c src/xend_internal.c:
  add new logging module, and move existing definitions there
Daniel

Log stdout and stderr in virRun

Log the argv passed to virExec and virRun

Move local argvToString to virArgvToString in util.

plug two leaks and fix a diagnostic

* src/qemu_conf.c (qemudLoadDriverConfig): Don't leak ->vncListen.
Fix an erroneous copy-and-pasted diagnostic.
* src/qemu_driver.c (qemudShutdown): Don't leak another ->vncListen.

Call vgscan before attempting to scan logical volumes.  This makes sure we've
"touched" any logical volumes, so they appear in the subsequent "pvs" call.

Signed-off-by: Chris Lalancette <clalance@redhat.com>

Move WITH_XXX driver feature flags into config.h instead of direct compiler/linker args

Move domain events helpers into dedicated file